JP7263481B2 - グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用 - Google Patents

グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用 Download PDF

Info

Publication number
JP7263481B2
JP7263481B2 JP2021173046A JP2021173046A JP7263481B2 JP 7263481 B2 JP7263481 B2 JP 7263481B2 JP 2021173046 A JP2021173046 A JP 2021173046A JP 2021173046 A JP2021173046 A JP 2021173046A JP 7263481 B2 JP7263481 B2 JP 7263481B2
Authority
JP
Japan
Prior art keywords
message
user interface
illustrates
exemplary user
messaging application
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021173046A
Other languages
English (en)
Other versions
JP2022036934A (ja
Inventor
イムラン, エー. チャウドリ,
フレディ, エー. アンズレス,
リチャード, アール. デリンジャー,
ブラッドリー, ダブリュ. グリフィン,
ティファニー, エス. ジョン,
チャナカ, ジー. カルナムニ,
ニコラス, ヴィ. キング,
ダームン モーセンニ,
ホアン ファム,
ウィリアム, エム. タイラー,
ワン, シ ワン,
ジャンカルロ イェルケス,
ベサニー, ビー. コノリー,
ダーリン, ビー. アドラー,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from DKPA201670636A external-priority patent/DK180169B1/en
Priority claimed from US15/272,399 external-priority patent/US9959037B2/en
Application filed by Apple Inc filed Critical Apple Inc
Publication of JP2022036934A publication Critical patent/JP2022036934A/ja
Priority to JP2023065202A priority Critical patent/JP2023099007A/ja
Application granted granted Critical
Publication of JP7263481B2 publication Critical patent/JP7263481B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/217Validation; Performance evaluation; Active pattern learning techniques
    • G06F18/2178Validation; Performance evaluation; Active pattern learning techniques based on feedback of a supervisor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/169Annotation, e.g. comment data or footnotes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/197Version control
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/02Reservations, e.g. for tickets, services or events
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/107Computer-aided management of electronic mailing [e-mailing]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/802D [Two Dimensional] animation, e.g. using sprites
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • G06V30/333Preprocessing; Feature extraction
    • G06V30/347Sampling; Contour coding; Stroke extraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H04L51/043Real-time or near real-time messaging, e.g. instant messaging [IM] using or handling presence information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H04L51/046Interoperability with other network applications or services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/06Message adaptation to terminal or network requirements
    • H04L51/063Content adaptation, e.g. replacement of unsuitable content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/18Commands or executable codes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21Monitoring or handling of messages
    • H04L51/216Handling conversation history, e.g. grouping of messages in sessions or threads
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/42Mailbox-related aspects, e.g. synchronisation of mailboxes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04105Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04803Split screen, i.e. subdividing the display area or the window area into separate subareas
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72436User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for text messaging, e.g. SMS or e-mail
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/70Details of telephonic subscriber devices methods for entering alphabetical characters, e.g. multi-tap or dictionary disambiguation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Strategic Management (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Tourism & Hospitality (AREA)
  • Data Mining & Analysis (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Artificial Intelligence (AREA)
  • Economics (AREA)
  • Quality & Reliability (AREA)
  • Operations Research (AREA)
  • Marketing (AREA)
  • Computational Linguistics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Social Psychology (AREA)
  • Evolutionary Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Psychiatry (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Development Economics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephone Function (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

本出願は、概して、タッチ感知面を有する電子デバイス、非限定的に、インスタントメッセージなどのメッセージを送受信する、タッチ感知面を有する電子デバイスに関する。
コンピュータ及び他の電子計算デバイス用の入力デバイスとしてのタッチ感知面の使用は、近年、著しく増大している。例示的なタッチ感知面としては、タッチパッド及びタッチスクリーンディスプレイが挙げられる。かかるデバイスは、メッセージアプリケーションを使用するユーザ間でインスタントメッセージなどのメッセージを送信するために使用されることが多い。
しかし、現在のメッセージアプリケーションには、多数の欠点及び制限事項がある。例えば、同アプリケーションでは、メッセージの確認応答、従前の送信済みメッセージの編集、ユーザが伝達しようとすることの表明、プライベートメッセージの表示、ユーザ間でのコンテンツの同期視聴、手書き入力の組み込み、メッセージ記録内でのコンテンツの速やかな位置特定、カメラの統合、検索及び共有の統合、対話型アプリケーションの統合、ステッカの統合、支払いの実施、アバターとの相互作用、提案の実施、対話型アプリケーション間のナビゲート、対話型アプリケーションの管理、外国語テキストの翻訳、グループへのメッセージの組み込み、並びにメッセージのフラグ立てを容易に行う機能が制限される。
したがって、メッセージングのための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、任意選択的に、メッセージングのための従来の方法を補完するか又は置き換える。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を変更し、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ駆動式デバイスの場合、かかる方法及びインタフェースは、節電し、バッテリ充電間の時間を長くする。
タッチ感知面を有する電子デバイス用のユーザインタフェースと関連する上記の欠陥及び他の問題は、開示されるデバイスによって低減されるか、又は取り除かれる。一部の実施形態では、デバイスはデスクトップコンピュータである。一部の実施形態では、デバイスは、携帯可能なもの(例えば、ノートブックコンピュータ、タブレットコンピュータ、又はハンドヘルドデバイス)である。一部の実施形態では、デバイスは、パーソナル電子デバイス(例えば、腕時計などのウェアラブル電子デバイス)である。一部の実施形態では、デバイスはタッチパッドを有する。一部の実施形態では、デバイスは、タッチ感知ディスプレイ(「タッチスクリーン」又は「タッチスクリーンディスプレイ」としても知られている)を有する。一部の実施形態では、デバイスは、グラフィカルユーザインタフェース(GUI)と、1つ以上のプロセッサと、メモリと、複数の機能を行うためにメモリに記憶された1つ以上のモジュール、プログラム、又は命令セットとを有する。一部の実施形態では、ユーザは、主に、タッチ感知面上でのスタイラス及び/又は指の接触及びジェスチャによってGUIと対話する。一部の実施形態では、機能としては、任意選択的に、画像編集、描画、プレゼンティング、ワードプロセッシング、スプレッドシート作成、ゲームプレイ、電話応対、テレビ会議、電子メール送信、インスタントメッセージング、トレーニング支援、デジタル写真撮影、デジタルビデオ再生、ウェブブラウジング、デジタル音楽再生、筆記、及び/又はデジタル映像再生が挙げられる。これらの機能を行うための実行可能命令は、任意選択的に、非一時的コンピュータ可読記憶媒体、又は1つ以上のプロセッサにより実行されるように構成された他のコンピュータプログラム製品に含まれる。
会話記録のメッセージ領域に確認応答を適用するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、会話記録のメッセージ領域に確認応答を適用するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、電子デバイスのディスプレイに表示された会話記録のメッセージ領域に確認応答を適用する方法は、(例えば、メッセージアプリケーションの)メッセージユーザインタフェースをディスプレイに表示することを含み、メッセージユーザインタフェースは、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含む。方法は、メッセージセッションに含まれる別のユーザに対応する電子デバイス(例えば、第2の電子デバイス)からメッセージセッション内で第1のメッセージを受信することと、第1のメッセージを受信したことに応じて、ディスプレイ上の会話記録の第1のメッセージ領域に第1のメッセージを表示することとを更に含む。電子デバイスは、会話記録の第1のメッセージ領域の場所に対応する、タッチ感知面上の場所で第1の接触による第1の入力を検出し、第1の入力を検出したことに応じて、メッセージインタフェースにおいて第1のメッセージ領域に対応する場所に確認応答選択アフォーダンスを表示する、ここで、確認応答選択アフォーダンスは、複数の確認応答オプションを表示する。次いで、方法は、確認応答選択アフォーダンスの第1の確認応答オプションの場所に対応する、タッチ感知面上の場所で第2の接触による第2の入力を検出することと、第2の入力を検出したことに応じて、第1の確認応答オプションを第1のメッセージ領域に適用することとを含む。
一部の実施形態によれば、電子デバイスが、メッセージユーザインタフェースをディスプレイユニットに表示するように構成されたディスプレイユニットであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含む、ディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。処理ユニットは、メッセージセッションに含まれる別のユーザに対応する電子デバイスからメッセージセッション内で第1のメッセージを受信すし、第1のメッセージを受信したことに応じて、ディスプレイユニット上の会話記録の第1のメッセージ領域に第1のメッセージを表示するように構成されている。処理ユニットは、会話記録の第1のメッセージ領域の場所に対応する、タッチ感知面ユニット上の場所で第1の接触による第1の入力を検出し、第1の入力を検出したことに応じて、メッセージインタフェースにおいて第1のメッセージ領域に対応する場所に確認応答選択アフォーダンスを表示するように更に構成されており、確認応答選択アフォーダンスは、複数の確認応答オプションを表示する。処理ユニットは、確認応答選択アフォーダンスの第1の確認応答オプションの場所に対応する、タッチ感知面ユニット上の場所で第2の接触による第2の入力を検出し、第2の入力を検出したことに応じて、第1の確認応答オプションを第1のメッセージ領域に適用するように更に構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、会話記録のメッセージ領域に確認応答を適用するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、会話記録のメッセージ領域に確認応答を適用するための従来の方法を補完するか又は置き換えることができる。
送信済みメッセージを編集するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、送信済みメッセージを編集するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイス(例えば、第1の電子デバイス)で行われる、メッセージを編集する方法は、メッセージユーザインタフェースをディスプレイに表示することを含む。メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、ユーザの電子デバイスからメッセージセッションの少なくとも1人の他のユーザに送信された、メッセージセッションの第1のメッセージを含む第1のメッセージ領域とを含む。方法は、第1のメッセージを編集する要求に対応する第1の入力を検出することと、第1の入力を検出したことに応じて、第1のメッセージ、キーボード、及び更新アフォーダンスを含む、第1のメッセージ用のメッセージ編集インタフェースを表示することと、第1のメッセージ用のメッセージ編集インタフェースを表示している間に、第1のメッセージを修正する1つ以上の入力を検出すること、第1のメッセージの修正バージョンを表示すること、及び更新アフォーダンスをアクティブ化する入力を検出することとを更に含む。
方法は、更新アフォーダンスをアクティブ化する入力を検出したことに応じて、第1のメッセージ用のメッセージ編集インタフェースの表示を停止することと、第1のメッセージの代わりに第1のメッセージの修正バージョンを会話記録に表示することと、第1のメッセージの修正の少なくとも1つのインジケーションを会話記録に表示することと、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに第1のメッセージの修正バージョンを送信することと、を含み、1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に、会話記録の第1のメッセージの修正の少なくとも1つのインジケーションと共に、第1のメッセージの代わりに第1のメッセージの修正バージョンを表示する、こととを更に含む。
一部の実施形態によれば、電子デバイスが、メッセージユーザインタフェースをディスプレイユニットに表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、ユーザの電子デバイスからメッセージセッションの少なくとも1人の他のユーザに送信された、メッセージセッションの第1のメッセージを含む第1のメッセージ領域とを含む。処理ユニットは、第1のメッセージを編集する要求に対応する第1の入力を検出し、第1の入力を検出したことに応じて、第1のメッセージ、キーボード、及び更新アフォーダンスを含む、第1のメッセージ用のメッセージ編集インタフェースを表示するように構成されている。処理ユニットは、第1のメッセージ用のメッセージ編集インタフェースを表示している間に、第1のメッセージを修正する1つ以上の入力を検出し、第1のメッセージの修正バージョンを表示し、更新アフォーダンスをアクティブ化する入力を検出し、更新アフォーダンスをアクティブ化する入力を検出したことに応じて、第1のメッセージ用のメッセージ編集インタフェースの表示を停止し、第1のメッセージの代わりに第1のメッセージの修正バージョンを会話記録に表示し、第1のメッセージの修正の少なくとも1つのインジケーションを会話記録に表示し、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに第1のメッセージの修正バージョンを送信するように更に構成されている。1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に、会話記録の第1のメッセージの修正の少なくとも1つのインジケーションと共に、第1のメッセージの代わりに第1のメッセージの修正バージョンを表示する。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、送信済みメッセージを編集するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいて送信済みメッセージを編集するための従来の方法を補完するか又は置き換えることができる。
送信済みメッセージのバージョンを表示するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、送信済みメッセージのバージョンを表示するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる方法が、メッセージユーザインタフェースをディスプレイに表示することを含み、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージセッションの第1のメッセージの現在バージョンを含む第1のメッセージ領域とを含み、会話記録は、第1のメッセージの現在バージョンが会話記録の第1のメッセージの修正バージョンであるとのインジケーションを含む。方法は、第1のメッセージのバージョンを参照する要求に対応する入力を検出することと、第1のメッセージのバージョンを参照する要求に対応する入力を検出したことに応じて、第1のメッセージの現在バージョンと、第1のメッセージの1つ以上の従前バージョンとを含むバージョンユーザインタフェースを表示することとを更に含む。
一部の実施形態によれば、電子デバイスが、メッセージユーザインタフェースをディスプレイユニットに表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージセッションの第1のメッセージの現在バージョンを含む第1のメッセージ領域とを含み、会話記録は、第1のメッセージの現在バージョンが会話記録の第1のメッセージの修正バージョンであるとのインジケーションを含む。処理ユニットは、第1のメッセージのバージョンを参照する要求に対応する入力を検出し、第1のメッセージのバージョンを参照する要求に対応する入力を検出したことに応じて、第1のメッセージの現在バージョンと、第1のメッセージの1つ以上の従前バージョンとを含むバージョンユーザインタフェースを表示するように構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、送信済みメッセージのバージョンを表示するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいて送信済みメッセージのバージョンを表示するための従来の方法を補完するか又は置き換えることができる。
メッセージ用のインパクト効果を選択するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージ用のインパクト効果を選択するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる方法が、メッセージユーザインタフェースをディスプレイに表示することを含み、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、第1のメッセージ入力を含むメッセージ入力エリアとを含む。方法は、メッセージユーザインタフェースを表示している間に、メッセージ入力エリアの場所に対応する、タッチ感知面上の場所で第1の接触による第1の入力を検出することと、第1の接触による第1の入力を検出したことに応じて、複数のインパクト効果オプションを含むインパクト選択インタフェースを表示することと、インパクト選択インタフェースを表示している間に、複数のインパクト効果オプションのうちの第1のインパクト効果オプションの場所に対応する、タッチ感知面上の場所で第2の接触による第2の入力を検出することと、第2の接触による第2のユーザ入力を検出したことに応じて、第1のメッセージ入力に第1のインパクト効果オプションを適用するプレビューを表示することとを更に含む。
一部の実施形態によれば、電子デバイスが、ディスプレイユニットであって、メッセージユーザインタフェースをディスプレイユニットに表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、第1のメッセージ入力を含むメッセージ入力エリアとを含む。処理ユニットは、メッセージユーザインタフェースを表示している間に、メッセージ入力エリアの場所に対応する、タッチ感知面ユニット上の場所で第1の接触による第1の入力を検出し、第1の接触による第1の入力を検出したことに応じて、複数のインパクト効果オプションを含むインパクト選択インタフェースを表示するように構成されている。処理ユニットは、インパクト選択インタフェースを表示している間に、複数のインパクト効果オプションのうちの第1のインパクト効果オプションの場所に対応する、タッチ感知面ユニット上の場所で第2の接触による第2の入力を検出し、第2の接触による第2のユーザ入力を検出したことに応じて、第1のメッセージ入力に第1のインパクト効果オプションを適用するプレビューを表示するように更に構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージ用のインパクト効果を選択するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいてメッセージ用のインパクト効果を選択するための従来の方法を補完するか又は置き換えることができる。
メッセージを秘密化及び顕示化するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージを秘密化及び顕示化するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる方法が、メッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと第1の他のユーザを含む少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、第1の他のユーザから受信されたメッセージ用の、会話記録のメッセージ領域とを含み、メッセージ領域は、第1の他のユーザから受信されたメッセージを秘密化する1つ以上のスクリーン要素を含む、ことを含む。方法は、秘密メッセージを有するメッセージ領域に対応する、タッチ感知面上の場所で接触による第1の入力を検出することと、接触による第1の入力を検出したことに応じて、メッセージ領域の秘密メッセージを顕示化することとを更に含む。
一部の実施形態によれば、電子デバイスが、ディスプレイユニットであって、メッセージユーザインタフェースをディスプレイユニットに表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。メッセージユーザインタフェースは、電子デバイスのユーザと第1の他のユーザを含む少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、第1の他のユーザから受信されたメッセージ用の、会話記録のメッセージ領域とを含み、メッセージ領域は、第1の他のユーザから受信されたメッセージを秘密化する1つ以上のスクリーン要素を含む。処理ユニットは、秘密メッセージを有するメッセージ領域に対応する、タッチ感知面ユニット上の場所で接触による第1の入力を検出し、接触による第1の入力を検出したことに応じて、メッセージ領域の秘密メッセージを顕示化するように更に構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージを秘密化及び顕示化するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいてメッセージを秘密化及び顕示化するための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーションにおいて拡張メッセージコンテンツを表示するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージアプリケーションにおいて拡張メッセージコンテンツを表示するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる方法が、メッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと第1の他のユーザを含む少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含む、ことと、メッセージセッションに含まれる第1の他のユーザに対応する電子デバイスからメッセージセッション内で第1のメッセージを受信することと、第1のメッセージが拡張メッセージコンテンツトリガーを含むかを判定することとを含む。方法は、第1のメッセージが拡張メッセージコンテンツトリガーを含むとの決定に従って、ディスプレイ上の会話記録の第1のメッセージ領域に第1のメッセージを表示すること、及びトリガーに対応する拡張メッセージコンテンツを表示することであって、拡張メッセージコンテンツは、会話記録の第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用するコンテンツを含む、こととを更に含む。方法は、第1のメッセージが拡張メッセージコンテンツトリガーを含まないとの決定に従って、ディスプレイ上の会話記録の第1のメッセージ領域に(例えば、拡張メッセージコンテンツを伴わずに)第1のメッセージを表示することも含む。
一部の実施形態によれば、電子デバイスが、ディスプレイユニットであって、メッセージユーザインタフェースをディスプレイユニットに表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。メッセージユーザインタフェースは、電子デバイスのユーザと第1の他のユーザを含む少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含む。処理ユニットは、メッセージセッションに含まれる第1の他のユーザに対応する電子デバイスからメッセージセッション内で第1のメッセージを受信し、第1のメッセージが拡張メッセージコンテンツトリガーを含むかを判定するように構成されている。処理ユニットは、第1のメッセージが拡張メッセージコンテンツトリガーを含むとの決定に従って、ディスプレイユニット上の会話記録の第1のメッセージ領域に第1のメッセージを表示し、及びトリガーに対応する拡張メッセージコンテンツであって、拡張メッセージコンテンツは、会話記録の第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用するコンテンツを含む、拡張メッセージコンテンツを表示するように更に構成されている。加えて、処理ユニットは、第1のメッセージが拡張メッセージコンテンツトリガーを含まないとの決定に従って、ディスプレイユニット上の会話記録の第1のメッセージ領域に第1のメッセージを表示するように構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージアプリケーションにおいて拡張メッセージコンテンツを表示するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいて拡張メッセージコンテンツを表示するための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーションにおいて組合せ可能なコンテンツを表示するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージアプリケーションにおいて組合せ可能なコンテンツを表示するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる方法が、メッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと第1の他のユーザを含む少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアとを含む、ことを含む。方法は、メッセージセッションに含まれる第1の他のユーザに対応する電子デバイスからメッセージセッション内で第1のメッセージを受信することであって、第1のメッセージは、第1の組合せ可能なコンテンツを含む、ことと、第1のメッセージを受信したことに応じて、ディスプレイ上の会話記録の第1のメッセージ領域に第1のメッセージを表示することと、メッセージ入力エリアにおいて第2のメッセージの入力を受信することと、第2のメッセージがメッセージ入力エリアに表示されている間に、第2のメッセージをメッセージセッションに送信するための入力を検出することとを更に含む。方法は、第2のメッセージをメッセージセッションに送信するための入力を検出したことに応じて、第2のメッセージが第2の組合せ可能なコンテンツを含み、かつ第2の組合せ可能なコンテンツ及び第1の組合せ可能なコンテンツが、予め定義された組合せの一部であるとの決定に従って、ディスプレイ上の会話記録に予め定義された組合せに対応するコンテンツを表示すること、及び第2のメッセージが、第1の組合せ可能なコンテンツとの予め定義された組合せを形成する第2の組合せ可能なコンテンツを含まないとの決定に従って、ディスプレイ上の会話記録の第2のメッセージ領域に(例えば、予め定義された組合せに対応するコンテンツをディスプレイ上の会話記録に表示せずに)第2のメッセージを表示することを更に含む。
一部の実施形態によれば、電子デバイスが、ディスプレイユニットであって、メッセージユーザインタフェースをディスプレイユニットに表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。メッセージユーザインタフェースは、電子デバイスのユーザと第1の他のユーザを含む少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアとを含む。処理ユニットは、メッセージセッションに含まれる第1の他のユーザに対応する電子デバイスからメッセージセッション内で第1のメッセージであって、第1のメッセージは、第1の組合せ可能なコンテンツを含む、第1のメッセージを受信し、第1のメッセージを受信したことに応じて、ディスプレイユニット上の会話記録の第1のメッセージ領域に第1のメッセージを表示し、メッセージ入力エリアにおいて第2のメッセージの入力を受信し、第2のメッセージがメッセージ入力エリアに表示されている間に、第2のメッセージをメッセージセッションに送信するための入力を検出するように構成されている。処理ユニットは、第2のメッセージをメッセージセッションに送信するための入力を検出したことに応じて、第2のメッセージが第2の組合せ可能なコンテンツを含み、かつ第2の組合せ可能なコンテンツ及び第1の組合せ可能なコンテンツが、予め定義された組合せの一部であるとの決定に従って、ディスプレイユニット上の会話記録に予め定義された組合せに対応するコンテンツを表示し、及び第2のメッセージが、第1の組合せ可能なコンテンツとの予め定義された組合せを形成する第2の組合せ可能なコンテンツを含まないとの決定に従って、ディスプレイユニット上の会話記録の第2のメッセージ領域に(すなわち、予め定義された組合せに対応するコンテンツをディスプレイ上の会話記録に表示せずに)第2のメッセージを表示するように更に構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージアプリケーションにおいて組合せ可能なコンテンツを表示するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいて組合せ可能なコンテンツを表示するための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーションにおいてメディアの提示を同期するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、任意選択的に、メッセージアプリケーションにおいてメディアの提示を同期するための従来の方法を補完するか又は置き換える。かかる方法及びインタフェースは、(メディアコンテンツを視聴する別のユーザと同じ位置にいることを必要とせずに、かつ同期視聴を可能にする非効率的な技術を用いることを必要とせずに、)メディアコンテンツを同期された態様でメッセージアプリケーション内で直接容易に視聴することをユーザに可能にさせることによって、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ駆動式デバイスの場合、かかる方法及びインタフェースは、デバイスによるユーザ満足度を高め、節電し、バッテリ充電間の時間を長くする。更に、メディアコンテンツを同期された態様でメッセージアプリケーション内で直接容易に視聴することをユーザに可能にさせることによって、デバイスの操作性を向上させ、(例えば、メッセージアプリケーションにおいて)ユーザ-デバイスインタフェースを、(例えば、メディアアイテムの効率的な同期視聴を可能にすることによって)より効率的にし、加えて、より速やかかつ効率的にデバイスを使用することをユーザに可能にさせることによって、使用電力が減り、デバイスのバッテリ寿命が高まる。
一部の実施形態によれば、方法が、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて行われる。方法は、メッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、第1の電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含む、ことを含む。一部の実施形態では、会話記録は、会話記録内に時系列位置で表示されるメディアアイテムの表現を含み、メッセージセッションは、第1の電子デバイスでのユーザと、第1の電子デバイスとは区別される第2の電子デバイスでの少なくとも1人の他のユーザとによるメディアアイテムの同期視聴を可能にするように構成されている。方法は、メッセージユーザインタフェース内でメディアアイテムの同期視聴の第1の要求を受信することも含む。第1の要求を受信したことに応じて、方法は、メディアアイテムの表現が会話記録内に時系列位置で表示されている間に、メディアアイテムに対応するコンテンツの再生を開始することを含む。メディアアイテムに対応するコンテンツの再生を開始した後に、方法は、時系列位置とは異なるメッセージユーザインタフェース内の一定位置でメディアアイテムに対応する再生コンテンツを表示することを含む。メディアアイテムに対応する再生コンテンツを一定位置に表示している間に、方法は、メディアアイテムに対応する再生コンテンツの下方に、ユーザと少なくとも1人の他のユーザとの間で交換されるメッセージを表示することと、メディアアイテムに対応するコンテンツの終わりを検出することとを含む。メディアアイテムに対応するコンテンツの終わりを検出したことに応じて、方法は、メディアアイテムに対応するコンテンツの表示を一定位置で停止することを含む。
一部の実施形態によれば、電子デバイス(例えば、電子デバイス2200、図22)が、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるタッチ感知面ユニットと、タッチ感知面ユニットとの接触の強度を検出する1つ以上のセンサユニットと、ディスプレイユニット、タッチ感知面ユニット、及び1つ以上のセンサユニットと結合された処理ユニットとを含む。処理ユニット(又はその1つ以上のコンポーネント、図22に示されるユニット2210~2216など)は、メッセージユーザインタフェースをディスプレイに表示するように構成されており、メッセージユーザインタフェースは、第1の電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含む。一部の実施形態では、会話記録は、会話記録内に時系列位置で表示されるメディアアイテムの表現を含み、メッセージセッションは、第1の電子デバイスでのユーザと、第1の電子デバイスとは区別される第2の電子デバイスでの少なくとも1人の他のユーザとによるメディアアイテムの同期視聴を可能にするように構成されている。処理ユニットは、メッセージユーザインタフェース内でメディアアイテムの同期視聴のための第1の要求を受信し、第1の要求を受信したことに応じて、メディアアイテムの表現が会話記録内に時系列位置で表示されている間に、メディアアイテムに対応するコンテンツの再生を開始するようにも構成されている。メディアアイテムに対応するコンテンツの再生を開始した後に、処理ユニットは、メッセージユーザインタフェース内で時系列位置とは異なる一定位置でメディアアイテムに対応する再生コンテンツを表示するように構成されている。メディアアイテムに対応する再生コンテンツを一定位置に表示している間に、処理ユニットは、メディアアイテムに対応する再生コンテンツの下方に、ユーザと少なくとも1人の他のユーザとの間で交換されるメッセージを表示し、及びメディアアイテムに対応するコンテンツの終わりを検出するように構成されている。メディアアイテムに対応するコンテンツの終わりを検出したことに応じて、処理ユニットは、メディアアイテムに対応するコンテンツの表示を一定位置で停止するように構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスでは、メディアコンテンツを同期された態様でメッセージアプリケーション内で視聴するための方法及びインタフェースがより高速かつより効率的となり、それにより、かかるデバイスによる有効性、効率、操作性、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいてメディアを視聴するための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーションにおいて手書き入力を使用するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、任意選択的に、メッセージアプリケーションにおいてメッセージを記入するための従来の方法を補完するか又は置き換える。かかる方法及びインタフェースは、例えば、手書き入力の記入を始めるためにデバイスを単純に回転させることを、ユーザに可能にさせることによって、デバイスによるユーザ満足度を向上させ、より効率的なヒューマン-マシンインタフェースを作り出すことを助ける。かかる方法及びインタフェースは、タイプ入力を手書き入力に自動的に置き換えることを可能にし、手書き文字をキーに用いるキーボードを直感的に創り出すことをユーザに可能にさせることによって、より効率的なヒューマン-マシンインタフェースも作り出し、よってデバイスの操作性が高まる。バッテリ駆動式デバイスの場合、かかる方法及びインタフェースは、節電し、バッテリ充電間の時間を長くする。更に、手書き入力の記入を始めるためにデバイスを単純に回転させることをユーザに可能にさせ、タイプ入力を自動的に置き換え、手書き文字をキーに用いるキーボードを創り出すことは、全て、デバイスの操作性を高め、(例えば、メッセージアプリケーションにおいて)ユーザ-デバイスインタフェースを(例えば、手書き入力によりメッセージコンテンツを容易にカスタマイズすることをユーザに可能にさせることによって、)より効率的なものとすることに寄与し、加えて、より速やかにかつ効率的にデバイスを使用することをユーザに可能にさせることによって、使用電力を減らし、デバイスのバッテリ寿命を向上させる。例えば、ユーザは、メッセージアプリケーションを離れ、手書き入力を入力する又は見出すために異なるアプリケーションを開いて使用し、次いで、それらの入力を使用するためにメッセージアプリケーションに戻る必要がない。代わりに、ユーザは、メッセージアプリケーション内で直接カスタム手書き入力を単純に提供及び選択する。
一部の実施形態によれば、方法が、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて行われる。方法は、電子デバイスが縦向きである間に、メッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、仮想キーボードを含む、ことを含む。方法は、縦向きから横向きへの電子デバイスの向きの変化を検出することと、電子デバイスの向きの変化を検出したことに応じて、仮想キーボードの表示を停止すること、及び電子デバイスのユーザからの手書き入力を受け付けるように構成された手書き入力エリアをディスプレイに表示することとを含む。
一部の実施形態によれば、電子デバイスが、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるタッチ感知面ユニットと、タッチ感知面ユニットとの接触の強度を検出する1つ以上のセンサユニットと、ディスプレイユニット、タッチ感知面ユニット、及び1つ以上のセンサユニットと結合された処理ユニットとを含む。処理ユニットは、電子デバイスが縦向きである間に、メッセージユーザインタフェースであって、メッセージユーザインタフェースは、仮想キーボードを含む、メッセージユーザインタフェースをディスプレイに表示することと、縦向きから横向きへの電子デバイスの向きの変化を検出し、電子デバイスの向きの変化を検出したことに応じて、仮想キーボードの表示を停止し、及び電子デバイスのユーザからの手書き入力を受け付けるように構成された手書き入力エリアをディスプレイに表示するように構成されている。
一部の実施形態によれば、方法が、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて実行される。方法は、メッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、仮想キーボードと、メッセージ入力エリアとを含む、ことを含む。方法は、仮想キーボードで複数のタイプ入力を受信することも含む。複数のタイプ入力を受信している間に、方法は、複数のタイプ入力のうちの1つ以上のタイプ入力が、ユーザからの記憶された手書き入力と関連する記憶された文字列に一致するかを判定することを含む。1つ以上のタイプ入力が記憶された文字列に一致するとの決定に従って、方法は、メッセージ入力エリア内に表示される第1の文字セットに近接する第1の場所に、記憶された手書き入力の選択可能な表現を表示することを含む。一部の実施形態では、第1の文字セットは、メッセージ入力エリア内に表示され、記憶された文字列に一致する1つ以上のタイプ入力に対応する文字を含む。方法は、記憶された手書き入力の選択可能な表現の選択をタッチ感知面を介して検出することと、記憶された手書き入力の選択可能な表現の選択を検出したことに応じて、記憶された手書き入力の選択可能な表現の表示を第1の場所で停止すること、及びメッセージ入力エリア内で1つ以上のタイプ入力に対応する第1の文字セットの表示を、記憶された手書き入力の表現の表示に置き換えることとも含む。
一部の実施形態によれば、電子デバイスが、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるタッチ感知面ユニットと、タッチ感知面ユニットとの接触の強度を検出する1つ以上のセンサユニットと、ディスプレイユニット、タッチ感知面ユニット、及び1つ以上のセンサユニットと結合された処理ユニットとを含む。処理ユニットは、メッセージユーザインタフェースであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、仮想キーボードと、メッセージ入力エリアとを含む、メッセージユーザインタフェースをディスプレイに表示するように構成されている。処理ユニットは、仮想キーボードで複数のタイプ入力を受信し、複数のタイプ入力を受信している間に、複数のタイプ入力のうちの1つ以上のタイプ入力が、ユーザからの記憶された手書き入力と関連する記憶された文字列に一致するかを判定し、1つ以上のタイプ入力が記憶された文字列に一致するとの決定に従って、メッセージ入力エリア内に表示される第1の文字セットであって、記憶された手書き入力の選択可能な表現を表示することであって、第1の文字セットは、メッセージ入力エリア内に表示され、記憶された文字列に一致する1つ以上のタイプ入力に対応する文字を含む、第1の文字セットに近接する第1の場所に、記憶された手書き入力の選択可能な表現を表示し、記憶された手書き入力の選択可能な表現の選択をタッチ感知面を介して検出し、記憶された手書き入力の選択可能な表現の選択を検出したことに応じて、記憶された手書き入力の選択可能な表現の表示を第1の場所で停止し、及びメッセージ入力エリア内で1つ以上のタイプ入力に対応する第1の文字セットの表示を、記憶された手書き入力の表現の表示に置き換えるように構成されている。
一部の実施形態によれば、方法が、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて行われる。方法は、タッチ感知面を介して第1の入力を検出することと、第1の入力を検出したことに応じて、ディスプレイにキーボード準備ユーザインタフェースを提示することと、キーボード準備ユーザインタフェースを提示している間に、トレーニング文字の予め定義されたセットに対応する手書き入力をタッチ感知面を介して受信することと、手書き入力を受信した後に、メッセージ入力エリア、及び複数のキーを有する仮想キーボードを含むメッセージユーザインタフェースを表示する要求に対応する第2の入力を検出することであって、複数のキーのうちの第1のキーが、受信した手書き入力のうちの第1の手書き入力と関連する、ことと、第2の入力を検出したことに応じて、メッセージ入力エリア、及び複数のキーを有する仮想キーボードを含むメッセージユーザインタフェースを表示することと、タッチ感知面を介して第1のキーの選択を受信することと、第1のキーの選択を受信したことに応じて、第1の手書き入力の表現をメッセージ入力エリア内に出力することとを含む。
一部の実施形態によれば、電子デバイスが、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるタッチ感知面ユニットと、タッチ感知面ユニットとの接触の強度を検出する1つ以上のセンサユニットと、ディスプレイユニット、タッチ感知面ユニット、及び1つ以上のセンサユニットと結合された処理ユニットとを含む。処理ユニットは、タッチ感知面を介して第1の入力を検出し、第1の入力を検出したことに応じて、ディスプレイにキーボード準備ユーザインタフェースを提示し、キーボード準備ユーザインタフェースを提示している間に、トレーニング文字の予め定義されたセットに対応する手書き入力をタッチ感知面を介して受信し、手書き入力を受信した後に、メッセージ入力エリア、及び複数のキーであって、複数のキーのうちの第1のキーが、受信した手書き入力のうちの第1の手書き入力と関連する、複数のキーを有する仮想キーボードを含むメッセージユーザインタフェースを表示する要求に対応する第2の入力を検出し、第2の入力を検出したことに応じて、メッセージ入力エリア、及び複数のキーを有する仮想キーボードを含むメッセージユーザインタフェースを表示し、タッチ感知面を介して第1のキーの選択を受信し、第1のキーの選択を受信したことに応じて、第1の手書き入力の表現をメッセージ入力エリア内に出力するように構成されている。
このように、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する任意選択的な1つ以上のセンサとを有する電子デバイスでは、手書き用メッセージのための方法及びインタフェースがより高速かつ効率的となり、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージを作成及び提出するための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーションにおいて異なるタイプのコンテンツを速やかに位置特定するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、任意選択的に、従来の方法を補完するか又は置き換える。かかる方法及びインタフェースは、メッセージアプリケーションにおいてコンテンツの表示サイズを速やかに縮小するために単純なジェスチャを単純に利用することをユーザに可能にさせ、もってユーザが所望のコンテンツを速やかに見出せる(例えば、ユーザは、ずっと前に受信したであろう、絵文字、写真、ビデオ、又は他のタイプのコンテンツを速やかに位見出すために、テキストのみの全てのコンテンツを縮小できる)ようにすることによって、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ駆動式デバイスの場合、かかる方法及びインタフェースは、(例えば、所望のコンテンツを速やかに見出すことをユーザに可能にさせることによって)節電し、バッテリ充電間の時間を長くする。更に、所望のコンテンツを速やかに見出すことをユーザに可能にさせることによって、デバイスの操作性を向上させ、(例えば、メッセージアプリケーションにおいて)ユーザ-デバイスインタフェースを、(例えば、潜在的に大きく、かつ検索が難しい会話記録において所望のコンテンツを容易に見出すことをユーザに可能にさせることによって)より効率的にし、加えて、より速やかにかつ効率的にデバイスを使用することをユーザに可能にさせることによって、使用電力を減らし、デバイスのバッテリ寿命を向上させる(例えば、ユーザは、ページ全体及び会話記録のコンテンツのページをスクロールする必要がなく、代わりに、所望のコンテンツが容易に見出せるように、直感的なジェスチャを単純に提供して、コンテンツを容易に縮小することができる)。
一部の実施形態によれば、方法が、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて行われる。方法は、複数のコンテンツアイテムを含むメッセージユーザインタフェースをディスプレイに表示することを含む。一部の実施形態では、複数のコンテンツアイテムは、第1のコンテンツタイプのコンテンツアイテムを含み、複数のコンテンツアイテムは、第1のコンテンツタイプとは区別される第2のコンテンツタイプのコンテンツアイテムを含み、複数のコンテンツアイテムのうちのそれぞれのコンテンツアイテムが、それぞれの第1のサイズで表示される。メッセージユーザインタフェースを表示している間に、方法は、タッチ感知面を介して第1の入力を検出することを含む。第1の入力を検出したことに応じて、方法は、第2のコンテンツタイプのコンテンツアイテムをそれぞれの第1のサイズで表示し続けながら、第1のコンテンツタイプの少なくとも一部のコンテンツアイテムの表示サイズを縮小することを含む。
一部の実施形態によれば、電子デバイスが、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるタッチ感知面ユニットと、タッチ感知面ユニットとの接触の強度を検出する1つ以上のセンサユニットと、ディスプレイユニット、タッチ感知面ユニット、及び1つ以上のセンサユニットと結合された処理ユニットとを含む。処理ユニットは、複数のコンテンツアイテムを含むメッセージユーザインタフェースをディスプレイに表示するように構成されている。一部の実施形態では、複数のコンテンツアイテムは、第1のコンテンツタイプのコンテンツアイテムを少なくとも含み、複数のコンテンツアイテムは、第1のコンテンツタイプとは区別される第2のコンテンツタイプのコンテンツアイテムを少なくとも含み、複数のコンテンツアイテムのうちのそれぞれのコンテンツアイテムが、それぞれの第1のサイズで表示される。メッセージユーザインタフェースを表示している間に、処理ユニットは、タッチ感知面を介して第1の入力を検出し、第1の入力を検出したことに応じて、第2のコンテンツタイプのコンテンツアイテムをそれぞれの第1のサイズで表示し続けながら、第1のコンテンツタイプの少なくとも一部のコンテンツアイテムの表示サイズを縮小するように構成されている。
一部の実施形態によれば、方法が、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて行われる。方法は、複数のコンテンツアイテムを含むメッセージユーザインタフェースをディスプレイに表示することを含む。一部の実施形態では、複数のコンテンツアイテムは、第1のコンテンツタイプのコンテンツアイテムを含み、複数のコンテンツアイテムは、第1のコンテンツタイプとは区別される第2のコンテンツタイプのコンテンツアイテムを含み、複数のコンテンツアイテムのうちのそれぞれのコンテンツアイテムが、それぞれの第1のサイズで表示される。メッセージユーザインタフェースを表示している間に、方法は、タッチ感知面を介して第1の入力を検出することを含み、第1の入力を検出したことに応じて、方法は、第1のコンテンツタイプの第1のコンテンツアイテムが、予め定義された第1の表示サイズ縮小率により、それぞれの第1のサイズよりも小さいそれぞれの第2のサイズに縮小されるように、第1のコンテンツタイプの少なくとも一部のコンテンツアイテムの表示サイズを縮小すること、及び第2のコンテンツタイプの第2のコンテンツアイテムが、予め定義された第2の表示サイズ縮小率により、それぞれの第1のサイズよりも小さいそれぞれの第3のサイズに縮小されるように、第2のコンテンツタイプの少なくとも一部のコンテンツアイテムの表示サイズを縮小することを含む。一部の実施形態では、予め定義された第2の表示サイズ縮小率は、予め定義された第1の表示サイズ縮小率よりも小さい。
一部の実施形態によれば、電子デバイスが、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるタッチ感知面ユニットと、タッチ感知面ユニットとの接触の強度を検出する1つ以上のセンサユニットと、ディスプレイユニット、タッチ感知面ユニット、及び1つ以上のセンサユニットと結合された処理ユニットとを含む。処理ユニットは、複数のコンテンツアイテムを含むメッセージユーザインタフェースをディスプレイに表示するように構成されている。一部の実施形態では、複数のコンテンツアイテムは、第1のコンテンツタイプのコンテンツアイテムを含み、複数のコンテンツアイテムは、第1のコンテンツタイプとは区別される第2のコンテンツタイプのコンテンツアイテムを含み、複数のコンテンツアイテムのうちのそれぞれのコンテンツアイテムが、それぞれの第1のサイズで表示される。メッセージユーザインタフェースを表示している間に、処理ユニットは、タッチ感知面を介して第1の入力を検出するように構成されている。第1の入力を検出したことに応じて、処理ユニットは、第1のコンテンツタイプの第1のコンテンツアイテムが、予め定義された第1の表示サイズ縮小率により、それぞれの第1のサイズよりも小さいそれぞれの第2のサイズに縮小されるように、第1のコンテンツタイプの少なくとも一部のコンテンツアイテムの表示サイズを縮小し、及び第2のコンテンツタイプの第2のコンテンツアイテムが、予め定義された第2の表示サイズ縮小率により、それぞれの第1のサイズよりも小さいそれぞれの第3のサイズに縮小されるように、第2のコンテンツタイプの少なくとも一部のコンテンツアイテムの表示サイズを縮小するように構成されている。一部の実施形態では、予め定義された第2の表示サイズ縮小率は、予め定義された第1の表示サイズ縮小率よりも小さい。
このように、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する任意選択的な1つ以上のセンサとを有する電子デバイスでは、メッセージアプリケーションにおいて異なるタイプのコンテンツを速やかに位置特定するための方法及びインタフェースが高速かつ効率的となり、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。
メッセージ会話において画像(例えば、写真)を共有するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージ会話において画像(例えば、写真)を共有するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、ディスプレイ、デジタルカメラ、タッチ感知面及びメモリを有する電子デバイスにおいて行われる。方法は、メッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、キーボードと、メッセージ入力エリアと、デジタル画像アフォーダンスとを含む、ことを含む。方法は、メッセージユーザインタフェースを表示している間に、デジタル画像アフォーダンスをアクティブ化する入力を検出することを更に含む。方法は、デジタル画像アフォーダンスをアクティブ化する入力を検出したことに応じて、キーボードの表示を複数のデジタル画像の表示に置き換えることであって、複数のデジタル画像は、メモリに記憶された1つ以上のデジタル画像及びデジタルカメラによるライブプレビュー画像を含む、ことを更に含む。方法は、複数のデジタル画像内に表示されたライブ画像を選択する入力を検出することを更に含む。方法は、ライブ画像を選択するその入力を検出したことに応じて、会話記録の表示を維持しながらデジタルカメラでデジタル画像をキャプチャすることを更に含む。
一部の実施形態によれば、電子デバイスが、ユーザインタフェースを表示するように構成されたディスプレイユニットと、画像をキャプチャするように構成されたデジタルカメラユニットと、タッチ感知面ユニットと、メモリユニットと、ディスプレイユニット、デジタルカメラユニット、タッチ感知面ユニット及びメモリユニットと結合された処理ユニットとを含む。処理ユニットは、メッセージユーザインタフェースをディスプレイユニットに表示するように構成されており、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、キーボードと、メッセージ入力エリアと、デジタル画像アフォーダンスとを含む。処理ユニットは、メッセージユーザインタフェースを表示している間に、デジタル画像アフォーダンスをアクティブ化する入力を検出するように更に構成されている。処理ユニットは、デジタル画像アフォーダンスをアクティブ化する入力を検出したことに応じて、キーボードの表示を複数のデジタル画像の表示に置き換えるように更に構成されており、複数のデジタル画像は、メモリユニットに記憶された1つ以上のデジタル画像及びデジタルカメラユニットによるライブプレビュー画像を含む。処理ユニットは、複数のデジタル画像内に表示されたライブ画像を選択する入力を検出するように更に構成されている。処理ユニットは、ライブ画像を選択するその入力を検出したことに応じて、会話記録の表示を維持しながらデジタルカメラユニットでデジタル画像をキャプチャするように更に構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージ会話において画像(例えば、写真)を共有するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージ会話において画像(例えば、写真)を共有するための従来の方法を補完するか又は置き換えることができる。
メッセージ会話においてコンテンツ(例えば、インターネットからのコンテンツ及びローカルに記憶されたコンテンツ)を検索及び共有するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージ会話においてコンテンツを検索及び共有するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて行われる。方法は、メッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、検索アフォーダンスとを含む、ことを含む。方法は、メッセージユーザインタフェースを表示している間に、検索アフォーダンスをアクティブ化する入力を検出することを更に含む。方法は、検索アフォーダンスをアクティブ化する入力を検出したことに応じて、メッセージユーザインタフェースの表示を停止すること、及び検索ユーザインタフェースを表示することであって、検索ユーザインタフェースは、検索フィールド及び分類された複数のコンテンツアイテムを含み、分類された複数のコンテンツアイテムは、電子デバイスに記憶されたコンテンツアイテム及びインターネットからのコンテンツアイテムを少なくとも含む、ことを更に含む。方法は、検索ユーザインタフェースを表示している間に、分類された複数のコンテンツアイテムのうちの第1のコンテンツアイテムを選択する入力を検出することを更に含む。方法は、分類された複数のコンテンツアイテムのうちの第1のコンテンツアイテムを選択する入力を検出した後に、検索用ユーザインタフェースの表示を停止すること、メッセージユーザインタフェース内の会話記録に第1のコンテンツアイテムを表示すること、及びメッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに第1のコンテンツアイテムを送信することであって、1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に第1のコンテンツアイテムを表示する、ことを更に含む。
一部の実施形態によれば、電子デバイスが、ユーザインタフェースを表示するように構成されたディスプレイユニットと、タッチ感知面ユニットと、メモリユニットと、ディスプレイユニット、タッチ感知面ユニット、及びメモリユニットに結合された処理ユニットとを含む。処理ユニットは、メッセージユーザインタフェースをディスプレイユニットに表示するように構成されており、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、検索アフォーダンスとを含む。処理ユニットは、メッセージユーザインタフェースを表示している間に、検索アフォーダンスをアクティブ化する入力を検出するように更に構成されている。処理ユニットは、検索アフォーダンスをアクティブ化する入力を検出したことに応じて、メッセージユーザインタフェースの表示を停止し、及び検索ユーザインタフェースを表示するように更に構成されており、検索ユーザインタフェースは、検索フィールド及び分類された複数のコンテンツアイテムを含み、分類された複数のコンテンツアイテムは、電子デバイスに記憶されたコンテンツアイテム及びインターネットからのコンテンツアイテムを少なくとも含む。処理ユニットは、検索ユーザインタフェースを表示している間に、分類された複数のコンテンツアイテムのうちの第1のコンテンツアイテムを選択する入力を検出するように更に構成されている。処理ユニットは、分類された複数のコンテンツアイテムのうちの第1のコンテンツアイテムを選択する入力を検出した後に、検索用ユーザインタフェースの表示を停止し、メッセージユーザインタフェース内の会話記録に第1のコンテンツアイテムを表示し、及びメッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに第1のコンテンツアイテムを送信するように更に構成されており、1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に第1のコンテンツアイテムを表示する。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージ会話においてコンテンツを検索及び共有するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、会話においてコンテンツを共有するための従来の方法を補完するか又は置き換えることができる。
対話型アプリケーションをメッセージアプリケーションに追加するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、対話型アプリケーションをメッセージアプリケーションに追加するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる。方法は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、アプリケーションアフォーダンスとを含む、ことと、メッセージユーザインタフェースを表示している間に、アプリケーションアフォーダンスをアクティブ化する入力を検出することと、アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、アプリケーションストア用の起動アイコンと、対話型アプリケーション用の複数の起動アイコンとを同時に表示することであって、対話型アプリケーション用のそれぞれの起動アイコンのアクティブ化によって、メッセージアプリケーション内に表示される対応するアプリケーションが起動される、ことと、アプリケーションストア用の起動アイコンをアクティブ化する入力を検出することと、アプリケーションストア用の起動アイコンをアクティブ化する入力を検出したことに応じて、メッセージユーザインタフェースの表示を停止すること、及び電子デバイスへのダウンロードに利用可能な少なくとも1つの対話型アプリケーションの表示を含むアプリケーションストアユーザインタフェースを表示することと、アプリケーションストアユーザインタフェースを表示している間に、電子デバイスのメモリに記憶されていない第1の対話型アプリケーションをダウンロードする要求に対応する入力を検出することと、第1の対話型アプリケーションをダウンロードする要求に対応する入力を検出したことに応じて、第1の対話型アプリケーションを電子デバイスのメモリにダウンロードすること、アプリケーションストアユーザインタフェースの表示をメッセージユーザインタフェースの表示に置き換えることであって、メッセージユーザインタフェースは、会話記録と、対話型アプリケーション用の複数の起動アイコンのうちの少なくとも一部とを含む、こと、及び第1の対話型アプリケーションに対応する起動アイコンを対話型アプリケーション用の複数の起動アイコンの表示に追加することとを含む。
一部の実施形態によれば、電子デバイスが、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。処理ユニットは、メッセージアプリケーションのメッセージユーザインタフェースであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、アプリケーションアフォーダンスとを含む、メッセージユーザインタフェースの表示をディスプレイユニット上で可能にし、メッセージユーザインタフェースを表示している間に、アプリケーションアフォーダンスをアクティブ化する入力を検出し、アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、アプリケーションストア用の起動アイコンの表示と、対話型アプリケーション用の複数の起動アイコンであって、対話型アプリケーション用のそれぞれの起動アイコンのアクティブ化によって、メッセージアプリケーション内に表示される対応するアプリケーションが起動される、対話型アプリケーション用の複数の起動アイコンの表示とを同時に可能にし、アプリケーションストア用の起動アイコンをアクティブ化する入力を検出し、アプリケーションストア用の起動アイコンをアクティブ化する入力を検出したことに応じて、メッセージユーザインタフェースの表示を停止し、及び電子デバイスへのダウンロードに利用可能な少なくとも1つの対話型アプリケーションの表示を含むアプリケーションストアユーザインタフェースの表示を可能にし、アプリケーションストアユーザインタフェースを表示している間に、電子デバイスのメモリに記憶されていない第1の対話型アプリケーションをダウンロードする要求に対応する入力を検出し、第1の対話型アプリケーションをダウンロードする要求に対応する入力を検出したことに応じて、第1の対話型アプリケーションを電子デバイスのメモリにダウンロードし、アプリケーションストアユーザインタフェースの表示をメッセージユーザインタフェースであって、メッセージユーザインタフェースは、会話記録と、対話型アプリケーション用の複数の起動アイコンのうちの少なくとも一部とを含む、メッセージユーザインタフェースの表示に置き換え、及び第1の対話型アプリケーションに対応する起動アイコンを対話型アプリケーション用の複数の起動アイコンの表示に追加するように構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、対話型アプリケーションをメッセージアプリケーションに追加するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、対話型アプリケーションをメッセージアプリケーションに追加するための従来の方法を補完するか又は置き換えることができる。
メッセージを投稿するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージを投稿するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる。方法は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、第1のメッセージ入力エリアと、対話型アプリケーション用の起動アイコンとを含む、ことと、メッセージユーザインタフェースを表示している間に、対話型アプリケーション用の起動アイコンをアクティブ化する入力を検出することと、対話型アプリケーション用の起動アイコンをアクティブ化する入力を検出したことに応じて、対話型アプリケーション用のユーザインタフェースを表示することであって、対話型アプリケーションユーザインタフェースは、第1のメッセージ入力エリアとは区別される第2のメッセージ入力エリアを含む、ことと、対話型アプリケーションユーザインタフェースを表示している間に、第2のメッセージ入力エリアにおいて第1のメッセージの入力を検出することと、第2のメッセージ入力エリアにおいて第1のメッセージの入力を検出したことに応じて、第1のメッセージを第2のメッセージ入力エリアに表示することと、第1のメッセージを第2のメッセージ入力エリアに表示している間に、第2のメッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出することと、第2のメッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出したことに応じて、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに第1のメッセージを送信することであって、1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に第1のメッセージを表示する、こととを含む。
一部の実施形態によれば、電子デバイスが、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。処理ユニットは、メッセージアプリケーションのメッセージユーザインタフェースであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、第1のメッセージ入力エリアと、対話型アプリケーション用の起動アイコンとを含む、メッセージユーザインタフェースの表示をディスプレイユニット上で可能にし、メッセージユーザインタフェースを表示している間に、対話型アプリケーション用の起動アイコンをアクティブ化する入力を検出し、対話型アプリケーション用の起動アイコンをアクティブ化する入力を検出したことに応じて、対話型アプリケーション用のユーザインタフェースであって、対話型アプリケーションユーザインタフェースは、第1のメッセージ入力エリアとは区別される第2のメッセージ入力エリアを含む、対話型アプリケーション用のユーザインタフェースの表示を可能にし、対話型アプリケーションユーザインタフェースを表示している間に、第2のメッセージ入力エリアにおいて第1のメッセージの入力を検出し、第2のメッセージ入力エリアにおいて第1のメッセージの入力を検出したことに応じて、第1のメッセージの表示を第2のメッセージ入力エリアにおいて可能にし、第1のメッセージを第2のメッセージ入力エリアに表示している間に、第2のメッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出するし、第2のメッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出したことに応じて、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに第1のメッセージを送信するように構成されており、1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に第1のメッセージを表示する。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージを投稿するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージを投稿するための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーション内で対話型アプリケーションを使用するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージアプリケーション内で対話型アプリケーションを使用するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる。方法は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアと、会話記録内に表示される対話型アプリケーション用のアイコンとを含む、ことと、メッセージユーザインタフェースを表示している間に、対話型アプリケーション用のアイコンをアクティブ化する入力を検出することと、対話型アプリケーション用のアイコンをアクティブ化する入力を検出したことに応じて、対話型アプリケーション用のユーザインタフェースを第1の状態で表示することと、対話型アプリケーション用のユーザインタフェースを表示している間に、対話型アプリケーション用のユーザインタフェース内で第1のユーザ入力を検出することと、対話型アプリケーション用のユーザインタフェース内で第1のユーザ入力を検出したことに応じて、対話型アプリケーション用のユーザインタフェースの表示を第1の状態から第2の状態に変更すること、及び第1のユーザ入力が対話型アプリケーション用のユーザインタフェースにおいて行われたことを示す情報を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに送信することであって、1つ以上の電子デバイスは、第1のユーザ入力の指標を表示する、こととを含む。
一部の実施形態によれば、電子デバイスが、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。処理ユニットは、メッセージアプリケーションのメッセージユーザインタフェースであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアと、会話記録内に表示される対話型アプリケーション用のアイコンとを含む、メッセージユーザインタフェースの表示をディスプレイユニット上で可能にし、メッセージユーザインタフェースを表示している間に、対話型アプリケーション用のアイコンをアクティブ化する入力を検出し、対話型アプリケーション用のアイコンをアクティブ化する入力を検出したことに応じて、対話型アプリケーション用のユーザインタフェースの表示を第1の状態で可能にし、対話型アプリケーション用のユーザインタフェースを表示している間に、対話型アプリケーション用のユーザインタフェース内で第1のユーザ入力を検出し、対話型アプリケーション用のユーザインタフェース内で第1のユーザ入力を検出したことに応じて、対話型アプリケーション用のユーザインタフェースの表示を第1の状態から第2の状態に変更し、及び第1のユーザ入力が対話型アプリケーション用のユーザインタフェースにおいて行われたことを示す情報を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに送信するように構成されており、1つ以上の電子デバイスは、第1のユーザ入力の指標を表示する。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージアプリケーション内で対話型アプリケーションを使用するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいて対話型アプリケーションを使用するための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーションにおいて対話型アプリケーションを使用するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージアプリケーションにおいて対話型アプリケーションを使用するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる。方法は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアとを含む、ことと、メッセージユーザインタフェースを表示している間に、対話型アプリケーション用のアイコンを会話記録に表示することの命令を、メッセージセッションに含まれる別のユーザに対応する電子デバイスから受信することと、命令を受信したことに応じて、対話型アプリケーション用のアイコンを会話記録に表示することと、対話型アプリケーション用のアイコンを会話記録に表示している間に、対話型アプリケーション用のアイコンをアクティブ化する入力を検出することと、会話記録に表示された対話型アプリケーション用のアイコンをアクティブ化する入力を検出したことに応じて、対話型アプリケーション用のアイコンに対応する対話型アプリケーションが電子デバイスのメモリに記憶されているとの決定に従って、対話型アプリケーション用のユーザインタフェースを表示すること、並びに対話型アプリケーション用のアイコンに対応する対話型アプリケーションが電子デバイスのメモリに記憶されていないとの決定に従って、対話型アプリケーションをリモートサーバから電子デバイスのメモリにダウンロードすること、及び対話型アプリケーションをリモートサーバからダウンロードした後に、対話型アプリケーション用のユーザインタフェースを表示することとを含む。
一部の実施形態によれば、電子デバイスが、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。処理ユニットは、メッセージアプリケーションのメッセージユーザインタフェースであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアとを含む、メッセージユーザインタフェースの表示をディスプレイユニット上で可能にし、メッセージユーザインタフェースを表示している間に、対話型アプリケーション用のアイコンを会話記録に表示することの命令を、メッセージセッションに含まれる別のユーザに対応する電子デバイスから受信し、命令を受信したことに応じて、対話型アプリケーション用のアイコンの表示を会話記録において可能にし、対話型アプリケーション用のアイコンを会話記録に表示している間に、対話型アプリケーション用のアイコンをアクティブ化する入力を検出し、会話記録に表示された対話型アプリケーション用のアイコンをアクティブ化する入力を検出したことに応じて、対話型アプリケーション用のアイコンに対応する対話型アプリケーションが電子デバイスのメモリに記憶されているとの決定に従って、対話型アプリケーション用のユーザインタフェースの表示を可能にし、並びに対話型アプリケーション用のアイコンに対応する対話型アプリケーションが電子デバイスのメモリに記憶されていないとの決定に従って、対話型アプリケーションをリモートサーバから電子デバイスのメモリにダウンロードし、及び対話型アプリケーションをリモートサーバからダウンロードした後に、対話型アプリケーション用のユーザインタフェースの表示を可能にするように構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージアプリケーションにおいて対話型アプリケーションを使用するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいて対話型アプリケーションを使用するための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーションにおいて対話型アプリケーションを使用するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージアプリケーションにおいて対話型アプリケーションを使用するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて行われる。方法は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、ディスプレイの第1のエリアに表示される、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、会話記録内に表示される、第1の対話型アプリケーションに対応する第1の対話型アプリケーションオブジェクトと、メッセージ入力エリアと、ディスプレイの第2のエリアに表示されメッセージ入力エリアとは区別される、第1の対話型アプリケーション用の入力エリアとを含み、第1の対話型アプリケーション用の入力エリアは、1つ以上の入力アフォーダンスを含む、ことと、対話型アプリケーション用の入力エリアにおいて第1の入力アフォーダンスをアクティブ化する入力を検出することとを含む。
一部の実施形態によれば、電子デバイスが、ディスプレイユニットと、タッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。処理ユニットは、メッセージアプリケーションのメッセージユーザインタフェースであって、メッセージユーザインタフェースは、ディスプレイの第1のエリアに表示される、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、会話記録内に表示される、第1の対話型アプリケーションに対応する第1の対話型アプリケーションオブジェクトと、メッセージ入力エリアと、ディスプレイの第2のエリアに表示されメッセージ入力エリアとは区別される、第1の対話型アプリケーション用の入力エリアとを含み、第1の対話型アプリケーション用の入力エリアは、1つ以上の入力アフォーダンスを含む、メッセージユーザインタフェースの表示をディスプレイユニット上で可能にし、対話型アプリケーション用の入力エリアにおいて第1の入力アフォーダンスをアクティブ化する入力を検出するように構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージアプリケーションにおいて対話型アプリケーションを使用するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいて対話型アプリケーションを使用するための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーションにおいて対話型アプリケーションを使用するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージアプリケーションにおいて対話型アプリケーションを使用するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて行われる。方法は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、会話記録内に表示される、第1の対話型アプリケーションに対応する第1の対話型アプリケーションオブジェクトと、メッセージ入力エリアとを含む、ことを含む。方法は、会話記録内に表示される第1の対話型アプリケーションオブジェクトに対応する、タッチ感知面上の場所にフォーカスセレクタがある間に、第1の入力を検出することと、第1の入力を検出したことに応じて、メッセージ入力エリアとは区別される、第1の対話型アプリケーション用の入力エリアを表示することであって、第1の対話型アプリケーション用の入力エリアは、1つ以上の入力アフォーダンスを含む、ことと、第1の対話型アプリケーション用の入力エリアを表示している間に、1つ以上の入力アフォーダンス上の1つ以上の入力を検出することと、1つ以上の入力アフォーダンス上の1つ以上の入力を検出した後に、第1の対話型アプリケーションを更新すること、メッセージセッションの対応する会話記録内に表示された、第1の対話型アプリケーション用の対応するユーザインタフェースの更新をもたらす情報を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに送信すること、及び第1の対話型アプリケーション用の入力エリアの表示を停止することとを更に含む。
一部の実施形態によれば、電子デバイスが、ディスプレイユニットと、タッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。処理ユニットは、メッセージアプリケーションのメッセージユーザインタフェースの表示をディスプレイユニット上で可能にするように構成されており、ことであり、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、会話記録内に表示される、第1の対話型アプリケーションに対応する第1の対話型アプリケーションオブジェクトと、メッセージ入力エリアとを含む。処理ユニットは、会話記録内に表示される第1の対話型アプリケーションオブジェクトに対応する、タッチ感知面ユニット上の場所にフォーカスセレクタがある間に、第1の入力を検出し、第1の入力を検出したことに応じて、メッセージ入力エリアとは区別される、第1の対話型アプリケーション用の入力エリアであって、第1の対話型アプリケーション用の入力エリアは、1つ以上の入力アフォーダンスを含む、第1の対話型アプリケーション用の入力エリアの表示を可能にし、第1の対話型アプリケーション用の入力エリアを表示している間に、1つ以上の入力アフォーダンス上の1つ以上の入力を検出し、1つ以上の入力アフォーダンス上の1つ以上の入力を検出した後に、第1の対話型アプリケーションを更新し、メッセージセッションの対応する会話記録内に表示された、第1の対話型アプリケーション用の対応するユーザインタフェースの更新をもたらす情報を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに送信し、及び第1の対話型アプリケーション用の入力エリアの表示を停止するように更に構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージアプリケーションにおいて対話型アプリケーションを使用するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいて対話型アプリケーションを使用するための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーションにおいて対話型アプリケーションの使用を可能にするための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージアプリケーションにおいて対話型アプリケーションの使用を可能にするための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて行われ、ここで、メッセージアプリケーション及び複数の他のアプリケーションがメモリに記憶されており、複数の他のアプリケーションのうちのそれぞれのアプリケーションが、電子デバイス上での通常動作のための通常モードと、電子デバイス上のメッセージアプリケーション内での動作のための組込モードとを有する。方法は、複数のトグルアフォーダンスを表示することを含む。ここで、複数のトグルアフォーダンスのうちのそれぞれのトグルアフォーダンスが、メモリに記憶された複数の他のアプリケーションのうちの対応するアプリケーションを有し、それぞれのトグルアフォーダンスは、メッセージアプリケーション内での組込モードにおける対応するアプリケーションの動作のために、それぞれの起動アイコンの表示をメッセージアプリケーション内で可能にする第1の状態を有し、それぞれのトグルアフォーダンスは、メッセージアプリケーション内での組込モードにおける対応するアプリケーションの動作を妨げるために、それぞれの起動アイコンの表示をメッセージアプリケーション内で妨げる第2の状態を有し、複数のトグルアフォーダンスは、第1の状態で表示される、第1のアプリケーション用の第1のトグルアフォーダンスと、第2の状態で表示される、第2のアプリケーション用の第2のトグルアフォーダンスとを含む。複数のトグルアフォーダンスを表示している間に、方法は、第1のトグルアフォーダンスに対応する第1の場所で第1のユーザ入力を検出することと、第1のトグルアフォーダンスに対応する第1の場所で第1のユーザ入力を検出したことに応じて、第1のトグルアフォーダンスを第1の状態から第2の状態に変更すること、及びメッセージアプリケーションにおいて第1のアプリケーション用の対応する起動アイコンの表示を妨げることとを更に含む。
一部の実施形態によれば、電子デバイスが、ディスプレイユニットと、タッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含み、ここで、メッセージアプリケーション及び複数の他のアプリケーションが、電子デバイスのメモリに記憶されており、複数の他のアプリケーションのうちのそれぞれのアプリケーションが、電子デバイス上での通常動作のための通常モードと、電子デバイス上のメッセージアプリケーション内での動作のための組込モードとを有する。処理ユニットは、複数のトグルアフォーダンスの表示を可能にするように構成されている。ここで、複数のトグルアフォーダンスのうちのそれぞれのトグルアフォーダンスが、メモリに記憶された複数の他のアプリケーションのうちの対応するアプリケーションを有し、それぞれのトグルアフォーダンスは、メッセージアプリケーション内での組込モードにおける対応するアプリケーションの動作のために、それぞれの起動アイコンの表示をメッセージアプリケーション内で可能にする第1の状態を有し、それぞれのトグルアフォーダンスは、メッセージアプリケーション内での組込モードにおける対応するアプリケーションの動作を妨げるために、それぞれの起動アイコンの表示をメッセージアプリケーション内で妨げる第2の状態を有し、複数のトグルアフォーダンスは、第1の状態で表示される、第1のアプリケーション用の第1のトグルアフォーダンスと、第2の状態で表示される、第2のアプリケーション用の第2のトグルアフォーダンスとを含む。処理ユニットは、複数のトグルアフォーダンスを表示している間に、第1のトグルアフォーダンスに対応する第1の場所で第1のユーザ入力を検出し、第1のトグルアフォーダンスに対応する第1の場所で第1のユーザ入力を検出したことに応じて、第1のトグルアフォーダンスを第1の状態から第2の状態に変更し、及び第1のアプリケーション用の対応する起動アイコンの表示をメッセージアプリケーションで妨げるように更に構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージアプリケーションにおいて対話型アプリケーションの使用を可能にするための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいて対話型アプリケーションの使用を可能にするための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーション内をナビゲートするための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージアプリケーション内をナビゲートするための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、ディスプレイ、タッチ感知面、及びデジタルカメラを有する電子デバイスにおいて行われる。方法は、メッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアと、デジタル画像アフォーダンスと、デジタルタッチアフォーダンスと、アプリケーションアフォーダンスとを含む、ことと、メッセージユーザインタフェースを表示している間に、タッチ感知面上で第1の入力を検出することと、第1の入力を検出したことに応じて、フォーカスセレクタがメッセージユーザインタフェースにおいてデジタル画像アフォーダンスに対応する場所にある間に、第1の入力が行われたとの決定に従って、メッセージユーザインタフェース内に複数のデジタル画像を表示することと、フォーカスセレクタがメッセージユーザインタフェースにおいてデジタルキャンバスアフォーダンスに対応する場所にある間に、第1の入力が行われたとの決定に従って、メッセージユーザインタフェース内にデジタル描画キャンバスを表示することと、フォーカスセレクタがメッセージユーザインタフェースにおいてアプリケーションアフォーダンスに対応する場所にある間に、第1の入力が行われたとの決定に従って、メッセージユーザインタフェース内にアプリケーション用の1つ以上の起動アイコンを表示することとを含む。
一部の実施形態によれば、電子デバイスが、ディスプレイユニットと、タッチ感知面ユニットと、デジタルカメラユニットと、ディスプレイユニット、タッチ感知面ユニット、及びデジタルカメラユニットに結合された処理ユニットとを含む。処理ユニットは、メッセージユーザインタフェースの表示をディスプレイユニット上で可能にするように構成されており、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアと、デジタル画像アフォーダンスと、デジタルタッチアフォーダンスと、アプリケーションアフォーダンスとを含む。処理ユニットは、メッセージユーザインタフェースを表示している間に、タッチ感知面上で第1の入力を検出し、第1の入力を検出したことに応じて、フォーカスセレクタがメッセージユーザインタフェースにおいてデジタル画像アフォーダンスに対応する場所にある間に、第1の入力が行われたとの決定に従って、メッセージユーザインタフェース内で複数のデジタル画像の表示を可能にし、フォーカスセレクタがメッセージユーザインタフェースにおいてデジタルキャンバスアフォーダンスに対応する場所にある間に、第1の入力が行われたとの決定に従って、デジタル描画キャンバスの表示をメッセージユーザインタフェース内で可能にし、及びフォーカスセレクタがメッセージユーザインタフェースにおいてアプリケーションアフォーダンスに対応する場所にある間に、第1の入力が行われたとの決定に従って、アプリケーション用の1つ以上の起動アイコンの表示をメッセージユーザインタフェース内で可能にするように更に構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージアプリケーション内をナビゲートするための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーション内をナビゲートするための従来の方法を補完するか又は置き換えることができる。
会話記録に電子ステッカを配置するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、会話記録に電子ステッカを配置するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる。デバイスは、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイに表示し、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、複数の電子ステッカと、メッセージ入力エリアとを含む。メッセージユーザインタフェースを表示している間に、デバイスは、フォーカスセレクタがメッセージユーザインタフェースにおいて複数の電子ステッカのうちの第1の電子ステッカに対応する第1の場所にある間に始まる第1のドラッグジェスチャを検出し、第1のドラッグジェスチャは、フォーカスセレクタを第1の方向に移動させる。デバイスは、第1のドラッグジェスチャの動きに従って第1の電子ステッカを第1の方向に移動させる。デバイスは、フォーカスセレクタがメッセージユーザインタフェースの第2の場所にある間に、第1のドラッグジェスチャの終了を検出する。第1のドラッグジェスチャの終了を検出したことに応じて、第2の場所が会話記録内であるとの決定に従って、デバイスは、会話記録において第2の場所に基づく場所に電子ステッカを配置する。第2の場所が会話記録内ではないとの決定に従って、デバイスは、電子ステッカの表示をディスプレイの第2の場所で停止する。
一部の実施形態によれば、電子デバイスが、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む。処理ユニットは、メッセージアプリケーションのメッセージユーザインタフェースの表示をディスプレイユニット上で可能にするように構成されており、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、複数の電子ステッカと、メッセージ入力エリアとを含む。メッセージユーザインタフェースを表示している間に、処理ユニットは、フォーカスセレクタがメッセージユーザインタフェースにおいて複数の電子ステッカのうちの第1の電子ステッカに対応する第1の場所にある間に始まる第1のドラッグジェスチャを検出するように構成されており、第1のドラッグジェスチャは、フォーカスセレクタを第1の方向に移動させる。処理ユニットは、第1のドラッグジェスチャの動きに従って第1の電子ステッカを第1の方向に移動させるように構成されている。処理ユニットは、フォーカスセレクタがメッセージユーザインタフェースの第2の場所にある間に、第1のドラッグジェスチャの終了を検出するように構成されている。第1のドラッグジェスチャの終了を検出したことに応じて、第2の場所が会話記録内であるとの決定に従って、処理ユニットは、会話記録において第2の場所に基づく場所に電子ステッカを配置するように構成されており、第2の場所が会話記録内ではないとの決定に従って、処理ユニットは、ディスプレイユニットの第2の場所で電子ステッカの表示を停止するように構成されている。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、会話記録に電子ステッカを配置するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、会話記録に電子ステッカを配置するための従来の方法を補完するか又は置き換えることができる。
メッセージユーザインタフェース用の会話記録において電子ステッカの特徴を変更するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージユーザインタフェース用の会話記録において電子ステッカの特徴を変更するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる。デバイスは、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイに表示し、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、複数の電子ステッカと、メッセージ入力エリアとを含む。メッセージユーザインタフェースを表示している間に、デバイスは、フォーカスセレクタがメッセージユーザインタフェースにおいて複数の電子ステッカのうちの第1の電子ステッカに対応する第1の場所にある間に、第1のユーザ入力を検出する。第1のユーザ入力を検出したことに応じて、デバイスは、第1の電子ステッカを会話記録に配置及び表示する。第1の電子ステッカが会話記録に表示されている間に、デバイスは、フォーカスセレクタがメッセージユーザインタフェースにおいて会話記録内の第1の電子ステッカに対応する第2の場所にある間に、第2のユーザ入力を検出する。第2のユーザ入力を検出したことに応じて、デバイスは、会話記録内の第1の電子ステッカの位置、サイズ、及び/又は回転を変更する。
一部の実施形態によれば、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを有する電子デバイスが存在する。処理ユニットは、メッセージアプリケーションのメッセージユーザインタフェースの表示をディスプレイユニット上で可能にし、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、複数の電子ステッカと、メッセージ入力エリアとを含む。メッセージユーザインタフェースを表示している間に、処理ユニットは、フォーカスセレクタがメッセージユーザインタフェースにおいて複数の電子ステッカのうちの第1の電子ステッカに対応する第1の場所にある間に、第1のユーザ入力を検出する。第1のユーザ入力を検出したことに応じて、処理ユニットは、会話記録において第1の電子ステッカを配置し、表示を可能にする。第1の電子ステッカが会話記録に表示されている間に、処理ユニットは、フォーカスセレクタがメッセージユーザインタフェースにおいて会話記録内の第1の電子ステッカに対応する第2の場所にある間に、第2のユーザ入力を検出する。第2のユーザ入力を検出したことに応じて、デバイスは、会話記録内の第1の電子ステッカの位置、サイズ、及び/又は回転を変更する。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージユーザインタフェース用の会話記録において電子ステッカの特徴を変更するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージユーザインタフェース用の会話記録において電子ステッカの特徴を変更するための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーションによって支払いを開始するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージアプリケーションによって支払いを開始するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる。デバイスは、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイに表示し、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアとを含み、メッセージセッションに含まれる他のユーザの各々が、対応するアバターを有する。メッセージユーザインタフェースを表示している間に、デバイスは、フォーカスセレクタがメッセージユーザインタフェースにおいてメッセージセッションに含まれる第1の他のユーザのアバターに対応する第1の場所にある間に、第1のユーザ入力を検出する。第1のユーザ入力を検出したことに応じて、デバイスは、第1の他のユーザと関連するアクティブ化可能なメニュー項目を含むメニューをメッセージユーザインタフェースに重ねて表示し、表示されるメニューは、第1の他のユーザとの支払い動作を開始するためのアクティブ化可能なメニュー項目を含む。第1の他のユーザと関連するアクティブ化可能なメニュー項目を含むメニューを表示している間に、デバイスは、フォーカスセレクタがメッセージユーザインタフェースにおいて第1の他のユーザとの支払い動作を開始するためのアクティブ化可能なメニュー項目に対応する第2の場所にある間に、第2のユーザ入力を検出する。第2のユーザ入力を検出したことに応じて、デバイスは、第1の他のユーザへの支払いの送信、及び/又は第1の他のユーザからの支払いの要求を開始するように構成されたユーザインタフェースを表示する。
一部の実施形態では、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを有する電子デバイスが存在する。処理ユニットは、メッセージアプリケーションのメッセージユーザインタフェースの表示をディスプレイユニット上で可能にし、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアとを含み、メッセージセッションに含まれる他のユーザの各々が、対応するアバターを有する。メッセージユーザインタフェースを表示している間に、処理ユニットは、フォーカスセレクタがメッセージユーザインタフェースにおいてメッセージセッションに含まれる第1の他のユーザのアバターに対応する第1の場所にある間に、第1のユーザ入力を検出する。第1のユーザ入力を検出したことに応じて、処理ユニットは、第1の他のユーザと関連するアクティブ化可能なメニュー項目を含むメニューの表示をメッセージユーザインタフェースに重ねて可能にし、表示されるメニューは、第1の他のユーザとの支払い動作を開始するためのアクティブ化可能なメニュー項目を含む。第1の他のユーザと関連するアクティブ化可能なメニュー項目を含むメニューを表示している間に、処理ユニットは、フォーカスセレクタがメッセージユーザインタフェースにおいて第1の他のユーザとの支払い動作を開始するためのアクティブ化可能なメニュー項目に対応する第2の場所にある間に、第2のユーザ入力を検出する。第2のユーザ入力を検出したことに応じて、処理ユニットは、第1の他のユーザへの支払いの送信、及び/又は第1の他のユーザからの支払いの要求を開始するように構成されたユーザインタフェースの表示を可能にする。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージアプリケーションによって支払いを開始するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションによって支払いを開始するための従来の方法を補完するか又は置き換えることができる。
メッセージセッションにおいてメニューを選択的にアクティブ化するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージセッションにおいてメニューを選択的にアクティブ化するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、1つ以上のプロセッサと、メモリと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサと、ディスプレイとを有する電子デバイスにおいて行われる。デバイスは、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイに表示し、メッセージユーザインタフェースは、電子デバイスのユーザと複数の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアと、複数のアバターとを含み、複数のアバターのうちのそれぞれの各アバターが、メッセージセッションに含まれる複数の他のユーザのうちのそれぞれの他のユーザに対応し、複数のアバターは、アバターの重なりとして表示され、複数のアバターのうちの第1のアバターが、アバターの重なりの最上部に表示される。メッセージユーザインタフェースを表示している間に、デバイスは、フォーカスセレクタがメッセージユーザインタフェースにおいて第1のアバターに対応する第1の場所にある間に、タッチ感知面上の第1の接触による入力を検出する。第1の接触による入力を検出したことに応じて、入力がメニューアクティブ化基準であって、メニューアクティブ化基準を満たすために、タッチ感知面上の接触の特性強度がそれぞれの強度閾値を満たすことを要求するメニューアクティブ化基準を満たすとの決定に従って、デバイスは、第1のアバターと関連するアクティブ化可能なメニュー項目を含むメニューをメッセージユーザインタフェースに重ねて表示する。入力がアバター展開基準であって、選択基準を満たすために、タッチスクリーン上の接触の特性強度がそれぞれの強度閾値を満たすことを要求しないアバター展開基準を満たすとの決定に従って、デバイスは、複数のアバターを整列表示する。
一部の実施形態によれば、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを有する電子デバイスが存在する。処理ユニットは、メッセージアプリケーションのメッセージユーザインタフェースの表示をディスプレイユニット上で可能にし、メッセージユーザインタフェースは、電子デバイスのユーザと複数の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアと、複数のアバターとを含み、複数のアバターのうちのそれぞれの各アバターが、メッセージセッションに含まれる複数の他のユーザのうちのそれぞれの他のユーザに対応し、複数のアバターは、アバターの重なりとして表示され、複数のアバターのうちの第1のアバターが、アバターの重なりの最上部に表示される。メッセージユーザインタフェースを表示している間に、処理ユニットは、フォーカスセレクタがメッセージユーザインタフェースにおいて第1のアバターに対応する第1の場所にある間に、タッチ感知面ユニット上の第1の接触による入力を検出する。第1の接触による入力を検出したことに応じて、入力がメニューアクティブ化基準であって、メニューアクティブ化基準を満たすために、タッチ感知面ユニット上の接触の特性強度がそれぞれの強度閾値を満たすことを要求するメニューアクティブ化基準を満たすとの決定に従って、処理ユニットは、第1のアバターと関連するアクティブ化可能なメニュー項目を含むメニューの表示をメッセージユーザインタフェースに重ねて可能にする。入力がアバター展開基準であって、選択基準を満たすために、タッチスクリーン上の接触の特性強度がそれぞれの強度閾値を満たすことを要求しないアバター展開基準を満たすとの決定に従って、処理ユニットは、複数のアバターの整列表示を可能にする。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージセッションにおいてメニューを選択的にアクティブ化するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージセッションにおいてメニューを選択的にアクティブ化するための従来の方法を補完するか又は置き換えることができる。
メッセージ中の単語又はフレーズに関する追加コンテンツにアクセスする選択可能なリンクを提供するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージ中の単語又はフレーズに関する追加コンテンツにアクセスする選択可能なリンクを提供するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスにおいて行われる。デバイスは、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイに表示し、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアとを含む。メッセージユーザインタフェースを表示している間に、デバイスは、メッセージセッションに含まれる別のユーザに対応する電子デバイスからメッセージセッション内で第1のメッセージを受信する。第1のメッセージを受信したことに応じて、デバイスは、ディスプレイ上の会話記録の第1のメッセージ領域内に第1のメッセージを表示する。デバイスは、インターネット上で入手可能な追加コンテンツと関連する単語又はフレーズを第1のメッセージにおいて検出し、インターネット上で入手可能な追加コンテンツと関連する単語又はフレーズを第1のメッセージにおいて検出したことに応じて、デバイスは、単語又はフレーズと関連する追加コンテンツが入手可能であるとの選択可能なインジケーションを第1のメッセージ領域に近接して表示する。
一部の実施形態では、ユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットと結合された処理ユニットとを含む電子デバイスが存在する。処理ユニットは、メッセージアプリケーションのメッセージユーザインタフェースの表示をディスプレイユニット上で可能にし、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアとを含む。メッセージユーザインタフェースを表示している間に、処理ユニットは、メッセージセッションに含まれる別のユーザに対応する電子デバイスからメッセージセッション内で第1のメッセージを受信する。第1のメッセージを受信したことに応じて、処理ユニットは、ディスプレイユニット上の会話記録の第1のメッセージ領域内で第1のメッセージの表示を可能にする。処理ユニットは、インターネット上で入手可能な追加コンテンツと関連する単語又はフレーズを第1のメッセージにおいて検出する。インターネット上で入手可能な追加コンテンツと関連する単語又はフレーズを第1のメッセージにおいて検出したことに応じて、処理ユニットは、単語又はフレーズと関連する追加コンテンツが入手可能であるとの選択可能なインジケーションの表示を第1のメッセージ領域に近接して可能にする。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージ中の単語又はフレーズに関する追加コンテンツにアクセスする選択可能なリンクを提供するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージ中の単語又はフレーズに関する追加コンテンツにアクセスする選択可能なリンクを提供するための従来の方法を補完するか又は置き換えることができる。
メッセージユーザインタフェースにおいてアプリケーション間をナビゲートするための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージユーザインタフェースにおいてアプリケーション間をナビゲートするための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて行われる。方法は、メッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアと、アプリケーションエリアと、アプリケーションエリア表示アフォーダンスとを含む、ことと、メッセージユーザインタフェースを表示している間に、アプリケーションエリア表示アフォーダンスをアクティブ化する第1の入力を検出することと、アプリケーションエリア表示アフォーダンスをアクティブ化する第1の入力を検出したことに応じて、第1の入力が検出される時にアプリケーションエリアがキーボードを表示しているとの決定に従って、アプリケーションエリアのキーボードの表示を、スクロール可能な複数のアプリケーション選択アフォーダンスを表示するアプリケーション選択エリアであって、現在選択されている第1のアプリケーションに対応する第1のアプリケーション選択アフォーダンスを含み、それぞれのアプリケーション選択アフォーダンスが、それぞれの第1のサイズを有する、スクロール可能な複数のアプリケーション選択アフォーダンスと、第1のアプリケーションのアクティブ化可能な1つ以上のオブジェクトを表示するアプリケーション入力エリアとの同時表示に置き換えることと、アプリケーション選択エリアとアプリケーション入力エリアを同時に表示している間に、ディスプレイ上のアプリケーション選択エリアにおける第1の方向へのフォーカスセレクタの移動に対応する、タッチ感知面上の接触の移動を含む第2の入力を検出することと、第2の入力を検出したことに応じて、複数のアプリケーション選択アフォーダンスを第1の方向にスクロールすること、及び第2のアプリケーション選択アフォーダンスを表示することと、第2のアプリケーション選択アフォーダンスと第1のアプリケーションのアクティブ化可能な1つ以上のオブジェクトとをメッセージユーザインタフェースに表示している間に、第2のアプリケーション選択アフォーダンスをアクティブ化する第3の入力を検出することと、第2のアプリケーション選択アフォーダンスをアクティブ化する第3の入力を検出したことに応じて、第1のアプリケーションのアクティブ化可能な1つ以上のオブジェクトの表示を停止すること、及び第2のアプリケーション選択アフォーダンスに対応する第2のアプリケーションのアクティブ化可能な1つ以上のオブジェクトをアプリケーション入力エリアに表示することとを含む。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージユーザインタフェースにおいてアプリケーション間をナビゲートするための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージユーザインタフェースにおいてアプリケーション間をナビゲートするための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーション内で使用されるアプリケーションを管理するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージアプリケーション内で使用されるアプリケーションを管理するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、ディスプレイ及びタッチ感知面を有するデバイスにおいて行われる。方法は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアと、アプリケーションエリアであって、第1のアプリケーションのアクティブ化可能な1つ以上のオブジェクトを表示するアプリケーション入力エリアと、メッセージユーザインタフェース内で動作する複数のアプリケーションに対応するスクロール可能な複数のアプリケーション選択アフォーダンスを含むアプリケーション選択エリアとを含むアプリケーションエリアと、第1のアプリケーション設定アフォーダンスとを含む、ことと、アプリケーション設定アフォーダンスをアプリケーション選択エリアに表示している間に、第1のアプリケーション設定アフォーダンスをアクティブ化する第1の入力を検出することと、第1の入力を検出したことに応じて、メッセージアプリケーション用の第1のアプリケーション管理インタフェースを表示することであって、第1のアプリケーション管理インタフェースは、メッセージアプリケーションのメッセージユーザインタフェース内で動作する複数のアプリケーションに対応する複数のインストール済みアプリケーションアフォーダンスと、第1のアプリケーション設定アフォーダンスとは区別される第2のアプリケーション設定アフォーダンスとを含む、ことと、第1のアプリケーション管理インタフェースを表示している間に、複数のインストール済みアプリケーションアフォーダンスのうちの第1のインストール済みアプリケーションアフォーダンスに対応する場所で第2の入力を検出することであって、第1のインストール済みアプリケーションアフォーダンスは、電子デバイス上の第1のインストール済みアプリケーションに対応する、ことと、第2の入力を検出したことに応じて、モバイルデバイス上の第1のインストール済みアプリケーションの少なくとも1つのコンポーネントをアンインストールする処理を開始することと、第1のアプリケーション管理インタフェースを表示している間に、第2のアプリケーション設定アフォーダンスに対応する場所で第3の入力を検出することと、第3の入力を検出したことに応じて、メッセージアプリケーション用の第2のアプリケーション管理インタフェースを表示することであって、第2のアプリケーション管理インタフェースは、メッセージアプリケーションのメッセージユーザインタフェース内で動作する複数のアプリケーションに対応する複数のトグルを含み、それぞれのトグルのアクティブ化によって、対応するアプリケーションがメッセージアプリケーションのメッセージユーザインタフェースにおいて非表示状態と顕示化状態との間でトグルする、こととを含む。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージアプリケーション内で使用されるアプリケーションを管理するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーション内で使用されるアプリケーションを管理するための従来の方法を補完するか又は置き換えることができる。
メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための方法及びインタフェースが改良された電子デバイスが必要とされている。かかる方法及びインタフェースは、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための従来の方法を補完するか又は置き換えることができる。かかる方法及びインタフェースは、ユーザからの入力の回数、範囲及び/又は種類を抑制し、より効率的なヒューマン-マシンインタフェースを作り出す。
一部の実施形態によれば、方法が、ディスプレイ及び1つ以上の入力デバイスを有するデバイスにおいて行われる。方法は、メッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含む、ことと、メッセージセッションに含まれる別のユーザに対応する電子デバイスからメッセージセッション内で第1のメッセージを受信することであって、第1のメッセージは外国語テキストを含む、ことと、第1のメッセージを受信したことに応じて、第1のメッセージを会話記録に表示することと、第1のメッセージの外国語テキストに対応する第1の場所で第1の入力を検出することと、外国語テキストに対応する第1の場所で第1の入力を検出したことに応じて、第1の入力が翻訳基準を満たすとの決定に従って、外国語テキストの翻訳を表示すること、及び第1の入力がオプション表示基準を満たすとの決定に従って、アクティブ化可能な複数の指標を表示することとを含む。
一部の実施形態によれば、方法が、ディスプレイ及び1つ以上の入力デバイスを有するデバイスにおいて行われる。方法は、メッセージユーザインタフェースをディスプレイに表示することであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含む、ことと、メッセージセッションに含まれる別のユーザに対応する電子デバイスからメッセージセッション内で第1のメッセージを受信することであって、第1のメッセージは外国語テキストを含む、ことと、第1のメッセージを受信したことに応じて、第1のメッセージを会話記録に表示することと、第1のメッセージの外国語テキストに対応する場所で第1の入力を検出することと、外国語テキストに対応する場所で第1の入力を検出したことに応じて、第1の入力が翻訳基準を満たすとの決定に従って、外国語テキスト翻訳動作を実行すること、及び第1の入力が翻訳基準を満たさないとの決定に従って、外国語テキスト翻訳動作を実行することを差し控えることとを含む。
このように、ディスプレイ及びタッチ感知面を有する電子デバイスには、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための改良された方法及びインタフェースが提供され、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための従来の方法を補完するか又は置き換えることができる。
一部の実施形態によれば、電子デバイスが、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する任意選択的な1つ以上のセンサと、1つ以上のプロセッサと、メモリと、1つ以上のプログラムとを含み、1つ以上のプログラムは、1つ以上のプロセッサにより実行されるように構成されてメモリに記憶されており、1つ以上のプログラムは、本明細書で説明する方法のうちのいずれかを行うか又は同方法のいずれかの動作の実施をもたらす命令を含む。一部の実施形態によれば、コンピュータ可読記憶媒体が、内部に記憶された命令を有し、命令は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する任意選択的な1つ以上のセンサとを有する電子デバイスにより実行されると、デバイスに、本明細書で説明する方法のうちのいずれかを実行させるか又は同方法のいずれかの動作の実施をもたらす。一部の実施形態によれば、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する任意選択的な1つ以上のセンサと、メモリと、メモリに記憶された1つ以上のプログラムを実行する1つ以上のプロセッサとを有する電子デバイスのグラフィカルユーザインタフェースは、本明細書で説明する方法のうちのいずれかにおいて表示される要素のうちの1つ以上を含み、同要素は、本明細書で説明する方法のうちのいずれかにおいて説明したような入力に応じて更新される。一部の実施形態によれば、電子デバイスが、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する任意選択的な1つ以上のセンサと、本明細書で説明する方法のうちのいずれかを行うか又は同方法のうちのいずれかの動作の実施をもたらす手段とを含む。一部の実施形態によれば、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する任意選択的な1つ以上のセンサとを有する電子デバイスに使用する情報処理装置が、本明細書で説明する方法のうちのいずれかを行うか又は同方法のうちのいずれかの動作の実施をもたらす手段を含む。
このように、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する任意選択的な1つ以上のセンサとを有する電子デバイスでは、メッセージングのための方法及びインタフェースがより高速かつより効率的となり、それにより、かかるデバイスによる有効性、効率、及びユーザ満足度が高まる。かかる方法及びインタフェースは、メッセージングのための従来の方法を補完するか又は置き換えることができる。
説明される様々な実施形態のより良好な理解のために、以下の図面と共に、以下の「実施形態の説明」を参照されたく、類似の参照番号は、それらの図の全体を通じて対応する部分を指す。
一部の実施形態に係る、タッチ感知ディスプレイを備えたポータブル多機能デバイスを示すブロック図である。
一部の実施形態に係る、イベント処理のための例示的な構成要素を示すブロック図である。
一部の実施形態に係る、タッチスクリーンを備えたポータブル多機能デバイスを示す。
一部の実施形態に係る、ディスプレイ及びタッチ感知面を備えた例示的な多機能デバイスのブロック図である。
一部の実施形態に係る、ポータブル多機能デバイス上のアプリケーションのメニューのための例示的なユーザインタフェースを示す。
一部の実施形態に係る、ディスプレイとは別個のタッチ感知面を備えた多機能デバイスのための例示的なユーザインタフェースを示す。
一部の実施形態に係る、動的強度閾値の例を示す。 一部の実施形態に係る、動的強度閾値の例を示す。 一部の実施形態に係る、動的強度閾値の例を示す。
メッセージ記録及びメッセージ確認応答を表示するための例示的なユーザインタフェースを示す。 メッセージ記録及びメッセージ確認応答を表示するための例示的なユーザインタフェースを示す。 メッセージ記録及びメッセージ確認応答を表示するための例示的なユーザインタフェースを示す。 メッセージ記録及びメッセージ確認応答を表示するための例示的なユーザインタフェースを示す。 メッセージ記録及びメッセージ確認応答を表示するための例示的なユーザインタフェースを示す。 メッセージ記録及びメッセージ確認応答を表示するための例示的なユーザインタフェースを示す。 メッセージ記録及びメッセージ確認応答を表示するための例示的なユーザインタフェースを示す。 メッセージ記録及びメッセージ確認応答を表示するための例示的なユーザインタフェースを示す。 メッセージ記録及びメッセージ確認応答を表示するための例示的なユーザインタフェースを示す。 メッセージ記録及びメッセージ確認応答を表示するための例示的なユーザインタフェースを示す。 メッセージ記録及びメッセージ確認応答を表示するための例示的なユーザインタフェースを示す。
メッセージ記録を表示する間に、以前に送信されたメッセージを編集するための例示的なユーザインタフェースを示す。 メッセージ記録を表示する間に、以前に送信されたメッセージを編集するための例示的なユーザインタフェースを示す。 メッセージ記録を表示する間に、以前に送信されたメッセージを編集するための例示的なユーザインタフェースを示す。 メッセージ記録を表示する間に、以前に送信されたメッセージを編集するための例示的なユーザインタフェースを示す。 メッセージ記録を表示する間に、以前に送信されたメッセージを編集するための例示的なユーザインタフェースを示す。 メッセージ記録を表示する間に、以前に送信されたメッセージを編集するための例示的なユーザインタフェースを示す。 メッセージ記録を表示する間に、以前に送信されたメッセージを編集するための例示的なユーザインタフェースを示す。 メッセージ記録を表示する間に、以前に送信されたメッセージを編集するための例示的なユーザインタフェースを示す。 メッセージ記録を表示する間に、以前に送信されたメッセージを編集するための例示的なユーザインタフェースを示す。
インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。 インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。
秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。 秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。
メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。 メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。
個別のメッセージ同士で組合せ可能なコンテンツを検出し応答するための例示的なユーザインタフェースを示す。 個別のメッセージ同士で組合せ可能なコンテンツを検出し応答するための例示的なユーザインタフェースを示す。 個別のメッセージ同士で組合せ可能なコンテンツを検出し応答するための例示的なユーザインタフェースを示す。 個別のメッセージ同士で組合せ可能なコンテンツを検出し応答するための例示的なユーザインタフェースを示す。 個別のメッセージ同士で組合せ可能なコンテンツを検出し応答するための例示的なユーザインタフェースを示す。 個別のメッセージ同士で組合せ可能なコンテンツを検出し応答するための例示的なユーザインタフェースを示す。
メッセージ領域のタイプ又は形状を選択するための例示的なユーザインタフェースを示す。 メッセージ領域のタイプ又は形状を選択するための例示的なユーザインタフェースを示す。 メッセージ領域のタイプ又は形状を選択するための例示的なユーザインタフェースを示す。 メッセージ領域のタイプ又は形状を選択するための例示的なユーザインタフェースを示す。 メッセージ領域のタイプ又は形状を選択するための例示的なユーザインタフェースを示す。 メッセージ領域のタイプ又は形状を選択するための例示的なユーザインタフェースを示す。

メッセージを作成する間に、自動提案された絵文字を表示して選択するための例示的なユーザインタフェースを示す。 メッセージを作成する間に、自動提案された絵文字を表示して選択するための例示的なユーザインタフェースを示す。 メッセージを作成する間に、自動提案された絵文字を表示して選択するための例示的なユーザインタフェースを示す。 メッセージを作成する間に、自動提案された絵文字を表示して選択するための例示的なユーザインタフェースを示す。 メッセージを作成する間に、自動提案された絵文字を表示して選択するための例示的なユーザインタフェースを示す。 メッセージを作成する間に、自動提案された絵文字を表示して選択するための例示的なユーザインタフェースを示す。 メッセージを作成する間に、自動提案された絵文字を表示して選択するための例示的なユーザインタフェースを示す。 メッセージを作成する間に、自動提案された絵文字を表示して選択するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、会話記録のメッセージ領域に確認応答を適用するためのプロセスのフロー図である。 一部の実施形態に係る、会話記録のメッセージ領域に確認応答を適用するためのプロセスのフロー図である。 一部の実施形態に係る、会話記録のメッセージ領域に確認応答を適用するためのプロセスのフロー図である。 一部の実施形態に係る、会話記録のメッセージ領域に確認応答を適用するためのプロセスのフロー図である。 一部の実施形態に係る、会話記録のメッセージ領域に確認応答を適用するためのプロセスのフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージセッションにおいて以前に送信されたメッセージを編集するためのプロセスのフロー図である。 一部の実施形態に係る、メッセージセッションにおいて以前に送信されたメッセージを編集するためのプロセスのフロー図である。 一部の実施形態に係る、メッセージセッションにおいて以前に送信されたメッセージを編集するためのプロセスのフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージセッションにおいて以前に送信されたメッセージを編集するためのプロセスのフロー図である。 一部の実施形態に係る、メッセージセッションにおいて以前に送信されたメッセージを編集するためのプロセスのフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、インパクト効果オプションをメッセージ入力に適用するためのプロセスのフロー図である。 一部の実施形態に係る、インパクト効果オプションをメッセージ入力に適用するためのプロセスのフロー図である。 一部の実施形態に係る、インパクト効果オプションをメッセージ入力に適用するためのプロセスのフロー図である。 一部の実施形態に係る、インパクト効果オプションをメッセージ入力に適用するためのプロセスのフロー図である。 一部の実施形態に係る、インパクト効果オプションをメッセージ入力に適用するためのプロセスのフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、秘密メッセージと相互作用するためのプロセスのフロー図である。 一部の実施形態に係る、秘密メッセージと相互作用するためのプロセスのフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージが拡張メッセージコンテンツトリガーを含む場合に、メッセージユーザインタフェースに効果を適用するためのプロセスのフロー図である。 一部の実施形態に係る、メッセージが拡張メッセージコンテンツトリガーを含む場合に、メッセージユーザインタフェースに効果を適用するためのプロセスのフロー図である。 一部の実施形態に係る、メッセージが拡張メッセージコンテンツトリガーを含む場合に、メッセージユーザインタフェースに効果を適用するためのプロセスのフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージユーザインタフェースにおいて組合せ可能なコンテンツを検出し、組合せ可能なコンテンツを検出した場合に予め定義された組合せに対応するコンテンツを表示するためのプロセスのフロー図である。 一部の実施形態に係る、メッセージユーザインタフェースにおいて組合せ可能なコンテンツを検出し、組合せ可能なコンテンツを検出した場合に予め定義された組合せに対応するコンテンツを表示するためのプロセスのフロー図である。 一部の実施形態に係る、メッセージユーザインタフェースにおいて組合せ可能なコンテンツを検出し、組合せ可能なコンテンツを検出した場合に予め定義された組合せに対応するコンテンツを表示するためのプロセスのフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、同期したメディアコンテンツ(例えば、聴覚コンテンツ及び/又はビデオコンテンツ)をメッセージアプリケーションにおいて提示するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、メッセージアプリケーションにおいて同期したメディアコンテンツを提示する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて同期したメディアコンテンツを提示する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて同期したメディアコンテンツを提示する方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示する方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示する方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供し提示する方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションにおいて異なるタイプのコンテンツを迅速に見出すための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて異なるタイプのコンテンツを迅速に見出すための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて異なるタイプのコンテンツを迅速に見出すための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて異なるタイプのコンテンツを迅速に見出すための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて異なるタイプのコンテンツを迅速に見出すための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて異なるタイプのコンテンツを迅速に見出すための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて異なるタイプのコンテンツを迅速に見出すための例示的なユーザインタフェースを示す。
一部の実施形態に係る、メッセージアプリケーションにおいて異なるタイプのコンテンツを迅速に見出す方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて異なるタイプのコンテンツを迅速に見出す方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションにおいて異なるタイプのコンテンツを迅速に見出す方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて異なるタイプのコンテンツを迅速に見出す方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、デジタルカメラをメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて、検索機能を統合しリッチコンテンツを投稿するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてアプリケーションを統合するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカを統合するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、アバターを通じてメッセージ記録の他のユーザと対話するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、データ検出部をメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、データ検出部をメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、データ検出部をメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、データ検出部をメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、データ検出部をメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、データ検出部をメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、データ検出部をメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、データ検出部をメッセージアプリケーション内に統合するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、デジタル画像をメッセージアプリケーション内で取り込んで投稿する方法を示すフロー図である。 一部の実施形態に係る、デジタル画像をメッセージアプリケーション内で取り込んで投稿する方法を示すフロー図である。 一部の実施形態に係る、デジタル画像をメッセージアプリケーション内で取り込んで投稿する方法を示すフロー図である。 一部の実施形態に係る、デジタル画像をメッセージアプリケーション内で取り込んで投稿する方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、マルチメディアコンテンツをメッセージアプリケーション内で検索し共有する方法を示すフロー図である。 一部の実施形態に係る、マルチメディアコンテンツをメッセージアプリケーション内で検索し共有する方法を示すフロー図である。 一部の実施形態に係る、マルチメディアコンテンツをメッセージアプリケーション内で検索し共有する方法を示すフロー図である。 一部の実施形態に係る、マルチメディアコンテンツをメッセージアプリケーション内で検索し共有する方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、対話型アプリケーションをメッセージアプリケーションに追加する方法4600を示すフロー図である。 一部の実施形態に係る、対話型アプリケーションをメッセージアプリケーションに追加する方法4600を示すフロー図である。 一部の実施形態に係る、対話型アプリケーションをメッセージアプリケーションに追加する方法4600を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションのユーザインタフェース以外のユーザインタフェースからメッセージセッションへ、メッセージを投稿する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションのユーザインタフェース以外のユーザインタフェースからメッセージセッションへ、メッセージを投稿する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションのユーザインタフェース以外のユーザインタフェースからメッセージセッションへ、メッセージを投稿する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションのユーザインタフェース以外のユーザインタフェースからメッセージセッションへ、メッセージを投稿する方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションの使用を可能にする方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、関連したアプリケーションを有するメッセージアプリケーション内をナビゲートする方法を示すフロー図である。 一部の実施形態に係る、関連したアプリケーションを有するメッセージアプリケーション内をナビゲートする方法を示すフロー図である。 一部の実施形態に係る、関連したアプリケーションを有するメッセージアプリケーション内をナビゲートする方法を示すフロー図である。 一部の実施形態に係る、関連したアプリケーションを有するメッセージアプリケーション内をナビゲートする方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージ記録にステッカを追加する方法を示すフロー図である。 一部の実施形態に係る、メッセージ記録にステッカを追加する方法を示すフロー図である。 一部の実施形態に係る、メッセージ記録にステッカを追加する方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカの表示を変更する方法6400を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカの表示を変更する方法6400を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカの表示を変更する方法6400を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージアプリケーションから支払いを行う方法を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、グループメッセージセッションに含まれる単一のユーザと対話する方法6800を示すフロー図である。 一部の実施形態に係る、グループメッセージセッションに含まれる単一のユーザと対話する方法6800を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージセッションにおいて追加情報を表示する方法7000を示すフロー図である。 一部の実施形態に係る、メッセージセッションにおいて追加情報を表示する方法7000を示すフロー図である。
一部の実施形態に係る、電子デバイスの機能ブロック図である。
一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージユーザインタフェースに表示されたアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートするための例示的なユーザインタフェースを示す。
一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。
一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。 一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。
一部の実施形態に係る、メッセージユーザインタフェースに表示されるアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートする方法を示すフロー図である。 一部の実施形態に係る、メッセージユーザインタフェースに表示されるアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートする方法を示すフロー図である。 一部の実施形態に係る、メッセージユーザインタフェースに表示されるアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートする方法を示すフロー図である。 一部の実施形態に係る、メッセージユーザインタフェースに表示されるアプリケーションユーザインタフェースを使用して、アプリケーション間をナビゲートする方法を示すフロー図である。
一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための方法を示すフロー図である。
一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための方法を示すフロー図である。
一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための方法を示すフロー図である。 一部の実施形態に係る、メッセージアプリケーションにおいてメッセージコンテンツを翻訳するための方法を示すフロー図である。
ここで説明する方法、デバイス、及びGUIは、複数の方法でメッセージングを改善する。例えば、それらにより、以下を簡単にすることができる。すなわち、メッセージに確認応答する、以前に送信されたメッセージを編集する、ユーザが通信しようとしていることを表現する、プライベートメッセージを表示する、ユーザ間のコンテンツの視聴を同期させる、手書き入力を組み込む、メッセージ記録にコンテンツを迅速に見出す、カメラを統合する、検索と共有を統合する、対話型アプリケーションを統合する、ステッカを統合する、支払いをする、アバターと相互作用する、提案をする、対話型アプリケーション間をナビゲートする、対話型アプリケーションを管理する、外国語のテキストを翻訳する、メッセージをグループに結合する、及びメッセージにフラグを立てる、こと。
デバイスの例
ここで、添付図面に実施例が示される実施形態を、詳細に参照する。以下の詳細な説明では、説明されているさまざまな実施形態の完全な理解を提供するために、数多くの具体的な詳細が記載されている。しかしながら、説明されているさまざまな実施形態は、これらの具体的な詳細を伴わずとも実施し得ることが、当業者には明らかであろう。他の例においては、周知の、方法、手続き、構成要素、回路、及びネットワークは、実施形態の態様を不必要に不明瞭なものとしないよう、詳細には説明されていない。
本明細書では、第1、第2などの用語は、一部の実施例で、さまざまな要素を説明するために使用されるが、これらの要素は、それらの用語によって限定されるべきではないことも理解されるであろう。これらの用語は、ある要素を別の要素と区別するためにのみ使用される。例えば、説明されているさまざまな実施形態の範囲から逸脱することなく、第1の接触は、第2の接触と称することができ、同様に、第2の接触は、第1の接触と称し得る。第1の接触及び第2の接触は両方接触であるが、文脈がそうではないことを明確に示さない限り、それらは同じ接触ではない。
本明細書で説明される様々な実施形態の説明で使用される用語法は、特定の実施形態を説明することのみを目的とするものであって、限定することを意図するものではない。説明される様々な実施形態の説明及び添付の特許請求の範囲で使用される時、単数形「a」、「an」、及び「the」は、文脈がそうではないことを明確に示さない限り、複数形もまた含むことが意図される。本明細書で使用される時に、用語「及び/又は」が、関連する列挙された項目のうちの1つ以上の全ての可能な任意の組合せを指し、かつこれを含むことをもまた理解されたい。用語「includes(含む)、「including(含む)」、「comprises(含む、備える)」及び/又は「comprising(含む、備える)」は、本明細書で使用される時、述べられた特徴、整数、ステップ、動作、要素、及び/又は構成要素の存在を指定するが、1つ以上の他の特徴、整数、ステップ、動作、要素、構成要素、及び/又はそれらの群、の存在又は追加を除外しないことが更に理解されるであろう。
本明細書で使用される時、用語「if(~の場合には)」は、任意選択的に、文脈に応じて「when(~のとき)」、「upon(~すると)」、「in response to determining(~という判定に応じて)」、又は「in response to detecting(~の検出に応じて)」を意味するものと解釈される。同様に、フレーズ「if it is determined(~と判定される場合には)」又は「if(a stated condition or event)is detected((記述される条件又はイベント)が検出される場合には)」は、任意選択的に、文脈に応じて「upon determining(~と判定されると)」、又は「in response to determining(~との判定に応じて)」、又は「upon detecting(the stated condition or event)((記述される条件又はイベント)が検出されると)」、又は「in response to detecting(the stated condition or event)((記述される条件又はイベント)の検出に応じて)」を意味するものと解釈される。
電子デバイス、このようなデバイス用のユーザインタフェース、及びこのようなデバイスを使用するための関連処理、の実施形態を説明する。一部の実施形態では、本デバイスは、PDA機能及び/又は音楽再生機能などの、他の機能も含む、モバイル電話機などのポータブル通信デバイスである。ポータブル多機能デバイスの例示的な実施形態としては、限定するものではないが、California州CupertinoのApple Inc.のiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)デバイスが挙げられる。タッチ感知面(例えば、タッチスクリーンディスプレイ及び/又はタッチパッド)を備えたラップトップ又はタブレットコンピュータなどの他のポータブル電子デバイスも、任意選択的に、使用される。また、一部の実施形態では、本デバイスはポータブル通信デバイスではなく、タッチ感知面(例えば、タッチスクリーンディスプレイ及び/又はタッチパッド)を備えるデスクトップコンピュータであることを理解されたい。
以下の説明では、ディスプレイ及びタッチ感知面を備える電子デバイスについて説明する。しかし、この電子デバイスは、物理キーボード、マウス、及び/又はジョイスティックなどの1つ以上の他の物理ユーザインタフェースデバイスを任意選択的に含むことを理解されたい。
メッセージアプリケーションに加えて、本デバイスは、典型的に、筆記アプリケーション、描画アプリケーション、プレゼンテーションアプリケーション、ワードプロセッシングアプリケーション、ウェブサイト作成アプリケーション、ディスクオーサリングアプリケーション、スプレッドシートアプリケーション、ゲームアプリケーション、電話アプリケーション、テレビ会議アプリケーション、電子メールアプリケーション、トレーニングサポートアプリケーション、写真管理アプリケーション、デジタルカメラアプリケーション、デジタルビデオカメラアプリケーション、ウェブブラウジングアプリケーション、デジタル音楽再生アプリケーション及び/又はデジタルビデオ再生アプリケーションのうちの1つ以上などの様々なアプリケーションをサポートする。
このデバイス上で実行される様々なアプリケーションは、タッチ感知面などの、少なくとも1つの共通の物理ユーザインタフェースデバイスを、任意選択的に使用する。タッチ感知面の1つ以上の機能、並びにデバイス上に表示される対応する情報は、アプリケーションごとに、及び/又は対応するアプリケーション内で、任意選択的に、調節及び/又は変更される。このように、デバイスの共通の(タッチ感知面などの)物理アーキテクチャは、ユーザにとって直観的かつ透過的なユーザインタフェースを有する様々なアプリケーションを、任意選択的にサポートする。
ここで、タッチ感知ディスプレイを備えるポータブルデバイスの実施形態に注意を向ける。図1Aは、一部の実施形態に係る、タッチ感知ディスプレイシステム112を備えたポータブル多機能デバイス100を示すブロック図である。タッチ感知ディスプレイシステム112は、便宜上「タッチスクリーン」と呼ばれる場合があり、単にタッチ感知ディスプレイと呼ばれる場合もある。デバイス100は、メモリ102(任意選択的に、1つ以上のコンピュータ可読記憶媒体を含む)、メモリコントローラ122、1つ以上の処理ユニット(CPU)120、周辺機器インタフェース118、RF回路108、音声回路110、スピーカ111、マイクロフォン113、入出力(I/O)サブシステム106、その他の入力又は制御デバイス116、及び外部ポート124を含む。デバイス100は、1つ以上の光センサ164を任意選択的に含む。デバイス100は、デバイス100(例えば、デバイス100のタッチ感知ディスプレイシステム112などのタッチ感知面)上の接触の強度を検出するための、1つ以上の強度センサ165を任意選択的に含む。デバイス100は、デバイス100上に触知出力を生成する(例えば、デバイス100のタッチ感知ディスプレイシステム112又はデバイス300のタッチパッド355などの、タッチ感知面上に触知出力を生成する)ための1つ以上の触知出力生成部167を、任意選択的に含む。これらの構成要素は、1つ以上の通信バス又は信号ライン103を介して任意選択的に通信する。
本明細書及び特許請求の範囲で使用される時、用語「触知出力」は、ユーザの触覚でユーザによって検出されることになる、デバイスの従前の位置に対するデバイスの物理的変位、デバイスの構成要素(例えば、タッチ感知面)の、デバイスの別の構成要素(例えば、筐体)に対する物理的変位、又はデバイスの質量中心に対する構成要素の変位を指す。例えば、デバイス又はデバイスの構成要素が、タッチに敏感なユーザの表面(例えば、ユーザの手の指、手のひら、又は他の部分)に接触している状況において、物理的変位によって生成された触知出力は、デバイス又はデバイスの構成要素の物理的特性の認識された変化に相当する触感として、ユーザによって解釈される。例えば、タッチ感知面(例えば、タッチ感知ディスプレイ又はトラックパッド)の移動は、ユーザによって、物理アクチュエータボタンの「ダウンクリック」又は「アップクリック」として任意選択的に解釈される。一部の場合では、ユーザの移動により物理的に押された(例えば、変位された)タッチ感知面に関連付けられた物理アクチュエータボタンの移動がない時でさえ、ユーザは「ダウンクリック」又は「アップクリック」などの触感を感じるであろう。別の実施例として、タッチ感知面の動作は、タッチ感知面の平滑度に変化がない場合であっても、ユーザによって、そのタッチ感知面の「粗さ」として、任意選択的に解釈又は感知される。そのようなユーザによるタッチの解釈は、ユーザの個人的な感覚認知に左右されるものではあるが、大多数のユーザに共通する、多くのタッチの感覚認知が存在する。したがって、触知出力が、ユーザの特定の感覚認知(例えば、「アップクリック」「ダウンクリック」、「粗さ」)に対応するものと記述される場合、別途記載のない限り、生成された触知出力は、典型的な(又は、平均的な)ユーザの記述された感覚認知を生成するデバイス、又はデバイスの構成要素の物理的変位に対応する。触知出力を使用してユーザに触覚フィードバックを提供することは、デバイスの操作性を向上させ、ユーザとデバイスのインタフェースをより効率的にし(例えば、デバイスを操作/デバイスと相互作用する際に、ユーザが適切な入力を提供することを支援し、ユーザの誤操作を低減することによって)、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を低減しデバイスのバッテリ寿命を改善する。
デバイス100は、ポータブル多機能デバイスの一実施例に過ぎず、デバイス100は、示されているものよりも多くの構成要素又は少ない構成要素を任意選択的に有し、2つ以上の構成要素を任意選択的に組合せるか、又は、それらの構成要素の異なる構成若しくは配置を任意選択的に有することを理解されたい。図1Aに示す様々な構成要素は、1つ以上の信号処理回路及び/又は特定用途向け集積回路を含む、ハードウェア、ソフトウェア、ファームウェア、又はそれらの組合せで実装される。
メモリ102は任意選択的に高速ランダムアクセスメモリを含み、また任意選択的に、1つ以上の磁気ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステートメモリデバイスなどの、不揮発性メモリも含む。CPU(単数又は複数)120及び周辺機器インタフェース118などの、デバイス100の他の構成要素によるメモリ102へのアクセスは、メモリコントローラ122により任意選択的に制御される。
周辺機器インタフェース118を使用して、デバイスの入力及び出力周辺機器を、CPU(単数又は複数)120及びメモリ102に結合することができる。1つ以上のプロセッサ120は、デバイス100のための様々な機能を実行するため並びにデータ処理を実行するために、メモリ102に記憶された様々なソフトウェアプログラム及び/若しくは命令セットを動作させたり、又は実行したりする。
一部の実施形態では、周辺機器インタフェース118、CPU(単数又は複数)120、及びメモリコントローラ122は、任意選択的に、チップ104などの単一チップ上に実装される。一部の他の実施形態では、それらは、任意選択的に、個別のチップ上に実装される。
RF(無線周波数)回路108は、電磁信号とも呼ばれるRF信号を送受信する。RF回路108は、電気信号を電磁信号に、又は電磁信号を電気信号に変換し、電磁信号を介して通信ネットワーク及び他の通信デバイスと通信する。RF回路108は、アンテナシステム、RF送受信機、1つ以上の増幅器、同調器、1つ以上の発振器、デジタル信号プロセッサ、CODECチップセット、加入者識別モジュール(SIM)カード、メモリなどを含むがこれらに限定されない、これらの機能を実行するための周知の回路を、任意選択的に含んでいる。RF回路108は、ワールドワイドウェブ(WWW)とも呼ばれるインターネット、イントラネット、及び/又は、セルラ電話ネットワーク、無線ローカルエリアネットワーク(LAN)などの無線ネットワーク、及び/又は、メトロポリタンエリアネットワーク(MAN)、などのネットワーク、及び他のデバイス、と無線通信によって、任意選択的に通信する。無線通信は、移動通信用グローバルシステム(GSM)、エンハンストデータGSM環境(EDGE)、高速ダウンリンクパケットアクセス(HSDPA)、高速アップリンクパケットアクセス(HSUPA)、Evolution Data-Only(EV-DO)、HSPA、HSPA+、Dual-Cell HSPA(DC-HSPDA)、long term evolution(LTE)、近距離無線通信(NFC)、広帯域符号分割多元接続(W-CDMA)、符号分割多元接続(CDMA)、時分割多元接続(TDMA)、Bluetooth、Wireless Fidelity(Wi-Fi)(例えば、IEEE 802.11a、IEEE 802.11ac、IEEE 802.11ax、IEEE 802.11b、IEEE 802.11g、及び/又はIEEE 802.11n)、ボイスオーバーインターネットプロトコル(VoIP)、Wi-MAX、電子メール用のプロトコル(例えば、インターネットメッセージアクセスプロトコル(IMAP)及び/又はポストオフィスプロトコル(POP))、インスタントメッセージング(例えば、extensible messaging and presence protocol(XMPP)、Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions(SIMPLE)、Instant Messaging and Presence Service(IMPS))、及び/又はショートメッセージサービス(SMS)、又は本願の出願日の時点でまだ開発されていない通信プロトコルを含む任意の他の好適な通信プロトコルを含むがこれらに限定されない複数の通信規格、プロトコル、及び技術のうちのいずれかを、任意選択的に、使用する。
音声回路110、スピーカ111、及びマイクロフォン113は、ユーザとデバイス100との間の音声インタフェースを提供する。音声回路110は、周辺機器インタフェース118から音声データを受信し、この音声データを電気信号に変換し、この電気信号をスピーカ111に送信する。スピーカ111は、電気信号を人間の可聴音波に変換する。音声回路110はまた、マイクロフォン113により音波から変換された電気信号を受信する。音声回路110は、電気信号を音声データに変換し、この音声データを処理のために周辺機器インタフェース118に送信する。音声データは、周辺機器インタフェース118によって任意選択的に、メモリ102及び/若しくはRF回路108から取り込まれ、かつ/又はメモリ102及び/若しくはRF回路108へ送信される。一部の実施形態では、音声回路110は、更にヘッドセットジャック(例えば、図2の212)を備える。ヘッドセットジャックは、音声回路110と、出力専用ヘッドホン又は出力(例えば、片耳又は両耳用のヘッドホン)及び入力(例えば、マイクロフォン)の両方を有するヘッドセットなどの、取り外し可能な音声入出力周辺機器と、の間のインタフェースを提供する。
I/Oサブシステム106は、タッチ感知ディスプレイシステム112及び他の入力又は制御デバイス116などの、デバイス100上の入出力周辺機器を周辺機器インタフェース118に結合する。I/Oサブシステム106は、任意選択的に、ディスプレイコントローラ156、光センサコントローラ158、強度センサコントローラ159、触覚フィードバックコントローラ161、及び他の入力若しくは制御デバイスのための1つ以上の入力コントローラ160を含む。1つ以上の入力コントローラ160は、他の入力又は制御デバイス116から電気信号を受信し、それらへ電気信号を送信する。他の入力制御デバイス116は、任意選択的に、物理ボタン(例えば、プッシュボタン、ロッカボタンなど)、ダイヤル、スライダスイッチ、ジョイスティック、クリックホイールなどを含む。一部の代替的実施形態では、入力コントローラ(単数又は複数)160は、キーボード、赤外線ポート、USBポート、スタイラス、及び/又はマウスなどのポインタデバイスのうちのいずれかに、任意選択的に結合される(又は、いずれにも結合されない)。1つ以上のボタン(例えば、図2の208)は、スピーカ111及び/又はマイクロフォン113の音量調節のためのアップ/ダウンボタンを、任意選択的に含む。1つ以上のボタンは、プッシュボタン(例えば、図2の206)を、任意選択的に含む。
タッチ感知ディスプレイシステム112は、デバイスとユーザとの間の入力インタフェース及び出力インタフェースを提供する。ディスプレイコントローラ156は、タッチスクリーン112から電気信号を受信し、及び/又はタッチ感知ディスプレイシステム112へ電気信号を送信する。タッチ感知ディスプレイシステム112は、ユーザに視覚出力を表示する。視覚出力は、グラフィック、テキスト、アイコン、ビデオ、及びこれらの任意の組合せ(総称して「グラフィック」と称する)を、任意選択的に含む。一部の実施形態では、視覚出力の一部又は全ては、ユーザインタフェースオブジェクトに対応する。本明細書では、「アフォーダンス」という用語は、ユーザ対話型グラフィカルユーザインタフェースオブジェクト(例えば、グラフィカルユーザインタフェースオブジェクト宛の入力に応答するように構成されたグラフィカルユーザインタフェースオブジェクト)を指す。ユーザ対話型グラフィカルユーザインタフェースオブジェクトの例は、ボタン、スライダ、アイコン、選択可能なメニュー項目、スイッチ、ハイパーリンク、又は他のユーザインタフェース制御を含むが、これらに限定されない。
タッチ感知ディスプレイシステム112は、触覚及び/又は触知の接触に基づくユーザからの入力を受け付けるタッチ感知面、センサ、及び/又はセンサのセットを有する。タッチ感知ディスプレイシステム112及びディスプレイコントローラ156(メモリ102内の任意の関連モジュール及び/又は命令セットとともに)は、タッチ感知ディスプレイシステム112上で接触(及び任意の移動又は接触の中断)を検出し、検出された接触をタッチ感知ディスプレイシステム112上に表示されたユーザインタフェースオブジェクト(例えば、1つ以上のソフトキー、アイコン、ウェブページ、又は画像)との双方向作用に変換する。ある例示的な実施形態では、タッチ感知ディスプレイシステム112とユーザとの間の接触点は、ユーザの指又はスタイラスに対応する。
タッチ感知ディスプレイシステム112は、任意選択的に、LCD(液晶ディスプレイ)技術、LPD(発光ポリマーディスプレイ)技術、又はLED(発光ダイオード)技術を使用するが、他の実施形態では、他のディスプレイ技術が使用される。タッチ感知ディスプレイシステム112及びディスプレイコントローラ156は、静電容量技術、抵抗性技術、赤外線技術、及び表面超音波技術、並びに、タッチ感知ディスプレイシステム112との1つ以上の接触点を判定するための他の近接センサアレイ又は他の要素を含むが、これらに限定されない、現在公知の若しくは後日に開発される複数のタッチ感知技術のうちのいずれかを使用して、接触及び任意の移動又はその中断を、任意選択的に検出する。ある例示的な実施形態では、California州CupertinoのApple Inc.からのiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)などにおいて見られるような、投影された相互キャパシタンス感知技術が使用されている。
タッチ感知ディスプレイシステム112は、100dpiを超えるビデオ解像度を任意選択的に有する。一部の実施形態では、タッチスクリーンのビデオ解像度は、400dpiを超える(例えば、500dpi、800dpi、又はより高い)。ユーザは、スタイラス、指などの任意の好適なオブジェクト又は指標を使用して、タッチ感知ディスプレイシステム112と、任意選択的に接触する。一部の実施形態では、ユーザインタフェースは、指に基づく接触及びジェスチャで機能するように設計され、タッチスクリーン上の指の接触面積が広いことにより、スタイラスに基づく入力よりも精度が低いことがある。一部の実施形態では、デバイスは、指に基づく粗い入力を正確なポインタ/カーソル位置又はユーザの望むアクションを実行するためのコマンドに変換する。
一部の実施形態では、タッチスクリーンに加えて、デバイス100は、特定の機能をアクティブ化又は非アクティブ化させるためのタッチパッド(図示せず)を、任意選択的に含む。一部の実施形態では、タッチパッドは、タッチスクリーンとは異なり、視覚出力を表示しない、デバイスのタッチ感知領域である。タッチパッドは、任意選択的に、タッチ感知ディスプレイシステム112とは別個のタッチ感知面、又はタッチスクリーンによって形成されたタッチ感知面の延長である。
デバイス100はまた、さまざまな構成要素に電力を供給するための電力システム162も含む。電力システム162は、任意選択的に、電力管理システム、1つ以上の電源(例えば、バッテリ、交流(AC))、再充電システム、停電検出回路、電力コンバータ又はインバータ、電力状態インジケータ(例えば、発光ダイオード(LED))、並びにポータブルデバイス内での電力の生成、管理、及び分配に関連付けられた任意の他の構成要素を含む。
デバイス100はまた、1つ以上の光センサ164を任意選択的に含む。図1Aは、I/Oサブシステム106内の光センサコントローラ158に結合された光センサを示す。光センサ(単数又は複数)164は、電荷結合デバイス(CCD)又は相補的金属酸化物半導体(CMOS)フォトトランジスタを、任意選択的に含む。光センサ(単数又は複数)164は、1つ以上のレンズを通して投影された、環境からの光を受光し、その光を、画像を表すデータに変換する。撮像モジュール143(カメラモジュールとも称する)と連動して、光センサ(単数又は複数)164は、静止画像及び/又はビデオを、任意選択的にキャプチャする。一部の実施形態では、タッチスクリーンが静止及び/又はビデオ画像取得のためのビューファインダとして使用するために可能化されるように、光センサは、デバイスの前面のタッチ感知ディスプレイシステム112の反対側である、デバイス100の背面に配置される。一部の実施形態では、(例えば、自撮りのため、ユーザがタッチスクリーン上で他のテレビ会議参加者を見ている間に、テレビ会議のためなど)ユーザの画像を得るように、別の光センサがデバイスの前面に配置される。
デバイス100はまた、1つ以上の接触強度センサ165を任意選択的に含む。図1Aは、I/Oサブシステム106内の強度センサコントローラ159に結合された接触強度センサを示す。接触強度センサ(単数又は複数)165は、1つ以上のピエゾ抵抗ひずみゲージ、電気容量式力センサ、電気力センサ、圧電力センサ、光学力センサ、容量式タッチ感知面、又は他の強度センサ(例えば、タッチ感知面上の接触の力(又は圧力)を測定するために使用するセンサ)を、任意選択的に含む。接触強度センサ(単数又は複数)165は、環境から接触強度情報(例えば、圧力情報又は圧力情報のプロキシ)を受信する。一部の実施形態では、少なくとも1つの接触強度センサが、タッチ感知面(例えば、タッチ感知ディスプレイシステム112)に配置されているか、又は、それに近接している。一部の実施形態では、少なくとも1つの接触強度センサが、デバイス100の前面に配置されたタッチスクリーンディスプレイシステム112の反対側である、デバイス100の背面に配置されている。
デバイス100はまた、1つ以上の近接センサ166を任意選択的に含む。図1Aは、周辺機器インタフェース118と結合された近接センサ166を示す。あるいは、近接センサ166は、I/Oサブシステム106内の入力コントローラ160に結合される。一部の実施形態では、多機能デバイスがユーザの耳の近くに配置されている場合(例えば、ユーザが電話通話を行っている場合)、近接センサがオフになり、タッチ感知ディスプレイシステム112が無効になる。
デバイス100はまた、1つ以上の触知出力生成部167を任意選択的に含む。図1Aは、I/Oサブシステム106内の触覚フィードバックコントローラ161に結合された触知出力生成部を示す。触知出力生成部(単数又は複数)167は、スピーカ又は他の音声構成要素などの1つ以上の電気音響デバイス、及び/又はモータ、ソレノイド、電気活性ポリマ、圧電アクチュエータ、静電アクチュエータ、若しくは他の触知出力生成構成要素(例えば、デバイス上で電気信号を触知出力に変換する構成要素)などの、エネルギーを直線運動に変換する電気機械デバイスを、任意選択的に含む。触知出力生成部(単数又は複数)167は、触覚フィードバックモジュール133から触知フィードバック生成命令を受信し、デバイス100のユーザが感知できる触知出力をデバイス100上で生成する。一部の実施形態では、少なくとも1つの触知出力生成部は、タッチ感知面(例えば、タッチ感知ディスプレイシステム112)に配置されているか、又はそれに近接しており、任意選択的に、タッチ感知面を垂直方向(例えば、デバイス100の表面の内/外)に、又は横方向(例えば、デバイス100の表面と同じ平面内の前後)に動かすことによって、触知出力を生成する。一部の実施形態では、少なくとも1つの触知出力生成部センサは、デバイス100の前面に配置されたタッチ感知ディスプレイシステム112の反対側である、デバイス100の背面に配置されている。
デバイス100はまた、1つ以上の加速度計168を任意選択的に含む。図1Aは、周辺機器インタフェース118に結合された加速度計168を示す。あるいは、加速度計168は、I/Oサブシステム106内の入力コントローラ160に、任意選択的に結合される。一部の実施形態では、情報は、1つ以上の加速度計から受信したデータの分析に基づいて、ポートレートビュー又はランドスケープビューでタッチスクリーンディスプレイ上に表示される。デバイス100は、加速度計(単数又は複数)168に加えて、磁気計(図示せず)並びにデバイス100の場所及び向き(例えば、縦長又は横長)に関する情報を取得するためのGPS(又はGLONASS又は他のグローバルナビゲーションシステム)受信部(図示せず)を、任意選択的に含む。
一部の実施形態では、メモリ102に記憶されたソフトウェア構成要素は、オペレーティングシステム126、通信モジュール(又は命令セット)128、接触/動きモジュール(又は命令セット)130、グラフィックモジュール(又は命令セット)132、触覚フィードバックモジュール(又は命令セット)133、テキスト入力モジュール(又は命令セット)134、全地球測位システム(GPS)モジュール(又は命令セット)135、及びアプリケーション(又は命令セット)136を含む。更に、一部の実施形態では、図1A及び図3に示すように、メモリ102はデバイス/グローバル内部状態157を記憶する。デバイス/グローバル内部状態157は、現在アクティブ状態のアプリケーションがある場合にどのアプリケーションがアクティブかを示すアクティブアプリケーション状態、何のアプリケーション、ビュー、又は他の情報がタッチ検知ディスプレイシステム112の様々な領域を占めているかを示す表示状態、デバイスの様々なセンサ、及び他の入力又は制御デバイス116から得られる情報を含むセンサ状態、並びに、デバイスの場所及び/又は姿勢に関する場所及び/又は姿勢情報、のうちの1つ以上を含む。
オペレーティングシステム126(例えば、iOS、Darwin(登録商標)、RTXC(登録商標)、LINUX(登録商標)、UNIX(登録商標)、OS X(登録商標)、WINDOWS(登録商標)、又はVxWorks(登録商標)などの組み込みオペレーティングシステム)は、一般的なシステムタスク(例えば、メモリ管理、記憶デバイス制御、電力管理など)を制御及び管理するための様々なソフトウェアコンポーネント及び/又はドライバを含み、様々なハードウェアとソフトウェアコンポーネントとの間の通信を容易にする。
通信モジュール128は、1つ以上の外部ポート124を介して他のデバイスとの通信を容易にし、RF回路108及び/又は外部ポート124が受信したデータを処理するためのさまざまなソフトウェア構成要素を含む。外部ポート124(例えば、ユニバーサルシリアルバス(USB)、FIREWIRE(登録商標)など)は、直接的に、又はネットワーク(例えば、インターネット、無線LANなど)を通して間接的に、他のデバイスに接続するように適応している。一部の実施形態では、外部ポートは、カリフォルニア州CupertinoのApple Inc.からのiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)デバイスの一部内で使用される30ピンコネクタと同一の、又はこれに類似した及び/若しくは互換性のあるマルチピン(例えば、30ピン)コネクタである。一部の実施形態では、外部ポートは、カリフォルニア州CupertinoのApple Inc.からのiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)デバイスの一部内で使用されるLightning(登録商標)コネクタと同一の、又はこれに類似した及び/若しくは互換性のあるLightningコネクタである。
接触/動きモジュール130は、(ディスプレイコントローラ156と連動して)タッチ感知ディスプレイシステム112との接触、及び他のタッチ感知デバイス(例えば、タッチパッド又は物理クリックホイール)との接触を、任意選択的に検出する。接触/動きモジュール130は、接触が発生したかどうかの判定(例えば、指ダウンイベントの検出)、接触の強度(例えば、接触の力若しくは圧力、又は、接触の力若しくは圧力の代用)の判定、接触の移動及びタッチ感知面にわたる動きの追跡(例えば、1つ以上の指ドラッグイベントの検出)があるかどうかの判定、及び接触が中止したかどうか(例えば、指アップイベント又は接触の中断の検出)の判定などの、(例えば、指又はスタイラスによる)接触の検出に関係する様々な動作を実行するためのソフトウェア構成要素を含む。接触/動きモジュール130は、タッチ感知面から接触データを受信する。一連の接触データにより表現される接触点の移動を判定することは、接触点の速さ(大きさ)、速度(大きさ及び方向)、及び/又は加速度(大きさ及び/又は方向の変化)を判定することを任意選択的に含む。これらの動作は、任意選択的に、単一の接触(例えば、1つの指又はスタイラスの接触)又は複数の同時接触(例えば、「マルチタッチ」/複数の指の接触)に適用される。一部の実施形態では、接触/動きモジュール130及びディスプレイコントローラ156は、タッチパッド上の接触を検出する。
接触/動きモジュール130は任意選択的に、ユーザによるジェスチャ入力を検出する。タッチ感知面上の異なるジェスチャは、異なる接触パターン(例えば、異なる動き、タイミング、及び/又は検出される接触の強度)を有する。このように、ジェスチャは、任意選択的に、特定の接触パターンを検出することによって検出される。例えば、指タップジェスチャを検出することは、指ダウンイベントを検出し、続いて、その指ダウンイベント(例えば、アイコンの位置における)と同じ位置(又は、実質的に同じ位置)で指アップ(リフトオフ)イベントを検出することを含む。別の実施例として、タッチ感知面での指スワイプジェスチャの検出は、指ダウンイベントを検出し、続いて1つ以上の指ドラッグイベントを検出し、その後、指アップ(リフトオフ)イベントを検出することを含む。同様に、タップ、スワイプ、ドラッグ、及び他のジェスチャは、スタイラスに対して、スタイラスに対する特定の接触パターンを検出することにより、任意選択的に検出される。
一部の実施形態では、指タップジェスチャを検出することは、指ダウンイベントと指アップイベントを検出する間の時間の長さに依存するが、指ダウンイベントと指アップイベントを検出する間の指の接触強度とは無関係である。一部の実施形態では、タップジェスチャは、指ダウンイベントと指のアップイベントとの間の時間の長さが予め定義された値(例えば、0.1、0.2、0.3、0.4、又は0.5秒未満)よりも小さいという判定に従って検出され、タップ中の指の接触強度が、軽押し又は深押しの強度閾値などの、所与の強度閾値(名目接触検出強度閾値よりも大きい)を満たしているかどうかとは無関係である。このように、指タップジェスチャは、特定の入力基準を満足できればよく、接触の特性強度が、特定の入力基準を満たすために所与の強度閾値を満足することを必要としない。明確にするために、タップジェスチャにおける指接触は、通常、指ダウンイベントを検出するために、それ未満では接触が検出されない名目接触検出強度閾値を満足する必要がある。同様の分析が、スタイラス又は他の接触によるタップジェスチャの検出に適用される。デバイスがタッチ感知面上をホバリングする指又はスタイラスの接触を検出できる場合、名目接触検出強度閾値は、指又はスタイラス及びタッチ感知面との間の物理的接触に、任意選択的に対応しない。
同じ概念が、他のタイプのジェスチャの類似の方法に適用される。例えば、スワイプジェスチャ、ピンチジェスチャ、ピンチ解除ジェスチャ、及び/又は長押しジェスチャは、ジェスチャに含まれる接触の強度には依存しない、又は認識されるために強度閾値に達するジェスチャを実行する接触(単数又は複数)を必要としない、のいずれかの基準を満足したことに基づいて、任意選択的に検出される。例えば、スワイプジェスチャは、1つ以上の接触の移動量に基づいて検出される。ピンチジェスチャは、互いに向かっていく2つ以上の接触の移動に基づいて検出される。ピンチ解除ジェスチャは、互いに離れていく2つ以上の接触の移動に基づいて検出され、長押しジェスチャは、タッチ感知面上での移動量閾値未満の接触の持続時間に基づいて検出される。従って、特定のジェスチャ認識基準が、特定のジェスチャ認識基準を満たすために接触(単数又は複数)の強度がそれぞれの強度閾値を満たすことを必要としないというステートメントは、ジェスチャ内の接触(単数又は複数)がそれぞれの強度閾値に達していない場合に特定のジェスチャ認識基準を満足することができ、及びジェスチャ内の1つ以上の接触がそれぞれの強度閾値に達するか又はそれを超える状況で満足することもできる、ことを意味する。一部の実施形態では、タップジェスチャは、接触が予め定義された時間間隔中にそれぞれの強度閾値を上回るか下回るかに関わらず、予め定義された時間間隔内に指ダウン及び指アップイベントが検出されたという判定に基づいて検出され、スワイプジェスチャは、接触が接触運動の終了時にそれぞれの強度閾値を上回っている場合であっても、接触の動きが予め定義された大きさよりも大きいという判定に基づいて検出される。たとえ、ジェスチャの検出がジェスチャを実行している接触の強度によって影響を受ける場合の実施であっても(例えば、デバイスが、接触の強度が強度閾値を上回った場合により迅速に長押しを検出する、又は接触の強度がより高い場合にタップ入力の検出を遅延させる)、接触が特定の強度閾値に達していない状況で、ジェスチャを認識するための基準が満たされ得る限り、それらのジェスチャの検出は接触が特定の強度閾値に達することを必要としない(例えば、たとえジェスチャを認識するのに要する時間量が変化したとしても)。
一部の状況では、同じ入力要素又は領域に向けられた2つ以上の異なるジェスチャを区別するためのヒューリスティックを作成するために、接触強度閾値、持続時間閾値、及び移動閾値が、様々な異なる組合せで組み合わされ、それによって、同じ入力要素を備える複数の異なる相互作用が可能となり、より豊富なユーザの対話及び応答のセットを提供することができる。ジェスチャ認識基準の特定のセットが、特定のジェスチャ認識基準を満たすために接触(単数又は複数)の強度がそれぞれの強度閾値を満たすことを必要としないというステートメントは、ジェスチャがそれぞれの強度閾値を超える強度を伴う接触を含むときに満たされる基準を有する他のジェスチャを識別するため、他の強度依存ジェスチャ認識基準の同時評価を排除しない。例えば、ある状況では、第1のジェスチャに対する第1のジェスチャ認識基準-接触(単数又は複数)の強度が第1のジェスチャ認識基準が満たすためのそれぞれの強度閾値を満たす必要がない-は、第2のジェスチャに対する第2のジェスチャ認識基準-接触(単数又は複数)がそれぞれの強度閾値に達することに依存する-、と競合する。そのような競合では、第2のジェスチャに対する第2のジェスチャ認識基準が最初に満たされれば、第1のジェスチャに対する第1のジェスチャ認識基準を満たしているとして、任意選択的に、ジェスチャは認識されない。例えば、接触が予め定義された移動量だけ移動する前に、接触がそれぞれの強度閾値に達すると、スワイプジェスチャではなく深押しジェスチャが検出される。逆に、接触がそれぞれの強度閾値に達する前に、接触が予め定義された移動量だけ動いた場合、深押しジェスチャではなくスワイプジェスチャが検出される。そのような状況でも、もし接触がジェスチャの終了までそれぞれの強度閾値を下回ったまま(例えば、それぞれの強度閾値を超えて増加しない接触を伴うスワイプジェスチャ)でも、ジェスチャは、スワイプジェスチャとして第1のジェスチャ認識基準によって認識されているはずなので、第1のジェスチャに対する第1のジェスチャ認識基準はなおも、第1のジェスチャ認識基準を満たすために、接触(単数又は複数)の強度がそれぞれの強度閾値を満たすことを必要としない。従って、特定のジェスチャ認識基準が満たされるために、接触(単数又は複数)の強度がそれぞれの強度閾値を満たすことを必要としない特定のジェスチャ認識基準は、(A)一部の状況では、強度閾値に関して接触強度を無視する(例えば、タップジェスチャに対して)、及び/又は、(B)一部の状況では、特定のジェスチャ認識基準が入力に対応するジェスチャを認識する前に、競合する強度依存ジェスチャ認識基準(例えば、深押しのジェスチャに対して)のセットが強度依存ジェスチャに対応する入力を認識した場合に(例えば、深押しジェスチャと認識で競合する長押しジェスチャに対して)、特定のジェスチャ認識基準(例えば、長押しのジェスチャに対して)は失敗するという意味で、なおも強度閾値に関して接触の強度に依存する。
グラフィックモジュール132は、表示されるグラフィックの視覚的効果(例えば、輝度、透明度、彩度、コントラスト、又は他の視覚特性)を変更するためのコンポーネントを含めた、タッチ感知ディスプレイシステム112又は他のディスプレイ上にグラフィックをレンダリングして表示するための、様々な既知のソフトウェア構成要素を含む。本明細書で使用する時、用語「グラフィック」は、ユーザに対して表示することができる任意のオブジェクトを含み、それらのオブジェクトとしては、テキスト、ウェブページ、アイコン(ソフトキーを含むユーザインタフェースオブジェクトなど)、デジタル画像、ビデオ、アニメーションなどが挙げられるが、これらに限定されない。
一部の実施形態では、グラフィックモジュール132は、使用されるグラフィックを表現するデータを記憶する。各グラフィックには、対応するコードが、任意選択的に割り当てられる。グラフィックモジュール132は、アプリケーションなどから、必要に応じて、座標データ及び他のグラフィック特性データとともに、表示されることとなるグラフィックを指定する1つ以上のコードを受信し、次にディスプレイコントローラ156に出力する画面の画像データを生成する。
触覚フィードバックモジュール133は、デバイス100とのユーザ対話に応じて、デバイス100上の1つ以上の場所で触知出力を生成するために、触知出力生成部(単数又は複数)167によって使用される命令を生成するための、さまざまなソフトウェア構成要素を含む。
テキスト入力モジュール134は、任意選択的に、グラフィックモジュール132の構成要素であり、様々なアプリケーション(例えば、連絡先137、電子メール140、IM141、ブラウザ147、及びテキスト入力を必要とする任意の他のアプリケーション)でテキストを入力するための、ソフトキーボードを提供する。
GPSモジュール135は、デバイスの場所を判断し、この情報を様々なアプリケーションで使用するために提供する(例えば、ロケーションベースダイヤル発呼で使用するための電話138へ、ピクチャ/ビデオのメタデータとしてカメラ143へ、並びに気象ウィジェット、地方のイエローページウィジェット、及び地図/ナビゲーションウィジェットなどのロケーションベースのサービスを提供するアプリケーションへ)。
アプリケーション136は、以下のモジュール(又は、命令のセット)、又はそれらのサブセット若しくはスーパーセットを任意選択的に含む。すなわち、
●連絡先モジュール137(時に、アドレス帳又は連絡先リストとも呼ばれる)、
●電話モジュール138、
●ビデオ会議モジュール139、
●電子メールクライアントモジュール140、
●インスタントメッセージ(IM)モジュール141、
●トレーニングサポートモジュール142、
●静止画像及び/又はビデオ画像用カメラモジュール143、
●画像管理モジュール144、
●ブラウザモジュール147、
●カレンダーモジュール148、
●天気ウィジェット149-1、株価ウィジェット149-2、計算機ウィジェット149-3、アラーム時計ウィジェット149-4、辞書ウィジェット149-5、及びユーザによって取得された他のウィジェット、並びにユーザ作成ウィジェット149-6のうちの1つ以上を任意選択的に含む、ウィジェットモジュール149、
●ユーザ作成ウィジェット149-6を作成するためのウィジェット作成モジュール150、
●検索モジュール151、
任意選択的にビデオ再生モジュール及び音楽再生モジュールから構成されている、ビデオ及び音楽再生モジュール152、
・メモモジュール153、
・地図モジュール154、及び/又は、
・オンラインビデオモジュール155、である。
メモリ102内に記憶される他のアプリケーション136の例としては、任意選択的に、他のワードプロセッシングアプリケーション、他の画像編集アプリケーション、描画アプリケーション、プレゼンテーションアプリケーション、JAVA(登録商標)対応アプリケーション、暗号化、デジタル著作権管理、音声認識、及び音声複製が挙げられる。
タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134とともに、連絡先モジュール137は、(例えば、メモリ102又はメモリ370内の連絡先モジュール137のアプリケーション内部状態192に記憶される)アドレス帳又は連絡先リストを管理する実行可能命令を含み、実行可能命令は、アドレス帳に名前(単数又は複数)を加えること、アドレス帳から名前(単数又は複数)を削除すること、電話番号(単数又は複数)、メールアドレス(単数又は複数)、住所(単数又は複数)、又は他の情報を名前と関連付けること、画像を名前と関連付けること、名前を分類して並べ替えること、電話番号及び/又は電子メールアドレスを提供して、電話138、テレビ会議139、電子メール140、若しくはIM141、による通信を開始する及び/又は容易にすること、などを含む。
RF回路108、音声回路110、スピーカ111、マイクロフォン113、タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134とともに、電話モジュール138は、電話番号に対応する文字列を入力し、アドレス帳137内の1つ以上の電話番号にアクセスし、入力されている電話番号を修正し、それぞれの電話番号をダイアルし、会話を実行し、会話が完了した際に接続を切るか又は電話を切る、実行可能命令を含む。上述のように、無線通信は、複数の通信規格、プロトコル、及び技術のうちのいずれかを任意選択的に使用する。
RF回路108、音声回路110、スピーカ111、マイクロフォン113、タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、光センサ(単数又は複数)164、光センサコントローラ158、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、連絡先リスト137、及び電話モジュール138とともに、テレビ会議モジュール139は、ユーザの指示に従って、ユーザと1人以上の他の参加者との間のテレビ会議を開始し、行い、終了するための実行可能命令を含む。
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134とともに、電子メールクライアントモジュール140は、ユーザの指示に応じて、電子メールを作成し、送信し、受信し、管理する、実行可能命令を含む。画像管理モジュール144とともに、電子メールクライアントモジュール140は、カメラモジュール143で撮影された静止画像又はビデオ画像を有する電子メールを作成及び送信することを、非常に容易にする。
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134とともに、インスタントメッセージモジュール141は、インスタントメッセージと対応する文字列を入力し、入力済みの文字を修正し、それぞれのインスタントメッセージを送信し(例えば、電話ベースのインスタントメッセージのためのショートメッセージサービス(SMS)若しくはマルチメディアメッセージサービス(MMS)プロトコルを使用して、又はインターネットベースのインスタントメッセージのためのXMPP、SIMPLE、Apple Push Notification Service (APNs)、若しくはIMPSを使用して)、インスタントメッセージを受信してその受信したインスタントメッセージを見て、そして以下でより詳細に説明するメッセージアプリケーションの機能を実行する、実行可能命令を含む。一部の実施形態では、送信及び/又は受信されたインスタントメッセージは、MMS及び/又は拡張メッセージングサービス(EMS)でサポートされるように、グラフィック、写真、音声ファイル、ビデオファイル、及び/又は他の添付を、任意選択的に含む。本明細書で使用する時、「インスタントメッセージ」とは、電話ベースのメッセージ(例えば、SMS又はMMSを使用して送信されたメッセージ)及びインターネットベースのメッセージ(例えば、XMPP、SIMPLE、APNs、又はIMPSを使用して送信されたメッセージ)の両方を意味する。
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、GPSモジュール135、地図モジュール154、及び音楽再生モジュール146とともに、トレーニングサポートモジュール142は、(例えば、時間、距離、及び/又はカロリー消費目標を有する)トレーニングを生成し、(スポーツデバイス及びスマートウォッチ内の)トレーニングセンサと通信し、トレーニングセンサデータを受信し、トレーニングをモニタするために使用されるセンサを較正し、トレーニングのための音楽を選択して再生し、及びトレーニングデータを表示し、記憶し、送信する、ための実行可能命令を含む。
タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、光センサ(単数又は複数)164、光センサコントローラ158、接触モジュール130、グラフィックモジュール132、及び画像管理モジュール144とともに、カメラモジュール143は、静止画像又はビデオ(ビデオストリームを含む)をキャプチャしてメモリ102にそれらを記憶する、静止画像又はビデオの特徴を変更する、及び/又はメモリ102から静止画像若しくはビデオを削除するための実行可能命令を含む。
タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィクモジュール132、テキスト入力モジュール134、及びカメラモジュール143とともに、画像管理モジュール144は、静止画像及び/又はビデオを配置し、修正し(例えば、編集し)又は別の方法で操作し、ラベルを付け、削除し、提示し(例えば、デジタルスライドショー又はアルバム内で)、並びに記憶する実行可能命令を含む。
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134とともに、ブラウザモジュール147は、ウェブページ又はそれらの一部、並びにウェブページにリンクされた添付及び他のファイルを検索し、リンク付け、受信し、表示することを含むユーザの指示に従い、インターネットをブラウズする実行可能命令を含む。
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、電子メールクライアントモジュール140、及びブラウザモジュール147とともに、カレンダーモジュール148は、ユーザの指示に従い、カレンダー及びカレンダーに関連付けられたデータ(例えば、カレンダー項目、すべきことのリストなど)を作成、表示、変更、並びに記憶する実行可能命令を含む。
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びブラウザモジュール147とともに、ウィジェットモジュール149は、任意選択的に、ユーザによってダウンロードされ、使用されるミニアプリケーション(例えば、気象ウィジェット149-1、株式ウィジェット149-2、計算機ウィジェット149-3、アラーム時計ウィジェット149-4、及び辞書ウィジェット149-5)、又はユーザによって作成されるミニアプリケーション(例えば、ユーザ作成ウィジェット149-6)である。一部の実施形態では、ウィジェットは、HTML(ハイパーテキストマークアップ言語)ファイル、CSS(カスケーディングスタイルシート)ファイル、及びJavaScript(登録商標)ファイルを含む。一部の実施形態では、ウィジェットは、XML(拡張可能マークアップ言語)ファイル及びJavaScriptファイル(例えば、Yahoo!(登録商標)ウィジェット)を含む。
RF回路系108、タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びブラウザモジュール147とともに、ウィジェット作成モジュール150は、実行可能命令を含み、ウィジェットを作成する(例えば、ウェブページのユーザ指定箇所をウィジェットに変える)実行可能命令を含む。
タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィクモジュール132、及びテキスト入力モジュール134とともに、検索モジュール151は、ユーザの指示に従い、1つ以上の検索基準(例えば、1つ以上のユーザ指定の検索語句)と一致する、メモリ102内のテキスト、音楽、音、画像、ビデオ、及び/又は他のファイルを検索する実行可能命令を含む。
タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィクモジュール132、音声回路110、スピーカ111、RF回路108、及びブラウザモジュール147とともに、ビデオ及び音楽再生モジュール152は、MP3又はAACファイルなどの1つ以上のファイル形式で記憶された録音済みの音楽又は他のサウンドファイルをユーザがダウンロード及び再生できるようにする実行可能命令、並びにビデオを(タッチ感知ディスプレイシステム112上又は無線で若しくは外部ポート124を介して接続された外部のディスプレイ上に)表示、提示、又は別の方法で再生する実行可能命令を含む。一部の実施形態では、デバイス100は、iPod(Apple Inc.の商標)などのMP3プレーヤの機能を、任意選択的に備える。
タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134とともに、メモモジュール153は、ユーザの指示に従って、メモ、すべきことのリストなどを作成及び管理する、実行可能命令を含む。
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、GPSモジュール135、及びブラウザモジュール147とともに、地図モジュール154は、ユーザの指示に従って、地図及び地図に関連付けられたデータ(例えば、運転道案内、特定の場所又はその近くの店舗及び他の関心地点上のデータ、並びに場所に基づく他のデータ)を受信し、表示し、修正し、記憶するための実行可能命令を含む。
タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、音声回路110、スピーカ111、RF回路108、テキスト入力モジュール134、電子メールクライアントモジュール140、及びブラウザモジュール147とともに、オンラインビデオモジュール155は、ユーザがH.264などの1つ以上のファイル形式のオンラインビデオにアクセスし、ブラウズし、受信し(例えば、ストリーミング及び/又はダウンロードにより)、再生し(例えば、タッチスクリーン112上で又は無線で若しくは外部ポート124を介して接続された外部のディスプレイ上で)、特定のオンラインビデオへのリンクを含む電子メールを送信し、別の方法で管理できるようにする実行可能命令を含む。一部の実施形態では、特定のオンラインビデオへのリンクを送信するために、電子メールクライアントモジュール140ではなく、インスタントメッセージモジュール141が用いられる。
上記で識別されたモジュール及びアプリケーションのそれぞれは、1つ以上の上記の機能を実行するための実行可能命令セット及び本出願に記載の方法(例えば、コンピュータにより実行される方法及び本明細書に記載の他の情報処理方法)に対応する。これらのモジュール(すなわち、命令セット)は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、したがって、これらのモジュールの様々なサブセットは、様々な実施形態において、任意選択的に、組合せ又は再配置される。一部の実施形態では、メモリ102は、上述の識別されたモジュール及びデータ構造のサブセットを任意選択的に記憶する。更に、メモリ102は、上述されていない追加のモジュール及びデータ構造を任意選択的に記憶する。
一部の実施形態では、デバイス100は、デバイス上の機能の予め定義されたセットの動作が排他的にタッチスクリーン及び/又はタッチパッドを介して実行されるデバイスである。デバイス100の動作のための主要入力制御デバイスとしてタッチスクリーン及び/又はタッチパッドを使用することにより、デバイス100上の物理的な入力制御デバイス(プッシュボタン、ダイヤル、など)の数を、任意選択的に低減する。
タッチスクリーン及び/又はタッチパッドを介して排他的に実行される予め定義された機能のセットは、ユーザインタフェース間のナビゲーションを任意選択的に含む。一部の実施形態では、タッチパッドは、ユーザによってタッチされると、デバイス100上に表示される任意のユーザインタフェースから、メインメニュー、ホームメニュー、又はルートメニューへデバイス100をナビゲートする。そのような実施形態では、「メニューボタン」はタッチパッドを使用して実装される。一部の他の実施形態では、メニューボタンは、タッチパッドの代わりに、物理プッシュボタン又は他の物理入力制御デバイスである。
図1Bは、一部の実施形態に係る、イベント処理のための例示的な構成要素を示すブロック図である。一部の実施形態では、メモリ102(図1A内)又は370(図3)は、イベントソート部170(例えば、オペレーティングシステム126内)及び対応するアプリケーション136-1(例えば、上述のアプリケーション136、137-155、380ー390のうちのいずれか)を含む。
イベントソート部170は、イベント情報を受信し、イベント情報が配信されるアプリケーション136-1及びアプリケーション136-1のアプリケーションビュー191を判定する。イベントソート部170は、イベントモニタ171及びイベントディスパッチャモジュール174を含む。一部の実施形態では、アプリケーション136-1は、アプリケーションがアクティブ又は実行中の時、タッチ感知ディスプレイシステム112上に表示される現在のアプリケーションビュー(単数又は複数)を示す、アプリケーション内部状態192を含む。一部の実施形態では、デバイス/グローバル内部状態157は、いずれのアプリケーション(単数又は複数)が現在アクティブであるかを判定するために、イベントソート部170によって使用され、アプリケーション内部状態192は、イベント情報の配信先となるアプリケーションビュー191を決定するために、イベントソート部170によって使用される。
一部の実施形態では、アプリケーション内部状態192は、アプリケーション136-1が実行を再開する際に使用される再開情報、アプリケーション136-1によって情報が表示されているか又は表示の準備が整っていることを示すユーザインタフェース状態情報、ユーザがアプリケーション136-1の以前の状態又はビューに戻ることを可能にするための状態待ち行列、及びユーザが以前に行ったアクションのリドゥ/アンドゥ待ち行列、のうちの1つ以上などの追加情報を含む。
イベントモニタ171は、周辺機器インタフェース118からイベント情報を受信する。イベント情報は、サブイベント(例えば、マルチタッチジェスチャの一部としての、タッチ感知ディスプレイシステム112上でのユーザのタッチ)についての情報を含む。周辺機器インタフェース118は、I/Oサブシステム106、又は近接センサ166、加速度計(単数又は複数)168、及び/若しくは(音声回路110を介する)マイクロフォン113などのセンサから受信する情報を送信する。周辺機器インタフェース118がI/Oサブシステム106から受信する情報は、タッチ感知ディスプレイシステム112又はタッチ感知面からの情報を含む。
一部の実施形態では、イベントモニタ171は、予め定義された間隔で周辺機器インタフェース118に要求を送信する。これに応じて、周辺機器インタフェース118はイベント情報を送信する。他の実施形態では、周辺機器インタフェース118は、重要なイベント(例えば、予め定義されたノイズ閾値を上回り、かつ/又は予め定義された持続時間を超えた入力を受信すること)が存在する場合にのみ、イベント情報を送信する。
一部の実施形態では、イベントソート部170はまた、ヒットビュー判定モジュール172及び/又はアクティブイベント認識部判定モジュール173を含む。
ヒットビュー判断モジュール172は、タッチ感知ディスプレイシステム112が1つより多くのビューを表示した際に、1つ以上のビュー内のどこにおいてサブイベントが発生したかを判定するためのソフトウェアプロシージャを提供する。ビューは、制御部及びユーザがディスプレイ上で見ることが可能な他の要素で構成されている。
アプリケーションに関連付けられたユーザインタフェースの別の態様は、本明細書では、アプリケーションビュー又はユーザインタフェースウィンドウと呼ばれる場合があるビューのセットであり、それらの中で情報が表示され、タッチに基づくジェスチャが生じる。タッチが検出される(それぞれのアプリケーションの)アプリケーションビューは、アプリケーションのプログラム階層又はビュー階層内のプログラムレベルに、任意選択的に対応する。例えば、タッチが検出される最低レベルのビューは任意選択的に、ヒットビューと呼ばれ、適切な入力として認識されるイベントのセットは、少なくとも部分的に、タッチベースのジェスチャを開始する最初のタッチのヒットビューに基づいて任意選択的に、判定される。
ヒットビュー判定モジュール172は、タッチベースのジェスチャのサブイベントと関連付けられた情報を受信する。アプリケーションが、階層として編成された複数のビューを有する場合、ヒットビュー判定モジュール172は、そのサブイベントを処理すべき階層内の最下位のビューとしての、ヒットビューを特定する。ほとんどの状況では、ヒットビューは、起因となるサブイベント(即ち、イベント又は潜在的なイベントを形成するサブイベントのシーケンスにおける最初のサブイベント)が発生する最低レベルのビューである。ヒットビューがヒットビュー判定モジュールによって特定されると、ヒットビューは、典型的には、それがヒットビューとして特定された、同じタッチ又は入力ソースに関連する全てのサブイベントを受信する。
アクティブイベント認識部判定モジュール173は、ビュー階層内のどのビュー(単数又は複数)がサブイベントの特定のシーケンスを受信すべきかを判定する。一部の実施形態では、アクティブイベント認識部判定モジュール173は、ヒットビューのみがサブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、アクティブイベント認識部判定モジュール173は、サブイベントの物理場所を含むすべてのビューはアクティブに関わっているビューであると判定し、したがって、すべてのアクティブに関わっているビューは、サブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、タッチサブイベントがある特定のビューに関連付けられた領域に完全に限定されたとしても、階層の上位のビューは、依然としてアクティブに関わっているビューであり続ける。
イベントディスパッチャモジュール174は、イベント情報をイベント認識部(例えば、イベント認識部180)に送信する。アクティブイベント認識部判定モジュール173を含む実施形態において、イベントディスパッチャモジュール174は、アクティブイベント認識部判定モジュール173により判定されたイベント認識部にイベント情報を配信する。一部の実施形態では、イベントディスパッチャモジュール174は、それぞれのイベント受信部モジュール182により取得されるイベント情報をイベント待ち行列内に記憶する。
一部の実施形態では、オペレーティングシステム126は、イベントソート部170を含む。あるいは、アプリケーション136-1はイベントソート部170を含む。更に他の実施形態では、イベントソート部170は、独立型のモジュール、又は接触/動きモジュール130などの、メモリ102に記憶された別のモジュールの一部である。
一部の実施形態では、アプリケーション136-1は、それぞれがアプリケーションのユーザインタフェースのそれぞれのビュー内で発生するタッチイベントを処理する命令を含む、複数のイベント処理部190及び1つ以上のアプリケーションビュー191を含む。アプリケーション136-1の各アプリケーションビュー191は、1つ以上のイベント認識部180を含む。通常、それぞれのアプリケーションビュー191は、複数のイベント認識部180を含む。他の実施形態では、イベント認識部180のうちの1つ以上は、ユーザインタフェースキット(図示せず)又はアプリケーション136-1が方法及び他の特性を継承する上位レベルのオブジェクトなどの、別個のモジュールの一部である。一部の実施形態では、それぞれのイベント処理部190は、データ更新部176、オブジェクト更新部177、GUI更新部178、及び/又はイベントソート部170から受信したイベントデータ179、のうちの1つ以上を含む。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176、オブジェクト更新部177、又はGUI更新部178を、任意選択的に利用若しくは呼び出す。あるいは、アプリケーションビュー191のうちの1つ以上は、1つ以上の対応するイベント処理部190を含む。また、一部の実施形態では、データ更新部176、オブジェクト更新部177、及びGUI更新部178のうちの1つ以上は、対応するアプリケーションビュー191に含まれる。
対応するイベント認識部180は、イベントソート部170からイベント情報(例えば、イベントデータ179)を受信して、そのイベント情報からイベントを特定する。イベント認識部180は、イベント受信部182及びイベント比較部184を含む。一部の実施形態では、イベント認識部180はまた、メタデータ183及びイベント配信命令188(任意選択的に、サブイベント配信命令を含む)の少なくともサブセットを含む。
イベント受信部182は、イベントソート部170からイベント情報を受信する。このイベント情報には、サブイベントについての情報、例えば、タッチ又はタッチ動作についての情報が含まれる。サブイベントによっては、イベント情報はまた、サブイベントの場所などの追加情報も含む。サブイベントがタッチの動きに関わるとき、イベント情報はまた、サブイベントの速度及び方向を任意選択的に含む。一部の実施形態では、イベントは、1つの向きから別の向きへの(例えば、縦向きから横向きへの、又はその逆の)デバイスの回転を含み、そのイベント情報は、デバイスの現在の向き(デバイスの姿勢とも呼ばれる)についての対応する情報を含む。
イベント比較部184は、イベント情報を予め定義されたイベント又はサブイベントの定義と比較し、その比較に基づいて、イベント若しくはサブイベントを判定する、又はイベント若しくはサブイベントの状態を判定若しくは更新する。一部の実施形態では、イベント比較部184は、イベント定義186を含む。イベント定義186は、例えば、イベント1(187-1)、イベント2(187-2)などの、イベントの定義(例えば、サブイベントの予め定義されたシーケンス)を含む。一部の実施形態では、イベント187内のサブイベントは、例えば、タッチ開始、タッチ終了、タッチの移動、タッチの中止、及び複数のタッチを含む。ある実施例では、イベント1(187-1)の定義は、表示されたオブジェクト上のダブルタップである。ダブルタップは、例えば、表示されたオブジェクト上の予め定義された段階についての第1のタッチ(タッチ開始)、予め定義された段階についての第1のリフトオフ(タッチ終了)、表示されたオブジェクト上の予め定義された段階についての第2のタッチ(タッチ開始)、及び予め定義された段階についての第2のリフトオフ(タッチ終了)を含む。別の実施例では、イベント2(187-2)の定義は、表示されたオブジェクト上のドラッグ操作である。ドラッグは、例えば、表示されたオブジェクト上の予め定義された段階についてのタッチ(又は接触)、タッチ感知ディスプレイシステム112にわたるタッチの移動、及びタッチのリフトオフ(タッチ終了)を含む。一部の実施形態では、イベントはまた、1つ以上の関連付けられたイベント処理部190に関する情報も含む。
一部の実施形態では、イベント定義187は、それぞれのユーザインタフェースオブジェクトに関するイベントの定義を含む。一部の実施形態では、イベント比較部184は、サブイベントに関連付けられたユーザインタフェースオブジェクトを判定するヒットテストを実行する。例えば、3つのユーザインタフェースオブジェクトがタッチ感知ディスプレイシステム112上に表示されるアプリケーションビューにおいて、タッチ感知ディスプレイシステム112上でタッチが検出されると、イベントコンパレーター184は、3つのユーザインタフェースオブジェクトのうちのどれがタッチ(サブイベント)に関連付けられているかを判定するためのヒットテストを行う。表示された各オブジェクトが、対応するイベント処理部190に関連付けられている場合、イベント比較部は、ヒットテストの結果を用いて、どのイベント処理部190をアクティブ化すべきかを判定する。例えば、イベント比較部184は、サブイベント及びヒットテストのトリガーとなるオブジェクトに関連付けられたイベント処理部を選択する。
一部の実施形態では、各イベント187に関する定義はまた、サブイベントのシーケンスがイベント認識部のイベントタイプに対応するか否かが判定されるまで、イベント情報の送付を遅延させる、遅延作用も含む。
それぞれのイベント認識部180が、一連のサブイベントがイベント定義186のイベントのうちのいずれとも一致しないと判断した場合、それぞれのイベント認識部180は、イベント不可能、イベント失敗、又はイベント終了の状態に移行し、その後は、タッチに基づくジェスチャの続くサブイベントを無視する。この状況では、ヒットビューに関してアクティブのまま維持される他のイベント認識部があれば、進行中のタッチに基づくジェスチャのサブイベントを、引き続き追跡及び処理する。
一部の実施形態では、それぞれのイベント認識部180は、構成変更可能なプロパティと、フラグと、及び/又はイベント配信システムがアクティブに関わっているイベント認識部にどのようにサブイベント配信を実行するかについて示すリストと、を有するメタデータ183を含む。一部の実施形態では、メタデータ183は、構成可能なプロパティと、フラグと、及び/又はイベント認識部が互いにどのように対話し得るか又は対話が可能になるかについて示すリストと、を含む。一部の実施形態では、メタデータ183は、構成変更可能なプロパティと、フラグと、及び/又はサブイベントがビュー階層又はプログラム階層内の様々なレベルに配信されるか否かを示すリストと、を含む。
一部の実施形態では、それぞれのイベント認識部180は、イベントの1つ以上の特定のサブイベントが認識された時に、イベントに関連付けられたイベント処理部190をアクティブ化する。一部の実施形態では、それぞれのイベント認識部180は、イベントに関連付けられたイベント情報をイベント処理部190に配信する。イベント処理部190をアクティブ化することは、対応するヒットビューにサブイベントを送信(及び送信を延期する)することとは別個である。一部の実施形態では、イベント認識部180は、認識されたイベントに関連付けられたフラグをスローし、フラグに関連付けられたイベント処理部190は、フラグをキャッチし、予め定義された処理を実行する。
一部の実施形態では、イベント配信命令188は、イベント処理部をアクティブ化せずに、サブイベントに関するイベント情報を配信するサブイベント配信命令を含む。その代わりに、サブイベント配信命令は、一連のサブイベントに関連付けられたイベント処理部又はアクティブに関わっているビューにイベント情報を配信する。一連のサブイベント又はアクティブに関わっているビューに関連付けられたイベント処理部は、イベント情報を受信し、予め定義された処理を実行する。
一部の実施形態では、データ更新部176は、アプリケーション136-1で使用されるデータを作成及び更新する。例えば、データ更新部176は、連絡先モジュール137で使用される電話番号を更新、又はビデオプレーヤモジュール145で使用されるビデオファイルを記憶する。一部の実施形態では、オブジェクト更新部177は、アプリケーション136-1で使用されるオブジェクトを作成及び更新する。例えば、オブジェクト更新部177は、新たなユーザインタフェースオブジェクトを作成するか、又はユーザインタフェースオブジェクトの位置を更新する。GUI更新部178は、GUIを更新する。例えば、GUI更新部178は、表示情報を準備し、タッチ感知ディスプレイ上に表示するため、表示情報をグラフィックモジュール132に送信する。
一部の実施形態では、イベント処理部(単数又は複数)190は、データ更新部176、オブジェクト更新部177、及びGUI更新部178を含むか、若しくはそれらにアクセスすることができる。一部の実施形態では、データ更新部176、オブジェクト更新部177、及びGUI更新部178は、それぞれのアプリケーション136-1又はアプリケーションビュー191の単一モジュールに含まれる。他の実施形態では、それらは、2つ以上のソフトウェアモジュールに含まれる。
タッチ感知ディスプレイ上のユーザのタッチのイベント処理に関する前述の説明はまた、入力デバイスを用いて多機能デバイス100を動作させるための他の形態のユーザ入力も適用されるが、その全てがタッチスクリーン上で開始されるわけではないことを理解されたい。例えば、単一又は複数のキーボードの押下又は保持に任意選択的に協調した、マウスの移動及びマウスボタンの押下、タッチパッド上でのタップ、ドラッグ、スクロールなどの接触移動、ペンスタイラス入力、デバイスの移動、口頭による指示検出された眼球運動、バイオメトリック入力、及び/又はこれらの任意の組合せが、認識対象のイベントを定義するサブイベントに対応する入力として、任意選択的に利用される。
図2は、一部の実施形態に係る、タッチ画面(例えば、図1Aのタッチ感知ディスプレイシステム112)を有するポータブル多機能デバイス100を示す。タッチスクリーンは、ユーザインタフェース(UI)200内に1つ以上のグラフィックを、任意選択的に表示する。本実施形態、並びに後述する他の実施形態において、ユーザは、例えば、1本以上の指202(図には、正確な縮尺率では描かれていない)又は1つ以上のスタイラス203(図には、正確な縮尺率では描かれていない)を用いて、グラフィック上でジェスチャを行うことにより、グラフィックのうちの1つ以上を選択することができる。一部の実施形態では、ユーザが1つ以上のグラフィックとの接触を断ったときに、その1つ以上のグラフィックの選択が生じる。一部の実施形態では、ジェスチャは、1回以上のタップ、1回以上のスワイプ(左から右へ、右から左へ、上方向へ及び/又は下方向へ)、並びに/又は、デバイス100と接触した指のローリング(右から左へ、左から右へ、上方向へ及び/若しくは下方向へ)を、任意選択的に含む。一部の実装又は状況では、グラフィックとの不測の接触は、そのグラフィックを選択するものではない。例えば、選択に対応するジェスチャがタップである場合、アプリケーションアイコンの上をスイープするスワイプジェスチャは、対応するアプリケーションを任意選択的に選択しない。
デバイス100はまた、「ホーム」又はメニューボタン204などの1つ以上の物理ボタンを、任意選択的に含む。前述のように、メニューボタン204は、デバイス100上で任意選択的に実行されるアプリケーションのセット内の任意のアプリケーション136へのナビゲーションに、任意選択的に、使用される。あるいは、一部の実施形態では、メニューボタンは、タッチスクリーンディスプレイに表示されたGUIにおけるソフトキーとして実装されている。
一部の実施形態では、デバイス100は、タッチスクリーンディスプレイ、メニューボタン204、デバイスへの電源をオン/オフし、デバイスをロックするためのプッシュボタン206、音量調整ボタン(単数又は複数)208、加入者識別モジュール(SIM)カードスロット210、ヘッドセットジャック212、及びドッキング/充電用外部ポート124を含む。プッシュボタン206は、ボタンを押し下げて、予め定義された時間にわたってボタンを押し下げた状態で保持することによってデバイス上の電源をオン/オフし、ボタンを押し下げて、予め定義された時間が経過する前にボタンを解放することによってデバイスをロックし、及び/又は、デバイスのロックを解除する、若しくは、ロック解除処理を開始する。一部の実施形態では、デバイス100はまた、マイクロフォン113を通して、一部の機能をアクティブ化し、又はデアクティブ化するための口頭入力を受け付ける。デバイス100はまた、タッチ感知ディスプレイシステム112上の接触の強度を検出するための1つ以上の接触強度センサ165、及び/又は、デバイス100のユーザに対する触知出力を生成するための1つ以上の触知出力生成部167を、任意選択的に含む。
図3は、一部の実施形態に係る、ディスプレイ及びタッチ感知面を備える例示的な多機能デバイスのブロック図である。デバイス300は、ポータブル型である必要はない。一部の実施形態では、デバイス300は、ラップトップコンピュータ、デスクトップコンピュータ、タブレットコンピュータ、マルチメディア再生デバイス、ナビゲーションデバイス、教育的デバイス(子供の学習玩具など)、ゲームシステム、又は制御デバイス(例えば、家庭用又は業務用コントローラ)である。デバイス300は、典型的に、1つ以上の処理ユニット(CPU)310、1つ以上のネットワーク又は他の通信インタフェース360、メモリ370、及びこれらの構成要素を相互接続するための1つ以上の通信バス320、を含む。通信バス320は、システム構成要素間の通信を相互接続及び制御する回路(チップセットと呼ばれることがある)を、任意選択的に含む。デバイス300は、典型的にはタッチスクリーンディスプレイであるディスプレイ340を備える入出力(I/O)インタフェース330を含む。I/Oインタフェース330はまた、キーボード及び/又はマウス(又は他のポインティングデバイス)350並びにタッチパッド355、デバイス300上に触知出力を生成するための(例えば、図1Aを参照して上述された触知出力生成部167と同様の)触知出力生成部357、センサ359(例えば、光センサ、加速度センサ、近接センサ、タッチ感知センサ、及び/又は図1Aを参照して上述された接触強度センサ165と同様の接触強度センサ)を、任意選択的に含む。メモリ370は、DRAM、SRAM、DDR RAM、又は他のランダムアクセスソリッドステートメモリデバイスなどの、高速ランダムアクセスメモリを含み、及び、1つ以上の磁気ディスク記憶デバイス、光ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステート記憶デバイスなどの、不揮発性メモリを任意選択的に含む。メモリ370は、CPU(単数又は複数)310からリモートに位置する1つ以上の記憶デバイスを、任意選択的に含む。一部の実施形態では、メモリ370は、ポータブル多機能デバイス100(図1A)のメモリ102に記憶されたプログラム、モジュール、及びデータ構造、又はそれらのサブセットを記憶する。更に、メモリ370は、ポータブル多機能デバイス100のメモリ102に存在しない追加のプログラム、モジュール、及びデータ構造を、任意選択的に記憶する。例えば、デバイス300のメモリ370は、描画モジュール380、プレゼンテーションモジュール382、ワードプロセッシングモジュール384、ウェブサイト作成モジュール386、ディスクオーサリングモジュール388、及び/又はスプレッドシートモジュール390を、任意選択的に記憶するが、ポータブル多機能デバイス100(図1A)のメモリ102は、これらのモジュールを、任意選択的に記憶しない。
上記で特定された図3の要素のそれぞれは、任意選択的に、上述のメモリデバイスのうちの1つ以上に記憶される。上記で識別されたモジュールうちのそれぞれは、上述した機能を実行する命令セットに対応する。上述の識別されたモジュール又はプログラム(すなわち、命令セット)は、別個のソフトウェアプログラム、手順、又はモジュールとして実施される必要はなく、したがって、様々な実施形態において、これらのモジュールの様々なサブセットを、任意選択的に、組み合わされるか又は別の方法で再配置される。一部の実施形態では、メモリ370は、上述の識別されたモジュール及びデータ構造のサブセットを任意選択的に記憶する。更に、メモリ370は、上述されていない追加のモジュール及びデータ構造を、任意選択的に記憶する。
ここで、ポータブル多機能デバイス100上に任意選択的に実装される、ユーザインタフェース(「UI」)の実施形態に注意を向ける。
図4Aは、一部の実施形態に係る、ポータブル多機能デバイス100上のアプリケーションのメニューのための例示的なユーザインタフェースを示す。同様のユーザインタフェースが、デバイス300上に、任意選択的に実装される。一部の実施形態では、ユーザインタフェース400は、以下の要素、又はそれらのサブセット若しくはスーパーセットを含む。すなわち、
●セルラー及びWi-Fi信号などの無線通信(単数又は複数)のための信号強度インジケータ(単数又は複数)402、
●時刻404、
●Bluetoothインジケータ405、
●バッテリ状態インジケータ406、
●下記などの、頻繁に使用されるアプリケーション用のアイコンを含むトレイ408、例えば、
○不在着信又は音声メールメッセージの数のインジケータ414を任意選択的に含む、「電話」とラベル付けされる、電話モジュール138用のアイコン416、
○未読電子メールの数のインジケータ410を任意選択的に含む、「メール」とラベル付けされた、電子メールクライアントモジュール140用のアイコン418、
○「ブラウザ」とラベル付けされる、ブラウザモジュール147用のアイコン420、及び
○「iPod」とラベル付けされる、iPod(Apple Inc.の商標)モジュール152とも称されるビデオ及び音楽再生モジュール152用のアイコン422、並びに
●下記などの、その他のアプリケーション用のアイコン、例えば、
○「メッセージ」とラベル付けされる、IMモジュール141用のアイコン424、
○「カレンダー」とラベル付けされる、カレンダーモジュール148用のアイコン426、
○「写真」とラベル付けされる、画像管理モジュール144用のアイコン428、
○「カメラ」とラベル付けされる、カメラモジュール143用のアイコン430、
○「オンラインビデオ」とラベル付けされた、オンラインビデオモジュール155用のアイコン432、
○「株式」とラベル付けされる、株式ウィジェット149-2用のアイコン434、
○「地図」とラベル付けされる、地図モジュール154用のアイコン436、
○「天気」とラベル付けされる、天気ウィジェット149-1用のアイコン438、
○「時計」とラベル付けされる、アラーム時計ウィジェット149-4用のアイコン440、
○「トレーニングサポート」とラベル付けされる、トレーニングサポートモジュール142用のアイコン442、
○「メモ」とラベル付けされる、メモモジュール153用のアイコン444、及び
○デバイス100及びその様々なアプリケーション136に関する設定へのアクセスを提供する、設定アプリケーション若しくはモジュール用のアイコン446、である。
図4Aに示されているアイコンのラベルは、単に例示であることに留意されたい。例えば、一部の実施形態では、ビデオ及び音楽プレーヤモジュール152用のアイコン422は、「音楽」又は「音楽プレーヤ」とラベル付けされる。他のラベルが、さまざまなアプリケーションアイコンのために、任意選択的に使用される。一部の実施形態では、それぞれのアプリケーションアイコンに関するラベルは、それぞれのアプリケーションアイコンに対応するアプリケーションの名前を含む。一部の実施形態では、特定のアプリケーションアイコンのラベルは、特定のアプリケーションアイコンに対応するアプリケーションの名前とは別個である。
図4Bは、ディスプレイ450とは別個のタッチ感知面451(例えば、図3のタブレット又はタッチパッド355)を備えたデバイス(例えば、図3のデバイス300)上の例示的なユーザインタフェースを示す。デバイス300はまた、タッチ感知面451上の接触の強度を検出するための1つ以上の接触強度センサ(例えば、センサ357のうちの1つ以上)、及び/又はデバイス300のユーザに対する触知出力を生成するための1つ以上の触知出力生成部359を、任意選択的に含む。
図4Bは、ディスプレイ450とは別個のタッチ感知面451(例えば、図3のタブレット又はタッチパッド355)を備えたデバイス(例えば、図3のデバイス300)上の、例示的なユーザインタフェースを示す。以下の実施例のうちの多くはタッチスクリーンディスプレイ112上での入力(タッチ感知面とディスプレイとが組み合わされている場合)を参照して説明されるが、一部の実施形態では、デバイスは、図4Bに示されるように、ディスプレイとは別個のタッチ感知面上で入力を検出する。一部の実施形態では、タッチ感知面(例えば、図4Bの451)は、ディスプレイ(例えば、450)上の主軸(例えば、図4Bの453)に対応する主軸(例えば、図4Bの452)を有する。これらの実施形態によれば、ディスプレイ上のそれぞれの場所に対応する(例えば、図4Bにおいて、460は468と対応し、462は470と対応する)場所において、デバイスは、タッチ感知面451との接触(例えば、図4Bの460及び462)を検出する。このように、タッチ感知面がディスプレイから分離されているとき、タッチ感知面(例えば、図4Bの451)上でデバイスによって検出されたユーザ入力(例えば、接触460及び462、及びそれらの動き)は、デバイスによって使用され、多機能デバイスのディスプレイ(例えば、図4Bの450)上のユーザインタフェースを操作する。同様の方法が、本明細書に記載の他のユーザインタフェースに任意選択的に使用されることを理解されたい。
更に加えて、以下の説明は、主に指入力(例えば、指の接触、指のタップジェスチャ、指のスワイプジェスチャなど)を参照して説明されるが、一部の実施形態では、それらの指入力のうちの1つ以上は、別の入力デバイスからの入力(例えば、マウスに基づく入力又はスタイラス入力)で置き換えられることを理解されたい。例えば、スワイプジェスチャは、任意選択的に、(例えば、接触の代わりに)マウスクリックと置換され、その後、(例えば、接触の移動の代わりに)スワイプの経路に沿ってカーソルの移動が行われる。別の例として、タップジェスチャは、(例えば、接触の検出に続いて接触の検出を停止する代わりに)カーソルがタップジェスチャの場所上に配置されている間、任意選択的に、マウスクリックで置換される。同様に、複数のユーザ入力が同時に検出されるとき、複数のコンピュータマウスが同時に、任意選択的に用いられているか、又はマウスと指接触が任意選択的に同時に用いられていることが理解されよう。
本明細書にて使用されるとき、用語「フォーカスセレクタ」とは、ユーザが対話しているユーザインタフェースの現在の部分を示す入力要素である。カーソル又は他のロケーションマーカを含む実装において、カーソルは、タッチ感知面(例えば、図3のタッチパッド355、又は図4Bのタッチ感知面451)上で入力(例えば、押圧入力)が検出された時に、カーソルが特定のユーザインタフェース要素(例えば、ボタン、ウインドウ、スライダ、又は他のユーザインタフェース要素)の上にある時、「フォーカスセレクタ」として機能し、特定のユーザインタフェース要素が、検出された入力に従って調整される。タッチスクリーンディスプレイ上のユーザインタフェース要素との直接的な対話を可能にする、タッチスクリーンディスプレイ(例えば、図1Aのタッチ感知ディスプレイシステム112、又は図4Aのタッチスクリーン)を含む一部の実施では、タッチスクリーン上で検出される接触が「フォーカスセレクタ」の役割を果たすため、入力(例えば、接触による押圧入力)が、タッチスクリーンディスプレイ上の特定のユーザインタフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインタフェース要素)の場所で検出されると、その特定のユーザインタフェース要素が、検出された入力に従って調節される。一部の実施では、(例えば、タブキー又は矢印キーを使ってフォーカスを1つのボタンから別のボタンに移動させることにより)タッチスクリーンディスプレイ上の対応するカーソルの移動又は接触の移動なしに、フォーカスが、ユーザインタフェースの1つの領域からユーザインタフェースの別の領域に移動される。これらの実施では、フォーカスセレクタは、ユーザインタフェースの異なる領域間でのフォーカスの移動に従って移動する。フォーカスセレクタが採用する具体的な形態とは関わりなく、フォーカスセレクタは、全般的に、ユーザが意図するユーザインタフェースとの対話を(例えば、ユーザが対話することを意図しているユーザインタフェースの要素を、デバイスに示すことによって)伝達するために、ユーザによって制御されるユーザインタフェース要素(又は、タッチスクリーンディスプレイ上での接触)である。例えば、タッチ感知面(例えば、タッチパッド又はタッチスクリーン)上で押圧入力が検出される間の、対応のボタンの上のフォーカスセレクタ(例えば、カーソル、接触、又は選択ボックス)の場所は、その対応のボタンを(そのデバイスのディスプレイ上に示される他のユーザインタフェース要素ではなく)アクティブ化することをユーザが意図していることを示すものである。
本明細書及び特許請求の範囲で使用される時、タッチ感知面上の接触の「強度」という用語は、タッチ感知面上の接触(例えば、指の接触又はスタイラスの接触)の力若しくは圧力(単位面積当りの力)、又はタッチ感知面上の接触の力若しくは圧力の代用物(プロキシ)を指す。接触の強度は、少なくとも4つの別個の値を含み、より典型的には、何百もの別個の値(例えば、少なくとも256)を含む、値の範囲を有する。接触の強度は、さまざまな方法及びさまざまなセンサ、又はセンサの組合せを用いて、任意選択的に、判定(又は、測定)される。例えば、タッチ感知面の下に又は隣接して配置された1つ以上の力センサは、タッチ感知面上のさまざまな点における力を測定するために、任意選択的に使用される。一部の実施形態では、複数の力センサの力測定値を組合せて(例えば、加重平均又は合計)、接触の推定の力を判定する。同様に、スタイラスの感圧性先端部を任意選択的に使用して、タッチ感知面上のスタイラスの圧力を判定する。あるいは、タッチ感知面上で検出される接触領域のサイズ及び/若しくはその変化、接触に近接するタッチ感知面の電気容量及び/若しくはその変化、並びに/又は、接触に近接するタッチ感知面の抵抗及び/若しくはその変化が、タッチ感知面上の接触の力又は圧力の代替物として、任意選択的に用いられる。一部の実施では、接触の力又は圧力の代替的測定値は、強度閾値を超えているか否かを判定するために直接に用いられる(例えば、強度閾値は、代替的測定値に対応する単位で記述される)。一部の実施では、接触の力又は圧力の代替的測定値は、推定される力又は圧力に変換され、この推定される力又は圧力を用いて、強度閾値を超えているか否かを判定する(例えば、強度閾値は、圧力の単位で測定された圧力閾値である)。接触の強度をユーザ入力の属性として使用することは、アフォーダンスを(例えば、タッチ感知ディスプレイ上に)表示するため、及び/又はユーザ入力を(例えば、タッチ感知ディスプレイ、タッチ感知面、又はノブ若しくはボタンなどの物理的/機械的制御を介して)受信するための面積が制限された、縮小されたサイズのデバイスにおいて、ユーザによるアクセスが他の場合に容易には不可能であり得る、追加のデバイス機能へのユーザのアクセスを可能にする。
一部の実施形態では、接触/動きモジュール130は、ユーザによって動作が実行されたか否かを判定するための(例えば、ユーザがアイコン上で「クリック」したか否かを判定するための)、1つ以上の強度閾値のセットを使用する。一部の実施形態では、少なくとも強度閾値のサブセットが、ソフトウェアパラメータに従って判定される(例えば、強度閾値は、特定の物理アクチュエータのアクティブ化閾値によって判定されず、デバイス100の物理ハードウェアを変更することなく調整し得る)。例えば、トラックパッド又はタッチスクリーンディスプレイのマウス「クリック」閾値は、トラックパッド又はタッチスクリーンディスプレイハードウェアを変更することなく広範囲の予め定義された閾値のうちのいずれかに設定し得る。更に、一部の実施では、デバイスのユーザには、(例えば、個々の強度閾値を調整することにより、及び/又は、システムレベルのクリック「強度」パラメータにより、一度に複数の強度閾値を調整することによって)強度閾値のセットのうちの1つ以上を調整するためのソフトウェア設定が提供される。
本明細書及び特許請求の範囲で使用するとき、接触の「特性強度」という用語は、接触の1つ以上の強度に基づく、その接触の特性である。一部の実施形態では、特性強度は複数の強度サンプルに基づく。特性強度は、任意選択的に、予め定義された数の強度サンプル、又は予め定義されたイベント(例えば、接触を検出した後、接触のリフトオフを検出する前、接触の移動の開始を検出する前若しくは後、接触の終了を検出する前、接触の強度の増加を検出する前若しくは後、及び/又は接触の強度の減少を検出する前若しくは後)に対して予め定義された時間期間(例えば、0.05、0.1、0.2、0.5、1、2、5、10秒)内に収集された強度サンプルのセットに基づく。接触の特性強度は、任意選択的に、接触の強度の最大値、接触の強度の中間値(mean value)、接触の強度の平均値(average value)、接触の強度の上位10%値、接触の強度の最大値の半分の値、接触の強度の最大値の90%の値など、のうちの1つ以上に基づく。一部の実施形態では、特性強度を判定するために、接触の期間が使用される(例えば、特性強度が経時的な接触の強度の平均であるとき)。一部の実施形態では、動作がユーザによって実行されたかどうかを判定するために、特性強度を1つ以上の強度閾値のセットと比較する。例えば、1つ以上の強度閾値のセットは、第1の強度閾値及び第2の強度閾値を含むことができる。この実施例では、第1の閾値を上回らない特性強度を有する接触の結果として第1の動作が実行され、第1の強度閾値を上回り、第2の強度閾値を上回らない特性強度を有する接触の結果として第2の動作が実行され、第2の強度閾値を上回る特性強度を有する接触の結果として第3の動作が実行される。一部の実施形態では、特性強度と1つ以上の強度閾値との間の比較が、第1の動作又は第2の動作のいずれを実行するかを判定するために使用されるのではなく、1つ以上の動作を実行するかどうか(例えば、それぞれのオプションを実行するのか、又はそれぞれの動作の実行を省略するのか)を判定するために使用される。
一部の実施形態では、特性強度を判定する目的で、ジェスチャの一部分が特定される。例えば、タッチ感知面は、接触の強度が増加する、開始場所から遷移して終了場所まで達する連続的なスワイプ接触(例えば、ドラッグジェスチャ)を受け取ってもよい。この実施例では、終了場所における接触の特性強度は、連続的なスワイプ接触全体ではなく、そのスワイプ接触の一部分のみ(例えば、終了場所におけるスワイプ接触の部分のみ)に基づいてもよい。一部の実施形態では、接触の特性強度を判定する前に、平滑化アルゴリズムをそのスワイプ接触の強度に適用してもよい。例えば、平滑化アルゴリズムは、非荷重移動平均平滑化アルゴリズム、三角平滑化アルゴリズム、中央値フィルタ平滑化アルゴリズム、及び/又は指数平滑化アルゴリズム、のうちの1つ以上を任意選択的に含む。一部の状況では、これらの平滑化アルゴリズムは、特性強度を判定する目的で、スワイプ接触の強度の小幅な上昇又は低下を除外する。
本明細書で説明するユーザインタフェースの図は、1つ以上の強度閾値(例えば、接触検出強度閾値IT0、軽押し強度閾値ITL、深押し強度閾値ITD(例えば、少なくとも最初はILより高い)、及び/又は1つ以上の他の強度閾値(例えば、ILよりも低い強度閾値IH))に対する、タッチ感知面上の接触の現在の強度を示す様々な強度の図表を、任意選択的に含む。この強度の図表は、典型的には、表示されるユーザインタフェースの一部ではないが、それらの図の解釈に役立てるために提供される。一部の実施形態では、軽押し強度閾値は、物理マウスのボタン又はトラックパッドのクリックに典型的に関連付けられた動作を、デバイスが実行することになる強度に相当する。一部の実施形態では、深押し強度閾値は、物理マウスのボタン又はトラックパッドのクリックに典型的に関連付けられた動作とは異なる動作を、デバイスが実行することになる強度に相当する。一部の実施形態では、軽押し強度閾値を下回る(例えば、かつ、それを下回ると接触がもはや検出されない名目接触検出強度閾値ITを上回る)特性強度で接触が検出された場合、デバイスは、軽押し強度閾値又は深押し強度閾値に関連付けられた動作を実行することなく、タッチ感知面上の接触の移動に従って、フォーカスセレクタを移動させる。全般的には、特に明記しない限り、これらの強度閾値は、ユーザインタフェース図の異なるセット間でも一貫している。
一部の実施形態では、デバイスにより検出された入力へのデバイスの応答は、入力の間の接触強度に基づく基準に依存する。例えば、一部の「軽押し」入力に対して、入力の間の第1の強度閾値を上回る接触の強度は第1の応答をトリガーする。一部の実施形態では、デバイスにより検出された入力へのデバイスの応答は、入力の間の接触強度及び時間に基づく基準の両方を含む基準に依存する。例えば、一部の「深押し」入力に対して、入力の間の、軽押しに対する第1の強度閾値より大きい第2の強度閾値を上回る接触の強度は、第1の強度閾値との一致と第2の強度閾値との一致との間で遅延時間が経過した場合のみ、第2の応答をトリガーする。この遅延時間は、典型的には、持続時間が200ms未満である(例えば、40ms、100ms、又は120msであり、第2の強度閾値の大きさに依存し、第2の強度閾値が増大すると遅延時間が増大する)。この遅延時間は、偶発的な深押し入力を防ぐのに役立つ。別の例として、一部の「深押し」入力に対しては、第1の強度閾値が満たされた時間の後に生じる感度低減時間間隔が存在する。感度が低減した期間の間、第2の強度閾値は増大する。第2の強度閾値のこの一時的な増大もまた、偶発的な深押し入力を防ぐのに役立つ。他の深押し入力に対して、深押し入力の検出への応答は、時間に基づく基準に依存しない。
一部の実施形態では、入力強度閾値及び/又は対応する出力の1つ以上は、ユーザ設定、接触の移動、入力タイミング、実行しているアプリケーション、強度が加わる速度、現在の入力数、ユーザ履歴、環境要因(例えば、周囲ノイズ)、フォーカスセレクタの位置などの、1つ以上の要因に基づいて変化する。例示的なファクタは、参照によりその全体が本明細書に組み込まれる、米国特許出願第14/399,606号及び第14/624,296号に記載されている。
例えば、図4Cは、経過的なタッチ入力476の強度に部分的に基づいて経時的に変化する動的強度閾値480を示す。動的強度閾値480は、タッチ入力476が最初に検出されたときから予め定義された遅延時間p1の経過後にわたって減衰した第1の成分474と、タッチ入力476の強度を経時的にたどった第2の成分478と、2つの成分の合計である。第1の構成要素474の最初の高強度閾値は、「深押し」応答の偶発的なトリガーを減少させる一方、タッチ入力476が十分な強度を提供する場合には即時の「深押し」応答もなお可能にする。第2の構成要素478は、タッチ入力のゆるやかな強度変動によって、「深押し」応答の意図しないトリガーを低減する。一部の実施形態では、タッチ入力476が動的強度閾値480を満足する場合(例えば、図4Cの点481)、「深押し」応答がトリガーされる。
図4Dは、別の動的強度閾値486(例えば、強度閾値I)を示す。図4Dはまた、2つの他の強度閾値、すなわち、第1の強度閾値I及び第2の強度閾値Iを示す。図4Dでは、タッチ入力484は、時間p2の前に第1の強度閾値I及び第2の強度閾値Iを満足しているが、時間482における遅延時間p2が経過するまで応答は提供されない。また、図4Dにおいて、動的強度閾値486は、時間482から予め定義された遅延時間p1が経過した後(第2の強度閾値Iに関連付られた応答がトリガーされたとき)の時間488から始まって、経時的に減衰する。このタイプの動的強度閾値は、第1の強度閾値I又は第2の強度閾値Iなどの、より低い強度閾値に関連付られた応答をトリガーする直後又は同時の動的強度閾値Iに関連付られた応答の偶発的なトリガーを低減する。
図4Eは、更に別の動的強度閾値492(例えば、強度閾値I)を示す。図4Eでは、タッチ入力490が最初に検出されたときから遅延時間p2が経過した後に、強度閾値Iに関連付られた応答がトリガーされる。同時に、動的強度閾値492は、タッチ入力490が最初に検出されたときから予め定義された遅延時間p1が経過した後に減衰する。このように、強度閾値Iに関連付られた応答をトリガーした後のタッチ入力490の強度の減少は、タッチ入力490の強度が増加が引き続き、タッチ入力490の強度が例えば強度閾値Iである別の強度閾値未満である場合でも、タッチ入力490を解放することなく、強度閾値I(例えば、時間494において)に関連付られた応答をトリガーすることができる。
軽押し強度閾値ITを下回る強度から、軽押し強度閾値ITと深押し強度閾値ITとの間の強度への、接触の特性強度の増大は、「軽押し」入力と称される場合がある。深押し強度閾値ITを下回る強度から、深押し強度閾値ITを上回る強度への、接触の特性強度の増大は、「深押し」入力と称される場合がある。接触検出強度閾値ITを下回る強度から、接触検出強度閾値ITと軽押し強度閾値ITとの間の強度への、接触の特性強度の増大は、タッチ面上の接触の検出と称される場合がある。接触検出強度閾値ITを上回る強度から、接触検出強度閾値ITを下回る強度への、接触の特性強度の減少は、タッチ面からの接触のリフトオフの検出と称される場合がある。一部の実施形態では、ITはゼロである。一部の実施形態では、ITはゼロよりも大きい。一部の図では、影付きの円又は楕円が、タッチ感知面上の接触強度を表すために使用される。一部の図では、影なしの円又は楕円は、それぞれの接触の強度を指定することなく、タッチ感知面上のそれぞれの接触を表すために使用される。
本明細書で説明される一部の実施形態では、1つ以上の動作は、それぞれの押圧入力を含むジェスチャの検出に応じて、又はそれぞれの接触(又は、複数の接触)で実行されるそれぞれの押圧入力の検出に応じて実行され、それらのそれぞれの押圧入力は、少なくとも部分的に、押圧入力強度閾値を上回る接触(又は、複数の接触)の強度の増大の検出に基づいて検出される。一部の実施形態では、それぞれの動作は、押圧入力強度閾値を上回る、それぞれの接触の強度の増大の検出に応じて、実行される(例えば、それぞれの動作は、それぞれの押圧入力の「ダウンストローク」により実行される)。一部の実施形態では、押圧入力は、押圧入力強度閾値を上回る、それぞれの接触の強度の増大、及び後続の押圧入力強度閾値を下回る接触の強度の減少を含み、それぞれの動作は、その後続の押圧入力閾値を下回るそれぞれの接触の強度の減少の検出に応じて、実行される(例えば、それぞれの動作は、それぞれの押圧入力の「アップストローク」により実行される)。
一部の実施形態では、デバイスは、「ジッタ」と呼ばれる場合がある不測の入力を回避するために強度ヒステリシスを採用し、デバイスは、押圧入力強度閾値との予め定義された関連性を有するヒステリシス強度閾値を定義又は選択する(例えば、ヒステリシス強度閾値は、押圧入力強度閾値よりもX強度単位低いか、又は、ヒステリシス強度閾値は、押圧入力強度閾値の75%、90%、若しくは何らかの妥当な比率である)。それゆえ、一部の実施形態では、押圧入力は、押圧入力強度閾値を上回る、それぞれの接触の強度の増大、及び後続の、押圧入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少を含み、それぞれの動作は、そのヒステリシス強度閾値を下回る、後続のそれぞれの接触の強度の減少の検出に応じて、実行される(例えば、それぞれの動作は、それぞれの押圧入力の「アップストローク」により実行される)。同様に、一部の実施形態では、押圧入力は、デバイスが、ヒステリシス強度閾値以下の強度から押圧入力強度閾値以上の強度への接触の強度の増大、及び任意選択的に、ヒステリシス強度以下の強度への、後続の接触の強度の減少を検出する場合にのみ検出され、対応する動作は、その押圧入力の検出(例えば、状況に応じて、接触の強度の増大、又は接触の強度の減少)に応じて、実行される。
説明を容易にするために、押圧入力強度閾値に関連付けられた押圧入力に応じて、又はその押圧入力を含むジェスチャに応じて実行される動作の説明は、押圧入力強度閾値を上回る接触の強度の増大、ヒステリシス強度閾値を下回る強度から押圧入力強度閾値を上回る強度への接触の強度の増大、押圧入力強度閾値を下回る接触の強度の減少、又は押圧入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少の検出に応じて、任意選択的にトリガーされる。加えて、押圧入力強度閾値を下回る接触の強度の減少を検出したことに応じて動作が実行されるとして説明される実施例では、その動作は、押圧入力強度閾値に対応し、かつそれよりも低いヒステリシス強度閾値を下回る、接触の強度の減少を検出したことに応じて、任意選択的に実行される。上述のように、一部の実施形態では、これらの応答のトリガーはまた、適合する時間に基づく基準に依存する(例えば、満たされた第1の強度閾値と満たされた第2の強度閾値との間に、遅延時間が経過した)。
ユーザインタフェース及び関連プロセス
ここで、ディスプレイ、タッチ感知面、及び(任意選択的に)タッチ感知面との接触の強度を検出するための1つ以上のセンサを備えたポータブル多機能デバイス100又はデバイス300などの電子デバイス上に実装され得るユーザインタフェース(「UI」)及び関連プロセスの実施形態に注目する。
これらのユーザインタフェースと関連プロセスは、以下の新しい改善された方法を提供する。すなわち、
●メッセージを確認する、
●以前に送信されたメッセージを編集する、
●以前に送信されたメッセージの編集履歴を表示する、
●メッセージにインパクト効果オプションを適用する(例えば、ユーザが何を通信しようとしているかを表現するために)、
●「見えないインク」を使用してプライベートメッセージを表示する、
●拡張メッセージインタフェースコンテンツ(例えば、「フルスクリーンモーメント」)を表示する、
●2つの別々のメッセージのコンテンツの特定の組合せに対応するコンテンツ(例えば、「マジックモーメント」)を表示する、
●メッセージ吹き出しを作る、
●絵文字を提案する、
●ユーザ間でコンテンツの視聴を同期させる、
●手書き入力を組み込む、
●メッセージ記録のコンテンツを選択的にスクランチする、
●カメラを統合する、
●検索と共有を統合する、
●対話型アプリケーションを統合する、
●ステッカを統合する、
●支払いを行う、
●アバターと交流する、及び
●提案をする、こと。
図5A~図5Kは、一部の実施形態に係る、メッセージ記録及びメッセージ確認応答を表示するための例示的なユーザインタフェースを示す。特に、図5Aは、電子デバイスのディスプレイ上に表示され、時に第1の電子デバイスと呼ばれ、それを第1の電子デバイスと通信中の他の電子デバイスと識別するのに寄与する、メッセージユーザインタフェース(例えば、メッセージアプリケーションに対する)のメッセージユーザインタフェース5002を示す。第1の電子デバイスはまた、タッチ感知面、及びタッチ感知面上の接触の強度を検出するように構成されたタッチスクリーンディスプレイ又はトラックパッドなどの1つ以上のセンサを含む。
図5Aに示すように、メッセージユーザインタフェース5002は、電子デバイスのユーザ(例えば、Genevive)と、別の電子デバイスの少なくとも1人の他のユーザ(例えば、Isaac)との間のメッセージセッションの会話記録5004を含む。この例の会話記録5004は、各々がそれぞれのメッセージ領域5008にある複数のメッセージを含む。第1の接触5010を含む第1の入力は、第1のメッセージ5006に対応する、タッチ感知面上の場所における。第1の入力5010の検出に応じて、電子デバイスは、第1のメッセージ領域に対応するメッセージングインタフェース内の場所において、図5Bの確認応答選択アフォーダンス5012を表示する。この例では、確認応答選択アフォーダンスは、5014-1(ハート)、5014-2(サムズアップ)、5014-3(サムズダウン)、5014-4(「HA」)、5014-5(「!!」)と5014-6(「?」)を表示する。他の実施形態では、より少ない、追加の、又は異なる確認応答オプションを含んでもよい。電子デバイスは、オプション5014-2(サムズアップ)などの、それぞれの確認応答オプション(又はそれぞれの確認応答オプションに対応するヒット領域)上の第2の接触(例えば、タップジェスチャ、軽い押しジェスチャ、深押しジェスチャ、又はリフトオフ)による第2の入力5106の受信に応答し、それぞれの確認応答オプションを選択し、それを図5Cに示すように、第1のメッセージ5006又は第1のメッセージ領域5008-1に適用する。選択された確認応答オプション、この例ではオプション5014-2が、それぞれの確認応答領域5018に表示される。図5Hに示すように、(時に会話と呼ばれる)メッセージセッションに参加している他のユーザ(この例ではGenevive)の電子デバイス(単数又は複数)は、第1のメッセージ領域の近接して同じく選択された確認応答オプションを表示する。
選択された確認応答オプションを編集するために、ユーザは、図5Cに示すように、第3の接触5022によって第3の入力を行う。第3の接触による第3の入力を検出すると、電子デバイスは、図5Dに示すように、確認応答編集インタフェース5024を表示する。任意選択的に、確認応答編集インタフェースは、会話記録の上部に及び/又はその代わりに表示される。任意選択的に、この例のオプション5014-2において現在選択されている確認応答オプションは、図5Dに示すように、確認応答編集インタフェース5024において他の利用可能な確認応答オプションと視覚的に区別される。
図5Eは、異なる第2の確認応答オプション5014-1を選択する入力、接触5026を示し、図5Fは、編集された確認応答を含む(すなわち、第1の確認応答オプション5014-2の代わりに表示された第2の確認応答オプション5014-1を含む)、会話記録内のメッセージ領域を示す。
一部の実施形態では、第1の電子デバイスのユーザが、確認応答編集インタフェース5024を使用して第1のメッセージ領域に対する以前に選択された確認応答オプションを編集している間、メッセージセッションの別のユーザの電子デバイスは、図5Gに示すように、その電子デバイスによって表示された会話記録5004内の第1のメッセージ領域に近接して(例えば、近くに、隣接して、又は部分的にオーバーラップして)、確認応答準備インジケータ5020を表示する。
同じメッセージセッションの異なるユーザは、同じメッセージ又はメッセージ領域に対して異なる確認応答オプションを選択することができる。一部の実施形態では、図5Iに示すように、電子デバイスは、メッセージセッションのユーザが第2のメッセージ領域に対する複数の確認応答オプションを選択したという指標5036を、会話記録内に表示する。図5Iに示す例では、指標5036は、オーバーラップする確認応答オプションアイコンのスタックであるが、代わりに複数の個別の確認応答オプションアイコンであってもよい。図5Iに示すように、指標5036は、第2のメッセージ領域5008-02に、任意選択的に隣接し及び/又は部分的にオーバーラップする。
図5Jは、メッセージセッションにおいてユーザによって選択された確認応答オプションの各タイプに対するタリーを含む、ユーザインタフェースの例を示す。例えば、図5Jに示すように、ユーザインタフェースは、メッセージセッションにおいてユーザによって選択された3つの別個の確認応答オプションのためのタリー5040-1、5040-2、5040-3を含む。一部の実施形態では、図5Jに示すユーザメッセージインタフェースは、指標5036を有するメッセージ領域の場所に対応する、タッチ感知面上の場所における接触(例えば、図5Iの接触5034)による入力の検出に応じて、電子デバイスにより表示され、それによって、メッセージセッションの複数のユーザが同じメッセージ(又は対応するメッセージ領域)に対する確認応答オプションを選択したことを示す。
タリー5040のうちの1つを選択することにより、ユーザは、任意の特定の確認応答オプションを選択したユーザを見ることができる。電子デバイスは、それぞれのメッセージ領域に対する特定の確認応答オプションのためのタリー5040に対応する、タッチ感知面上の場所の接触(例えば、図5Jに示す接触5041)入力に応じて、図5Kに示すように、それぞれのメッセージ領域に対する特定の確認応答オプションを選択したユーザを表すアイコン5042(例えば、アバター)を表示する。
図5L~図5Tは、メッセージ記録を表示している間に、以前に送信されたメッセージを編集するための例示的なユーザインタフェースを示す。図5Lは、電子デバイスのディスプレイ上のメッセージアプリケーションのメッセージユーザインタフェース5002を示す。メッセージユーザインタフェース5002は、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録5004、及びユーザの電子デバイスからメッセージセッション中の少なくとも1人の他のユーザに送信された第1メッセージ5046-1を含む第1メッセージ領域5044を含む。
第1のメッセージ5046-1は、それがすでに送信済みであっても、編集することができる。第1のメッセージの編集を開始するために、ユーザは、第1のメッセージ上の予め定義されたタッチ入力5048(例えば、タップジェスチャ、長押しジェスチャ、軽押しジェスチャ、又は深押しジェスチャ)を含む第1のメッセージ、又は第1のメッセージに対するメッセージ領域を選択する。一部の実施形態では、入力5048の検出に応じて、電子デバイスは、図5Mに示すものなどのメニューインタフェースを表示する。あるいは、入力5048の検出に応じて、電子デバイスは、図5Nに示すようなメッセージ編集インタフェース5022を表示する。一部の実施形態では、第1のメッセージ上の第1の入力ジェスチャ(例えば、タップジェスチャ)は、メニューインタフェース(例えば、図5Mに示すような)に遷移するために使用され、第2の入力ジェスチャ(例えば、深押し)は、図5Nのメッセージ編集インタフェース5052に遷移するために使用される。メニューインタフェース内の編集オプションを選択するタッチ入力5050(図5M)によって、ユーザは、メッセージアプリケーションを、図5Mに示すメニューインタフェースから図5Nに示すメッセージ編集インタフェース5022に遷移することができる。
第1のメッセージ5046-1などのそれぞれのメッセージを編集するために、図5Nのメッセージ編集インタフェース5052は、キーボード5054と、更新アフォーダンス5056とを含む。それぞれのメッセージに対するメッセージ編集インタフェース5052を表示している間に、電子デバイスは、それぞれのメッセージを修正し、修正されたバージョンのメッセージを表示し、及び更新アフォーダンスをアクティブ化する入力を検出する(例えば、更新されたメッセージを、メッセージセッションの1人以上の他の参加者の1つ以上の他の電子デバイスに送信するための)、図5Nに示す入力5057などの1つ以上の入力を検出する。
図5Oは、メッセージ5046が更新された後の会話記録5004を示す。会話記録5004は編集されたメッセージを含むので、その編集されたメッセージは、メッセージの元のバージョンがメッセージセッションの他の参加者(単数又は複数)に送信された後に特定のメッセージが修正されたという1つ以上のインジケーション5058を含む。図5Oでは、2つのそのような修正のインジケーションがある。すなわち、インジケーション5058-1は、メッセージ領域の後ろの陰影領域であり、インジケーション5058-2は、メッセージが修正されたバージョンを含むメッセージ領域の下方に表示されたテキスト(例えば、「編集済み」)である。
編集又は修正されたメッセージは、更に再び編集できる。電子デバイスは、メッセージが修正されたバージョン5046-2を編集する要求に対応する入力(例えば、図5Oの入力5060)に応じて、図5Rに示すように、メッセージが修正されたバージョンに対するメッセージ編集インタフェースを表示する。図5Rに示すメッセージ編集インタフェースは、編集対象のメッセージ5046-2、キーボード、及び更新アフォーダンス(少なくとも1つのレビジョンがメッセージになるまで任意選択的に示されない)、を含む。
メッセージセッションの参加者は、編集されたメッセージの全てのバージョン、又は2つ以上のバージョンを表示するように要求できる。例えば、図5Oの編集されたメッセージ上の予め定義された入力5060に応じて、電子デバイスは、第1のメッセージ5046-2の修正済みバージョン、及びメニュー5062又は編集オプションのリストを除いて会話記録の表示が隠された、図5Pに示すユーザインタフェースを表示する。この例では、表示されたメニュー5062は、コピーアフォーダンス5064(入力5060によって選択されたメッセージをコピーするため)、編集表示アフォーダンス5066(入力5060によって選択されたメッセージへの編集を示すため)、削除アフォーダンス5068(入力5060によって選択されたメッセージを削除する、又は入力5060によって選択されたメッセージに対して行われた全ての編集を元に戻すため)、及び更なるオプションの表示アフォーダンス5070を含む。図5Pに示す例では、「編集表示」アフォーダンス5066の場所に対応する、タッチ感知面上の場所で入力5072(例えば、タップジェスチャ)が検出され、アフォーダンスがアクティブ化されると、図5Qに示すように、第1のメッセージの現在のバージョン5046-1並びに以前のバージョン5046-2とを含むユーザインタフェース5074(図5Q)を表示する。図5Qのユーザインタフェースにおいて、更なる入力5076又は5078により、編集するメッセージのバージョンを選択する。例えば、選択されたバージョンがハイライトされ、次いで、編集(5080)上をタッチ入力すればメッセージの選択されたバージョンの編集を開始させる。あるいは、完了(5082)上のタッチ入力により、メッセージの選択されたバージョンの編集を終了する。
図5Pに示す編集メニューインタフェースの代わりが、図5Sに示される編集メニューインタフェースであり、選択されたメッセージ(図5Oの入力5060に応じて選択された)と、アフォーダンス(例えば、「編集を表示」オプション5086)を含むメニューであって、アクティブ化されると選択されたメッセージの現在のバージョン5046-2、及び選択されたメッセージの1つ以上の前のバージョン(例えば、バージョン5046-1)を含む、図5Tに示すユーザインタフェースの表示をもたらすアフォーダンスを含むメニューと、を含む。
図5U~図5BFは、インパクト効果オプションをメッセージ入力又はメッセージ領域に適用するための例示的なユーザインタフェースを示す。図5Uは、電子デバイスのユーザ(この例では、Wendy)と、少なくとも1人の他のユーザ(例えば、この例では別の電子デバイスのユーザ、Max)との間のメッセージセッションの会話記録5004を有するメッセージユーザインタフェース5002、及び、第1のメッセージ入力5102(例えば、電子デバイスのユーザによってメッセージ入力エリアに入力されたテキスト、ステッカ、画像及び/又は他のグラフィックスであって、しかしメッセージセッションの少なくとも1人の他のユーザにはまだ送信されていない)を含むメッセージ入力エリア5100、を示す。図5Uでは、第1のメッセージ入力5102はまだ送信されていない。
一部の実施形態では、メッセージ入力エリア5100内の場所に対応する、タッチ感知面上の場所における第1の接触によって、図5AAのインパクト選択インタフェース5110のアクティブ化をトリガーするため、第1の入力5102は、メッセージ入力エリア5100において受信された特定のジェスチャ(例えば、スワイプジェスチャ)を含む。この例では、メッセージ入力エリアはインパクト選択アフォーダンス5104を含み、第1の入力の接触5106の場所はインパクト選択アフォーダンスに対応する。一部の実施形態では、インパクト選択アフォーダンス5104は多目的アフォーダンスであり、同じアフォーダンス5104上の第2のジェスチャ(例えばタップ)は、メッセージ入力エリア5100でメッセージ5102を送信するために使用される。アフォーダンス5104上の第2のジェスチャを含む入力を検出すると、電子デバイスは、メッセージ5102を送信し、図5Vに示すユーザインタフェースに遷移させる。同様に、メッセージ5102が送信された後、他のユーザの電子デバイスは、そのメッセージを受信し、図5Wに示すユーザインタフェースを示す。
図5X、図5Y及び図5Zに示す一部の代替の実施形態では、図5X、図5Y及び図5Zに示す深押し入力5108-1、5108-2、5108-3は、電子デバイスによって検出されると、複数のインパクト効果オプション(例えば、インパクト効果オプション5112-1~5112-4)を含む図5AAのインパクト選択インタフェース5110を、メッセージアプリケーションに表示させる。深押し入力の増加していく強度は、図5X、図5Y及び図5Zの強度線図によって表される。更に、図5X、図5Y及び図5Zに示すように、インパクト選択アフォーダンス5104上の深押し入力5108-1,518-2,5108-3に、第1のインパクト効果オプションへのドラッグが続き(例えば、図5AAのインパクト効果オプション5112-1上の入力5108-4)、次いで、それぞれのインパクト効果オプション5112に対するアフォーダンス上にある間に一時停止すると、そのインパクト効果オプションが選択される。
図5AAのインパクト選択インタフェース5110は、選択メッセージ領域インパクト効果オプションを表示するための「吹き出し(bubble)」アフォーダンス5114、及びフルスクリーンインパクト効果オプションを選択するための「スクリーン(screen)」アフォーダンス5116、を含む。
一部の実施形態では、インパクト選択インタフェース5110は、現在選択されているインパクト効果オプションのアニメーションプレビューを示す。例えば、図5AB~図5ADのシーケンスは、「ラウド」インパクト効果の場所に対応する、タッチ感知面上の場所における入力5108-5に応じて、第1のメッセージ入力(「Congratulations!」)に適用するメッセージ領域インパクト効果オプションである、「ラウド」インパクト効果オプションのアニメーションプレビューを示す。この例では、「ラウド」インパクト効果オプションのプレビューは、メッセージのフォントサイズ及びメッセージ領域のサイズを、最初に大きくなり次いで小さくなるよう表示する。
別の例では、図5A~図5AGのシーケンスは、「スラム」衝撃効果オプションの場所に対応する、タッチ感知面上の場所における第2の入力5108-6に応じて、第1のメッセージ入力(「Congratulations!」)に適用するメッセージ領域インパクト効果オプションである、「スラム」インパクト効果オプションのアニメーションプレビューを示す。この例では、「スラム」インパクト効果オプションのプレビューは、メッセージのフォントサイズとメッセージ領域のサイズを最初に大きくなり次いで小さくなるよう表示し、同時にメッセージ領域の傾き又は回転状態を変更し、メッセージ領域を囲む背景領域の陰影又は色を任意選択的に変更する。任意選択的に、それぞれのインパクト効果オプションの適用では、例えばフォントの色、メッセージ領域内の背景の陰影又は色などの、インパクト効果オプションが適用されるメッセージ領域の追加の特性を変更してもよい。
図5AGはまた、ユーザが選択したインパクト効果オプション、この場合は「スラム」オプションに対応する場所における、送信アフォーダンス上の第3の入力5108-7を示す。それに応じて、メッセージを作成するユーザの電子デバイスは、インパクト選択インタフェースの表示を停止し、会話記録に第1メッセージ入力を含むメッセージ領域を表示し、そして一部の実施形態では、選択されたインパクト効果オプションを、図5AHに示すようにメッセージ領域に、又は図5AIに示すように会話記録全体に(インパクト効果オプションが適用されたメッセージ領域を拡大し、会話記録の1つ以上の他のメッセージ領域のサイズを減少させる)適用し、次いで、図5AJに示すように送信されたメッセージを含む会話記録の最終的又は静的な表示に遷移させる。同様に、Wendyなどの、メッセージセッションの1人以上の他のユーザの電子デバイスにおいて、送信ユーザによって選択されたインパクト効果オプションに依存して、選択されたインパクト効果オプションを送信されたメッセージのメッセージ領域又は会話記録全体のいずれかに適用しながら、送信メッセージが表示されるが、その一例を図5AK、5AL、5AMのシーケンスで示す。
図5AN~図5ASのシーケンスは、それぞれの送信メッセージ(「congrats」)に適用される「ラウド」インパクト効果オプションの例を示す。図5AT~図5AWのシーケンスは、それぞれの送信メッセージ(「I'm sorry.」)に適用される「ジェントルインパクト効果オプションの例を示す。
一部の実施形態では、選択されたインパクト効果オプションは、全画面効果のため、送信メッセージを有するメッセージ領域を含む、メッセージを送信又は受信する電子デバイスの表示画面の全て(又は実質的に全て)に適用されるが、その一例を、図5AX~図5BFのユーザインタフェース画像のシーケンスによって示す。図5AX~図5BFは、第1のメッセージ入力(「Hell No!!」)の「スラム」効果の進行を示す。まず、第1のメッセージ入力が拡大され、回転され、かつ暗い背景で表示され(図5AX)、次にいっそう大きくかついくぶん薄い背景で表示され(図5AY)、次いで拡大が小さくなりかつ以前とは異なる角度で回転され(図5AZ)、更に拡大が小さくなりかつぼやけたボーダーで表示され(図5BA)、次に縮小されたサイズの異なる背景かつ異なる回転で表示され(図5BB)、次いで、第1のメッセージ入力が回転されない通常の(デフォルト)サイズでかつ正常(デフォルト)の背景(図5BF)で表示されるまで、メッセージ領域の周りに異なる影のシーケンスが表示される(図5BC、5BD、5BE)。
図5BG~図5CAは、秘密メッセージと相互作用するための例示的なユーザインタフェースを示す。図5BGに示すインパクト選択インタフェース5110は、複数のインパクト効果オプション(例えば、図5AAに関して本明細書の他の部分に記載されるインパクト効果オプション5112-1~5112-4)を含む。この例では、インパクト選択インタフェース5110はまた、選択メッセージ領域インパクト効果オプションを表示する「吹き出し」アフォーダンス5114、及びフルスクリーンインパクト効果オプションを選択する「スクリーン」アフォーダンス5116を含む。
一部の実施形態では、表示されるインパクト効果オプションは、会話記録においてメッセージのコンテンツを秘密にするオプション(図5BGで空のメッセージ領域によって示される、図5AAの「見えないインク(invisible ink)」オプション5112-1)を含む。図5BGの例では、見えないインクオプションは、それぞれのインパクト効果オプションを含むメッセージ(ユーザ指定のメッセージ入力を含む)を送信するための送信アフォーダンス5118を含む。図5BGに示す例では、インパクト選択インタフェース5110は、任意のインパクト効果オプションの選択を取り消し、メッセージアプリケーションを、メッセージアプリケーションの以前のユーザインタフェース又はメッセージアプリケーションの予め定義されたユーザインタフェースのいずれかに戻す取消アフォーダンス5120を含む。
いったん見えないインクオプションを用いてメッセージ(以下、参照を容易にするために「秘密メッセージ」と呼ぶ)が送信されると、秘密メッセージを含む会話記録を表示する電子デバイスのユーザが、図5BH~図5BLのシーケンスに示すように、タッチ入力5128-1、5128-b、5128-cの位置に対応するメッセージの一部を一時的に顕示化する、秘密メッセージを含むメッセージ領域上でタッチ入力5128-a、5128-b、5128-cをスライドさせるなどの、それぞれのジェスチャを実行するまで、又は、図5BM~図5BPのシーケンスに示すように、深押し入力5130-a、5130-b、5130-cの強度に対応する、及び深押し入力5130-a、5130-b、5130-cの位置にも任意選択的に対応する部分で顕示化する、秘密メッセージを含むメッセージ領域上で深押しジェスチャを実行するまで、図5BHに示すように、秘密メッセージは、例えばメッセージを隠すスクリーン要素5124によって表示されないか、又は不明瞭にされる。これらの例では、秘密メッセージは、秘密メッセージ又はその一部を一時的に顕示化させる接触入力の終了の検出に応じて、再び秘密にされる。
別の例では、図5BQ~図5BVのシーケンスは、図5BQ~図5BTに示すように徐々に顕示化され、次いで、図5BT~図5BVに示すように徐々に秘密にされる秘密メッセージを示す。更に別の例では、図5BW~図5CAのシーケンスは、徐々に顕示化されていく写真の絵を含む秘密メッセージを示す。
図5CB~図5CWは、メッセージが拡張メッセージコンテンツトリガーを含む場合に、拡張メッセージコンテンツをトリガーし、メッセージユーザインタフェースに効果を適用するための例示的なユーザインタフェースを示す。より具体的には、メッセージセッションにおけるそれぞれのメッセージは、拡張メッセージコンテンツトリガーとともに送信することができ、互換性のあるメッセージアプリケーションを含む電子デバイスが拡張メッセージコンテンツトリガーを含むそのメッセージを受信すると、電子デバイスは受信したメッセージ及び拡張メッセージコンテンツとともに会話記録を表示する。一部の実施形態では、表示される特定の拡張メッセージコンテンツは、拡張メッセージコンテンツトリガー内の1つ以上のパラメータによって示される。
図5CB及び図5CCは、フルスクリーンインパクト効果のプレビューを表示するユーザインタフェースの例を示し、この場合、移動又はアニメーション化されたバルーン5152-1を含むフルスクリーンインパクト効果である。図5CBに示すように、メッセージ「Congratulations!」を作成する電子デバイスのユーザは、フルスクリーンインパクト効果オプションを選択するための「スクリーン」アフォーダンス5116を選択した。同様に、図5CD~図5CFのシーケンスは、フルスクリーンインパクト効果のプレビューを表示するユーザインタフェースの例を示し、この場合は、動く又はアニメーション化された紙吹雪5152-2を含むフルスクリーンインパクト効果である。ここに示す例では、ユーザは、図5CCに示すスワイプジェスチャ5156などのスワイプジェスチャを使用して利用可能なフルスクリーンインパクト効果を通してナビゲートし、電子デバイスに、図5CCに示すバルーンフルスクリーンインパクト効果のプレビューから、図5CDに示す紙吹雪のフルサイズの全画面効果に移動させる。図5CB及び図5CCに示すように、ユーザインタフェースは、効果オプションインジケータ5154(時に、ページドットとも呼ばれる)を含み、どの全画面効果オプションが現在選択されているか又は現在プレビューされているかを示し、更に、いくつの全画面効果オプションが使用可能で、シーケンス内のこれらのオプションのうちのどれが現在表示されているかを示すことができる。
図5CGは、いずれのメッセージも拡張メッセージコンテンツトリガーを含まない会話記録を有するユーザインタフェースの一例であり、トリガーに対応する拡張メッセージコンテンツを表示せずに記録内にメッセージを表示する。
図5CH~図5COのシーケンスは、対応する拡張メッセージコンテンツトリガーを含むメッセージ(「Happy Birthday!!!!!」)が受信されたときに表示されるバルーン全画面効果の例を示す。同様に、図5CP~図5CWのシーケンスは、対応する拡張メッセージコンテンツトリガーを含むメッセージ(「Happy New Year!!!」)が受信されたときに表示される花火全画面効果の例を示す。
図5CX~図5DCは、別々のメッセージで組合せ可能なコンテンツを検出し応答するための例示的なユーザインタフェースを示す。図5CXにおいて、メッセージユーザインタフェース5002は、電子デバイスのユーザと第1の他のユーザを含む少なくとも1人の他のユーザ(例えば、別の電子デバイスのユーザ)との間のメッセージセッション内の会話記録5004、及びメッセージ入力エリア5100、を含む。第1のメッセージ領域5008内に受信された第1のメッセージ5170が、会話記録5004に示される。第1のメッセージ5170、例えばビールグラスは、第1の組合せ可能なコンテンツ(例えば、絵文字又はステッカなどの画像)を有する。図5CYにおいて、電子デバイスのユーザは、メッセージユーザインタフェース5002のメッセージ入力エリア5100に第2メッセージ5172を入力し、送信アフォーダンス5118を選択する入力5174によって第2メッセージ5172を送信する。これにより、図5CZに示すメッセージユーザインタフェースが表示される。
第2のメッセージ5172が、第1メッセージ5170内の第1の組合せ可能なコンテンツとともに予め定義された組合せであるコンテンツ5176を形成する、第2の組合せ可能なコンテンツを含む場合、電子デバイスは、一緒にカチッと音を立てる2つのビールグラスのアニメーション(図5DAに示すように)及び/又は単語「Cheers!」(図5DAに示すように)などの、予め定義された組合せに対応するコンテンツを表示する。同様に、メッセージセッションにおける1人以上の他のユーザの電子デバイスは、第1のメッセージ、第2のメッセージ、及び予め定義された組合せに対応するコンテンツを表示する。予め定義された組合せに対応するコンテンツ5176は、第2のメッセージが送信された後に短時間表示されるアニメーションであってもよいことに留意されたい。任意選択的に、予め定義された組合せに対応するコンテンツの表示は、組合せ可能なコンテンツを含む第1及び第2のメッセージの両方が会話記録5004に表示されている間に、又は他の予め定義された基準が満足されたときに(例えば、組合せ可能なコンテンツを含む第1及び第2のメッセージの両方が会話記録5004に表示され、そこでは、Nが1から60秒の間の予め定義された値であって、少なくともN秒間メッセージセッションに新たなアクティビティがない)、周期的に繰り返される。
図5DB及び5DCのシーケンスは、第1のユーザが第1のメッセージ5178「Happy,」を送信し、第2のユーザが第2のメッセージ5180「Birthday!」を入力する組合せ可能なコンテンツの別の例を示す。第1のメッセージ及び第2のメッセージの両方が予め定義された組合せに対応する組合せ可能なコンテンツを含む場合には、予め定義された組合せに対応するコンテンツが、送信者の電子デバイス若しくは受信者の電子デバイスのいずれか、又は(典型的に)その両方によって表示される、メッセージユーザインタフェースのメッセージ記録に表示される。例えば、この例における予め定義された組合せに対応するコンテンツは、図5CH~図5COに示されているものと同様のバルーンであってもよい。
図5DD~図5DIは、一部の実施形態に係る、メッセージ領域のタイプ又は形状を選択するための例示的なユーザインタフェースを示す。図5DDは、メッセージ入力領域に既に入力された第1のメッセージ入力5102(「Yes!」)を有するメッセージ入力領域5100を含む、メッセージユーザインタフェース5002を示す。メッセージユーザインタフェース5002は、メッセージ入力領域5100内又はその近くに送信アフォーダンス5200を含み、その領域に入力されたメッセージを送信するためのものである。加えて、図5DDは、オプションアフォーダンス5204上の接触5202を含む入力を示す。
図5DEに示したメッセージユーザインタフェースは、図5DEで「吹き出し」アフォーダンスとラベル付けされたメッセージ領域タイプ/形状選択アフォーダンス5208を有するいくつかのメッセージ処理オプションに対するアフォーダンスを含む、オプションアフォーダンス5204上の接触5202を含む入力に応じて表示される。このメッセージユーザインタフェースを表示している間に、電子デバイスは、「吹き出し(bubbles)」オプションアフォーダンス5208上の接触5206を含む入力を受信する。
図5DFに示されるメッセージユーザインタフェースは、「吹き出し」アフォーダンス5208上の接触5206を含む入力に応じて表示される。図5DFはまた、第1のメッセージ入力5102を含み、デフォルト、又は以前に選択されたメッセージ領域タイプを有するプレビューメッセージ領域5210-1を示す。これらの実施形態では、メッセージアプリケーションは、それぞれが対応する形状を有し、及び典型的に対応するフォントサイズを有し、並びに、フォント色、境界色、及び/又は背景色のうちの1つ以上を任意選択的に有する、複数のメッセージ領域タイプ又はオプションを有する。図5DFに示す例では、送信アフォーダンス5200は、メッセージ入力領域5100の代わりにプレビューメッセージ領域5210-1の近くに表示される。第1のメッセージ5172に対する異なるメッセージ領域タイプを選択するため、又は他の利用可能なメッセージ領域タイプを見るために、ユーザはスワイプジェスチャ5212を入力する。スワイプジェスチャ5212に応じて、図5DFから図5DGへの進行に示すように、メッセージ領域タイプのアイコンのスクロールセットがスクロールされる。
図5DGに示すメッセージユーザインタフェースの例では、図5DHに示すように、電子デバイスにメッセージ入力5102とともに使用されるメッセージ領域に対するメッセージ領域タイプを変更させる、接触5214を含む入力が受信される。図5DHでは、メッセージ入力5102はここで、接触5214(図5DGに示す)を含む入力によって選択されたメッセージ領域タイプに対応するメッセージ領域タイプを有するメッセージ領域5210-2内に示される。ユーザは、異なるメッセージ領域タイプを選択し続けることができる。例えば、図5DIでは、メッセージ入力5102はここで、接触5216を含む入力によって選択されたメッセージ領域タイプに対応するメッセージ領域タイプを有するメッセージ領域5210-3内に示される。
図5DJ~図5DQは、メッセージを構成する間に、自動提案された絵文字を表示して選択するための例示的なユーザインタフェースを示す。図5DJでは、メッセージ入力領域5100内の入力を含むが送信されていないメッセージ5220を含む、会話記録5004を有するメッセージユーザインタフェース5002を示す。この例では、インタフェース5002を使用するメッセージングは、入力メッセージを送信するためのメッセージ入力領域5100内又はその近くに、送信アフォーダンス5200を含む。
図5DK~図5DNに示すように、電子デバイスは、メッセージ入力領域5100内の1つ以上の単語又は用語を置換するための絵文字の提案を自動的に開始する。例に示すように、電子デバイスは、絵文字に置換される候補であるメッセージのシーケンス内の単語又は用語をハイライトするが、図5DK及び5DLに示すように入力メッセージ5220内の用語「sushi」5222を最初にハイライトし、図5DMに示すように入力メッセージ5220内の用語「wine」5224を次にハイライトし、図5DNに示すように入力メッセージ5220内の用語「bowling」5226を更にハイライトする。入力メッセージ5220内の「sushi」5222などのハイライト用語のうちの1つを(例えば、ハイライトした用語上の接触を含む入力によって)選択する電子デバイスのユーザに応じて、図5DOに示すように、用語はその用語に対応する対応絵文字5232に置換される。同様に、図5DPでは、入力メッセージ5220内の用語「wine」は、入力メッセージ5220内のハイライトされた用語「wine」のユーザ選択に応じて、その用語に対応する絵文字5234(例えば、ワイングラス絵文字)に置換されている。第3の例では、入力メッセージ5220の「bowling」という用語は、入力メッセージ5220内のハイライトされた用語「bowling」のユーザ選択に応じて、その用語に対応する絵文字5236(例えば、ボウリング絵文字)に置換されている。
メッセージ確認応答
図6A~図6Eは、一部の実施形態に係る、会話記録のメッセージ領域に確認応答を適用するためのプロセスのフロー図である。より具体的には、これらの方法は、複数の確認応答オプションを含み、選択された確認応答オプションを受信メッセージに適用する確認応答選択アフォーダンスを表示することに関する。一部の実施形態では、適用された確認応答オプションのインジケーションがリモートデバイスに送信される(例えば、リモートデバイスの会話記録内に表示するために)。確認応答により、ユーザは、複数の単語を入力することなく感情をすばやく伝達することができる。キーストロークを省くことでユーザの時間を節約し、より効率的な人間と機械の相互作用を生成する。
これらの方法を実行する電子デバイス(例えば、ポータブル多機能デバイス100又はデバイス300)の1つ以上の例を、図5A~図5Kに示す。
図6A~図6Eは、本明細書で時に第1の電子デバイスと呼ばれる、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する電子デバイスによって実行される方法600を示すフロー図である。一部の実施形態では、電子デバイスは、タッチ感知面上の接触強度を検出するように構成された1つ以上のセンサ(例えば、タッチスクリーンディスプレイ又はトラックパッド内のセンサ)を含む。
方法600を実行する間、電子デバイスは、ディスプレイ上に(例えば、メッセージアプリケーションの)メッセージユーザインタフェースを表示する(602)。メッセージユーザインタフェースは、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含む。例えば、図5A、メッセージユーザインタフェース5002内の会話記録5004を参照されたい。電子デバイスは、メッセージセッションに含まれる別のユーザに対応する電子デバイス(例えば、第2の電子デバイス)から、メッセージセッション内に第1のメッセージを受信する(604)。例えば、図5Aでは、メッセージ5006が第1のメッセージである。
第1のメッセージの受信に応じて、電子デバイスは、会話記録(例えば、図5Aの会話記録5004)内の第1のメッセージ領域(例えば、図5Aのメッセージ領域5008-1)に、第1のメッセージ(例えば、図5Aのメッセージ5006)を表示する(606)。本明細書では、メッセージ領域は、メッセージ領域、吹き出し、プラッタ、又はメッセージセッションの会話記録におけるメッセージのための他のコンテナである。電子デバイスは、会話記録内の第1のメッセージ領域の場所に対応する、タッチ感知面上の場所において、第1の接触(例えば、図5Aの接触5010)による第1の入力を更に検出する(608)。例えば、第1の接触は、第1のメッセージ領域上の、又は第1のメッセージ領域に対する隠れたヒット領域上の、タップジェスチャ、長押しジェスチャ、軽押しジェスチャ、又は深押しジェスチャであってもよい。
次に、第1の入力の検出に応じて、電子デバイスは、第1のメッセージ領域に対応するメッセージインタフェース内の場所において、確認応答選択アフォーダンス(例えば、図5Bの確認応答選択アフォーダンス5012)を表示する(610)。確認応答選択アフォーダンスは、複数の確認応答オプションを表示する。例えば、図5Bの確認応答オプション5014-1から5014-6を参照されたい。一部の実施形態では、確認応答選択アフォーダンスは、第1のメッセージ領域に近接して及び/又はオーバーラップして表示される確認応答選択プラッタである。一部の実施形態では、接触の特性強度が第1の強度閾値を上回っているという判定に従って、確認応答選択アフォーダンスが表示される。一部の実施形態では、ユーザは、繰り返しの深押しを含むジェスチャ、ドラッグジェスチャなどの予め定義された入力ジェスチャを実行することによって、確認応答オプション5014の最初に表示されたセットに加えて、追加の確認応答オプションを顕示化することができる。
一部の実施形態では、複数の確認応答オプションは、ハート、サムズアップ、サムズダウン、「HA!」、「!!」、及び/又は疑問符の少なくとも1つを表示するグラフィカルアイコンを含む(612)。(例えば、図5Bに示す確認応答オプション5014-1から5014-6を参照されたい)。
一部の実施形態では、方法600は、第1の入力の検出に応じて、メッセージセッションに含まれる少なくとも1つの他のユーザに対応する1つ以上の電子デバイスに、メッセージセッションに対応する会話記録内で、対応する第1のメッセージ領域に対する確認応答準備インジケータを表示させる(例えば、メッセージセッション内の他のデバイスに、図5Gに示すものに類似した、少なくとも1つの他のユーザのデバイスの会話記録内で、対応する第1のメッセージ領域に隣接する及び/又は部分的にオーバーラップするアニメーション化された楕円記号を含む確認応答領域を表示させる)情報を送信する(614)ことを含む。
第1の入力を検出し応答した後、電子デバイスは、確認応答選択アフォーダンス(例えば、図5Bの確認応答選択アフォーダンス5012)内の第1の確認応答オプション(例えば、図5Bの確認応答オプション5014-2)の場所に対応する、タッチ感知面上の場所において、第2の接触(例えば、図5Bの接触5016)による第2の入力を検出する(616)。任意選択的に、第2の接触の検出は、例えば、第1の確認応答オプション上の、又は第1の確認応答オプションに対して隠されたヒット領域上の、タップジェスチャ、軽押しジェスチャ、深押しジェスチャ、又はリフトオフを検出することによって達成される。一部の実施形態では、第1の接触及び第2の接触は、同じ指によって作られた2つの異なるタップジェスチャにおける接触などの別個の接触である。一部の実施形態では、第1の接触及び第2の接触は、第1の確認応答オプションへのドラッグ及び第1の確認応答オプションにおけるリフトオフが続く、第1のメッセージ領域の長押し、軽押し又は深押しなどの、タッチ感知面への同じ連続接触の異なる部分である。
第2の入力の検出に応じて、電子デバイスは、第1の確認応答オプションを第1のメッセージ領域に適用する(618)。例えば、図5Cは、第1のメッセージ領域に適用される第1の確認応答オプション5014-2を示す。一部の実施形態では、電子デバイスはまた、第2の入力の検出に応じて、確認応答選択アフォーダンスの表示を停止する。
一部の実施形態では、第1の確認応答オプションを第1のメッセージ領域に適用すること(618)は、第1のメッセージ領域に隣接する及び/又は部分的にオーバーラップする場所において、第1の確認応答オプションを表示することを含む(620)。例えば、図5Cを参照すると、対応する第1のメッセージ領域に適用され、この場合は部分的にオーバーラップする第1の確認応答オプション5014-2が示される。
任意選択的に、一部の実施形態では、第2の入力の検出に応じて、電子デバイスは、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスにメッセージセッションに対応する会話記録内の対応する第1のメッセージ領域に第1の確認応答オプションを適用させる、情報を送信する(622)。一部の実施形態では、これは、メッセージセッションの他のデバイスに少なくとも1つの他のユーザのデバイスの会話記録内の対応する第1のメッセージ領域に隣接する及び/又は部分的にオーバーラップする第1の確認応答オプションを表示させる情報、を送信することによって達成される。例えば、対応する第1のメッセージ領域に適用される(この場合、部分的にオーバーラップする)第1の確認応答オプション5014-2を含む、メッセージセッションの他のデバイスのうちの1つに表示される会話記録を示す図5Hを参照されたい。一部の実施形態では、第1の確認応答オプション(例えば、第1の確認応答オプション5014-2)が、対応する第1のメッセージ領域に対する確認応答準備インジケータ(例えば、図5Gの確認応答準備インジケータ5020)を置換する(例えば、アニメーション化された遷移を介して)。
一部の実施形態では、第1の確認応答オプションは、第1のメッセージ領域とは異なる形状を有する確認応答領域に表示される(例えば、図5Cに示すように、別のユーザからのメッセージに対するそれぞれのメッセージ領域5008-1は長方形であり、及び/又は、第1のメッセージが他のユーザからのものであるという第1のインジケータ(例えば、ディスプレイの第1の側に向いているテールセクション「<」)を含むが、それぞれの確認応答領域5018は円形であり、及び/又は、確認応答がユーザからのものであるという第2のインジケータを含む(例えば、第1の側の反対側、ディスプレイの第2の側に向いているテールセクション「Oo」)。
一部の実施形態では、方法600は、第1のメッセージ領域に第1の確認応答オプションを適用した後(及び、一部の実施形態では、確認応答選択アフォーダンスの表示を停止し)、第1のメッセージ領域(又は、一部の実施形態では、第1の確認応答オプション)の場所に対応する、タッチ感知面上の場所において、第3の接触(例えば、図5Cの接触5022)による第3の入力を検知すること(632)を含む、動作のシーケンス(632~658)を実行することを含む。一部の実施形態では、第3の入力を検出すること(632)は、第1のメッセージ領域(若しくは第1の確認応答オプション)上の、又は第1のメッセージ領域(若しくは第1の確認応答オプション)の隠れたヒット領域上の、タップジェスチャ、長押しジェスチャ、軽押しジェスチャ、又は深押しジェスチャを検出することを含む。
そのような実施形態では、方法600は、第1のメッセージ領域(又は、一部の実施形態では、第1の確認応答オプション)の場所に対応する、タッチ感知面上の場所における第3の接触による第3の入力の検出(632)に応じて、確認応答編集インタフェース(例えば、図5Dの確認応答編集インタフェース5024)を表示すること(634)、を更に含む。任意選択的に、確認応答編集インタフェースは、会話記録の最上部に及び/又はその代わりに表示される。
そのような実施形態では、方法600は、確認応答編集インタフェースへの1つ以上の入力を検出すること(650)(例えば、図5Eの接触5026を検出すること)、検出された1つ以上の入力に従って、第1のメッセージ領域に対する確認応答オプションを編集(例えば、変更又は削除)すること(652)、確認応答編集インタフェースの表示を停止すること(654)、編集された確認応答を含む会話記録内に第1のメッセージ領域を表示すること(656)、及び、メッセージセッションに含まれる少なくとも1つの他のユーザに対応する1つ以上の電子デバイスにメッセージセッションに対応する会話記録内に編集された確認応答を含む対応する第1のメッセージ領域を表示させる情報、を送信すること(658)、を更に含む。例えば、図5Dは、確認応答オプション5014-2が以前に選択されたというインジケーション(例えば、ハイライト又はグレイアウト)を含む確認応答編集インタフェース5024を示す。図5Eは、異なる第2の確認応答オプション5014-1を選択する入力、接触5026を示し、図5Fは、編集された確認応答を含む(すなわち、第1の確認応答オプション5014-2の代わりに表示された第2の確認応答オプション5014-1を含む)会話記録内のメッセージ領域を示す。
一部の実施形態では、方法600は、第3の接触による第3の入力の検出(632)に応じて確認応答編集インタフェースを表示すること(634)に加えて、第3の接触による第3の入力の検出に応じて図5Eに例示した会話記録の表示を停止する(又は薄暗くする)こと(636)を含む。
更に、一部の実施形態では、方法600は、第3の接触による第3の入力の検出に応じて、確認応答編集インタフェースに第1のメッセージ領域を表示すること(638)を含む。例えば、図5Eは、確認応答編集インタフェースの会話記録内にいかなる他のメッセージ領域を表示することなく、確認応答編集インタフェースに第1のメッセージ領域を表示する例を示す。一部の実施形態では、第1のメッセージ領域が、確認応答編集インタフェースで、第3の入力を検出する直前に会話記録内の第1のメッセージ領域が表示されたのと同じ場所に、最初に表示される。
一部の実施形態では、第3の接触による第3の入力を検出すること(632)に応じて、確認応答編集インタフェースを表示すること(634)に加え、方法600は、第3の接触による第3の入力の検出に応じて、確認応答編集インタフェースで複数の確認応答オプションを含む確認応答選択アフォーダンスを表示することを含む。ここで第1の確認応答オプションは、第1の確認応答オプションが現在選択されていることを示すために、複数の確認応答オプションの他の確認応答オプションから視覚的に区別されている(例えば、ハイライトされて)。例えば、図5Dは、確認応答編集インタフェース5024が、複数の確認応答オプション5014を含む確認応答選択アフォーダンス(図5Bのアフォーダンス5012と類似の)を含むことを示す。
一部の実施形態では、第3の接触による第3の入力の検出(632)に応じて確認応答編集インタフェースを表示すること(634)に加えて、方法600は、第3の接触による第3の入力の検出に応じて、第1のメッセージ領域に対するアクティブ化可能な編集オプションを含む、確認応答編集インタフェース内のメニューを表示すること(642)を含む。例えば、図5Dは、第1のメッセージ領域のコンテンツをコピーするための「コピー」アイコン530を含む編集メニュー5028を示す。図5Dには示されていないが、編集メニュー5028は、現在適用されている確認応答オプションを削除する「削除」アイコンなどの、追加のアクティブ化可能な編集オプションを任意選択的に含む。
一部の実施形態では、方法600は、上述のようなメッセージユーザインタフェースを表示する間に、同時に、(A)会話記録内に第2のメッセージ領域(例えば、図5Iのメッセージ領域5008-2)、ここで、(1)メッセージセッションのユーザのうちの少なくとも一部が、第2のメッセージ領域に対する第1の確認応答オプションを選択し、(2)メッセージセッション内のユーザのうちの少なくとも一部が、第1の確認応答オプションとは別個の第2のメッセージに対する第2の確認応答オプションを選択し、及び、(B)メッセージセッションのユーザが第2のメッセージ領域に対する複数の確認応答オプションを選択したという1つ以上の指標(例えば、指標5036)、をディスプレイ上に表示する(660)。図5Iに示す例では、指標5036は、オーバーラップする確認応答オプションアイコンのスタックであるが、代わりに複数の個別の確認応答オプションアイコンであってもよい。図5Iに示すように、指標5036は、任意選択的に、第2のメッセージ領域5008-02に隣接し、及び/又は部分的にオーバーラップする。一部の実施形態では、選択された所与の確認応答オプションに対して、メッセージセッションのユーザ数の閾値数よりも多く(例えば、2、3、又は4ユーザより多く)確認応答オプションが選択された場合、選択は蓄積される。
そのような実施形態では(すなわち、第2のメッセージ領域、及びメッセージセッションのユーザが第2のメッセージ領域に対する複数の確認応答オプションを選択したことの指標を表示している)、方法600は、第2のメッセージ領域(例えば、図5Iの第2のメッセージ領域5008-2上の接触5034)の場所に対応する、タッチ感知面上の場所において接触入力を検出することを含む(662)。あるいは、検出された入力は、メッセージセッションのユーザが第2のメッセージ領域に対する複数の確認応答オプションを選択したという1つ以上の指標の場所に対応する。一部の実施形態では、入力を検出すること(662)は、第2のメッセージ領域上の又は第2のメッセージ領域に対する隠れたヒット領域上のタップジェスチャ、長押しジェスチャ、軽押しジェスチャ、又は深押しジェスチャを検出すること、を含む。
第2のメッセージ領域の場所に対応する、タッチ感知面上の場所における接触入力の検出に応じて、方法600は、メッセージセッションのユーザによって選択された各タイプの確認応答オプションに対するタリーを含むユーザインタフェースを表示すること(664)、を含む。例えば、図5Jに示すように、ユーザインタフェースは、メッセージセッションでユーザによって選択された3つの別個の確認応答オプションに対するタリー5040-1、5040-2、5040-3を含む。あるいは、一部の実施形態では、第2のメッセージ領域の場所に対応する、タッチ感知面上の場所における接触入力の検出に応じて、デバイスは、タリーアフォーダンス(例えば、メニューオプション)を含むユーザインタフェースを表示し、タリーアフォーダンスは、アクティブ化されると、メッセージセッションのユーザによって選択された確認応答オプションの各タイプに対するタリーを表示する。
一部の実施形態では、方法600は、メッセージセッションのユーザが選択した確認応答オプションの各タイプに対するタリーを表示している間に、第2のメッセージ領域に対する第1の確認応答オプションに対するタリーに対応する、タッチ感知面上の場所において、接触による入力を検出すること(666)を含む。例えば、図5Jで参照するように、入力はタリー5040-1を選択することができる。一部の実施形態では、タリーに対応する、タッチ感知面上の場所において入力を検出すること(666)は、第1の確認応答オプションに対するタリー上で、又は第1の確認応答オプションを選択したメッセージセッションのユーザに対応するアイコンのスタック(例えば、アバター)上で、又はこのタリー若しくはアイコンのスタックの隠れたヒット領域上で、タップジェスチャ、長押しジェスチャ、軽押しジェスチャ、又は深押しジェスチャを検出することを含む。
そのような実施形態では、方法600は、第2のメッセージ領域の第1の確認応答オプションのタリーに対応する、タッチ感知面上の場所における接触入力の検出(666)に応じて、第2のメッセージ領域の第1の確認応答オプションを選択したユーザを表すアイコン(例えば、アバター)を表示すること(668)、を更に含む。例えば、図5Kに示すように、タリー5040-1(図5J)の選択入力に応じてデバイスによって表示されるユーザインタフェースは、第2のメッセージ領域に対する第1の確認応答オプションを選択したユーザを表すアイコン(例えば、アバター)の表示を含み、アイコンはメッセージセッションでユーザによって選択された確認応答オプションの各タイプに対するタリーの表示を置換する(図5Jに示す)。
図6A~図6Eにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。加えて、本明細書に記載の他の方法(例えば、方法800、1000、1200、1400、1600、及び1800)に関して本明細書で記載されている他のプロセスの詳細はまた、図6A~図6Eに関連して上述された方法600に類似の方法で適用可能であることも留意されたい。例えば、方法600に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、図7は、上述のように本発明の原理に従って構成された電子デバイス700の機能ブロック図を示す。このデバイスの機能ブロックは、本発明の原理を実行するためのハードウェア、ソフトウェア、又はハードウェア及びソフトウェアの組合せにより実施することができる。図7に述べられる機能ブロックは、上記に述べたような本発明の原理を実施するために、組合せるか、又はサブブロックに分割することができることが当業者によって理解される。したがって、本明細書における説明は、あらゆる可能な組合せ若しくは分割、又は本明細書に述べられる更なる機能ブロックの定義を支持し得るものである。
図7に示すように、電子デバイス700は、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含むメッセージユーザインタフェースをディスプレイユニット上に表示するように構成されたディスプレイユニット702、」接触を検出するように構成されたタッチ感知面ユニット704、並びに、ディスプレイユニット702及びタッチ感知面ユニット704に結合された処理ユニット706、を含む。一部の実施形態では、処理ユニット706は、検出ユニット708、表示可能化ユニット710、停止ユニット712、送信ユニット714、受信ユニット716、適用ユニット718、及び編集ユニット720を含む。
処理ユニット706は、メッセージセッションに含まれる別のユーザに対応する電子デバイスから、メッセージセッション内に第1のメッセージを受信し(例えば、受信ユニット716を用いて)、第1のメッセージの受信に応じて、ディスプレイユニット702上で、会話記録内の第1のメッセージ領域に第1のメッセージの表示を可能化し(例えば、表示可能化ユニット710を用いて)、会話記録の第1のメッセージ領域の場所に対応する、タッチ感知面ユニット704上の場所において、第1の接触による第1の入力を検出し(例えば、検出ユニット708を用いて)、第1の入力を検出に応じて、第1のメッセージ領域に対応するメッセージインタフェース内の場所において、複数の確認応答オプションを表示する確認応答選択アフォーダンスの表示を可能にする(例えば、表示可能化ユニット710を用いて)。確認応答選択アフォーダンス(例えば、検出ユニット708)内の第1の確認応答オプションの場所に対応する、タッチ感知面ユニット704上の場所において、第2の接触による第2の入力を検出し、及び、第2の入力の検出に応じて、第1のメッセージ領域に対する第1の確認応答オプションを適用する(例えば、適用ユニット718を用いて)、ように構成されている。
一部の実施形態では、第1の確認応答オプションを第1のメッセージ領域に適用することは、第1の確認応答オプションを第1のメッセージ領域に隣接する及び/又は部分的にオーバーラップする場所に表示することを含む。
一部の実施形態では、第1の確認応答オプションは、第1のメッセージ領域とは異なる形状を有する確認応答領域に表示される。
一部の実施形態では、第1の入力の検出に応じて、処理ユニット706は、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスにメッセージセッションに対応する会話記録内の、対応する第1のメッセージ領域に対する確認応答準備インジケータを表示させる情報、を送信する(例えば、送信ユニット714を用いて)ように更に構成されている。
一部の実施形態では、第2入力の検出に応じて、処理ユニット706は、メッセージセッションに含まれる少なくとも1つの他のユーザに対応する1つ以上の電子デバイスにメッセージセッションに対応する会話記録内の第1のメッセージ領域に対応する第1の確認応答オプションを適用させる情報、を送信する(例えば、送信ユニット714を用いて)ように、更に構成されている。
一部の実施形態では、第1のメッセージ領域に第1の確認応答オプションを適用した後、処理ユニット706は、第1のメッセージ領域の場所に対応する、タッチ感知面ユニット704上の場所において、第3の接触による第3の入力を検出し(例えば、検出ユニット708を用いて)、第1のメッセージ領域の場所に対応する、タッチ感知面ユニット704上の場所における第3の接触による第3の入力の検出に応じて、確認応答編集インタフェースの表示を可能化し(例えば、表示可能化ユニット710を用いて)、確認応答編集インタフェースへの1つ以上の入力を検出し(例えば、検出ユニット708を用いて)、検出された1つ以上の入力に従って、第1のメッセージ領域に対する確認応答オプションを編集し(例えば、編集ユニット720を用いて)、確認応答編集インタフェースの表示を停止し(例えば、停止ユニット712を用いて)、編集された確認応答を含む会話記録内に第1のメッセージ領域の表示を可能化し(例えば、表示可能化ユニット710を用いて)、及び、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに、対応する第1のメッセージ領域を編集された確認応答とともにメッセージセッションに対応する会話記録内に表示させる、情報を送信する(例えば、送信ユニット714を用いて)、ように更に構成されている。
一部の実施形態では、処理ユニット706は、第3の接触による第3の入力の検出に応じて、会話記録の表示を停止する(例えば、停止ユニット712を用いて)ように、更に構成されている。
一部の実施形態では、処理ユニット706は、第3の接触による第3の入力の検出に応じて、確認応答編集インタフェース内の第1のメッセージ領域の表示を可能化する(例えば、表示可能化ユニット710を用いて)ように、更に構成されている。
一部の実施形態では、処理ユニット706は、第3の接触による第3の入力の検出に応じて、確認応答編集インタフェース内の複数の確認応答オプションを含む確認応答選択アフォーダンスの表示を可能化する(例えば、表示可能化ユニット710を用いて)、ように更に構成され、第1の確認応答オプションは、第1の確認応答オプションが現在選択されていることを示すために、複数の確認応答オプション内の他の確認応答オプションと視覚的に区別される。
一部の実施形態では、処理ユニット706は、第3の接触による第3の入力の検出に応じて、第1のメッセージ領域に対してアクティブ化可能な編集オプションを含む確認応答編集インタフェース内にメニューの表示を可能化する(例えば、表示可能化ユニット710を用いて)、ように更に構成されている。
一部の実施形態では、複数の確認応答オプションは、ハート、サムズアップ、サムズダウン、「HA!」、「!!」、及び/又は疑問符のうちの少なくとも1つを表示するグラフィカルアイコンを含む。
一部の実施形態では、処理ユニット706は、メッセージセッションのユーザの少なくとも一部が、第2のメッセージ領域に対する第1の確認応答オプションを選択し、メッセージセッションのユーザの少なくとも一部が第1の確認応答オプションとは別個の第2のメッセージ領域に対する第2の確認応答オプションを選択した、会話記録内の第2のメッセージ領域、及び、メッセージセッション内のユーザが第2のメッセージ領域に対する複数の確認応答オプションを選択したことを示す1つ以上の指標、の表示をディスプレイユニット702上で同時に可能化し(例えば、表示可能化ユニット710を用いて)、並びに、第2のメッセージ領域の場所に対応する、タッチ感知面ユニット704上の場所における接触による入力を検出し(例えば、検出ユニット708を用いて)、並びに、第2のメッセージ領域の場所に対応する、タッチ感知面ユニット704上の場所における接触による入力の検出に応じて、メッセージセッションのユーザによって選択された各タイプの確認応答オプションに対するタリーを含むユーザインタフェースの表示を可能化する(例えば、表示可能化ユニット710を用いて)、ように更に構成されている。
一部の実施形態では、処理ユニット706は、メッセージセッションでユーザによって選択された確認応答オプションに対する各タイプのタリーが表示されている間に、第2のメッセージ領域の第1の確認応答オプションに対するタリーに対応する、タッチ感知面ユニット704上の場所において接触による入力を検出し(例えば、検出ユニット708を用いて)、及び、第2のメッセージ領域に対する第1の確認応答オプションに対するタリーに対応するタッチ感知面ユニット704上の場所における接触による入力の検出に応じて、第2のメッセージ領域に対する第1の確認応答オプションを選択したユーザを表すアイコンの表示を可能化する(例えば、表示可能化ユニット710を用いて)、ように更に構成されている。
上述の情報処理方法における動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述したように)又は特定用途向けチップなどの、情報処理機器内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図6A~図6Eを参照して上述された動作は、図1A、図1B、又は図7に示される構成要素によって、任意選択的に実行される。例えば、検出動作606及び616は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と比較し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出し、アプリケーション内部状態192を更新する。一部の実施形態では、イベント処理部190は、アプリケーションによって表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されるかは明らかであるだろう。
以前に送信されたメッセージの編集
図8A~図8Cは、一部の実施形態に係る、以前に送信されたメッセージをメッセージセッションで編集するためのプロセスのフロー図である。より具体的には、本方法は、メッセージを編集するためのインタフェースを表示すること、メッセージの修正されたバージョンを表示すること、メッセージの修正前のバージョンの表示を停止すること、及び/又は修正の少なくとも1つのインジケーションを表示することに関する。
メッセージ記録は、以前のエラーを修正するメッセージを伴う誤字を含むメッセージで、乱雑になる場合がある。以前に送信されたメッセージの編集を可能にすることにより、記録の会話フローがよりよく保存され、会話参加者が会話を続けることがより容易になる。
これらの方法を実行する電子デバイス(例えば、ポータブル多機能デバイス100又はデバイス300)の1つ以上の例を、図5L~図5Tに示す。
図8A~図8Cは、本明細書で時に第1の電子デバイスと呼ばれる、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する、電子デバイスによって実行される方法800を示すフロー図である。一部の実施形態では、電子デバイスは、タッチ感知面上の接触強度を検出するように構成された1つ以上のセンサ(例えば、タッチスクリーンディスプレイ又はトラックパッド内のセンサ)を含む。
一部の実施形態では、方法800は、ディスプレイ上にメッセージユーザインタフェース(例えば、図5Lのメッセージアプリケーションのユーザインタフェース5002)を表示すること(802)を含む。メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録(例えば、図5Lのユーザインタフェース5002の会話記録5004)、及び、ユーザの電子デバイスからメッセージセッションの少なくとも1つの他のユーザに送信されたメッセージセッションの第1のメッセージ(例えば、図5Lのメッセージ5046-1)を含む第1のメッセージ領域(例えば、図5Lの5044)、を含む。
この方法は、第1のメッセージを編集する要求に対応する第1の入力(例えば、入力5048)を検出すること(804)、を更に含む。一部の実施形態では、デバイスは、第1のメッセージ領域(例えば、図5Lのメッセージ領域5044)上の、又は、第1のメッセージ(例えば、図5Nのメッセージ編集インタフェース5052)に対するメッセージ編集インタフェースの表示をもたらす第1のメッセージ領域に対する隠れたヒット領域上の、タップジェスチャ、長押しジェスチャ、軽押しジェスチャ又は深押しジェスチャを検出することによって第1の入力を検出する。一部の実施形態では、デバイスは、メッセージユーザインタフェース内の編集アフォーダンス上の、又は、第1のメッセージ(例えば、図5Nに示すように)用のメッセージ編集インタフェースの表示をもたらす編集アフォーダンスのための隠れたヒット領域上の、タップジェスチャ、軽押しジェスチャ、又は深押しジェスチャを検出する。一部の実施形態では、第1のメッセージがユーザによって最も最近に送信されたメッセージである場合、デバイスは、第1のメッセージに対するメッセージ編集インタフェースの表示をもたらすメッセージ入力エリア(又は、メッセージ入力エリアの編集アフォーダンス)上のタップジェスチャ、長押しジェスチャ、軽押しジェスチャ、又は深押しジェスチャを検出する(例えば、図5Nに示すように)。
一部の実施形態では、第1のメッセージ領域(例えば、図5Lの第1のメッセージ領域5044)の場所に対応する、タッチ感知面上の場所における接触による入力の検出に応じて、デバイスは、アクティブ化されると第1のメッセージ用のメッセージ編集インタフェース(例えば、図5Nのメッセージ編集インタフェース5052)を表示する編集アフォーダンス(例えば、図5Mに示す、メニューオプションとして表示される編集アフォーダンス)、を含むユーザインタフェース表示する。一部の実施形態では、第1のメッセージ領域が第1のメッセージ(図5M)に対するアクティブ化可能なオプションのリストとともに表示されている間に、デバイスは、編集オプション上のタップジェスチャなどの、編集オプションをアクティブ化すると第1のメッセージ用のメッセージ編集インタフェースの表示をもたらす入力(例えば、図5Mの入力5050)を検出する。
方法800は、第1の入力(例えば、図5Lの入力5048、又は図5Mの入力5050)の検出に応じて、第1のメッセージ(例えば、図5Nのメッセージ5046-1)を含む第1のメッセージに対するメッセージ編集インタフェース(例えば、図5Nのメッセージ編集インタフェース5052)、キーボード(例えば、図5Nのキーボード5054)、及び更新アフォーダンス(例えば、図5Nの更新アフォーダンス5056)を表示すること(806)、並びに、第1のメッセージ用のメッセージ編集インタフェースを表示(808)している間に、第1のメッセージを改定する1つ以上の入力を検出すること(810)、第1のメッセージの修正されたバージョンを表示すること(814)、及び更新アフォーダンスをアクティブ化する入力を検出すること(816)を含む。
一部の実施形態では、編集インタフェースを表示すること(806)は、会話記録の表示を置換する(例えば、図5Lと5Nを比較する)。一部の実施形態では、編集インタフェースの表示(例えば、図5Nに示すような)は、第1のメッセージに対するアクティブ化可能なオプションのリストを含むユーザインタフェースの表示(例えば、図5Mに示すような)を置換する。
一部の実施形態では、第1のメッセージを修正する1つ以上の入力を検出すること(810)は、第1のメッセージのテキストを追加及び/若しくは削除するキーボード上の入力を検出すること、並びに/又はテキストを選択、カット、コピー、若しくはペーストする入力を検出するこを含む。例えば、図5N及び図5Oでは、編集は「ridiculous」という用語を「ride」に置換する。一部の実施形態では、更新アフォーダンスをアクティブ化する入力を検出すること(816)は、更新アフォーダンスに対応する場所においてタップジェスチャを検出することを含む。一部の実施形態では、更新アフォーダンスは、(キーボード又は新しいメッセージ入力エリアではなく)メッセージ編集インタフェース内の第1のメッセージの修正されたバージョンに隣接している。
更新アフォーダンスをアクティブ化する入力の検出に応じて(818)、方法800は、第1のメッセージ用のメッセージ編集インタフェースの表示を停止すること(820)、第1のメッセージの修正されたバージョンを、会話記録内の第1のメッセージの代わりに表示すること(822)、第1のメッセージのレビジョンの少なくとも1つのインジケーションを会話記録に表示すること(824)、及びメッセージセッションに含まれる少なくとも1つの他のユーザに対応する1つ以上の電子デバイス(例えば、第2の電子デバイス)に第1のメッセージの修正されたバージョンを送信すること(832)、を更に含み、1つ以上の電子デバイスは、メッセージセッションに対応する会話記録内の第1のメッセージの代わりに、第1のメッセージの修正されたバージョンを、会話記録内の第1のメッセージのレビジョンの少なくとも1つのインジケーションとともに表示する。例えば、図5Nに示す更新アフォーダンス5056をアクティブ化すると、デバイスにメッセージ編集用インタフェース5052の表示を停止させ、例えば、図5Oに示すように、会話記録5004を含むメッセージユーザインタフェース5002の表示に戻させる。更に、図5Oに示すように、第1のメッセージ5046-2の修正されたバージョンを、会話記録内の第1のメッセージのレビジョンのインジケーション5058-1(例えば、第1のメッセージの以前のバージョンの存在を示す陰影)とともに、ここで表示する。図5Oはまた、この例で用語「編集済み」と表示された会話記録内の第1のメッセージのレビジョンのインジケーション5058-2の第2の例を示す。図5Rに示すように、第1のメッセージの修正されたバージョン5046-2は、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する少なくとも1つの電子デバイスによって送信されかつ表示され、第1のメッセージのレビジョンの第1のインジケーション5058-1(例えば、メッセージ領域の陰影)、並びに、第1のメッセージのレビジョンの第2のインジケーション5058-2(例えば、表示された用語「編集済み」)を含む。
方法800の一部の実施形態では、第1のメッセージを修正する1つ以上の入力を検出するスこと(810)は、テキスト選択、テキスト挿入、又はテキスト削除のための第1のメッセージ内の位置を選択するために、メッセージ編集インタフェース内の第1のメッセージに対応する場所(例えば、図5Nの場所5057)において、入力(例えば、第1のメッセージ領域内の第1のメッセージ上のタップ)を検出すること(812)を含む。図5Nに示す挿入点又は場所5057は、図5Oに示すように、ユーザが編集してその用語を「ride」という用語に置き換えられるよう、「ridiculous」という用語に隣接している。
一部の実施形態では、会話記録内の第1のメッセージのレビジョンの少なくとも1つのインジケーション(例えば、図5Oのインジケーション5058-1及び/又はインジケーション5058-2)は、会話記録から除去可能ではない(826)。そのようなインジケーションを除去可能ではなくすことは、会話記録が参加者によって送信されたメッセージを正確に反映するという信頼をユーザに与えるために重要であり得る。
一部の実施形態では、第1のメッセージの修正の少なくとも1つのインジケーションは、第1のメッセージ領域の場所においてグラフィカル要素を含む(828)。例えば、図5Oに示すように、インジケーション5058-1は、第1のメッセージ領域の背後のシャドウ領域であり、別の状態では、インジケーション5058-1は、第1のメッセージ領域によって部分的にオーバーラップする陰影領域である。
一部の実施形態では、第1のメッセージのレビジョンの少なくとも1つのインジケーションは、第1のメッセージ領域に隣接するテキストを含む(830)。例えば、図5Oに示すように、インジケーション5058-1は、第1のメッセージの修正されたバージョンを含む第1のメッセージ領域の下方に表示されるテキスト(例えば、「編集済み」)である。
一部の実施形態では、方法800は、第1のメッセージを編集した後、第1のメッセージの修正されたバージョン(例えば、バージョン5046-2)を編集する要求に対応する入力(例えば、図5Oの入力5060)を検出すること(834)、及び、第1のメッセージの修正されたバージョンを編集する要求に対応する入力の検出に応じて、図5Rに例示する、第1のメッセージの修正されたバージョン、キーボード、及び更新アフォーダンスを含む、第1のメッセージの修正されたバージョンに対するメッセージ編集インタフェース(例えば、図5Rに示すインタフェース)を表示することを含む一連の動作を実行すること、を含む。そのような実施形態では、方法800は、第1のメッセージの修正されたバージョン用のメッセージ編集インタフェースを表示する間に、第1のメッセージを更に修正する1つ以上の入力を検出すること、第1のメッセージの更なる修正されたバージョンを表示すること、及び更新アフォーダンスをアクティブ化する入力を検出すること、を更に含む。そのような実施形態では、方法800は、更新アフォーダンスをアクティブ化する入力を検出したことに応じて、第1のメッセージの修正されたバージョンに対するメッセージ編集インタフェースの表示を停止すること、第1のメッセージの更なる修正されたバージョンを、会話記録内の第1のメッセージの修正されたバージョンの代わりに表示すること、会話記録内の第1のメッセージが修正されたという少なくとも1つのインジケーションを表示することと(例えば、一部の実施形態では、第1のメッセージ領域によって部分的にオーバーラップした2つの陰影領域が第1のメッセージ領域の後ろに表示され、第1のメッセージが2回修正されたことを示す)、及び、第1のメッセージの更なる修正されたバージョンを、メッセージセッションに含まれる少なくとも1つの他のユーザに対応する1つ以上の電子デバイスに送信すること、を更に含み、1つ以上の電子デバイスは、メッセージセッションに対応する会話記録内の第1のメッセージの修正されたバージョンの代わりに、第1のメッセージの更なる修正されたバージョンを、会話記録内の第1のメッセージが修正されたことを示す少なくとも1つのインジケーションとともに表示する。
一部の実施形態では、方法800は、第1のメッセージを編集した後、第1のメッセージのバージョンを見る要求に対応する入力を検出すること(836)、及び、第1のメッセージのバージョンを見る要求に対応する入力の検出に応じて、第1のメッセージの現在のバージョン及び第1のメッセージの1つ以上前のバージョンを含むユーザインタフェースを表示すること、を含む。例えば、図5Oの入力5060に応じて、デバイスは、第1のメッセージ5046-2の修正されたバージョン、及びメニュー5062又は編集オプションのリストを除いて会話記録の表示が隠された、図5Pに示すユーザインタフェースを表示してもよい。この例では、表示されたメニュー5062又は編集オプションのリストは、コピーアフォーダンス5064、編集表示アフォーダンス5066、削除アフォーダンス5068、及び更なるオプションの表示アフォーダンス5070を含む。図5Pに示す例では、「編集表示」アフォーダンス5066の場所に対応する、タッチ感知面上の場所において入力5072(例えば、タップジェスチャ)が検出され、アフォーダンスがアクティブ化されると、図5Qに示すように、第1のメッセージの現在のバージョン5046-1並びに以前のバージョン5046-2を含むユーザインタフェース5074(図5Q)を表示する。
図8A~図8Cにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。加えて、本明細書に記載の他の方法(例えば、方法600、1000、1200、1400、1600、1800)に関して本明細書で記載されている他のプロセスの詳細はまた、図8A~図8Cに関連して上述されている方法800に類似の方法で適用可能であることも留意されたい。例えば、方法800に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、図9は、上記のように本発明の原理に従って構成された電子デバイス900の機能ブロック図を示す。このデバイスの機能ブロックは、本発明の原理を実行するためのハードウェア、ソフトウェア、又はハードウェア及びソフトウェアの組合せにより実施することができる。図9に述べられる機能ブロックは、上記に述べたような本発明の原理を実施するために、組合せるか、又はサブブロックに分割することができることが当業者によって理解される。したがって、本明細書における説明は、あらゆる可能な組合せ若しくは分割、又は本明細書に述べられる更なる機能ブロックの定義を支持し得るものである。
図9に示すように、電子デバイス900は、ディスプレイ902上にメッセージユーザインタフェースであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録、及び、電子デバイスのユーザからメッセージセッション内の少なくとも1人の他のユーザに送信されたメッセージセッション内の第1のメッセージを含む第1のメッセージ領域を含む、メッセージユーザインタフェースを表示するように構成されたディスプレイユニット902、接触を検出するように構成されたタッチ感知面ユニット904、並びに、ディスプレイユニット902及びタッチ感知面ユニット904に結合された処理ユニット906、を含む。一部の実施形態では、処理ユニット906は、検出ユニット908、表示可能化ユニット910、停止ユニット912、及び送信ユニット914、を含む。
処理ユニット906は、第1のメッセージを編集する要求に対応する第1の入力を検出し(例えば、検出ユニット908を用いて)、第1の入力を検出に応じて、第1のメッセージ、キーボード、及び更新アフォーダンスを含む、第1のメッセージ用のメッセージ編集インタフェースの表示を可能化し(例えば、表示可能化ユニット910を用いて)、第1のメッセージ用のメッセージ編集インタフェースが表示されている間に、第1のメッセージを修正する1つ以上の入力を検出し(例えば、検出ユニット908を用いて)、第1のメッセージの修正されたバージョンの表示を可能化し(例えば、表示可能化ユニット910を用いて)、更新アフォーダンスをアクティブ化する入力を検出し(例えば、検出ユニット908を用いて)、更新アフォーダンスをアクティブ化する入力の検出に応じて、第1のメッセージ用のメッセージ編集インタフェースの表示を停止し(例えば、停止ユニット912を用いて)、会話記録内の第1のメッセージの代わりに、第1のメッセージの修正されたバージョンの表示を可能化し(例えば、表示可能化ユニット910を用いて)、会話記録内の第1のメッセージのレビジョンのうちの少なくとも1つのインジケーションの表示を可能化し(例えば、表示可能化ユニット910を用いて)、及び、メッセージセッションに含まれる少なくとも1つの他のユーザに対応する1つ以上の電子デバイスに、第1のメッセージの修正されたバージョンを送信する(例えば、送信ユニット914を用いて)ように構成されており、1つ以上の電子デバイスは、メッセージセッションに対応する会話記録内の第1のメッセージの代わりに、第1のメッセージの修正されたバージョンを、会話記録内の第1のメッセージのレビジョンの少なくとも1つのインジケーションとともに表示する。
一部の実施形態では、会話記録内の第1のメッセージのレビジョンのうちの少なくとも1つのインジケーションは、会話記録から除去可能ではない。
一部の実施形態では、第1のメッセージのレビジョンの少なくとも1つのインジケーションは、第1のメッセージ領域の場所におけるグラフィカル要素を含む。
一部の実施形態では、第1のメッセージのレビジョンの少なくとも1つのインジケーションは、第1のメッセージ領域に隣接したテキストを含む。
一部の実施形態では、第1のメッセージを修正する1つ以上の入力を検出することは、テキスト選択、テキスト挿入、又はテキスト削除のための第1のメッセージ内の位置を選択するために、メッセージ編集インタフェース内の第1のメッセージに対応する場所において入力を検出することを含む。
一部の実施形態では、処理ユニット906は、第1のメッセージを編集した後、第1のメッセージの修正されたバージョンを編集する要求に対応する入力を検出し(例えば、検出ユニット908を用いて)、第1のメッセージの修正されたバージョンを編集する要求に対応する入力の検出に応じて、第1のメッセージの修正されたバージョン、キーボード、更新アフォーダンスを含む、第1のメッセージの修正されたバージョンに対するメッセージ編集インタフェースの表示を可能化し(例えば、表示可能化ユニット910を用いて)、第1のメッセージの修正されたバージョン用のメッセージ編集インタフェースが表示されている間に、第1のメッセージを更に修正する1つ以上の入力を検出し(例えば、検出ユニット908を用いて)、第1のメッセージの更に修正されたバージョンの表示を可能化し(例えば、表示可能化ユニット910を用いて)、及び、更新アフォーダンスをアクティブ化する入力を検出し(例えば、検出ユニット908を用いて)、並びに、更新アフォーダンスをアクティブ化する入力の検出に応じて、第1のメッセージの修正されたバージョンに対するメッセージ編集インタフェースの表示を停止し(例えば、停止ユニット912を用いて)、会話記録内の第1のメッセージの修正されたバージョンの代わりに、第1のメッセージの更なる修正されたバージョンの表示を可能化し(例えば、表示可能化ユニット910を用いて)、会話記録内の第1のメッセージが修正されたという少なくとも1つのインジケーションの表示を可能化し(例えば、表示可能化ユニット910を用いて)、及び、メッセージセッションに含まれる少なくとも1つの他のユーザ(例えば、送信ユニット914)に対応する1つ以上の電子デバイスに、第1のメッセージの更なる修正されたバージョンを送信する、ように更に構成されており、1つ以上の電子デバイスは、メッセージセッションに対応する会話記録内の第1のメッセージの修正されたバージョンに代わりに、第1のメッセージの更に修正されたバージョンを、会話記録内の第1のメッセージが修正されたという少なくとも1つのインジケーションとともに表示する。
一部の実施形態では、処理ユニット906は、第1のメッセージを編集した後、第1のメッセージのバージョンを見る要求に対応する入力を検出し(例えば、検出ユニット908を用いて)、第1のメッセージのバージョンを見る要求に対応する入力の検出に応じて、第1のメッセージの現在のバージョン及び第1のメッセージの1つ以上前のバージョンを含むユーザインタフェースの表示を可能化する(例えば、表示可能化ユニット910を用いて)、ように更に構成されている。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図8A~図8Cを参照して上述された動作は、図1A、図1B又は図9に示される構成要素によって、任意選択的に実行される。例えば、検出動作804及び810は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と比較し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出し、アプリケーション内部状態192を更新する。一部の実施形態では、イベント処理部190は、アプリケーションによって表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示されるコンポーネントに基づいてどのように実施されるかは明らかであるだろう。
図10A及び図10Bは、一部の実施形態に係る、以前に送信されたメッセージをメッセージセッションで編集するためのプロセスのフロー図である。これらの方法を実行する電子デバイス(例えば、ポータブル多機能デバイス100又はデバイス300)の1つ以上の例を、図5L~図5Tに示す。
図10A及び図10Bは、本明細書で時に第1の電子デバイスと呼ばれる、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する、電子デバイスによって実行される方法1000を示すフロー図である。一部の実施形態では、電子デバイスは、タッチ感知面上の接触強度を検出するように構成された1つ以上のセンサ(例えば、タッチスクリーンディスプレイ又はトラックパッド内のセンサ)を含む。
一部の実施形態では、方法1000は、ディスプレイ上にメッセージユーザインタフェース(例えば、図5L又は図5Oに示すメッセージアプリケーションのユーザインタフェース5002)を表示すること(1002)を含む。メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザ(例えば、別の電子デバイスのユーザ)との間のメッセージセッションの会話記録(例えば、図5L又は図5Oのユーザインタフェース5002内の会話記録5004)、及びメッセージセッションにおける第1のメッセージ(例えば、図5Oのメッセージバージョン5046-2)の現在のバージョンを含む第1のメッセージ領域(例えば、図50のメッセージ領域5044)を含み、会話記録は、第1のメッセージの現在のバージョンが会話記録における第1のメッセージの修正されたバージョンであることのインジケーション(例えば、上述のインジケーション5058-1又は5058-2)を含む。第1のメッセージの元のバージョンは、例えば、以前に送信されたメッセージ又は以前に受信されたメッセージである。
方法1000は、第1のメッセージのバージョンを見る要求(例えば、図5Oに示す入力5060)に対応する入力を検出すること(1004)、並びに、第1のメッセージのバージョンを見る要求に対応する入力を検出したことに応じて、第1のメッセージの現在のバージョン(例えば、バージョン5046-1)及び第1のメッセージの1つ以上の前のバージョン(例えば、バージョン5046-2)を含むバージョンユーザインタフェース(例えば、図5Qのユーザインタフェース5074)を表示すること(1008)、を含む。
一部の実施形態では、入力を検出すること(1004)は、デバイスが、第1のメッセージ領域上の、又は、第1のメッセージの現在及び以前のバージョン(例えば、図5Qのユーザインタフェース5074)のユーザインタフェースの表示をもたらす第1のメッセージ領域に対する隠れたヒット領域上の、タップジェスチャ、長押しジェスチャ、軽押しジェスチャ、若しくは深押しジェスチャを検出することを含む。
一部の実施形態では、第1のメッセージ領域(図5Oの入力5060)の場所に対応する、タッチ感知面上の場所における接触による入力の検出に応じて、デバイスは、アクティブ化されると第1のメッセージの現在及び以前のバージョンを表示する(例えば、図5Q)アフォーダンス(例えば、図5Pの「編集を表示」メニューオプション)を含むユーザインタフェースを表示する。一部の実施形態では、第1のメッセージ領域が、第1のメッセージの修正されたバージョン用のアクティブ化可能なオプションのリストとともに表示される間に(図5Pに示されているように)、デバイスは、第1のメッセージの現在及び以前のバージョンとのユーザインタフェースの表示をもたらす(例えば、図5Q)、「編集を表示」オプション(図5Pのショー編集オプション5066上の入力5072)をアクティブ化する、「編集を表示」オプション上のタップジェスチャなどの入力を検出する。
一部の実施形態では、第1のメッセージの現在のバージョン、並びに、アクティブ化されると第1のメッセージの現在のバージョン(例えば、図5Tのバージョン5046-2)及び第1のメッセージの1つ以上前のバージョン(例えば、バージョン5046-1、図5T)を含むユーザインタフェースの表示をもたらす(例えば、図5Tに示すように)アフォーダンス(例えば、図5Sの「編集を表示」オプション)を含むメニュー、を表示している間に(例えば、図5Sに示すように会話記録内に他のメッセージを表示することなく)、第1のメッセージのバージョンを見る要求に対応する入力を検出する(1006)。一部の実施形態では、メニューは、アクティブ化されると第1のメッセージの現在のバージョン、キーボード、及び更新アフォーダンスを含む、第1のメッセージの現在のバージョンに対するメッセージ編集インタフェースの表示をもたらすアフォーダンス(例えば、「編集」オプション)、を含む。
一部の実施形態では、バージョンユーザインタフェース(例えば、図5Qの5074)において、第1のメッセージの現在のバージョン(例えば、5046-1)は、第1のメッセージの他のバージョンと視覚的に区別される(1010)。例えば、様々な実施形態では、第1のメッセージの現在のバージョンは、異なる陰影、背景色、背景パターン、フォント色、及び/又は領域境界色などによって、第1のメッセージの他のバージョンと視覚的に区別される。
一部の実施形態では、バージョンユーザインタフェース(例えば、図5Qの5074)は、第1のメッセージの現在のバージョン(例えば、5046-1)、第1のメッセージの元のバージョン(例えば、5046-2)、及び第1のメッセージの現在のバージョン(図には示されていない)の前に修正された第1のメッセージのうちの少なくとも1つのバージョン、を含む(1012)。
一部の実施形態では、バージョンユーザインタフェース(例えば、図5Qの5074)は、アクティブ化されるとユーザインタフェース内の会話記録の再表示(例えば、図5Rに示すように)させるアフォーダンス(例えば、図5Qの「終了」オプション5082)、を含む(1014)。通常、このアフォーダンスのアクティブ化はまた、バージョンユーザインタフェースの表示を停止させる。
一部の実施形態では、バージョンユーザインタフェースは、アクティブ化されると第1のメッセージ(5046-2)、キーボード(5054)、及び更新アフォーダンス(5056)の現在のバージョンを含む第1のメッセージの現在のバージョンに対するメッセージ編集インタフェース(例えば、図5Rに示すような)、を表示させるアフォーダンス(例えば、図5QのEditアイコン5080)を含む(1016)。通常、このアフォーダンスのアクティブ化はまた、バージョンユーザインタフェースの表示を停止させる。
図10A及び図10Bにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。加えて、本明細書に記載の他の方法(例えば、方法600、800、1200、1400、1600、1800)に関して本明細書で記載されている他のプロセスの詳細はまた、図10A及び図10Bに関連して上述された方法1000に類似の方法で適用可能であることも留意されたい。例えば、方法1000に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を、任意選択的に有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、方法100は、バージョンユーザインタフェース(例えば、図5Qの5074)を表示する間に、第1のメッセージのそれぞれのバージョン上の入力(例えば、現在のバージョン5046-1又は元のバージョン5046-2のいずれかを編集するため、図5Qの入力5076又は5078)を検出すること(1018)(例えば、第1のメッセージの現在のバージョン、中間バージョン、又は元のバージョン上のタップジェスチャ、長押しジェスチャ、軽押しジェスチャ又は深押しジェスチャを検出すること)、及び、第1のメッセージのそれぞれのバージョン上における入力の検出に応じて、第1のメッセージのそれぞれのバージョンを含む第1のメッセージのそれぞれのバージョンに対するメッセージ編集インタフェース(例えば、図5Nに示すメッセージ編集インタフェース)、キーボード(5054)、及び更新アフォーダンス(5056)、を表示すること(5046)、及び、バージョンユーザインタフェースの表示を停止すること、を含む。
一部の実施形態では、図11は、上記のように本発明の原理に従って構成された電子デバイス1100の機能ブロック図を示す。このデバイスの機能ブロックは、本発明の原理を実行するためのハードウェア、ソフトウェア、又はハードウェア及びソフトウェアの組合せにより実施することができる。図11に述べられる機能ブロックは、上記に述べたような本発明の原理を実施するために、組合せるか、又はサブブロックに分割することができることが当業者によって理解される。したがって、本明細書における説明は、あらゆる可能な組合せ若しくは分割、又は本明細書に述べられる更なる機能ブロックの定義を支持し得るものである。
図11に示すように、電子デバイス1100は、ディスプレイユニット上にメッセージユーザインタフェースであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録、及びメッセージセッションの第1のメッセージの現在のバージョンを含む第1のメッセージ領域であって、会話記録が、第1のメッセージの現在のバージョンが会話記録の第1のメッセージの修正されたバージョンであるというインジケーションを含む第1のメッセージ領域を含む、メッセージユーザインタフェースを表示するように構成されたディスプレイユニット1102、接触を検出するように構成されたタッチ感知面ユニット1104、並びに、ディスプレイユニット1102及びタッチ感知面ユニット1104に結合された処理ユニット1106、を含む。一部の実施形態では、処理ユニット1106は、検出ユニット1108、表示可能化ユニット1110、及び停止ユニット1112を含む。
処理ユニット1106は、第1のメッセージのバージョンを見る要求に対応する入力を検出し(例えば、検出ユニット1108を用いて)、第1のメッセージのバージョンを見る要求に対応する入力の検出に応じて、第1のメッセージの現在のバージョン及び第1のメッセージの1つ以上の前のバージョンを含むバージョンユーザインタフェースの表示を可能化する(例えば、表示可能化ユニット1110を用いて)、ように構成されている。
一部の実施形態では、第1のメッセージの現在のバージョン、並びに、アクティブ化すると第1のメッセージの現在のバージョン、及び第1のメッセージの1つ以上の前のバージョンを含むユーザインタフェースの表示をもたらすアフォーダンスを含むメニュー、を表示している間に、第1のメッセージのバージョンを見る要求に対応する入力が検出される。
一部の実施形態では、バージョンユーザインタフェースにおいて、第1のメッセージの現在のバージョンは、第1のメッセージの他のバージョンと視覚的に区別される。
一部の実施形態では、バージョンユーザインタフェースは、第1のメッセージの現在のバージョン、第1のメッセージの元のバージョン、及び第1のメッセージの現在のバージョンの前に修正された第1のメッセージのうちの少なくとも1つのバージョンを含む。
一部の実施形態では、バージョンユーザインタフェースは、アクティブ化すると会話記録を再表示させるアフォーダンスを含む。
一部の実施形態では、バージョンユーザインタフェースは、アクティブ化すると第1のメッセージの現在のバージョン、キーボード、及び更新アフォーダンスを含む、第1のメッセージの現在のバージョンに対するメッセージ編集インタフェース、を表示させるアフォーダンスを含む。
一部の実施形態では、処理ユニット1106は、バージョンユーザインタフェースが表示されている間に、第1のメッセージのそれぞれのバージョン上の入力を検出し(例えば、検出ユニット1108を用いて)、及び、第1のメッセージのそれぞれのバージョン上の入力の検出に応じて、第1のメッセージのそれぞれのバージョン、キーボード、及び更新アフォーダンスを含む、第1のメッセージのそれぞれのバージョンに対するメッセージ編集インタフェースの表示を可能化し(例えば、表示可能化ユニット1110を用いて)、及び、バージョンユーザインタフェースの表示を停止する(例えば、停止ユニット1112を用いて)、ように更に構成されている。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図10A及び図10Bを参照して上述された動作は、図1A、図1B、又は図11に示される構成要素によって、任意選択的に実行される。例えば、検出動作1004及び1018は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と比較し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出し、アプリケーション内部状態192を更新する。一部の実施形態では、イベント処理部190は、アプリケーションによって表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示されるコンポーネントに基づいてどのように実施されるかは明らかであるだろう。
メッセージインパクト効果
以下でより詳細に説明する図12A~図12Eは、一般に、インパクト効果オプションをメッセージ入力に適用する方法に関する。より具体的には、これらの図は、メッセージユーザインタフェースのメッセージ入力エリアに受信された入力に応じて、複数のインパクト効果オプションを含むインタフェースを表示する方法に関する。インパクト効果オプションをメッセージ入力に適用するプレビューが表示される。メッセージ入力及び適用されたインパクト効果オプションを含む情報は、少なくとも1つのリモート電子デバイス(例えば、少なくとも1人の他のユーザのデバイス)に送信される。会話のテキストのみが話者の意図を判定するために利用可能であるときは、しばしば、言葉のトーン又は顔の表情で伝達され得る追加の情報が失われる。図12A~図12Eに関して本明細書で説明された方法は、付加的な情報が記録に追加されて、別の方法では見逃されるかもしれない付加的な感情を伝達することを可能にする。
これらの方法を実行する電子デバイスの1つ以上の例(例えば、ポータブル多機能デバイス100又はデバイス300)が、図5U~図5AM及び図5AN~図5BFに示される。
図12A~図12Eは、本明細書で時に第1の電子デバイスと呼ばれる、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する、電子デバイスによって実行される方法1200を示すフロー図である。一部の実施形態では、電子デバイスは、タッチ感知面上の接触強度を検出するように構成された1つ以上のセンサ(例えば、タッチスクリーンディスプレイ又はトラックパッド内のセンサ)を含む。
一部の実施形態では、方法1200は、ディスプレイ上にメッセージユーザインタフェース(例えば、図5Uのメッセージアプリケーションのユーザインタフェース5002)を表示すること(1202)を含む。メッセージユーザインタフェースは、電子デバイスのユーザと、少なくとも1人の他のユーザ(例えば、別の電子デバイスのユーザ)との間のメッセージセッションの会話記録(例えば、図5Uのユーザインタフェース5002内の会話記録5004)、及び、第1のメッセージ入力(例えば、テキスト、ステッカ、画像、及び/又はメッセージ入力エリアに電子デバイスのユーザによって入力された他のグラフィックスであるが、未だメッセージセッションの少なくとも1人の他のユーザの誰にも送信されていない)を含むメッセージ入力エリア(例えば、図5Uの5100)を含む。方法1200は、メッセージユーザインタフェースを表示している間に、メッセージ入力エリア内の場所に対応する、タッチ感知面上の場所において、第1の接触(例えば、図5Uの入力5102)による第1の入力を検出することを含む。一部の実施形態では、第1の入力は、メッセージ入力エリアで受信されるジェスチャ(例えば、スワイプジェスチャ)を含む。一部の実施形態では、メッセージ入力エリアはインパクト選択アフォーダンス(例えば図5Uの5104)を含み、接触の場所はインパクト選択アフォーダンスに対応する。一部の実施形態では、第1の入力を検出することは、デバイスが、インパクト選択アフォーダンスに対応する場所において、接触によるタップジェスチャ、長押しジェスチャ、軽押しジェスチャ、又は深押しジェスチャを検出することを含む。更に、一部の実施形態では、インパクト選択アフォーダンス上の異なる入力(例えば、タップジェスチャ及び深押しジェスチャ)が、ユーザインタフェースを異なる後続のユーザインタフェースに遷移させる。例えば、一部の実施形態では、図5U又は5Xのアフォーダンス5104上のタップジェスチャは、メッセージ入力エリア5100内にメッセージ入力5102をメッセージとして送信するが、図5X、図5Y及び図5Zに示すように、深押し入力5108-1、5108-2、5108-3が電子デバイスによって検出されると、メッセージアプリケーションに図5AAのインパクト選択インタフェース5110を表示させる。
このように、方法1200は、第1の接触による第1の入力の検出に応じて、複数のインパクト効果オプションを含むインパクト選択インタフェース(例えば、図5AAのインパクト選択インタフェース5110)を表示すること(1206)を更に含む(例えば、インパクト効果オプション5112-1~5112-4は、メッセージユーザインタフェースの代わりに、又はメッセージユーザインタフェースの最上部に表示される)。一部の実施形態では、表示された複数のインパクト効果オプション(例えば、図5AAの5112-1~5112-4)は、インパクト効果オプションのセットの全てよりも少ないサブセットである。一部の実施形態では、インパクト効果オプションのセットは、個々のメッセージ領域に適用されるオプション(例えば、「領域効果」オプション)、及び、メッセージがメッセージセッションに最初に表示されたときに、表示された会話記録全体に適用されるオプション(例えば、「全画面効果」オプション)、を含む。一部の実施形態では、表示された複数のインパクト効果オプションは、領域効果オプションの少なくとも一部を含み、全画面効果オプションのいずれも含まない。一部の実施形態では、領域効果オプションは、メッセージが最初に表示されたときに会話記録内のメッセージをスラムダウンするオプション(例えば、図5AAの「スラム(slam)」オプション5112-4)、少なくともメッセージが最初に表示されたときに会話記録内のメッセージのサイズを拡大させるオプション(例えば、図5AAの「ラウド」オプション5112-3)、少なくともメッセージが最初に表示されたときに会話記録おけるメッセージのサイズを縮小させるオプション(例えば、図5AA、及び図5AT~図5AWの「ジェントル(gentle)」オプション5112-2)、及び、会話記録内のメッセージの内容を秘密にするオプション(図5AAの「見えないインク(invisible ink)」オプション5112-1)、を含む。
一部の実施形態では、全画面効果オプションは、メッセージが最初に表示されたときに会話記録内にバルーンを表示するオプション(「バルーン」)、メッセージが最初に表示されたときに会話記録内に紙吹雪を表示するオプション(「紙吹雪」)、メッセージが最初に表示されたときに会話記録内に花火を表示するオプション(「花火」)、メッセージが最初に表示されたときにフォーカス内にメッセージを表示し会話記録の残りをぼかすオプション(「フォーカス」)、メッセージが最初に表示されたときに会話記録内を移動する1つ以上のスポットライトビームを表示するオプション(「スポットライト」又は「マイクを落とす」)、メッセージが最初に表示されたときに会話記録内にメッセージの複数のコピーを表示するオプション(「エコー」)、メッセージが最初に表示されたときに会話記録内に流れ星を表示するオプション(「流れ星」)、メッセージが最初に表示されたときに会話記録内を移動する複数のレーザビーム(例えば、図5CR~図5CTに示すように)を表示するオプション(「レーザ」)、メッセージが最初に表示されたときにメッセージから膨らむハートを表示するオプション(「メタリックハート」)、のオプションのうちの2つ以上のオプションを含む。
方法1200は、インパクト選択インタフェースを表示する間に、複数のインパクト効果オプション内の第1のインパクト効果オプションの場所に対応する、タッチ感知面上の場所において、第2の接触による第2の入力を検出すること(1222)を、更に含む。第2の入力の例は、入力5108-4、図5AA、入力5108-5、図5AB~図5AD、及び入力5108-6、図5AE~図5AFである。一部の実施形態では、第1の接触及び第2の接触は、同じ指によって作られた2つの異なるタップジェスチャにおける接触、又は第1のインパクト効果オプション上のタップジェスチャを伴う送信アフォーダンス上の深押しジェスチャなどの、別個の接触である。一部の実施形態では、第1の接触及び第2の接触は、インパクト選択アフォーダンス上の長押し、軽押し、又は深押しなどのタッチ感知面と同じ連続接触の異なる部分であり(例えば、図5X、図5Y及び図5Zに示す、インパクト選択アフォーダンス5104上の深押し入力5108-1、5108-2、5108-3)、続いて第1のインパクト効果オプションへドラッグされ(例えば、図5AAのインパクト効果オプション5112-1上の入力5108-4)、次いで第1のインパクト効果オプション上で一時停止又は深押しされる。
方法1200はまた、第2の接触(例えば、図5AEの第2の入力5108-6)によって第2のユーザ入力を検出したことに応じて、第1のインパクト効果オプションを第1のメッセージ入力に適用するプレビュー(例えば、図5AEのインパクト選択インタフェース5110)を表示すること(1224)、を含む。図5AEは、第1のインパクト効果オプション(すなわち、スラムオプション)に対応する、タッチ感知面上の場所における第2の接触による第2の入力5108-6のそれぞれに応じて、第1のメッセージ入力(「Congratulations!」)に適用されているスラムオプションのプレビューを示す。一部の実施形態では、プレビューは、第1のインパクト効果を、第1のメッセージ入力を含むメッセージ領域に適用する(例えば、図5AEに示すように)。一部の実施形態では、プレビューは、全画面効果のため、第1のメッセージを含んだむメッセージ領域を含む表示画面全体(又は実質的に全体)に第1のインパクト効果を適用し、その例は図5AX~図5BFのユーザインタフェース画像のシーケンスによって示される。図5AX~図5BFは、第1のメッセージ入力(「Hell No!!」)の「スラム」効果の進行を示す。まず、拡大され、回転され、及び暗い背景で表示された第1のメッセージ入力が表示され(図5AX)、次にいっそう大きくかついくぶん薄い背景で表示され(図5AY)、次いで拡大が小さくなりかつ以前とは異なる角度で回転され(図5AZ)、更に拡大が小さくなりかつぼやけたボーダーで表示され(図5BA)、次に縮小されたサイズの異なる背景かつ異なる回転で表示され(図5BB)、次いで、第1のメッセージ入力が回転されない通常(デフォルト)のサイズで、かつ、正常(デフォルト)の背景(図5BF)で表示されるまで、メッセージ領域周囲の異なる影のシーケンス(図5BC、5BD、5BE)を伴う。
一部の実施形態では、それぞれのインパクト効果オプションのプレビューが表示されている間に、それぞれのインパクト効果オプションに対応するインパクト選択インタフェース内の場所は、それぞれのインパクト効果オプションとともにメッセージを送信する(第1のメッセージ入力を用いて)ためのアフォーダンス(例えば、図5ABの送信アフォーダンス5118)を含む。
表示(1206)に関して、一部の実施形態では、上述のように、複数のインパクト効果オプションを含むインパクト選択インタフェースを含み、インパクト選択インタフェースは、アクティブ化すると第1のメッセージ入力を含むメッセージに対するインパクト効果オプションを表示させる領域効果オプションアフォーダンス(例えば、図5AAのアフォーダンス5114)、及び、アクティブ化すると第1のメッセージ入力を含むメッセージがメッセージセッション内に表示されるときに、表示された会話記録全体に適用された1つのインパクト効果オプションのプレビューを表示させる全画面効果オプションアフォーダンス(例えば、図5AAのアフォーダンス5116)、の両方を含む(1208)。典型的に、複数の全画面効果オプションがあるが、全画面効果オプションアフォーダンスのアクティブ化に応じて、それらのうちの1つだけがいつでもプレビューされる。
一部の実施形態では、上述した複数のインパクト効果オプションを含むインパクト選択インタフェースの表示(1206)に関して、複数のインパクト効果オプションは、第1のメッセージ入力を含むメッセージ領域に入力された第1のメッセージを含むメッセージ領域の面積よりも大きい面積を伴う画像(例えば、陰影のある楕円又は雲)を適用する(例えば、第1のメッセージを含むメッセージ領域の背後に画像を表示する)、少なくとも一つのインパクト効果オプションを含む(1210)。この効果の例を、図5AE及び図5AFに示す。
一部の実施形態では、上述の複数のインパクト効果オプションを含むインパクト選択インタフェースを表示すること(1206)に関して、複数のインパクト効果オプションは、インパクト効果オプションが選択されていないときの第1のメッセージを含むメッセージ領域のサイズ(例えば、デフォルトサイズ)に対する第1のメッセージ入力を含むメッセージ領域のサイズを増減する、少なくとも1つのインパクト効果オプションを含む(1212)。例えば、図5ABは、インパクト効果オプションが、メッセージ領域のデフォルトサイズに対して減少したサイズを有する第1のメッセージ入力を含むメッセージ領域とともに表示される例を示し、図5ACは、インパクト効果オプションが、メッセージ領域のデフォルトサイズに対して拡大したサイズを有する第1のメッセージ入力を含むメッセージ領域とともに表示される例を示す。
一部の実施形態では、上述のように、複数のインパクト効果オプションを含むインパクト選択インタフェースを表示すること(1206)に関して、複数のインパクト効果オプションは、第1のメッセージ入力を含むメッセージ領域が表示されたときに、表示された会話記録内の他のメッセージ領域と相互作用する(例えば、到着したメッセージのインパクトを増大させるために、会話記録内の第1のメッセージ入力を含むメッセージ領域の表示上で、他のメッセージ領域が揺れたり及び/又ははずんだりする)第1のメッセージ入力を含むメッセージ領域を有するように構成された、少なくとも1つのインパクト効果オプションを含む(1214)。例えば、図5BB~図5BEに示されるユーザインタフェースのシーケンスは、到着したメッセージの視覚的なインパクトを増大するために、第1のメッセージ入力(例えば、「Hell No!!」)が動かされている(例えば、互いに接近して移動したり、部分的にオーバーラップを起こす)メッセージ領域以外のメッセージ領域を示す。
一部の実施形態では、上述した複数のインパクト効果オプション含むインパクト選択インタフェースを表示すること(1206)に関して、第1のメッセージ入力を含むメッセージ領域がメッセージセッションに対応する会話記録に表示されたときに、複数のインパクト効果オプションは、アニメーションを表示するように構成された少なくとも1つのインパクト効果オプションを含む(1216)。一部の実施形態では、アニメーションは、(例えば、図5AH~図5AIに示すように)左右及び/又は上下に動くアニメーションなどの、2つ以上の場所間でメッセージ領域を移動する「シェイク」アニメーションである。一部の実施形態では、アニメーションは、メッセージ領域のサイズを会話記録内に最初に表示されたサイズから拡大する(例えば、図5AK、図5AL、図5AMのシーケンス及び図5AN~図5ASのシーケンスに示すように)。
一部の実施形態では、アニメーションは、メッセージ領域のサイズをアニメーションの終わりに表示される最終サイズを超えて拡大し(これにより、最終サイズをオーバーシュートする)、次いでメッセージ領域のサイズを最終サイズに縮小する(例えば、図5AN~図5ASのシーケンスに示すように)。一部の実施形態では、メッセージ領域の最終サイズは、インパクト効果オプションが選択されていないときの第1のメッセージ入力を含むメッセージ領域の(デフォルト)サイズよりも、大きいか又は小さい。一部の実施形態では、メッセージ領域の内容を秘密にするインパクト効果オプションは、メッセージの内容が秘密にされていることを示すために、メッセージ領域内の動く粒子(例えば、仮想の砂粒子)を含むアニメーションを表示する(例えば、図5BQ~図5BRに示すように)。
一部の実施形態では、上述した複数のインパクト効果オプションを含むインパクト選択インタフェースの表示(1206)に関して、複数のインパクト効果オプションは、第1のメッセージ入力を含むメッセージ領域がメッセージセッションに対応する会話記録に表示されたときに、アニメーションを表示するように構成された少なくとも1つのインパクト効果オプションを含み、アニメーションは、第1のメッセージ入力を含むメッセージ領域及び会話記録内の他のメッセージ領域を同時に動かせる(1218)。例えば、他のメッセージ領域は、着信メッセージのインパクトを増大させるため、会話記録内に入力された第1のメッセージを含むメッセージ領域が表示されると、揺れたり及び/又ははずんだりする。図5BB~図5BFに示すユーザインタフェースのシーケンスは、「スラム」効果オプション(図5AA、5ACの5112-4)に従って、第1のメッセージ入力を含むメッセージ領域と他のメッセージ領域との両方が、会話記録内で動く一例を示す。
一部の実施形態では、上述した複数のインパクト効果オプションを含むインパクト選択インタフェースの表示(1206)に関して、複数のインパクト効果オプションは、第1のメッセージ入力を含むメッセージ領域がメッセージセッションに対応する会話記録内に表示されるときに、1つ以上の触知出力(例えば、触覚フィードバックを提供する)をトリガーするように構成された、少なくとも1つの効果オプションを含む(1220)。例えば、一部の実施形態では、第1のインパクト効果オプション(例えば、図5AAの「スラム(slam)」オプション5112-4)は、第2のインパクト効果オプション(例えば、図5AAの「ラウド(loud)」オプション5112-3)よりも、触知出力の振幅が小さい。
一部の実施形態では、プレビュー(例えば、図5AEのインパクト選択インタフェース5110、)の表示(1224)に関して、第1インパクト効果オプションを第1のメッセージ入力へ適用するプレビュー(例えば、図5AEのインパクト選択インタフェース5110)が定期的に繰り返される(1226)。例えば、プレビューに示されるアニメーションは、その後のユーザ入力が検出されるまで、N(例えば、2、3、又は4)秒ごとに繰り返される。
一部の実施形態では、プレビューを表示した後、方法1200は、第1のインパクト効果オプションに対応する、タッチ感知面上の場所において第2の接触のリフトオフを検出すること(1228)、及び、第1のインパクト効果オプションに対応する、タッチ感知面上の場所における第2の接触のリフトオフの検出に応じて、インパクト選択インタフェース(例えば、図5AEインパクト選択インタフェース5110)の表示を停止すること、会話記録に入力された第1のメッセージを含むメッセージ領域を表示すること(一部の実施形態では、図5AHに示すように、メッセージ領域及び/又は会話記録に第1のインパクト効果オプションを適用すること)、メッセージセッションに含まれる少なくとも1つの他のユーザに対応する1つ以上の電子デバイスに(A)メッセージセッションに対応する会話記録に入力された第1のメッセージを含むメッセージ領域を表示させ、かつ、(B)第1のインパクト効果オプションを適用させる(例えば、図5AKに示すように)情報、を送信することと、を含む。第1のインパクト効果は、第1のメッセージ入力及び/又は表示された会話記録を含むメッセージ領域に、任意選択的に適用される。
一部の実施形態では、プレビューを表示した後、方法1200は、第1のインパクト効果オプションに対応する、タッチ感知面上の場所における第3の接触による第3の入力を検出すること(例えば、第1のインパクトオプションに対する送信アフォーダンスにおいてなど、第1のインパクト効果オプションに対応する場所において、接触による、タップジェスチャ、長押しジェスチャ、軽押しジェスチャ、又は深押しジェスチャを検出すること)(1230)を含む。例えば、図5AGは、ユーザが選択したインパクト効果オプション、この場合は「スラム」オプションに対応する場所に、送信アフォーダンス上の第3の入力5108-7を示す。
そのような実施形態では、方法1200は、第1のインパクト効果オプションに対応する、タッチ感知面上の場所における第3の接触による第3の入力の検出に応じて、インパクト選択インタフェースの表示を停止すること、会話記録内に入力された第1のメッセージを含むメッセージ領域を表示すること(一部の実施形態では、図5AHに示すように、メッセージ領域及び/又は会話記録に第1のインパクト効果オプションを適用すること)、メッセージセッションに含まれる少なくとも1つの他のユーザに対応する1つ以上の電子デバイスに(A)メッセージセッションに対応する会話記録に入力された第1のメッセージを含むメッセージ領域を表示させ、かつ、(B)第1のインパクト効果オプションを適用させる(例えば、図5AKに示すように)情報、を送信すること、を含む。第1のインパクト効果は、第1のメッセージ入力及び/又は表示された会話記録を含むメッセージ領域に、任意選択的に適用される。
一部の実施形態では、プレビューを表示した後、方法1200は、第1のインパクト効果オプションに対応する、タッチ感知面上の場所において第2の接点のリフトオフ(例えば、図5AE又は図5AEに示す第2の入力5108-6のリフトオフ)を検知すること(1232)、及び、第1のインパクト効果オプションに対応する、タッチ感知面上の場所における第2の接触のリフトオフの検出に応じて、第1のメッセージ入力を含むメッセージに対する第1のインパクト効果オプションを選択すること、インパクト選択インタフェースの表示を停止すること、及び、メッセージセッションの会話記録と、第1のメッセージ入力を含むメッセージ入力エリアとを表示すること(例えば、図5AHに示すように)、を含む。
そのような実施形態では、方法1200は、第3の入力(例えば、図5AGの第3の入力5108-7のなどの送信アフォーダンスに対応する場所におけるタップジェスチャ)を検出すること、第3の入力の検出に応じて、会話記録内に入力された第1のメッセージ入力を含むメッセージ領域(例えば、図5AHに示すように)を表示すること(及び、一部の実施形態では、第1のインパクト効果オプションをメッセージ領域に及び/又は会話記録に適用すること)、メッセージセッションに含まれる少なくとも1つの他のユーザに対応する1つ以上の電子デバイスに(A)メッセージセッションに対応する会話記録に入力された第1のメッセージを含むメッセージ領域を表示させ、かつ、(B)第1のインパクト効果オプションを適用させる(例えば、図5AKに示すように)情報、を送信すること、を含む。第1のインパクト効果は、第1のメッセージ入力及び/又は表示された会話記録を含むメッセージ領域に、任意選択的に適用される。
一部の実施形態では、プレビューを表示した後、方法1200は、第1のインパクト効果オプションに対応する、タッチ感知面上の場所における第3の接触による第3の入力を検出すること(1234)(例えば、第1のインパクトオプション用の送信アフォーダンスなどの第1のインパクト効果オプションに対応する場所において接触によるタップジェスチャ、長押しジェスチャ、軽押しジェスチャ、又は深押しジェスチャを検出すること)、を含む。例えば、図5AGは、ユーザが選択したインパクト効果オプション、この場合は「スラム」オプションに対応する場所における、アフォーダンス上の第3の入力5108-7を示す。
そのような実施形態(1234)では、方法1200は、第1のインパクト効果オプションに対応する、タッチ感知面上の場所における第3の接触による第3の入力の検出に応じて、第1のメッセージ入力を含むメッセージ用の第1のインパクト効果オプションを選択すること、インパクト選択インタフェースの表示を停止すること、及び、第1のメッセージ入力(例えば、図5AHに示すメッセージ入力エリア5008内の第1のメッセージ入力5102)を含むメッセージセッション及びメッセージ入力エリアの会話記録を表示すること、を含む。更に、方法1200は、第4の入力(例えば、任意選択的にインパクトオプション選択アフォーダンスと同じアフォーダンスであってもよい、あるいはインパクトオプション選択アフォーダンスとは別個のアフォーダンスであってもよい、送信アフォーダンスに対応する場所におけるタップジェスチャ)を検出すること、第4の入力の検出に応じて、(A)会話記録内に入力された第1のメッセージ入力を含むメッセージ領域を表示すること(一部の実施形態では、第1のインパクト効果オプションをメッセージ領域及び/又は会話記録に適用すること)、並びに、メッセージセッションに含まれる少なくとも1つの他のユーザに対応する1つ以上の電子デバイスに(A)メッセージセッションに対応する会話記録に入力された第1のメッセージを含むメッセージ領域を表示させ、及び、(B)第1のインパクト効果オプションを適用させる(例えば、図5AKに示すように)情報、を送信すること、を含む。第1のインパクト効果は、第1のメッセージ入力及び/又は表示された会話記録を含むメッセージ領域に、任意選択的に適用される。
任意選択的に、メッセージアプリケーションのユーザは、インパクト効果オプションの最終選択を行う前に、表示された会話記録全体に適用される2つ以上のインパクト効果オプションをプレビューすることができる。一部の実施形態では、方法1200は、メッセージ入力エリアが空である間に(1236)、メッセージ入力エリアにテキストを記入する入力を検出すること(例えば、図5Uのメッセージ入力エリア5100)、及び、メッセージ入力エリアにテキストを記入した入力の検出に応じて、インパクト選択アフォーダンスのアクティブ化によりインパクト選択インタフェースを表示させるように構成された、インパクト選択アフォーダンス(例えば、メッセージ入力エリア5100内のインパクト選択アフォーダンス5104)を表示すること、を含む。
一部の実施形態では、方法1200は、表示された会話記録全体に適用されるインパクト効果オプションのプレビューが表示される間に、表示された会話記録全体に適用される別のインパクト効果オプションのプレビュー(例えば、図5CC及び図5CH~図5COに示すように、誕生日メッセージのための会話記録内で上方に浮かんでいくバルーン(例えば、図5CBに示すようなバルーン5152-1)を表示するなどの第1のフルスクリーンオプションのプレビュー)の表示をアクティブ化する入力(例えば、図5CCのスワイプジェスチャ5156)を検出すること(1238)、及び、表示された会話記録全体に適用される別のインパクト効果オプションのプレビューの表示をアクティブ化する入力の検出に応じて、表示された会話記録全体に適用される第2のインパクト効果オプションのプレビューを表示すること(例えば、図5CD及び図5CEに示すような「Congratulations!」メッセージのための紙吹雪の表示や、図5CP~図5CWに示すような「Happy New Year」メッセージのために会話記録内で花火が爆発するなどの第2の全画面効果オプションのプレビューを表示すること)、を含む。図5CB及び図5CCに示すように、ユーザインタフェースは、効果オプションインジケータ5154(時に、ページドットとも呼ばれる)を含み、どの全画面効果オプションが現在選択されているか又は現在プレビューされているかを示し、また、いくつの全画面効果オプションが使用可能で、シーケンス内のこれらのオプションのうちのどれが現在表示されているかを示すことができる。
任意選択的に、メッセージアプリケーションのユーザは、インパクト効果オプションの最終選択を行う前に、2つ以上のインパクト効果オプションをプレビューすることができる。一部の実施形態では、方法1200は、インパクト選択インタフェース(例えば、図5AAに示すようなインパクト選択インタフェース5110)を表示している間に、複数のインパクト効果オプションのうちの第2のインパクト効果オプションの場所に対応する、タッチ感知面の場所において、接触(例えば、入力5108-4)による入力を検出すること(1240)、及び、第2のインパクト効果オプションの場所に対応するタッチ感知面上の場所における接触によるユーザ入力の検出に応じて、第2のインパクトを効果オプションを第1のメッセージ入力に適用するプレビューを表示すること(例えば、インパクト選択インタフェース内に)、を含む。一部の実施形態では、プレビューは、第2のインパクト効果を第1のメッセージ入力を含むメッセージ領域に適用する。
図5CH~図5COのシーケンスは、対応する拡張メッセージコンテンツトリガーを含むメッセージ(「Happy Birthday!!!!!」)が受信されたときに表示されるバルーン全画面効果の例を示す。同様に、図5CP~図5CWのシーケンスは、対応する拡張メッセージコンテンツトリガーを含むメッセージ(「Happy New Year!!!」)が受信されたときに表示される花火全画面効果の例を示す。
一部の実施形態では、方法1200は、メッセージセッション内の別のユーザに対応する電子デバイスが第1のインパクト効果オプションを、メッセージセッション内のメッセージに適用することができるか(又は、より一般的には、複数のインパクト効果オプションのいずれかに適用することができるか)を判定すること、及び、メッセージセッション内の別のユーザに対応する電子デバイスが、メッセージセッション内のメッセージに第1のインパクト効果オプションを適用することができないという判定に従って、第1のインパクト効果オプションについてユーザの電子デバイスのディスプレイ上に通知(例えば、メッセージセッションにおける他のユーザに対応する電子デバイスが、第1のインパクト効果オプション又は任意のインパクト効果を、メッセージセッションのメッセージに適用することができないという通知)を表示すること(1242)、を含む。任意選択的に、方法1200は、メッセージセッション内の別のユーザに対応する電子デバイスが、第1のインパクト効果オプションをメッセージセッション内のメッセージに適用することができるという判定に従って、通知の表示を差し控えることを含む。
一部の実施形態では、メッセージセッションに含まれる少なくとも1つの他のユーザに対応する1つ以上の電子デバイスに、第1のメッセージ入力を含むメッセージ領域を表示させる情報を送信する前に、ユーザの電子デバイスは、少なくとも1つの他のユーザに対応する電子デバイスが、第1のインパクト効果オプションをメッセージ領域に適用することができるかどうかを判定する。そうでない場合には、ユーザの電子デバイスは、他のユーザがその効果を見ないであろうことを示す通知を表示する。
図12A~図12Eにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。加えて、本明細書に記載の他の方法(例えば、方法600、800、1000、1400、1600、1800)に関して本明細書で記載されている他のプロセスの詳細はまた、図12A~図12Eに関連して上述された方法1200に類似の方法で適用可能であることも留意されたい。例えば、方法1200に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、図13は、上記のように本発明の原理に従って構成された電子デバイス1300の機能ブロック図を示す。このデバイスの機能ブロックは、本発明の原理を実行するためのハードウェア、ソフトウェア、又はハードウェア及びソフトウェアの組合せにより実施することができる。図13に述べられる機能ブロックは、上記に述べたような本発明の原理を実施するために、組合せるか、又はサブブロックに分割することができることが当業者によって理解される。したがって、本明細書における説明は、あらゆる可能な組合せ若しくは分割、又は本明細書に述べられる更なる機能ブロックの定義を支持し得るものである。
図13に示すように、電子デバイス1300は、メッセージユーザインタフェースであって、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録、及び第1のメッセージ入力を含むメッセージ入力エリアを含む、メッセージユーザインタフェースをディスプレイユニット上に表示するように構成されたディスプレイユニット1302、接触を検出するように構成されたタッチ感知面ユニット1304、並びに、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニット1306、を含む。一部の実施形態では、処理ユニット1306は、検出ユニット1308、表示可能化ユニット1310、停止ユニット1312、送信ユニット1314、選択ユニット1316、及び判定ユニット1318を含む。
処理ユニット1306は、メッセージユーザインタフェースを表示する間、メッセージ入力エリアの場所に対応する、タッチ感知面ユニット1304上の場所において、第1の接触による第1の入力を検出し(例えば、検出ユニット1308を用いて)、第1の接触による第1の入力の検出に応じて、複数のインパクト効果オプションを含むインパクト選択インタフェースの表示を可能化し(例えば、表示可能化ユニットユニット1310を用いて)、インパクト選択インタフェースを表示する間に、複数のインパクト効果オプション内の第1のインパクト効果オプションの場所に対応する、タッチ感知面ユニット1304上の場所において第2の接触による第2の入力を検出し(例えば、検出ユニット1308を用いて)、第2の接触による第2のユーザ入力の検出に応じて、第1のインパクト効果オプションを第1のメッセージ入力に適用するプレビューの表示を可能化する(例えば、表示可能化ユニット1310を用いて)、ように構成されている。
一部の実施形態では、処理ユニット1306は、プレビューを表示した後に、第1のインパクト効果オプションに対応する、タッチ感知面ユニット1304上の場所において、第2の接触のリフトオフを検出し(例えば、検出ユニット1308を用いて)、及び、第1のインパクト効果に対応する、タッチ感知面ユニット1304上の場所における第2の接触のリフトオフの検出に応じて、インパクト選択インタフェースの表示を停止し(例えば、停止ユニット1312を用いて)、会話記録内に入力された第1のメッセージを含むメッセージ領域の表示を可能化し(例えば、表示可能化ユニット1310を用いて)、並びに、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスにメッセージセッションに対応する会話記録内に入力された第1のメッセージを含むメッセージ領域の表示を可能化させ、及び、第1のインパクト効果オプションを適用させる情報、を送信する(例えば、送信ユニット1314を用いて)、ように更に構成されている。
一部の実施形態では、処理ユニット1306は、プレビューを表示した後に、第1のインパクト効果オプションに対応する、タッチ感知面ユニット1304上の場所において、第2の接触のリフトオフを検出し(例えば、検出ユニット1308を用いて)、及び、第1のインパクト効果オプションに対応する、タッチ感知面ユニット1304上の場所における第2の接触のリフトオフの検出に応じて、第1のメッセージ入力を含む第1のインパクト効果オプションを選択し(例えば、選択ユニット1316を用いて)、インパクト選択インタフェースの表示を停止し(例えば、停止ユニット1312を用いて)、メッセージセッションの会話記録及び第1のメッセージ入力を含むメッセージ入力エリアの表示を可能化し(例えば、表示可能化ユニット1310を用いて)、第3の入力を検出し(例えば、検出ユニット1308を用いて)、第3の入力の検出に応じて、会話記録内に、第1のメッセージ入力を含むメッセージ領域の表示を可能化し(例えば、表示可能化ユニット1310を用いて)、並びに、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスにメッセージセッションに対応する会話記録内に入力された第1のメッセージを含むメッセージ領域の表示を可能化させ、及び、第1のインパクト効果オプションを適用させる情報、を送信する(例えば、送信ユニット1314を用いて)、ように更に構成されている。
一部の実施形態では、処理ユニット1306は、プレビューを表示した後に、第1のインパクト効果オプションに対応する、タッチ感知面ユニット1304上の場所において第3の接触による第3の入力を検出し(例えば、検出ユニット1308を用いて)、及び、第1のインパクト効果オプションに対応する、タッチ感知面ユニット1304上の場所における第3の接触による第3の入力の検出に応じて、インパクト選択インタフェースの表示を停止し(例えば、停止ユニット1312を用いて)、会話記録内に、入力された第1のメッセージを含むメッセージ領域の表示を可能化し(例えば、表示可能化ユニット1310を用いて)、並びに、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスにメッセージセッションに対応する会話記録内に入力された第1のメッセージを含むメッセージ領域の表示を可能化させ、及び、第1のインパクト効果オプションを適用させる情報、を送信する(例えば、送信ユニット1314を用いて)、ように更に構成されている。
一部の実施形態では、処理ユニット1306は、プレビューを表示した後に、第1のインパクト効果オプションに対応する、タッチ感知面ユニット1304上の場所において第3の接触による第3の入力を検出し(例えば、検出ユニット1308を用いて)、及び、第1のインパクト効果オプションに対応する、タッチ感知面ユニット1304上の場所における第3の接触による第3の入力の検出に応じて、第1のメッセージ入力を含む第1のインパクト効果オプションを選択し(例えば、選択ユニット1316を用いて)、インパクト選択インタフェースの表示を停止し(例えば、停止ユニット1312を用いて)、及び、メッセージセッションの会話記録及び第1のメッセージ入力を含むメッセージ入力エリアの表示を可能化し(例えば、表示可能化ユニット1310を用いて)、第4の入力を検出し(例えば、検出ユニット1308を用いて)、第4の入力の検出に応じて、会話記録内に、第1のメッセージ入力を含むメッセージ領域の表示を可能化し(例えば、表示可能化ユニット1310を用いて)、並びに、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスにメッセージセッションに対応する会話記録内に入力された第1のメッセージを含むメッセージ領域の表示を可能化させ、及び、第1のインパクト効果オプションを適用させる情報、を送信する(例えば、送信ユニット1314を用いて)、ように更に構成されている。
一部の実施形態では、処理ユニット1306は、メッセージ入力エリアが空の間、メッセージ入力エリアにテキストを記入する入力を検出し(例えば、検出ユニット1308を用いて)、及び、メッセージ入力エリアにテキストを記入する入力の検出に応じて、インパクト選択アフォーダンスをアクティブ化すると、インパクト選択インタフェースを表示をもたらすように構成された、インパクト選択アフォーダンスの表示を可能化する(例えば、表示可能化ユニット1310を用いて)、ように、更に構成されている。
一部の実施形態では、インパクト選択インタフェースは、アクティブ化すると第1のメッセージ入力を含むメッセージ用のインパクト効果オプションを表示させる領域効果オプションアフォーダンス、及び、アクティブ化すると第1のメッセージ入力を含むメッセージがメッセージセッションに表示されるときに、表示された会話記録全体に適用された1つのインパクト効果オプションのプレビューを表示させる全画面効果オプションアフォーダンス、を含む。
一部の実施形態では、処理ユニット1306は、表示された会話記録全体に適用されるインパクト効果オプションのプレビューが表示されている間に、表示された会話記録全体に適用される別のインパクト効果オプションのプレビューの表示をアクティブ化する入力を検出し(例えば、検出ユニット1308を用いて)、及び、表示された会話記録全体に適用される別のインパクト効果オプションのプレビューの表示をアクティブ化する入力の検出に応じて、表示された会話記録全体に適用される第2のインパクト効果オプションのプレビューの表示を可能化する(例えば、表示可能化ユニット1310を用いて)、ように更に構成されている。
一部の実施形態では、処理ユニット1306は、インパクト選択インタフェースを表示する間に、複数のインパクト効果オプション内の第2のインパクト効果オプションの場所に対応する、タッチ感知面ユニット1304上の場所において接触による入力を検出し(例えば、検出ユニット1308を用いて)、第2のインパクト効果オプションの場所に対応する、タッチ感知面ユニット1304上の場所における接触によるユーザ入力の検出に応じて、第2のインパクト効果オプションを第1のメッセージ入力に適用するプレビューの表示を可能化する(例えば、表示可能化ユニット1310を用いて)、ように更に構成されている。
一部の実施形態では、複数のインパクト効果オプションは、第1のメッセージ入力を含むメッセージ領域への第1のメッセージ入力を含むメッセージ領域の面積よりも大きい面積を伴う画像を適用する少なくとも1つのインパクト効果オプションを含む。
一部の実施形態では、複数のインパクト効果オプションは、インパクト効果オプションが選択されていないときに、第1のメッセージを含むメッセージ領域のサイズに対する第1のメッセージ入力を含むメッセージ領域のサイズを増減する少なくとも1つのインパクト効果オプションを含む。
一部の実施形態では、複数のインパクト効果オプションは、第1のメッセージを含むメッセージ領域が表示されたときに、表示された会話記録内の他のメッセージ領域と相互作用する第1のメッセージ入力を含むメッセージ領域を有するように構成された少なくとも1つのインパクト効果オプションを含む。
一部の実施形態では、複数のインパクト効果オプションは、第1のメッセージ入力を含むメッセージ領域がメッセージセッションに対応する会話記録内に表示されたときに、アニメーションを表示するように構成された少なくとも1つのインパクト効果オプションを含む。
一部の実施形態では、複数のインパクト効果オプションは、第1のメッセージ入力を含むメッセージ領域がメッセージセッションに対応する会話記録に表示されたときに、アニメーションを表示するように構成された少なくとも1つのインパクト効果オプションを含み、アニメーションは、第1のメッセージ入力を含むメッセージ領域及び会話記録内の他のメッセージ領域を同時に動かす。
一部の実施形態では、複数のインパクト効果オプションは、第1のメッセージ入力を含むメッセージ領域がメッセージセッションに対応する会話記録内に表示されたときに、1つ以上の触知出力をトリガーするように構成された少なくとも1つのインパクト効果オプションを含む。
一部の実施形態では、第1のインパクト効果オプションを第1のメッセージ入力に適用するプレビューは、定期的に繰り返される。
一部の実施形態では、処理ユニット1306は、メッセージセッション内の別のユーザに対応する電子デバイスが、メッセージセッション内のメッセージに第1のインパクト効果オプションを適用することができるかどうかを判定し(例えば、判定ユニット1318を用いて)、及び、メッセージセッション内の別のユーザに対応する電子デバイスが、メッセージセッション内のメッセージに第1のインパクト効果オプションを適用することができないという決定に従って、第1のインパクト効果オプションについてユーザの電子デバイスのディスプレイユニット1302上の通知の表示を可能化する(例えば、表示可能化ユニット1310を用いて)、ように更に構成されている。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図12A~図12Eを参照して上述された動作は、図1A、図1B、又は図13に示される構成要素によって、任意選択的に実行される。例えば、検出動作1204及び1222は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と比較し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出し、アプリケーション内部状態192を更新する。一部の実施形態では、イベント処理部190は、アプリケーションによって表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示されるコンポーネントに基づいてどのように実施されるかは明らかであるだろう。
秘密メッセージによる対話
図14A及び図14Bは、一部の実施形態に係る、秘密メッセージにより対話するためのプロセスのフロー図である。より具体的には、これらの図は、メッセージ領域内の受信メッセージテキストを秘密にするための1つ以上のスクリーン要素を含むインタフェースを表示する方法に関する。メッセージ領域に対応する場所で受信された入力に応じて、受信されたメッセージは少なくとも部分的に顕示化される。これにより、混雑した場所などでメッセージを閲覧し得る場合に、非公開でメッセージを送信しかつ閲覧することができる。メッセージテキストを見るための追加の操作を要求することにより、不注意な内容の開示が回避される。
これらの方法を実行する電子デバイスの1つ以上の例(例えば、ポータブル多機能デバイス100又はデバイス300)が、図5BG~図5BP及び図5BQ~図5CAに示される。
図14A及び図14Bは、本明細書で時に第1の電子デバイスと呼ばれる、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する、電子デバイスによって実行される方法1400を示すフロー図である。一部の実施形態では、電子デバイスは、タッチ感知面上の接触強度を検出するように構成された1つ以上のセンサ(例えば、タッチスクリーンディスプレイ又はトラックパッド内のセンサ)を含む。
一部の実施形態では、方法1400は、ディスプレイ上にメッセージユーザインタフェース(例えば、図5BHのメッセージアプリケーションのユーザインタフェース5002)を表示すること(1402)を含む。メッセージユーザインタフェースは、電子デバイスのユーザと第1の他のユーザを含む少なくとも1人の他のユーザ(例えば、別の電子デバイスのユーザ)との間のメッセージセッションの会話記録(例えば、図5BHのユーザインタフェース5002における会話記録5004)、及び、第1の他のユーザから受信したメッセージ(例えば、メッセージ5126)に対するメッセージ領域(図5BHの5008)を会話記録内に含み、メッセージ領域は、第1の他のユーザから受信したメッセージを秘密にする1つ以上のスクリーン要素(例えば、図5BHスクリーン要素5124)を含む。
一部の実施形態では、受信したメッセージは、ユーザがメッセージに「見えないインク」効果を適用した別のデバイスによって送信される。一部の実施形態では、それは複数のインパクト効果オプション(例えば、図5AAに関して上述したインパクト効果オプション5112-1~5112-4)を含む図5BGのインパクト選択インタフェース5110を使用して達成される。一部の実施形態では、インパクト効果オプションのセットは、個々のメッセージ領域に適用されるオプション(例えば、「領域効果」オプション)、及び、メッセージがメッセージセッションにおいて最初に表示されたときに、表示された会話記録全体に適用されるオプション(例えば、「全画面効果」オプション)、を含む。一部の実施形態では、表示される複数のインパクト効果オプションは、会話記録内のメッセージの内容を秘密にするオプション(図5BGで空のメッセージ領域によって示す、図5AAの「見えないインク」オプション5112-1)を含む。一部の実施形態では、見えないインクオプションは、それぞれのインパクト効果オプションを用いてメッセージ(ユーザ指定のメッセージ入力)を送信するためのアフォーダンス(例えば、図5BGのアフォーダンス5118を送信する)を含む。一部の実施形態では、図5BGのインパクト選択インタフェース5110は、インパクト効果オプションの選択を取り消し、メッセージアプリケーションをメッセージアプリケーションの以前のユーザインタフェース又はメッセージアプリケーションの予め定義されたユーザインタフェースのいずれかに戻す、取消アフォーダンス5120を含む。
一部の実施形態では、メッセージを秘密にする1つ以上のスクリーン要素(5124)は、動く粒子(例えば、動く粒子の表示された画像)である(1404)。一部の実施形態では、デバイスは、メッセージ領域内に動く粒子(例えば、仮想の砂粒子)を含むアニメーションを表示して、メッセージの内容を秘密にする。
一部の実施形態では、秘密にされたメッセージを含むメッセージ領域(図5BHの5008)は、秘密メッセージを有しない会話記録内のメッセージ領域の輪郭とは別個のメッセージ領域の輪郭を有する(1406)。1つの例では、秘密メッセージを含むメッセージ領域は点線の輪郭を有するが、会話記録内の従来のメッセージ領域(例えば、見えないインク効果などのインパクト効果を適用されていないメッセージ領域)は実線の輪郭を有する。
方法1400は、秘密メッセージを含むメッセージ領域に対応する、タッチ感知面上の場所において接触(例えば、図5BHのスワイプ又はドラッグジェスチャ入力5128-a)による第1の入力を検出すること(1408)、及び、接触による第1の入力を検出した後に、メッセージ領域の秘密メッセージを顕示化すること(1416)、を更に含む。例えば、図5BH、5BI、5BJ及び5BKに示すように、メッセージ5126のそれぞれの部分は、メッセージ領域5008の第1の部分からメッセージ領域5008の別の部分へ進行するドラッグジェスチャ入力5128-a、5128-b、5128-c、5128-dに応じて顕示化する。この例で続けると、図5Lに示すように、ドラッグジェスチャ5128が完了したとき、又は終了したとき、又は予め定義された時間が経過した後、メッセージ領域5008のメッセージが再び秘密にされる。
一部の実施形態では、第1の入力は、秘密メッセージを含むメッセージ領域に対応する場所における接触によるドラッグジェスチャ(例えば、入力5128-a)である。
一部の実施形態では、接触による第1の入力を検出すること(1408)は、秘密メッセージを有するメッセージ領域に対応する場所における接触によるドラッグジェスチャ(例えば、図5BHの入力5128-a)を検出すること(1412)を含み、方法1400は、メッセージを秘密にする1つ以上のスクリーン要素の部分を動的に除去すること、それによってドラッグジェスチャにおける接触の動きに従ってメッセージの対応する部分を顕示化すること(1412)、を含む。一部の実施形態では、ドラッグジェスチャ内の接触の予め定義された距離内にある1つ以上のスクリーン要素(例えば、スクリーン要素5124)の一部が除去される。一部の実施形態では、メッセージの所与の部分が明らかにされた後(例えば、0.5、1、2、3、4、又は5秒などの予め定義された時間が経過した後)、所与の部分が再び秘密にされる(例えば、所与の部分を秘密にする1つ以上のスクリーン要素を適用することによって)。
一部の実施形態では、電子デバイスは、タッチ感知面上の接触強度を検出するように構成された1つ以上のセンサを含み、第1の入力(例えば、入力5128-a)は、秘密メッセージを含むメッセージ領域に対応する場所における接触による押圧入力(例えば、軽押し又は深押し)である(1414)。
一部の実施形態では、電子デバイスは、タッチ感知面上の接触強度を検出するように構成された1つ以上のセンサを含み、接触による第1の入力を検出することは、秘密メッセージを含むメッセージ領域(図5BMの5008)に対応する場所における接触強度の増加(例えば、図5BM、5BN及び5BOに示すように、強度が増加していく入力5130-a、入力5130-b、入力5130-c)を検出することを含む(1418)。そのような実施形態では、方法1400は、(例えば、図5BMに示すように)メッセージを秘密にする1つ以上のスクリーン要素(5124)の一部を動的に除去すること、それにより、接触強度の増加に従ってメッセージの対応する部分を顕示化すること(例えば、図5BM、5BN及び5BOのシーケンスに示すように)、を含む。一部の実施形態では、接触に最も近い1つ以上のスクリーン要素(5124)の部分が除去され、次いで、接触強度が増加するにつれて、接触から順次遠い部分が、メッセージ全体が顕示化するまで除去されていく(図5BM、5BN及び5BOのシーケンスに示すように)。一部の実施形態では、入力中の接触強度の減少に従って、デバイスは、図5BOから図5BPの進行に示すように、1つ以上のスクリーン要素の部分を動的に追加し、それによりメッセージの対応する部分を秘密にする。
一部の実施形態では、方法1400は、接触による第1の入力の検出に応じて、認証プロンプト(例えば、「指紋又はパスコードを入力してください」などを伝えるテキスト)、及び/又は認証インタフェース(例えば、パスコード画面)を表示すること(1420)を含む。そのような実施形態では、方法1400は、認証入力を受信すること(例えば、パスコード又は指紋入力を受信すること)、認証入力が認証基準を満足するという判定に従ってメッセージ領域内の秘密メッセージを顕示化すること、及び、認証入力が認証基準を満足しないという判定に従ってメッセージ領域内のメッセージを秘密のまま保つこと、を更に含む。
一部の実施形態では、デバイスは、ユーザがメッセージを見ることを許可されているかどうかを判定し、ユーザがメッセージを見ることを許可されているという判定に従って、メッセージを顕示化する。一部の実施形態では、第1のユーザ入力の検出に応じて、判定が実行される。一部の実施形態では、秘密メッセージの受信に応じて、判定が実行される。一部の実施形態では、メッセージアプリケーションがロードされたとき、又はメッセージアプリケーションがフォーカスを受け取ったとき(例えば、メッセージアプリケーションのユーザインタフェースが表示され、かつユーザ入力の受信が可能になったとき)に、判定が実行される。一部の実施形態では、ユーザが認証情報をデバイスに提供したときに、判定が実行される(例えば、ユーザがコード、パスワード、及び/又は指紋を使用してデバイスをロック解除したときに認証が実行される)。一部の実施形態(例えば、複数のユーザを含むデバイス上)では、新しいユーザが認証情報を提供するたびに、認証が実行される。
一部の実施形態では、ユーザがメッセージを顕示化することを許可されているかどうか判定することは、バイオメトリック認証を実行することを含む。一部の実施形態では、ユーザが指紋を提供してデバイスをロック解除すると、認証が実行される。一部の実施形態では、秘密メッセージが受信されたとき、又はユーザが秘密メッセージにアクセスしようとしたときに、ユーザは指紋又はパスコードを提供するように促される。
一部の実施形態では、デバイスから秘密メッセージを送信する前に、デバイスは、送信者を認証する(例えば、送信者認証クレデンシャルをチェックすることにより)。例えば、秘密メッセージ(「見えないインク」インパクト効果オプションを含むメッセージなど)を送信する前に、送信デバイスは、ユーザによって提供されたパスコード又は指紋が、デバイスの主ユーザなどの許可されたユーザに対応するかどうかをチェックする。一部の実施形態では、送信者は、秘密メッセージを送信する直前に(例えば、ユーザが送信アイコンをアクティブ化するか、又は「見えないインク」インパクト効果オプションのようなメッセージを秘密にするオプションを選択したことに応じて)、パスコード及び/又は生体認証(例えば、指紋)を提供するよう促される。一部の実施形態では、デバイスが送信者を認証する場合、次いで秘密メッセージが送信されるか又は送信が可能化されるが、デバイスが送信者を認証しない場合、次いで秘密メッセージは送信されない。
一部の実施形態では、方法1400は、メッセージ領域内の秘密メッセージを顕示化した後、第1の他のユーザから受信したメッセージを秘密にすること(1422)を含む。例えば、図5BH~図5BKのシーケンスに示されるように、メッセージ領域5008内の秘密メッセージが顕示化された後、メッセージ領域内のメッセージは、図5BLに示されるように、再び秘密にされる。別の例では、図5BQ~図5BVのシーケンスは、図5BQ~図5BTに示すように徐々に顕示化され、次いで、図5BT~図5BVに示すように徐々に秘密にされるメッセージを示す。一部の実施形態では、接触による第1の入力の終了の検出に応じて、メッセージが再び秘密にされる。一部の実施形態では、接触による第1の入力が終了してから予め定義された時間(例えば、2秒、5秒、又は2~5秒の予め定義された時間)が経過した後に、メッセージが再び秘密にされる。一部の実施形態では、メッセージが明らかにされてから予め定義された時間(例えば、2秒、5秒、又は2~5秒の予め定義された時間)が経過した後、メッセージが再び秘密にされる。
図14A及び14Bにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。加えて、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1600、1800)に関して本明細書で記載されている他のプロセスの詳細はまた、図14A及び図14Bに関連して上述された方法1400に類似の方法で適用可能であることも留意されたい。例えば、方法1400に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、図15は、上記のように本発明の原理に従って構成された電子デバイス1500の機能ブロック図を示す。このデバイスの機能ブロックは、本発明の原理を実行するためのハードウェア、ソフトウェア、又はハードウェア及びソフトウェアの組合せにより実施することができる。図15に述べられる機能ブロックは、上記に述べたような本発明の原理を実施するために、組合せるか、又はサブブロックに分割することができることが当業者によって理解される。したがって、本明細書における説明は、あらゆる可能な組合せ若しくは分割、又は本明細書に述べられる更なる機能ブロックの定義を支持し得るものである。
図15に示すように、電子デバイス1500は、ディスプレイユニット1502上にメッセージユーザインタフェースであって、メッセージユーザインタフェースは、電子デバイスのユーザと第1のユーザを含む少なくとも1人の他のユーザとの間のメッセージセッションの会話記録、及び第1の他のユーザから受信したメッセージに対する会話記録内のメッセージ領域であって、第1の他のユーザから受信したメッセージを秘密にする1つ以上のスクリーン要素を含むメッセージ領域を含む、メッセージユーザインタフェースを表示するように構成されたディスプレイユニット1502、接触を検出するように構成されたタッチ感知面ユニット1504、並びに、ディスプレイユニット1502及びタッチ感知面ユニット1504に結合された処理ユニット1506、を含む。一部の実施形態では、処理ユニット1506は、検出ユニット1508、表示可能化ユニット1510、受信ユニット1512、顕示化ユニット1514、秘密化ユニット1516、除去ユニット1518、及び削除ユニット1520を含む。
処理ユニット1506は、秘密メッセージを含むメッセージ領域に対応する、タッチ感知面ユニット1504上の場所において、接触による第1の入力を検出し(例えば、検出ユニット1508を用いて)、接触による第1の入力の検出に応じて、メッセージ領域内の秘密メッセージを顕示化する(例えば、公開ユニット1514を用いて)、ように構成されている。
一部の実施形態では、メッセージを秘密にする1つ以上のスクリーン要素は、動く粒子である。
一部の実施形態では、秘密メッセージを含むメッセージ領域は、秘密メッセージを有しない会話記録内のメッセージ領域上の輪郭とは別個のメッセージ領域の輪郭を有する。
一部の実施形態では、処理ユニット1506は、接触による第1の入力の検出に応じて、認証プロンプト及び/又は認証インタフェースの表示を可能化し(例えば、表示可能化ユニット1510を用いて)、認証入力を受信し(例えば、検出ユニット1512を用いて)、認証入力が認証基準を満足するという判定に従って、メッセージ領域内の秘密メッセージを顕示化し(例えば、顕示化ユニット1514を用いて)、認証入力が認証基準を満足しないという判定に従って、メッセージ領域内のメッセージを秘密のまま保つ(例えば、秘密ユニット1516を用いて)、ように更に構成されている。
一部の実施形態では、第1の入力は、秘密メッセージを含むメッセージ領域に対応する場所における接触によるドラッグジェスチャである。
一部の実施形態では、接触による第1の入力を検出することは、秘密メッセージを含むメッセージ領域に対応する場所において接触によるドラッグジェスチャを検出することを含み、処理ユニット1506は、メッセージを秘密にする1つ以上のスクリーン要素の部分を動的に除去し(例えば、除去ユニット1518を用いて)、それにより、ドラッグジェスチャにおける接触の動きに従って、メッセージの対応する部分を顕示化する、ように更に構成されている。
一部の実施形態では、電子デバイスは、タッチ感知面ユニット1504上の接触強度を検出するように構成された1つ以上のセンサを含み、第1の入力は、秘密メッセージを含むメッセージ領域に対応する場所における接触による押圧入力である。
一部の実施形態では、電子デバイスは、タッチ感知面ユニット1504上の接触強度を検出するように構成された1つ以上のセンサを含み、接触による第1の入力を検出することは、秘密メッセージを含むメッセージ領域に対応する場所において接触強度の増加を検出することを含み、処理ユニット1506は、メッセージを秘密にする1つ以上のスクリーン要素の部分を動的に除去し(例えば、除去ユニット1518を用いて)、それによって接触強度の増加に従ってメッセージの対応する部分を顕示化する、ように更に構成されている。
一部の実施形態では、処理ユニット1506は、メッセージ領域内の秘密メッセージを顕示化した後、第1の他のユーザから受信したメッセージを秘密にする(例えば、秘密化ユニット1516を用いて)、ように更に構成されている。
一部の実施形態では、処理ユニット1506は、メッセージ領域内の秘密メッセージを顕示化した後、会話記録から第1の他のユーザから受信したメッセージを自動的に削除する(例えば、削除ユニット1520を用いて)、ように更に構成されている。
上述の情報処理方法における動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述したように)又は特定用途向けチップなどの、情報処理機器内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図14A及び図14Bを参照して上述された動作は、図1A、図1B、又は図15に示される構成要素によって、任意選択的に実行される。例えば、削除する動作1408、1412、及び1414は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190により実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と比較し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出し、アプリケーション内部状態192を更新する。一部の実施形態では、イベント処理部190は、アプリケーションによって表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示されるコンポーネントに基づいてどのように実施されるかは明らかであるだろう。
拡張メッセージコンテンツのトリガー
図16A~図16Cは、一部の実施形態に係る、メッセージが拡張メッセージコンテンツトリガーを含む場合に、メッセージユーザインタフェースに効果を適用するためのプロセスのフロー図である。より具体的には、これらの図は、第1のメッセージ領域内のメッセージが、拡張メッセージコンテンツトリガーを含むかどうかを判定する方法に関する(例えば、単語、フレーズ、絵文字のセット、又は効果をトリガーする他のコンテンツ、又は送信者によって選択されたオプション)。メッセージが拡張メッセージコンテンツトリガーを含むと判定したことに応じて、効果がメッセージユーザインタフェースに適用される。一部の実施形態では、効果は、第1のメッセージ領域以外の少なくとも1つのメッセージ領域に適用される。一部の実施形態では、効果は、メッセージユーザインタフェースのクロムに適用される。
これらの方法を実行する電子デバイスの1つ以上の例(例えば、ポータブル多機能デバイス100又はデバイス300)を、図5CB~図5CG及び図5CH~図5CWに示す。
図16A~図16Cは、本明細書で時に第1の電子デバイスと呼ばれる、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する、電子デバイスによって実行される方法1600を示すフロー図である。一部の実施形態では、電子デバイスは、タッチ感知面上の接触強度を検出するように構成された1つ以上のセンサ(例えば、タッチスクリーンディスプレイ又はトラックパッド内のセンサ)を含む。
一部の実施形態では、方法1600は、ディスプレイ上にメッセージユーザインタフェース(例えば、図5BHのメッセージアプリケーションのユーザインタフェース5002)を表示すること(1602)を含む。メッセージユーザインタフェースは、電子デバイスのユーザと、第1の他のユーザを含む少なくとも1人の他のユーザ(例えば、他の電子デバイスのユーザ)との間のメッセージセッションの会話記録(例えば、図5CFのユーザインタフェース5002内の会話記録5004)を含む。方法1600は、メッセージセッションに含まれる第1の他のユーザに対応する電子デバイス(例えば、第2の電子デバイス)から、メッセージセッション内に第1のメッセージを受信すること(1604)、第1のメッセージが拡張メッセージコンテンツトリガーを含むかどうかを判定すること(1606)、第1のメッセージが拡張メッセージコンテンツトリガーを含むという判定に従って、ディスプレイ上の会話記録内の第1のメッセージ領域に第1のメッセージを表示すること、及びトリガーに対応する拡張メッセージコンテンツを表示することであって、拡張メッセージコンテンツが会話記録内の第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用するコンテンツを含む、こと(1616)(例えば、図5Cに例示する)、並びに第1のメッセージが拡張メッセージコンテンツトリガーを含まないという決定に従って、第1のメッセージをディスプレイ上の会話記録内の第1のメッセージ領域に表示すること(1642)(例えば、図5CGに示すように、トリガーに対応する拡張メッセージコンテンツを表示することなく)、を更に含む。
一部の実施形態では、第1のメッセージが拡張メッセージコンテンツトリガーを含むかどうかの判定(1606)が、第1のメッセージの受信に応じて実行される(1608)。
一部の実施形態では、第1のメッセージが拡張メッセージコンテンツトリガーを含むかどうかを判定すること(1606)は、第1のメッセージが予め定義されたテキストを含むかどうかを判定すること(1610)を含む。例えば、第1のメッセージが「happy birthday」という単語を含むとき、デバイスは、図5CKから5COのシーケンスに示すように、バルーンを含む拡張メッセージコンテンツを表示する。一部の実施形態では、第1のメッセージが拡張メッセージコンテンツトリガーを含むかどうかを判定することは、第1のメッセージが、単語、フレーズ、顔文字、顔文字文字列、絵文字、絵文字文字列、ステッカ、及び/又はステッカ文字列、などの予め定義されたメッセージコンテンツを含むかどうかを判定するために、第1のメッセージのコンテンツを分析することを含む。
一部の実施形態では、第1のメッセージが拡張メッセージコンテンツトリガーを含むかどうかを判定すること(1606)は、第1のメッセージが、表示される拡張メッセージコンテンツを示す埋め込まれた非表示値(例えば、送信者によって選択された表示オプションによって判定されるような)を含むかどうかを判定すること(1612)を含む。例えば、第1のメッセージの送信者(第1の他のユーザ)は、第1のメッセージに適用する全画面効果オプションを選択すると、送信者によって選択された全画面効果オプションに対応する埋め込まれた非表示値が、第1のメッセージとともに送信される。
一部の実施形態では、第1のメッセージが拡張メッセージコンテンツトリガーを含むかどうかを判定する(1606)ことは、第1のメッセージが受信された時間が予め定義された時間フレームに対応するかどうかを判定すること(1614)を含む。例えば、第1のメッセージが1月1日の深夜0時から所定時間内に受信されると、デバイスは、花火及び/又は「Happy New Year!」を告げるテキストを含む拡張メッセージコンテンツを表示する。
一部の実施形態では、拡張メッセージコンテンツは、表示された会話記録全体に効果を適用するコンテンツを含む(1618)。例えば、会話記録全体に適用される効果は、会話記録全体を通過するバルーンのアニメーション表示、会話記録全体を通過する紙吹雪のアニメーション表示(例えば、図5CD~図5CFに示すような)、などであってもよい。
一部の実施形態では、第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用すること(1616)は、第1のメッセージ領域以外の少なくとも1つのメッセージ領域上にアニメーション化されたオブジェクト(例えば、仮想の紙吹雪)を蓄積すること(1620)を含む。一部の実施形態では、アニメーション化されたオブジェクトは、メッセージユーザインタフェースの外部に表示されるユーザインタフェースオブジェクト上に蓄積する。一部の実施形態では、アニメーション化されたオブジェクトは、デバイスのオペレーティングシステムによって制御されるステータスバー上に、又はディスプレイの他の部分に蓄積する。
一部の実施形態では、第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用すること(1616)は、第1のメッセージ領域以外の少なくとも1つのメッセージ領域をアニメーション化すること(1622)を含む。一部の実施形態では、他のメッセージ領域の動きは、第1のメッセージ領域の動きによってトリガーされる。一部の実施形態では、メッセージユーザインタフェースの外部に表示される他のユーザインタフェースオブジェクトがアニメーション化される。
一部の実施形態では、第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用すること(1616)は、図5CQに示すように(図5CPと比較されるように)、第1のメッセージ領域をフェードすることなく、第1のメッセージ領域以外のメッセージ領域を一時的にフェードすること(1624)を含む。
一部の実施形態では、第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用すること(1616)は、第1のメッセージ領域の表示を保持しながら、第1のメッセージ領域以外のメッセージ領域の表示を一時的に停止すること(1626)を含む。
一部の実施形態では、トリガーに対応する拡張メッセージコンテンツを表示すること(1616)は、メッセージユーザインタフェース全体を一時的に置換する画像(例えばアニメーション画像)を表示すること(1628)を含む。一部の他の実施形態では、トリガーに対応する拡張メッセージコンテンツを表示すること(1616)は、第1のメッセージ領域を除いて、メッセージユーザインタフェース全体を一時的に置換する画像(例えばアニメーション画像)を表示すること(1630)を含む。例えば、メッセージユーザインタフェース全体を置換する、又は第1のメッセージ領域以外のメッセージユーザインタフェース全体を置換する、バルーン又は紙吹雪を表示する。
一部の実施形態では、第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用すること(1616)は、第1のメッセージ領域以外のメッセージ領域をハイライト表示することなく、第1のメッセージ領域を一時的にハイライトすること(1632)を含む。例えば、「バルーン」全画面効果では、表示された会話記録内の他のメッセージ領域をハイライト(又はフェード)することなく、バルーンが表示されている間に、第1のメッセージ領域をハイライトする。
一部の実施形態では、拡張メッセージコンテンツは音声を含む(1634)。例えば、一部の実施形態では、音声は、表示された拡張メッセージコンテンツと協調して再生される。
一部の実施形態では、拡張メッセージコンテンツは、触知出力(1636)を含む。例えば、触知出力は、表示された拡張メッセージ内容と協調して出力される触覚効果であってもよい。
一部の実施形態では、拡張メッセージコンテンツを表示すること(1616)は、第1のメッセージ領域のアニメーションを表示すること(1638)を含む。一部の実施形態では、アニメーションを表示するとき、第1のメッセージ領域が消滅し、その後再び現れる。一部の実施形態では、第1メッセージ領域サイズ及び/又は第1メッセージテキストサイズは、アニメーション中に変化する。
一部の実施形態では、拡張メッセージコンテンツを表示すること(1616)は、会話記録のスクロールに応じて仮想オブジェクトを生成し、表示すること(1640)を含む。例えば、これは、記録が動くにつれて、第1のメッセージ領域から飛び出すハート又はきらめきを生成し、かつ表示することによって実施されてもよい。
一部の実施形態では、方法1600は、トリガーに対応する拡張メッセージコンテンツの表示を停止すること(1644)を含む。例えば、拡張メッセージコンテンツの表示の停止は、ユーザの入力に応じて、又は拡張メッセージコンテンツが予め定義された期間表示された後に、生じる。
図16A~図16Cにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。加えて、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1800)に関して本明細書で記載されている他のプロセスの詳細はまた、図16A~図16Cに関連して上述された方法1600に類似の方法で適用可能であることも留意されたい。例えば、方法1600に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、図17は、説明される様々な実施形態の原理に従って構成された、電子デバイス1700の機能ブロック図を示す。このデバイスの機能ブロックは、説明される様々な実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組合せによって、任意選択的に実装される。図17で説明される機能ブロックが、説明される様々な実施形態の原理を実施するように任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックのあらゆる可能な組合せ若しくは分割、又は更なる定義を任意選択的に支持する。
図17に示すように、電子デバイス1700は、電子デバイスのユーザと、第1の他のユーザを含む少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含むメッセージユーザインタフェースを、表示ユニット上に表示するように構成されたディスプレイユニット1702、接触を検出するように構成されたタッチ感知面ユニット1704、並びに、ディスプレイユニット1702及びタッチ感知面ユニット1704に結合された処理ユニット1706、を含む。一部の実施形態では、処理ユニットは、表示可能化ユニット1708、受信ユニット1710、判定ユニット1712、適用ユニット1714、蓄積ユニット1716、アニメーションユニット1718、フェージングユニット1720、停止ユニット1722、ハイライトユニット1724、及び生成ユニット1726を含む。
処理ユニット1706は、メッセージセッションに含まれる第1の他のユーザに対応する電子デバイスからメッセージセッション内に第1のメッセージを受信し(例えば、受信ユニット1710を用いて)、第1のメッセージが拡張メッセージコンテンツトリガーを含むかどうかを判定する(例えば、判定ユニット1712を用いて)。処理ユニット1706は、第1のメッセージが拡張メッセージコンテンツトリガーを含むという判定に従って、第1のメッセージを、表示ユニット1702上の会話記録内の第1のメッセージ領域に表示し(例えば、表示可能化ユニット1708を用いて)、及びトリガーに対応する拡張メッセージコンテンツを表示する(例えば、表示可能化ユニット1708を用いて)、ように更に構成されており、ここで拡張メッセージコンテンツは、会話記録内の第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用するコンテンツを含む。処理ユニット1706は、第1のメッセージが拡張メッセージコンテンツトリガーを含まないという決定に従って、ディスプレイユニット1702上の会話記録内の第1のメッセージ領域に、第1のメッセージを表示するように(例えば、表示可能化ユニット1708を用いて)、更に構成されている。
一部の実施形態では、第1のメッセージの受信に応じて、第1のメッセージが拡張メッセージコンテンツトリガーを含むかどうかの判定が実行される(例えば、判定ユニット1712を用いて)。
一部の実施形態では、第1のメッセージが拡張メッセージコンテンツトリガーを含むかどうかを判定することは、第1のメッセージが予め定義されたテキストを含むかどうかを判定することを含む(例えば、判定ユニット1712を用いて)。
一部の実施形態では、第1のメッセージが拡張メッセージコンテンツトリガーを含むかどうかを判定することは、第1のメッセージが、表示されるべき拡張メッセージコンテンツを示す埋め込まれた非表示値を含むかどうかを判定することを含む(例えば、判定ユニット1712を用いて)。
一部の実施形態では、第1のメッセージが拡張メッセージコンテンツトリガーを含むかどうかを判定することは、第1のメッセージが受信された時間が予め定義された時間フレームに対応するかどうかを判定することを含む(例えば、判定ユニット1712を用いて)。
一部の実施形態では、拡張メッセージコンテンツは、表示された会話記録全体に効果を適用するコンテンツを含む(例えば、適用ユニット1714を用いて)。
一部の実施形態では、第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用することは、第1のメッセージ領域以外の少なくとも1つのメッセージ領域上にアニメーション化されたオブジェクトを蓄積することを含む(例えば、蓄積ユニット1716を用いて)。
一部の実施形態では、第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用することは、第1のメッセージ領域以外の少なくとも1つのメッセージ領域をアニメーション化することを含む(例えば、アニメーション化ユニット1718を用いて)。
一部の実施形態では、第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用することは、第1のメッセージ領域をフェードすることなく、第1のメッセージ領域以外のメッセージ領域を一時的にフェードすることを含む(例えば、フェードユニット1720を用いて)。
一部の実施形態では、第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用することは、第1のメッセージ領域の表示を保持しながら、第1のメッセージ領域以外のメッセージ領域を一時的に停止することを含む(例えば、停止ユニット1722を用いて)。
一部の実施形態では、トリガーに対応する拡張メッセージコンテンツを表示することは、メッセージユーザインタフェース全体を一時的に置換する画像を表示することを含む(例えば、表示可能化ユニット1708を用いて)。
一部の実施形態では、トリガーに対応する拡張メッセージコンテンツを表示することは、第1のメッセージ領域を除いて、メッセージユーザインタフェース全体を一時的に置換する画像を表示することを含む(例えば、表示可能化ユニット1708を用いて)。
一部の実施形態では、第1のメッセージ領域以外の少なくとも1つのメッセージ領域に効果を適用することは、第1のメッセージ領域以外のメッセージ領域をハイライトすることなく、第1のメッセージ領域を一時的にハイライトすることを含む(例えば、ハイライトユニット1724を用いて)。
一部の実施形態では、拡張メッセージコンテンツは音声を含む。
一部の実施形態では、拡張メッセージコンテンツは触知出力を含む。
一部の実施形態では、拡張メッセージコンテンツを表示することは、第1のメッセージ領域のアニメーションを表示することを含む(例えば、表示可能化ユニット1708を用いて)。
一部の実施形態では、拡張メッセージコンテンツを表示することは、会話記録のスクロールに応じて、動く仮想オブジェクトを生成し、かつ表示することを含む(例えば、生成ユニット1726及び表示可能化ユニット1708を用いて)。
一部の実施形態では、処理ユニット1706は、トリガーに対応する拡張メッセージコンテンツの表示を停止するように更に構成されている(例えば、停止ユニットを用いて)。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図16A~図16Cを参照して上述された動作は、任意選択的に、図1A、図1B、又は図17に示される構成要素によって実行される。例えば、表示動作1602、1616、1618、1620、1622、1624、1626、1628、1630、1632、1638、1640、1642、1644、受信動作1604、判定動作1606、1608、1610、1612、及び1614、音声出力動作1634、及び、触知出力動作1636は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と比較し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出し、アプリケーション内部状態192を更新する。一部の実施形態では、イベント処理部190は、アプリケーションによって表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示されるコンポーネントに基づいてどのように実施されるかは明らかであるだろう。
個別メッセージで組合せ可能なコンテンツの検出及び応答
以下でより詳細に説明する図18A~図18Cは、一般的に、メッセージユーザインタフェースにおける組合せ可能なコンテンツを検出するための方法に関する。より具体的には、これらの図は、検出された組合せ可能なコンテンツが予め定義された組合せを構成する場合に、予め定義された組合せに対応するコンテンツを表示する方法に関する。
この方法を実行する電子デバイス(例えば、ポータブル多機能デバイス100又はデバイス300)の1つ以上の例を、図5CX~図5DCに示す。
図18A~図18Cは、本明細書で時に第1の電子デバイスと呼ばれる、1つ以上のプロセッサ、メモリ、タッチ感知面、及びディスプレイを有する、電子デバイスによって実行される方法1800を示すフロー図である。一部の実施形態では、電子デバイスは、タッチ感知面上の接触強度を検出するように構成された1つ以上のセンサ(例えば、タッチスクリーンディスプレイ又はトラックパッド内のセンサ)を含む。
一部の実施形態では、方法1800は、ディスプレイ上にメッセージユーザインタフェース(例えば、図5BHのメッセージアプリケーションのユーザインタフェース5002)を表示すること(1802)を含む。メッセージユーザインタフェースは、電子デバイスのユーザと、第1の他のユーザを含む少なくとも1人の他のユーザ(例えば、他の電子デバイスのユーザ)との間のメッセージセッションの会話記録(例えば、図5CXのユーザインタフェース5002内の会話記録5004)、及びメッセージ入力エリア(例えば、図5CXのメッセージ入力エリア5100)、を含む。
方法1800は、メッセージセッションに含まれる第1の他のユーザに対応する電子デバイス(例えば、第2の電子デバイス)からメッセージセッション内に、第1のメッセージ(例えば、図5CXのメッセージ領域5008内のメッセージ5170)を受信すること(1804)であって、第1のメッセージが第1の組合せ可能なコンテンツ(例えば、顔文字、又は絵文字若しくはステッカなどの画像)を含むこと、及び第1のメッセージの受信に応じてディスプレイ上の会話記録内の第1のメッセージ領域に第1のメッセージを表示すること(1812)(例えば、図5CXに示すように)、を更に含む。一部の実施形態では、組合せ可能なコンテンツは、顔文字を含む(1806)。一部の実施形態では、組合せ可能なコンテンツは、絵文字を含む(1808)。一部の実施形態では、組合せ可能なコンテンツは、ステッカを含む(1810)。
方法1800は、引き続きメッセージ入力エリア(例えば、図5CYに示すようなメッセージ入力エリア5100内の第2のメッセージ5172)内に第2のメッセージの入力を受信(1814)し、メッセージ入力エリア内に第2のメッセージが表示されている間に、第2のメッセージをメッセージセッションに送信する入力(例えば、図5CYの5174)を検出(1816)する(例えば、図5CYの送信アイコン5118上のタップジェスチャを検出する)。
更に、方法1800は、第2のメッセージをメッセージセッションに送信するための入力の検出に応じて(1818)、第2のメッセージが第2の組合せ可能なコンテンツを含み、かつ、第2の組合せ可能なコンテンツ及び第1の組合せ可能なコンテンツが予め定義された組合せの部分(例えば、補完する部分)であるという判定に従って、ディスプレイ上の会話記録内の予め定義された組合せに対応するコンテンツを表示する(1820)。例えば、予め定義された組合せに対応するコンテンツは、第2のメッセージ領域内に、又はデバイスのユーザからのメッセージを有するメッセージ領域と少なくとも1人の他のユーザからのメッセージを含むメッセージ領域との間の領域に表示される。一部の実施形態では、第2のメッセージが最初にメッセージセッションに表示されるとき、予め定義された組合せに対応するコンテンツが、表示された会話記録の全体に一時的に適用される。
更に、第2のメッセージが、第1の組合せ可能なコンテンツと予め定義された組合せを形成する第2の組合せ可能なコンテンツを含まないという判定に従って、ディスプレイ上の会話記録内の第2のメッセージ領域に第2のメッセージを表示する(1844)(すなわち、予め定義された組合せに対応するコンテンツを表示することなく)。
一部の実施形態では、第2のメッセージをメッセージセッションに送信するための入力(例えば、図5Cの5174)の検出に応じて(例えば、図5CYの送信アイコン5118上のタップジェスチャの検出に応じて)、第2の組合せ可能なコンテンツ及び第1の組合せ可能なコンテンツが、予め定義された組合せの部分であるという判定(1820)が実行される(1822)。
一部の実施形態では、又は一部の状況では、予め定義された組合せの部分である第1の組合せ可能なコンテンツ及び第2の組合せ可能なコンテンツは、同じコンテンツである(1824)。例えば、第1のメッセージ(図5CZの5170)内のビール用の第1の単語又は絵文字、及び第2のメッセージ(図5CZの5172)内のビール用の第2の同じ単語又は絵文字は、2つのビールグラスが一緒にカチッと音を立てるアニメーション(図5DAに示すように)及び/又は単語「Cheers!」の表示(図5DAに示すように)などの予め定義された組合せに対応するコンテンツ(例えば、コンテンツ(図5DAのコンテンツ5176)の表示をもたらす。一部の実施形態では、予め定義された組合せに対応するコンテンツは、第1のメッセージと第2のメッセージとの間(例えば、図5DAの第1のメッセージ5170と第2のメッセージ5172との間のメッセージ領域5008)のメッセージユーザインタフェース(例えば、メッセージユーザインタフェース5002)の一部に表示される。別の例では、第1のメッセージ内の第1の拳の絵文字及び第2のメッセージ内の第2の拳の絵文字は、2つの拳がぶつかり合うアニメーションなどの予め定義された組合せに対応するコンテンツの表示をもたらす。
一部の実施形態では、又は一部の状況では、予め定義された組合せの一部である第1の組合せ可能なコンテンツ及び第2の組合せ可能なコンテンツは、異なるコンテンツである(1826)。例えば、雷用の単語又は絵文字及びキー用の単語又は絵文字は、電球などの電気を表す絵文字又はステッカなどの予め定義された組合せに対応するコンテンツを表示をもたらす。別の例では、りんご用の絵文字及び数字pi用の単語又は記号(例えば、「π」)は、アップルパイ用の絵文字又はステッカなどの予め定義された組合せに対応するコンテンツの表示をもたらす。更に別の例では、第1のメッセージ内の単語「Happy」及び第2のメッセージ内の単語「Birthday」は、例えば、図5CB、図5CC及び図5CJ~図5COに示すように、第1のメッセージと第2のメッセージとの間のメッセージユーザインタフェースの一部に、又はメッセージユーザインタフェース全体に、バルーンの表示をもたらす。
任意選択的に、ユーザは、前述の予め定義された組合せであるコンテンツの組合せを定義することができ、及び/又は任意のそのような組合せに対応するコンテンツを定義することができる。より具体的には、一部の実施形態では、又は一部の状況では、それぞれの予め定義された組合せの一部であるそれぞれの第1の組合せ可能なコンテンツ及びそれぞれの第2の組合せ可能なコンテンツは、電子デバイスのユーザによって定義される(1828)。例えば、一部の実施形態では、予め定義された組合せは、デバイスのユーザ又はメッセージセッションのユーザによって定義される。同様に、一部の実施形態では、又は一部の状況では、予め定義された組合せに対応するコンテンツは、デバイスのユーザによって定義される(1830)。例えば、一部の実施形態では、予め定義された組合せに対応するコンテンツは、デバイスのユーザによって、又はメッセージセッションのユーザによって定義される。
予め定義された組合せに対応するコンテンツとして、さまざまなコンテンツを含めたり使用したりすることができる。より具体的には、一部の実施形態では、予め定義された組合せに対応するコンテンツは、アニメーション化コンテンツ(1832)を含み、その例は、メッセージユーザインタフェース又はメッセージユーザインタフェースの一部を通過して動くバルーン又は紙吹雪である。一部の実施形態では、予め定義された組合せに対応するコンテンツは、音楽、1つ以上のトーン、又は記録された若しくは合成されたスピーチなどの聴覚コンテンツ(1834)を含む。一部の実施形態では、予め定義された組合せに対応するコンテンツは、振動又は振動パターンなどの触覚コンテンツ(1836)を含む。このように、一部の実施形態では、予め定義された組合せに対応するコンテンツは、アニメーション化コンテンツ、聴覚コンテンツ、及び/又は触覚コンテンツ(1838)を含む。
更に、一部の実施形態では、予め定義された組合せに対応するコンテンツは、自動的に生成されたメッセージテキストを含む(1840)。例えば、上記の例では、第1のメッセージ(図5CZの5170)内のビール用の第1の単語又は絵文字と、第2のメッセージ(図5CZの5172)内のビール用の第2の同じ単語又は絵文字とを用いて、第1の電子デバイスは、メッセージ領域内に、「Cheers!」などのメッセージテキストを自動的に生成する。
一部の実施形態では、予め定義された組合せに対応するコンテンツは、第2のメッセージが最初にメッセージセッションで表示されたときに、表示された会話記録全体に適用されるコンテンツを含む(1842)。例えば、コンテンツは、図5CR~図5CTに示すように、第1のメッセージ「Happy,」及び第2のメッセージ「New Year」に応じて「花火」全画面効果を表示する、又は、図5CJ~図5COに示すように、第1のメッセージ「Happy,」及び第2のメッセージ「Birthday」に応じて「バルーン」全画面効果を表示する、などの「フルスクリーンモーメント」である。
一部の実施形態では、予め定義された組合せは、第1の組合せ可能なコンテンツ、第2の組合せ可能なコンテンツ、及び第3の組合せ可能なコンテンツ(例えば、3つの補完する部分)を含む。例えば、第3のメッセージを送信するための入力に応じて、第1の組合せ可能なコンテンツ(例えば、足)及び第2の組合せ可能なコンテンツ(例えば、イタリア国旗)を含むメッセージが会話用記録内に表示される場合、第3のメッセージが、第3の組合せ可能なコンテンツ(例えば、サッカーボール)を含むという判定に従って、予め定義された組合せに対応するコンテンツがディスプレイ上の会話記録内に表示される。
図18A~図18Cでの動作が説明されている特定の順序は、単なる例示であり、説明される順序が、それらの動作を実行することが可能な唯一の順序であることを示すことを、意図するものではない点を理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。加えて、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、及び1600)に関して本明細書で記載されている他のプロセスの詳細はまた、図18A~図18Cに関連して上述されている方法1800に類似の方法で適用可能であることも留意されたい。例えば、方法1800に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を、任意選択的に有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、図19は、説明される様々な実施形態の原理に従って構成された、電子デバイス1900の機能ブロック図を示す。このデバイスの機能ブロックは、説明される様々な実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組合せによって、任意選択的に実装される。図19で説明される機能ブロックが、説明される様々な実施形態の原理を実施するように任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックのあらゆる可能な組合せ若しくは分割、又は更なる定義を、任意選択的に支持する。
図19に示すように、電子デバイス1900は、電子デバイスのユーザと第1の他のユーザを含む少なくとも1人の他のユーザとの間のメッセージセッションの会話記録、及びメッセージ入力エリア、を含むメッセージユーザインタフェースを、ディスプレイユニット上に表示するように構成された表示ユニット1902、接触を検出するように構成されたタッチ感知面ユニット1904、並びに、ディスプレイユニット1902及びタッチ感知面ユニット1904に結合された処理ユニット1906、を含む。一部の実施形態では、処理ユニットは、表示可能化ユニット1908、受信ユニット1910、検出ユニット1912、及び適用ユニット1914を含む。
処理ユニット1906は、メッセージセッション内に含まれる第1の他のユーザに対応する電子デバイスからメッセージセッション内に、第1のメッセージであって、第1のメッセージは第1の組合せ可能なコンテンツを含む、第1のメッセージを受信し(例えば、受信ユニット1910を用いて)、第1のメッセージの受信に応じて、ディスプレイユニット1902上の会話記録内の第1のメッセージ領域に第1のメッセージを表示する(例えば、表示可能化ユニット1908を用いて)ように構成される。処理ユニット1906は、メッセージ入力エリアにおいて第2のメッセージの入力を受信するように、更に構成されている(例えば、受信ユニット1910を用いて)。処理ユニット1906は、第2のメッセージがメッセージ入力エリアに表示されている間に、第2のメッセージをメッセージセッションに送信するための入力を検出し(例えば、検出ユニット1912を用いて)、第2のメッセージをメッセージセッションに送信するための入力の検出に応じて、第2のメッセージが第2の組合せ可能なコンテンツを含み、かつ、第2の組合せ可能なコンテンツ及び第1の組合せ可能なコンテンツが予め定義された組合せの一部であるという判定に従って、ディスプレイユニット1902上の会話記録内に予め定義された組合せに対応するコンテンツを表示し(例えば、表示可能ユニット1908を用いて)、及び第2のメッセージが第1の組合せ可能なコンテンツとの予め定義された組合せを形成する第2の組合せ可能なコンテンツを含まないという判定に従って、ディスプレイユニット1902上の会話記録内の第2のメッセージ領域に第2のメッセージを表示する(例えば、表示可能化ユニット1908を用いて)、ように更に構成されている。
一部の実施形態では、第2の組合せ可能なコンテンツ及び第1の組合せ可能なコンテンツが予め定義された組合せの一部であるという判定は、第2のメッセージをメッセージセッションに送信するための入力の検出に応じて実行される(例えば、検出ユニット1912を用いて)。
一部の実施形態では、組合せ可能なコンテンツは、顔文字を含む。
一部の実施形態では、組合せ可能なコンテンツは、絵文字を含む。
一部の実施形態では、組合せ可能なコンテンツは、ステッカを含む。
一部の実施形態では、予め定義された組合せの一部である第1の組合せ可能なコンテンツ及び第2の組合せ可能なコンテンツは、同じコンテンツである。
一部の実施形態では、予め定義された組合せの一部である第1の組合せ可能なコンテンツ及び第2の組合せ可能なコンテンツは、異なるコンテンツである。
一部の実施形態では、それぞれの予め定義された組合せの一部であるそれぞれの第1の組合せ可能なコンテンツ及びそれぞれの第2の組合せ可能なコンテンツは、電子デバイス1900のユーザによって定義される。
一部の実施形態では、それぞれの予め定義された組合せに対し、予め定義された組合せに対応するコンテンツは、デバイス1900のユーザによって定義される。
一部の実施形態では、予め定義された組合せに対応するコンテンツはアニメーション化コンテンツを含む。
一部の実施形態では、予め定義された組合せに対応するコンテンツは、聴覚コンテンツを含む。
一部の実施形態では、予め定義された組合せに対応するコンテンツは、触覚コンテンツを含む。
一部の実施形態では、予め定義された組合せに対応するコンテンツは、アニメーション化コンテンツ、聴覚コンテンツ及び/又は触覚コンテンツを含む。
一部の実施形態では、予め定義された組合せに対応するコンテンツは、自動的に生成されたメッセージテキストを含む。
一部の実施形態では、予め定義された組合せに対応するコンテンツは、第2のメッセージが最初にメッセージセッションに表示されたときに、表示された会話記録の全体に適用されるコンテンツを含む(例えば、適用ユニット1914を用いて)。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図18A~図18Cを参照して上述された動作は、図1A、図1B、又は図19に示される構成要素によって、任意選択的に実行される。例えば、表示動作1802、1812、1822、1824、1826、1828、1830、1832、1834、1836、1838、1840、1842、及び1844、受信動作1804、1806、1808、1810、及び1814、検出動作1816、及び適用動作1842は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と比較し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出し、アプリケーション内部状態192を更新する。一部の実施形態では、イベント処理部190は、アプリケーションによって表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されるかは明らかであるだろう。
同期したメディアコンテンツの提示
図20A~図20Pは、一部の実施形態に係る、メッセージアプリケーション内に同期したメディアコンテンツを提示するための例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、以下に説明するプロセスを示すために使用される。以下の実施例のうちの一部は、タッチ画面ディスプレイ上の入力(タッチ感知面とディスプレイとが組み合わされている場合)を参照して説明されるが、一部の実施形態では、デバイスは、図4Bに示すように、ディスプレイ450とは別個のタッチ感知面451上で入力を検出する。説明の便宜上、タッチ感知ディスプレイシステム112を有するデバイス上で実行する動作を参照して以下に説明する実施形態を検討する。そのような実施形態では、フォーカスセレクタは、任意選択的に、それぞれの指又はスタイラスの接触、指又はスタイラスの接触に対応する代表的な点(例えば、それぞれの接触の重心又はそれぞれの接触に関連付られた点)、又は、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の重心である。しかしながら、以下に説明するユーザインタフェースをフォーカスセレクタと一緒に表示している間、タッチ感知面451上の接触の検出に応じて、類似の動作が、任意選択的に、ディスプレイ450及び別個のタッチ感知面451を有するデバイス上で、実行される。
図20Aに示すように、第1の電子デバイス(例えば、デバイス100)の第1のユーザは、第2の電子デバイスの第2のユーザから、メディアアイテムを同期して観る招待を受信する。図20Aに示すように、第1のユーザは、第2のユーザが「映画123の予告編」を一緒に観ることを望んでいることを第1のユーザに知らせる、メッセージユーザインタフェース(すなわち、メッセージアプリケーション内に表示されたユーザインタフェース)内に表示されたメッセージを受信する。一部の実施形態では、第1のユーザは、招待、及びメディアアイテムの表現(例えば、サムネイル表示)も任意選択的に含む、メッセージ領域(例えば、図20Aに示すメッセージ吹き出し2002)内をタップ(例えば、タップ2001)することにより招待を受け入れる。一部の実施形態又は状況では、メッセージ領域は、メッセージセッションの会話記録内のメッセージに対するメッセージ吹き出し、プラッタ又は他のコンテナである。
図20Bに示すように、第1のユーザが招待を受け入れたことの検出(例えば、メディアアイテム表現の上方のタップジェスチャ2001の検出)に応じて、電子デバイス100は、ユーザに、メディアアイテムがメッセージユーザインタフェース内でより大きなサイズで表示されることを示すアニメーションを提供する。例えば、メディアアイテムの表現は、メッセージユーザインタフェース内でサイズが拡大し、かつ、表現の少なくとも一部がメッセージ領域の外側で表示されるように拡張し始める(例えば、メディアアイテムの表現が図20Bのメッセージ吹き出し2002の外側へサイズが拡大しているように示される)。
アニメーションは、表示サイズが拡大し続ける表現とともに、継続し、図20Cに示すように、メディアアイテムの表現は、最終的にメッセージユーザインタフェースの異なる部分(例えば、メッセージユーザインタフェースの中央領域)を占めるように示される。一部の実施形態では、アニメーションが完了した後のメディアアイテムの表現の初期場所は、メディアアイテムの時系列位置と呼ばれる(すなわち、メディアアイテムは、メディアアイテムの同期視聴の開始前又は開始後のいずれかに受信された他のメッセージに対して、時系列順序で表示される)。例えば、図20Dに示すように、メディアアイテムの表現は、メディアアイテムの同期視聴の開始前に受信されたメッセージを表す位置(例えば、メッセージ領域2010の位置)と、メディアアイテムの同期視聴の開始後に受信されたメッセージの位置(例えば、メッセージ領域2012の位置)との間の時系列位置に示される。更に、メディアアイテムの時系列位置及び同期視聴の開始前/開始後に受信されたメッセージは、新しいメッセージが受信されても保持される(図20Eに示すように、新しいメッセージの受信/表示が会話記録内のコンテンツを実質的に垂直方向に移動させるが、それぞれのメッセージ領域ごとに対するそれぞれの時系列位置は保持される)。以下でより詳細に説明するように、一部の状況では、メディアアイテムもメッセージユーザインタフェースの最上部の固定位置に移動する(図20Hに示すように)。
一部の実施形態では、メディアアイテムの表現は、メディアアイテムが他のユーザと同期して視聴されていることを示す情報を含み(例えば、「ムービー123の予告編の同期視聴」)、選択されるとメッセージアプリケーションにディアアイテムの同期視聴を開始させるアフォーダンス(そして、メッセージセッション内の他のユーザに関連付られたリモートデバイスにも、同時に同期視聴を開始させる)(例えば、メディアアイテムの表現内に示された再生ボタンアフォーダンス)、並びに再生ヘッド及び進行状況バーを含む。一部の実施形態では、メディアアイテムの表現が中央領域に表示された後(及び/又は上述のアニメーションとともに)、第2のユーザからの招待を含むメッセージ領域はもはや表示されず、第1のユーザが第2のユーザの招待を受け入れたというインジケーションが代わりに表示される。例えば、第1のユーザが受け入れたというインジケーションは、「あなたは映画123の予告編を見るアレックスの招待を受け入れました」というテキストの記述を含む(図20Dに示すように)。
図20Dに示すように、メッセージセッションのユーザ(例えば、第1及び第2のユーザ)は、メディアアイテムの表現が表示されている間(メディアアイテムの再生開始前及び/又は再生中に)、メッセージを交換し続けることができる。例えば、第2のユーザが「今すぐ予告編を再生する!」というメッセージを送信すると、そのメッセージは、会話記録内のコンテンツの全てを実質的に垂直(例えば、上向き)方向に移動させる。このようにして、ユーザは、メディアアイテムの同期再生が始まる前に、流れるように会話を継続することができる。
メッセージセッションのユーザのいずれかから、メディアアイテムの同期視聴を開始する要求を受信したことに応じて(例えば、図20Dで、ユーザのうちの1人が、メディアアイテムの表現とともに示される再生アフォーダンスをヒットする)、デバイス(又はメッセージアプリケーション)は、メディアアイテムに対応するコンテンツの再生を開始する。図20Eに示すように、メディアアイテムに対応するコンテンツの再生が開始し、ユーザはメディアアイテムの同期再生中にメッセージを交換し続けることができる(例えば、メディアアイテムに対応するコンテンツの再生を継続しながら、第1のユーザは「This is cool!」のメッセージを送信し、そのメッセージは会話記録内のコンテンツを、実質的に垂直方向に移動させる)。
図20F~図20Gに示すように、ユーザは、メディアアイテムの同期視聴の間もメッセージを交換し続けることができる。一部の実施形態では、新しく交換されたメッセージは、会話記録内のコンテンツを実質的に垂直方向に移動させ続ける(それぞれのメッセージ領域の時系列順序を、依然として保持しながら)。
図20Hに示すように、いったんメディアアイテムの表示が、メッセージユーザインタフェースの最上部の予め定義された距離内になると(例えば、1ピクセル、2ピクセル、3ピクセル、4ピクセル、5ピクセル、又はある他の予め定義された距離)、メッセージアイテムの表現がメッセージユーザインタフェース内の固定位置に表示される(換言すれば、メディアアイテムの表現はその時系列位置には表示されない)。一部の実施形態では、メディアアイテムの表現は時系列位置に留まり、表現はまた固定された位置に表示される(すなわち、表現は2つの場所に示される)。
図20Iに示すように、メディアアイテムに対応するコンテンツを再生している間、及びメディアアイテムの表現を固定位置に表示している間、ユーザはメッセージを交換し続けることができ、それらのメッセージは、以前のメッセージをメディアアイテムに対応する再生コンテンツのすぐ下に移動させる(再生コンテンツの視聴を不明瞭にしないため)。一部の実施形態では、ユーザは、メディアアイテムに対応する再生コンテンツを操作する(例えば、早送り、巻き戻し、一時停止など)ことができ、これらの操作は、メッセージセッションの全てのユーザに対してメディアアイテムの同期視聴を継続するために、メッセージセッションの他のユーザのデバイスに通信される。例えば、図20Iに示すように、第1のユーザは、再生コンテンツを早送りするために再生ヘッドをドラッグ(例ば、ジェスチャ2003)することができ、早送りコマンドはまた、メッセージセッションの他のユーザのデバイスに通信される(この情報を送信する技術は、図21A~図21Cを参照して以下で詳細に検討する)。一部の実施形態では、メッセージユーザインタフェースはまた、更新されて第1のユーザが再生コンテンツのそれぞれの操作を実行したことを示す(例えば、図20J及び図20Kの「あなたは映画123の予告編を早送りしました」)。
再生コンテンツのユーザ操作の別の例として、第2のユーザが巻き戻しコマンドを提供することによって再生コンテンツを操作した後、再生コンテンツが第2のユーザの巻き戻しコマンドに従って第1の電子デバイスのメッセージユーザインタフェース内に示される(例えば、図20J及び図20Kの間で示すように、再生コンテンツ用の再生ヘッドが、第2のユーザの巻き戻しコマンドのために後方に移動している)。一部の実施形態では、メッセージユーザインタフェースはまた、更新されて第2のユーザが再生コンテンツのそれぞれの操作を実行したことを示す(例えば、図20Kの「アレックスは予告編123を巻き戻しました」)。
図20Kにも示すように、第1のユーザは、メディアアイテムの同期視聴が進行中である間に、会話記録をスクロールすることができる。例えば、第1のユーザは、検出されるとデバイスに会話記録を実質的に下向きの方向(図20K)にスクロールさせるジェスチャ2022を提供する。会話記録(及びそこに含まれるコンテンツ)をスクロールする間、デバイスは、メディアアイテムに対応する再生コンテンツをその時系列位置に戻すべきかどうか判定する(そして、固定位置にはもはや表示しない)。メディアアイテムに対応する再生コンテンツをその時系列位置に戻すべきという判定に従って(例えば、図21A~図21Cを参照して以下で論じるように、時系列位置が固定位置の予め定義された距離内にスクロールされる)、メディアアイテムに対応する再生コンテンツが時系列位置に移動し、もはや固定位置には表示されない。図20Lに示すように、第1のユーザはまた、実質的に上方向にスクロールすることができ(例えば、ジェスチャ2024を提供することにより)、それに応じて、メディアアイテムに対応する再生コンテンツが適切な時間に固定位置に後戻りする(例えば、図20Mに示すように、上方向にスクロールした後、メディアアイテムに対応する再生コンテンツが固定位置に後戻りする)。このようにして、ユーザは、メディアアイテムの視聴を中断することなく、会話記録を直観的にスクロールすることができる。
図20N~図20Oに示すように、メディアアイテムに対応する再生コンテンツの終わりが検出されると(例えば、メディアアイテムの再生が終了する、ユーザのうちの1人がメッセージアプリケーションを終了する、又はユーザのうちの1人が停止コマンドを提供する)、それに応じて、デバイスは、サイズが縮小して会話記録内のその時系列位置に戻ったメディアアイテム表現のアニメーションを提供する(アニメーション2050に関しては、図20Oに示すように、表現のサイズが縮小し、図20Pに示すように、時系列位置に向かって後戻りしている)。
図21A~図21Cは、一部の実施形態に係る、メッセージアプリケーション内で、同期したメディアコンテンツを提示する方法2100を示すフロー図である。方法2100は、ディスプレイと、タッチ感知面とを有する電子デバイス(例えば、図3のデバイス300、又は、図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチ画面ディスプレイであり、タッチ感知面が、ディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面から分離している。方法2100の一部の動作は、任意選択的に組み合わされ、及び/又は、一部の動作の順序が任意選択的に変えられる。
以下で説明するように、方法2100は、同期したメディアコンテンツをメッセージアプリケーション内に提示する直感的な方法を提供する。この方法は、ユーザが、メッセージアプリケーション内で直接、同期された方法でメディアコンテンツを容易に見ることを可能にすることによって、より効率的な人間と機械のインタフェースを生みだす(かつ、メディアコンテンツを視聴する別のユーザと同じ場所に位置し、及び同期視聴を可能にする非常に非効率な技術を使う必要なしに)。バッテリ駆動デバイスの場合、この方法は、デバイスに対するユーザの満足度を高め、電力を浪費せず(例えば、メディアコンテンツの同期視聴を可能にするための入力をほとんど必要とせずに)、かつ、バッテリ充電の時間間隔を増大させる。更に、ユーザが、メッセージアプリケーション内で直接、同期する方法でメディアコンテンツを容易に見ることを可能にすることによって、デバイスの操作性を向上し、ユーザとデバイスのインタフェース(例えば、メッセージアプリケーション内の)をより効率的にする(例えば、メディアアイテムの効率的な同期視聴を可能にすることにより)。
図21Aに示すように、デバイスは、ディスプレイ上に、第1の電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含むメッセージユーザインタフェースを表示する(2102)。会話記録は、会話記録内の時系列位置に表示されるメディアアイテムの表現を含む(2104)。例えば、メディアアイテムの表示は、メディアアイテムからの静止画像(図20Aに示すメッセージコンテナ2002内の表現など)を示すアイコン、又は選択されたときにデバイスにメディアアイテムからの静止画像を示すアイコンを表示させるメディアアイテムへのリンク(例えば、「同期視聴するにはここをクリック」又は「同期視聴の招待を受け入れるにはここをクリック」を示すメッセージコンテナ2002内に表示されるリンクなど)である。メッセージセッションは、第1の電子デバイスにおけるユーザ、及び第1の電子デバイスとは別個の(及びリモートに位置する)第2の電子デバイスにおける少なくとも1人の他のユーザ、によるメディアアイテムの同期視聴を可能にするように構成されている(2104)。一部の実施形態では、メディアアイテムは、同期視聴を可能にするように特別に構成されている。一部の実施形態では、メッセージセッション、又はメッセージセッションに関連付けられたメッセージアプリケーション(及びメッセージユーザインタフェースを表示すること)は、任意のメディアアイテムを入手することができ、以下で詳しく論じる様々な同期視聴技術を使用して、メディアアイテムを同期視聴することを可能にする。
一部の実施形態では、メディアアイテムの表現は、ユーザによって会話記録内に追加される(2106)。一部の実施形態では、メディアアイテムの表現は、少なくとも1人の他のユーザによって会話記録内に追加される(2108)。このようにして、メッセージセッションの任意のユーザは、メディアアイテムの同期視聴を開始することができる。メディアアイテムの同期視聴を可能にするために、ユーザと少なくとも1人の他のユーザとの間でメッセージを容易にする/送信することに関する追加の詳細を、以下に提供する。
一部の実施形態では、デバイスは、メッセージユーザインタフェース内にメディアアイテムの同期視聴のための第1の要求(例えば、ユーザ又は少なくとも1人の他のユーザからの第1の要求)を受信する(2110)。一部の実施形態では、第1の要求を受信することは、メディアアイテム用のURLを受信することを含み、そして、それぞれのユーザ(例えば、ユーザ又は少なくとも1つの他のユーザ又はメッセージセッションに関連付けられたある他のユーザ)がメディアアイテムの再生ボタンをアクティブ化すると、デバイスは、メッセージングネットワーク(セルラ、WiFi)を介して第2の電子デバイスに、再生コマンド及び第1の電子デバイスにおける現在時刻のインジケーションを送信する。一部の実施形態では、少なくとも1人の他のユーザが最初に再生ボタンをヒットした場合、第1の電子デバイスは、再生コマンド及び第2の電子デバイスにおける現在時刻のインジケーションを受信する。
第1の要求の受信に応じて、デバイスは、メディアアイテムの表現が会話記録内の時系列位置に表示されている間に、メディアアイテムに対応するコンテンツの再生を開始する(2110)。一部の実施形態では、第1の要求は、第2の電子デバイスを介して受信される(2112)(例えば、第2の電子デバイスにおける少なくとも1人の他のユーザによるメディアアイテムを同期視聴するための要求は、サーバを介してルーティング、又は第1の電子デバイスに直接送信される)。一部の実施形態では、第1の要求は、第1の電子デバイスにおけるユーザを介して受信される(2114)(例えば、ユーザが図20Cに示すメディアアイテムの表現に示される再生ボタンを選択する)。一部の実施形態では、再生は、ユーザ及び少なくとも1人の他のユーザによる同期視聴のため、電子デバイス及び第2の電子デバイスの両方において同期する方法で、それぞれコンテンツを再生することを含む。一部の実施形態では、メディアアイテムに対応するコンテンツの再生の開始は、ユーザが再生をヒットしたときに遅延される(例えば、第2の電子デバイスにメッセージを送信する時間を考慮して、2秒経て、第2のデバイスにおける再生を開始する)。他の実施形態では、URLを送信/受信することは、第2のデバイス上の再生を時間的に前倒しする情報を送信/受信することを含む(例えば、デバイス上の同期再生のために1~2秒ジャンプする)。
ここで図21Bを参照すると、デバイスは(固定位置においてメディアアイテムに対応する再生コンテンツを表示する前)、メッセージユーザインタフェース内に、ユーザと少なくとも1人の他のユーザとの間で交換されるメッセージを表示し、メディアアイテムに対応する再生コンテンツの下方にメッセージを表示することを含む(2116)(図20D~図20Gに示すように、交換されたメッセージは再生コンテンツの下方に表示され、メディアアイテムに対応する再生コンテンツのメッセージユーザインタフェース内の位置がメッセージユーザインタフェースの最上部に向かって移動する)。換言すれば、メッセージを表示することは、新しいメッセージが受信されてメッセージユーザインタフェースに表示されるにつれて、以前のメッセージが最上部に向かって移動し続る(又はプッシュされる)ため、再生コンテンツの時系列位置をメッセージユーザインタフェースの最上部に向かって移動させることを含む。一部の実施形態では、他のメッセージに関するメッセージの相対的な垂直方向の位置付けは、より早い時系列位置に対応する。
時系列位置がメッセージユーザインタフェースの最上部の予め定義された距離内にあるという判定に従って、デバイスは、メッセージユーザインタフェース内の固定位置(交換されたメッセージが下に表示されている間にメッセージユーザインタフェースの最上部に固定されるように、メッセージユーザインタフェースの最上部に対して画定された同期コンテンツ位置)に、メディアアイテムに対応する再生コンテンツを表示する(2118)。図20H~図20Kに示すように、ユーザ間で交換されるメッセージは、(再生コンテンツが)固定/ピン止め位置にある間は、再生コンテンツの下方に表示され続ける。
メディアアイテムに対応するコンテンツの再生を開始した後(かつ、メディアアイテムに対応するコンテンツの再生を続けている間)、デバイスは、メディアアイテムに対応する再生コンテンツを、時系列位置とは異なるメッセージユーザインタフェース内の固定位置において表示する(2120)(例えば、移動する)。一部の実施形態では、メディアアイテム(又はメディアアイテムの表現)に対応するコンテンツは、メディアアイテムに対応するコンテンツの再生を開始した後のある時点で固定位置まで浮かび上がる。一部の実施形態では、コンテンツが再生され、ユーザと少なくとも1人の他のユーザとの間で交換されるメッセージが、メッセージユーザインタフェースの最上部に向かって時系列位置をプッシュする間は、メディアアイテムの表現は時系列位置にとどまる。一部の実施形態では、メディアアイテムに対応するコンテンツが最上部の予め定義された距離内に移動したという判定に従って、電子デバイスは、メディアアイテムに対応するコンテンツを固定位置に表示する(上述したように)。一部の実施形態では、メディアアイテムに対応する再生コンテンツが固定位置で表示される間に、メディアアイテムの表現は、時系列位置(アバブザフォールド)において表示される(換言すれば、メディアアイテムの表現は、固定位置かつ時系列位置において表示される)。メディアアイテムの表現を固定位置に表示することにより、ユーザは、他のユーザとの会話を中断されることなく、他のユーザと実質的に同期する方法でメディアアイテムを視聴し続けることができる。したがって、ユーザは、迅速かつ便利に、一緒にメディアアイテムを見て普通に会話を継続することができ、それによって、デバイス100の操作性を向上させ、より効率的なユーザとデバイスのインタフェースを作り出すことができる(例えば、ユーザは、メッセージアプリケーション、及び一部の他のメディア共有型又は視聴アプリケーションの間を、前後に切り替える必要がない)。
一部の実施形態では、メディアアイテムに対応する再生コンテンツを表示している間、ユーザは再生コンテンツを操作することができ(2122)(例えば、早送り、巻き戻し、一時停止)、及びユーザはまた会話記録内をスクロールすることができる(2126)。
動作2122に関して、デバイスは、少なくとも1人の他のユーザがメディアアイテムに対応する再生コンテンツを操作した(例えば、早送り、巻き戻し、又は一時停止コマンドを発行した)というインジケーションを受信する。インジケーションの受信に応じて、デバイスは、少なくとも1つの他のユーザからの操作に従い、電子デバイスにおいてメディアアイテムに対応する再生コンテンツの提示を変更する(例えば、図20I及び図20J(早送り)、並びに図20J及び図20K(巻き戻し)に示すように)。このようにして、ユーザは、メディアアイテムの同期視聴を継続し、同時にメディアアイテムに対応するコンテンツの位置を操作することもでき、他のユーザもまた、それらの操作をシームレスに提供される。
一部の実施形態では、操作は、再生コンテンツを早送りすること、再生コンテンツを巻き戻すこと、及び/又は再生コンテンツを一時停止すること、のうちの1つ以上を含む。例えば、インジケーションは、少なくとも1人の他のユーザが再生コンテンツを早送りしたことを示し、早送りのインジケーションの受信に応じて、早送りに従って再生コンテンツの提示が変更される(例えば、ユーザのデバイスと少なくとも1人の他のユーザに関連付けられた他のデバイスの両方が、実質的に同期した方法で、両方とも早送りを表示する)。別の例として、インジケーションは少なくとも1人の他のユーザが再生コンテンツを巻き戻したことを示し、それに応じて、再生コンテンツの提示が巻き戻しに従って変更される。もう1つの例として、インジケーションは少なくとも1人の他のユーザが再生コンテンツを一時停止したことを示し、それに応じて、再生コンテンツの提示が一時停止する。
動作2126に関して、メディアアイテムに対応する再生コンテンツを固定位置に表示している間、デバイスは入力(例えば、図20Kのジェスチャ2022に示すように、会話記録を下方向に移動させるドラッグジェスチャ)を検出する。入力の検出に応じて、デバイスは会話記録をスクロールする(図20Lに示すように、会話記録はジェスチャ2022に応じて下方向にスクロールされる)。会話記録をスクロールする間、メディアアイテムの時系列位置が固定位置の予め定義された距離内にある(例えば、1ピクセル、2ピクセル、3ピクセル、4ピクセル、又は5ピクセル、又は他の予め定義された距離内にある)という判定に従って、再生コンテンツを再生し続けている間に、デバイスは、再生コンテンツを時系列位置に移動させる(図20Lに示すように、スクロールジェスチャ2022に応じて、メディアアイテムの表現がここで時系列位置に表示され、もはや固定位置には表示されない)。このようにして、ユーザが会話内でずっと後方までスクロールをした場合、再生コンテンツは固定位置にとどまる代わりに時系列位置に後戻りし、これによってメディアアイテムに対応するコンテンツのスムーズな視聴体験を確実にする。
ここで図21Cに移ると、メディアアイテムに対応する再生コンテンツを固定位置に表示している間、デバイスは、メディアアイテムに対応する再生コンテンツの下にユーザと少なくとも1人の他のユーザとの間で交換されたメッセージを表示する(2128)(そして、メディアアイテムの視聴が中断されず、ユーザがメディアアイテムを同期視聴しながらメッセージを交換し続けることができるように、メディアアイテムに対応する再生コンテンツの背後を通過させる)。
メディアアイテムに対応する再生コンテンツを固定位置に表示している間、デバイスはまた、メディアアイテムに対応するコンテンツの終了を検出する(2128)。メディアアイテムに対応するコンテンツの終了の検出に応じて、デバイスは、メディアアイテムに対応するコンテンツの固定位置における表示を停止する。一部の実施形態では、表示を中止することは、会話記録内の時系列位置に戻るメディアアイテムのアニメーション(又はメディアアイテムの表現)を提示することを含む(例えば、図20N~図20Pに示すアニメーション2050)。このアニメーション効果は、多くのメッセージが交換されてきた可能性があってユーザが会話記録内のメディアアイテム(又はその表現)をもはや見出すことができない可能性があるため、ユーザに、メディアアイテムに対する時系列位置の視覚的なリマインダを提供する。このアニメーション効果の提供は、デバイス100の操作性を向上させ、ユーザとデバイスのインタフェースをより効率的にする(例えば、後の時点で、ユーザがメディアアイテムを容易かつ効率的を見出すことができるように、会話記録内のどこにメディアがあるかをユーザが知ることを確実にすることによって)。
一部の実施形態では、コンテンツの再生の終了を検出することは、コンテンツの再生を終了する要求を受信することに対応(2130)する(例えば、ユーザが停止ボタンをヒットしたとき、又はユーザがメッセージアプリケーションから出て行ったときなどに、要求はメッセージセッションに関連付けられた任意のユーザから受信する)。一部の実施形態では、コンテンツの再生の終了を検出することは、コンテンツの再生の終了に到達することに対応する(2132)(例えば、再生コンテンツは終了点に到達した後に終了する)。
一部の実施形態では、上述したメディアアイテムに対応するコンテンツの同期視聴は、ユーザのいずれか(又は、3人以上のユーザを含むメッセージセッション内の任意のユーザ)が再生コンテンツの位置を操作するときはいつでも、メッセージチャネル(例えば、メタメッセージ)を介して再生ヘッド情報を送信することにより容易になる(早送り、巻き戻し、及び/又は一時停止に関して上述したように)。一部の実施形態では、再生ヘッドが操作されたとき及び/又はコンテンツが同期視聴されていることを検証するときはいつでも、時間同期プロトコルが使用され、メッセージを前後に送信する(例えば、特定のユーザのネットワーク接続が遅くなった場合、視聴が同期したままであることを確実にするために、遅延が検出され、(メディアアイテムの同期表示が行われているメッセージセッションの一部である)異なるユーザの電子デバイスにおける視聴を遅くするためにも使用され得る)。一部の実施形態では、メディアアイテムの再生ヘッドを操作するタッチイベントが(メディアアイテムの同期視聴を含むメッセージセッションの一部であるユーザに関連付けられた電子デバイスにおいて)検出された場合、電子デバイスは、同期視聴が中断し続けることを確実にするために、能動的にタッチイベントを追跡し、第2の電子デバイスに(又は第2の電子デバイスを含む複数のデバイスに)メッセージ(再生ヘッド情報を含む)を送信し続ける。
メッセージアプリケーションにおけるメディアアイテムの同期視聴を可能にするための実施形態及び技術はまた、メッセージアプリケーション内でプレイされる非同期ゲーム(チェッカー、チェス、コネクト4、ジン、三目並べなどを含む)、共有ショッピングリスト(例えば、両方のユーザがメッセージアプリケーション内のショッピングリストを同期して見ることができ、同じ又は遠隔地における取引でショッピングしながらそれぞれが個人的にアイテムを個別にチェックできる)、共有のやるべきことリスト、及び共同描画に適用できる。
図21A~図21Cにおける動作について記載された特定の順序は単なる一つの例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。更に加えて、本明細書で説明される他の方法に関連して本明細書で説明される、他のプロセスの詳細もまた、上述された方法2100と類似の方式で適用可能であることに留意されたい。例えば、方法2100に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、図22は、説明される様々な実施形態の原理に従って構成された、電子デバイス2200の機能ブロック図を示す。このデバイスの機能ブロックは、説明される様々な実施形態の原理を実行するために、ハードウェア、ソフトウェア、ファームウェア、又はそれらの組合せによって、任意選択的に実装される。図22で説明される機能ブロックが、説明される様々な実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックのあらゆる可能な組合せ若しくは分割、又は更なる定義を任意選択的に支持する。
図22に示されたように、電子デバイス2200は、ユーザインタフェースを表示するように構成されたディスプレイユニット2202、接触を受け取るように構成されたタッチ感知面ユニット2204、タッチ感知面ユニット2204との接触の強度を検出するための1つ以上のセンサユニット2206、及びディスプレイユニット2202、タッチ感知面ユニット2204及び1つ以上のセンサユニット2206に結合された処理ユニット2208とを含む。一部の実施形態では、処理ユニット2208は、表示ユニット2210、同期視聴要求受信ユニット2212、再生開始ユニット2214、インジケーション受信ユニット2216、検出ユニット2218、及び/又は提示変更ユニット2220、及び/又はスクロールユニット2222を含む。
処理ユニット2208は、ディスプレイ(例えば、ディスプレイユニット2202)上に、第1の電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含むメッセージユーザインタフェースを表示するように構成されている(例えば、表示ユニット2210を用いて)。一部の実施形態では、会話記録は、会話記録内の時系列位置に表示されるメディアアイテムの表現を含み、メッセージセッションは、第1の電子デバイスにおけるユーザ、及び第1の電子デバイスとは別個の第2の電子デバイスにおける少なくとも1人の他のユーザによる、メディアアイテムの同期視聴を可能にするように構成されている。処理ユニットはまた、メッセージユーザインタフェース内のメディアアイテムの同期視聴のための第1の要求を受信し(例えば、同期視聴要求受信ユニット2212を用いて)、第1の要求の受信に応じて、メディアアイテムの表現を会話記録内の時系列位置に表示する間に、メディアアイテムに対応するコンテンツの再生を開始する(例えば、再生開始ユニット2214を用いて)、ように構成されている。メディアアイテムに対応するコンテンツの再生を開始した後、時系列位置と異なるメッセージユーザインタフェース内の固定位置において、メディアアイテムに対応する再生コンテンツを表示する(例えば、ディスプレイユニット2202とともに表示ユニット2210を用いて)。メディアアイテムに対応する再生コンテンツを固定位置において表示している間に、(i)ユーザと少なくとも1人の他のユーザとの間で交換されたメッセージを、メディアアイテムに対応する再生コンテンツの下に表示し(例えば、ディスプレイユニット2202とともに表示ユニット2210を用いて)、(ii)メディアアイテムに対応するコンテンツの終了を検出する(例えば、検出ユニット2218を用いて)。メディアアイテムに対応するコンテンツの終了の検出に応じて、固定位置におけるメディアアイテムに対応するコンテンツの表示を停止する(例えば、ディスプレイユニット2202とともに表示ユニット2210を用いて)。
電子デバイス2200の一部の実施形態によれば、処理ユニットは、少なくとも1人の他のユーザがメディアアイテムに対応する再生コンテンツを操作したというインジケーションを受信し(例えば、インジケーション受信ユニット2216を用いて)、インジケーションの受信に応じて、少なくとも1人の他のユーザからの操作に従って、電子デバイスにおけるメディアアイテムに対応する再生コンテンツの提示を変更する(例えば、提示変更ユニット2220を用いて)、ように更に構成されている。
電子デバイス2200の一部の実施形態によれば、操作は、再生コンテンツを早送りすること、再生コンテンツを巻き戻すこと、及び/又は再生コンテンツを一時停止することを含む。
電子デバイス2200の一部の実施形態によれば、メディアアイテムの表現は、ユーザによって会話記録に追加される。
電子デバイス2200の一部の実施形態によれば、メディアアイテムの表現は、少なくとも1人の他のユーザによって会話記録に追加される。
電子デバイス2200の一部の実施形態によれば、第1の要求は、第2の電子デバイスを介して受信される。
電子デバイス2200の一部の実施形態によれば、第1の要求は、第1の電子デバイスにおけるユーザを介して受信される。
電子デバイス2200の一部の実施形態によれば、処理ユニットは、メディアアイテムに対応する再生コンテンツを固定位置において表示する前に、(i)ユーザと少なくとも1つの他のユーザとの間で交換されたメッセージをメッセージユーザインタフェース内に表示し(例えば、表示ユニット2202とともにディスプレイユニット2210を用いて)、メッセージを表示することは、メディアアイテムに対応する再生コンテンツのメッセージユーザインタフェース内の位置がメッセージユーザインタフェースの最上部に向かって移動するように、メディアアイテムに対応する再生コンテンツの下方にメッセージを表示することを含み、(ii)時系列位置がメッセージユーザインタフェースの最上部の予め定義された距離内にあるという判定に従って、メディアアイテムに対応する再生コンテンツをメッセージユーザインタフェース内の固定位置に表示する、ように更に構成されている。
電子デバイス2200の一部の実施形態にれば、処理ユニットは、固定位置においてメディアアイテムに対応する再生コンテンツを表示している間に、入力を検出し、入力の検出に応じて、会話記録をスクロールし(例えば、スクロールユニット2222を用いて)、及び、会話記録をスクロールしている間に、メディアアイテムの時系列位置が固定位置の予め定義された距離内にあるという判定に従って、再生コンテンツを再生し続けながら、再生コンテンツを時系列位置に移動させる(例えば、ディスプレイユニット2202とともに表示ユニットを用いて)、ように更に構成されている。
電子デバイス2200の一部の実施形態によれば、コンテンツの再生の終了を検出することは、コンテンツの再生を終了する要求を受信することに対応する。
電子デバイス2200の一部の実施形態によれば、コンテンツの再生の終了を検出することは、コンテンツの再生の終了に到達することに対応する。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図21A~図21Cを参照して上述された動作は、図1A、図1B、又は図22に示される構成要素によって、任意選択的に実行される。例えば、1つ以上の動作は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実行施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と比較し、タッチ感知面上の第1の場所における第1の接触が、ユーザインタフェース上のオブジェクトの選択、又は1つの向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうか(又は、デバイスの回転かどうか)を判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を、任意選択的に用いるか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示されるコンポーネントに基づいてどのように実施されるかは明らかであるだろう。
手書き入力をメッセージに組み入れる
図23A~図23AEは、一部の実施形態に係る、メッセージアプリケーションで、ユーザ特有の手書き入力を提供し提示するための例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、以下に説明するプロセスを示すために使用される。以下の実施例のうちの一部は、タッチ画面ディスプレイ上の入力(タッチ感知面とディスプレイとが組み合わされている場合)を参照して説明されるが、一部の実施形態では、デバイスは、図4Bに示すように、ディスプレイ450とは別個のタッチ感知面451上で入力を検出する。説明の便宜上、タッチ感知ディスプレイシステム112を有するデバイス上で実行する動作を参照して以下に説明する実施形態を検討する。そのような実施形態では、フォーカスセレクタは、任意選択的に、それぞれの指又はスタイラスの接触、指又はスタイラスの接触に対応する代表的な点(例えば、それぞれの接触の重心又はそれぞれの接触に関連付けられた点)、又は、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の重心である。しかしながら、以下で論じるユーザインタフェースをフォーカスセレクタと一緒に表示している間、タッチ感知面451上の接触の検出に応じて、ディスプレイ450及び別個のタッチ感知面451を有するデバイス上で、類似の動作が任意選択的に実行される。
図23Aに示すように、デバイスは、メッセージアプリケーション(本明細書では「メッセージユーザインタフェース」とも呼ぶ)のユーザインタフェースを表示し、デバイスのユーザは、ジェスチャ2302A及び2302Bのいずれか又は両方を提供することによって、手書き機能をアクティブ化することができる。一部の実施形態では、ジェスチャ2302A及び/又は2302Bに応じて、及びデバイスが縦向きになっている間、デバイスは手書き入力の選択可能な表現を表示する(図23Bのユーザインタフェース領域2351に示すように)。
一部の実施形態では、ユーザインタフェース領域2351に示される選択可能な表現のうちの1つの選択の受信に応じて(例えば、第1の選択可能な表現上の入力2304に応じて)、デバイスは、メッセージ入力領域2303を更新し、第1の選択可能な表現に関連付けられた手書きテキストを含める(例えば、図23Bに示すように、メッセージ入力エリアは更新され「Thank you」の手書きテキストを含む)。
一部の実施形態では、ユーザはまた、メッセージ入力エリア2303に表示された手書きテキストを選択することができる。例えば、メッセージ入力エリア2303(図23B)内に表示された手書きテキスト上のタップに応じて、デバイスは、ユーザが次いでその手書きテキストを編集することを可能にしてもよい(例えば、図23Jに示すなどの、手書きテキストの編集を可能にするユーザインタフェースを表示することによって)。
図23Cに示すように、一部の実施形態では、デバイスはまた、タイプされたテキストを手書きのテキストで自動置換する提案を提供する。
ユーザインタフェース領域2351に示される選択可能な表現のうちのいずれかを選択することによる手書きテキストの選択に加えて、一部の実施形態ではまた、新しい手書き入力を提供するためにユーザが単にデバイスを回転することができる。例えば、ユーザは、デバイスを縦向き(図23D)から横向き(図23E)に単に回転させると、この向きの変化の検出に応じて、デバイスは、ユーザからの手書き入力を受け入れるように構成されたユーザインタフェースを表示する(例えば、図23Eのユーザインタフェース2309)。
一部の実施形態では、ユーザは、手書き入力の背景色及び/又はパターンを選択することができる(例えば、図23Eのユーザ入力2308に応じて、デバイスは、図23Fの背景選択ユーザインタフェースを表示する)。選択(例えば、図23Fのタップ2310)に応じて、デバイスは、ユーザインタフェース2309の背景を適宜変更する(図23Gに示すように)。
図23H~図23Jは、ユーザがユーザインタフェース2309において手書き入力を提供することができ、ユーザが手書き入力を提供しているときに、デバイスがその手書き入力のリアルタイムプレビュー2312を提示することを示す。デバイスはまた、ユーザが、新たに提供された手書き入力に対するラベルを提供することを可能にすることができる。例えば、図23Jの左上隅に示す「ラベル」の選択に応じて、デバイスは、ユーザがラベルを提供することを可能にするユーザインタフェースを表示する。
一部の実施形態では、ユーザは、入力領域2314内にラベルをタイプできる(図23K及び図23Lに示すように)。一部の実施形態では、入力領域2314は、提案されたラベルを用いて自動ポピュレートされる(例えば、デバイスが適切なラベルを提案できる新たに提供された手書き入力に、光学文字認識アルゴリズムを適用することによって)。「保存」アフォーダンスのユーザ選択(例えば、図23Lのタップ2316)に応じて、デバイスはラベルを保存し、新しく提供された手書き入力(例えば、新しく提供された「Thank you」テキストに対する手書きストローク)をラベルに関連付ける。図23Mに示すように、デバイスはまた、新たに提供された手書き入力がラベル(例えば、インジケーション2318)に関連付けられているというインジケーションを提供する。
一部の実施形態では、「終了」リンク(例えば、タップ2320)の選択に応じて、デバイスは新たに提供された手書き入力をメッセージ入力エリア2303に追加し、ユーザは新たに提供された手書き入力を他のユーザに送信することができる。例えば、図23N~図23Vに示すように、ユーザが新たに提供された手書き入力を送信した後、他のユーザに関連付けられたデバイスは、手書き入力を予め定義されたペースでレンダリングするように命令される(例えば、第2の電子デバイス2360はユーザが手書き入力を提供されたことのインジケーションを提示し(例えば、インジケーション2322)、第2のデバイス2360は予め定義されたペースで描かれている手書き入力のアニメーションを提示する(図23Q~図23Vのアニメーション2324に示すように))。
一部の実施形態では、特定の手書きストローク(例えば、特定の手書き入力とともに提供されるストローク)の線の太さは、特定の手書きストローク中にユーザの指(又はスタイラス)によって適用される速度及び力に基づいて判定される。一部の実施形態では、インクが表面上で自然に膨張する様子を正確に模倣するために、いくつかのインクレンダリング技術が利用される(詳細は後述する)。
一部の実施形態では、ユーザはまた、図23W~図23ABに示すユーザインタフェースを介して、カスタムユーザ特有の手書きキーボードを訓練することができる。一部の実施形態では、手書きキーボードをうまく訓練した後、デバイスは、カスタムユーザ特有の手書きキーボードを提示することができる(図23ACに示すように)。
図23AEに示すように、一部の実施形態では、手書きテキストの提供に加えて、ユーザはまた、手書きの線画(又は手書きテキストと手書きの線図の組合せ)を提供することができる。手書きテキストに関して本明細書で論じた技術のいずれもまた、手書きの線画に適用可能である(図23AEに示す金魚のスケッチなど)。
図23A~図23AEに示すように、一部の実施形態では、手書き入力を提供し、かつ、提示するためのユーザインタフェースは、電子デバイスと通信しているディスプレイの一定の物理的特性によって異なる(上述もした)。一部の実施形態では、図23A~図23AEは、例えば、カリフォルニア州クパチーノのアップル社(から)のiPad Airなどの約9.4インチ(約240mm)のディスプレイと通信するデバイス(又はiPad Proなどのより大きなディスプレイを有するデバイス)上に示されるユーザインタフェースを表す。これらのより大きい表示サイズを利用するために、手書き入力領域が、会話記録(右上のコーナーに)及びユーザが参加している現在の会話のリスト(左上のコーナーに)と同時に表示される。一部の実施形態では、手書き入力領域2309に関して本明細書で提供される詳細のいずれかが、図23AD及び図23AEに示す手書き入力領域に適用可能である。
図24A~図24Cは、一部の実施形態に係る、メッセージアプリケーションにおいてユーザ特有の手書き入力を提供しかつ提示する方法2400を示すフロー図である。方法2400は、ディスプレイと、タッチ感知面とを有する電子デバイス(例えば、図3のデバイス300、又は、図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチ画面ディスプレイであり、タッチ感知面が、ディスプレイ上にあるか、ディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面から分離している。方法2400の一部の動作は任意選択的に組み合わされ、及び/又は、一部の動作の順序が任意選択的に変えられる。
以下に説明するように、方法2400は、メッセージアプリケーション内にユーザ特有の手書き入力を提供し提示する直感的な方法を提供する。本方法は、手書き入力の入力を開始するために、ユーザが、例えばデバイスを簡単に回転することを可能にすることによって、デバイスへのユーザ満足度を向上し、より効率的な人間と機械のインタフェースを作り出すことに役立つ。そのような方法及びインタフェースはまた、メッセージアプリケーションの会話記録内に含める手書き入力を、容易に効率的にかつ迅速に選択できるようにすることによって、より効率的な人間と機械のインタフェースを作り出す。バッテリ動作デバイスの場合、かかる方法及びインタフェースにより、電力を浪費せず、バッテリの充電の時間間隔が増大する。更に、ユーザが、手書き入力を開始するために単にデバイスを回転することを可能とし、かつ、ユーザが、手書き入力を容易に効率的にかつ迅速に選択することを可能とすることで、デバイスの操作性が向上し、ユーザとデバイスのインタフェース(例えば、メッセージアプリケーション内の)をより効率的にし(例えば、ユーザが手書き入力でユーザのメッセージコンテンツを容易にカスタマイズできることによって)、更に、ユーザがデバイスをより迅速かつ効率的に使用することを可能にすることによって、電力使用量を低減しデバイスのバッテリ寿命を改善する(例えば、ユーザはメッセージアプリケーションを離れ、異なるアプリケーションを開いて使用して手書き入力を入力又は見出し、次いで、メッセージアプリケーション内でこれらの入力の使用に戻る必要がなく、代わりにユーザはメッセージアプリケーション内でカスタムな手書き入力を直接、単に提供及び/又は選択する)。
図24Aに示すように、電子デバイスが縦向きの間、デバイスは、ディスプレイ上に、仮想キーボードを含むメッセージユーザインタフェース(例えば、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含むメッセージユーザインタフェース)を表示する(2402)。例示的なメッセージユーザインタフェースが図23Aに示される。一部の実施形態では、仮想キーボードは、手書き入力を受け入れるように構成されない。一部の実施形態では、キーボードは、手書き入力を受け入れないQWERTY、絵文字、又は他のタイプの仮想キーボードである(図23Aに示すQWERTYキーボードなど)。
デバイスは、縦向きから横向きへの電子デバイスの向きの変化を検出する(2404)(例えば、デバイスのユーザは、デバイスを物理的に軸に沿って約90度回転させる)。一例として、図23Dではデバイス100は縦向きに配置され、図23Eではデバイスは横向きに配置される。
電子デバイスの向きの変化の検出に応じて(例えば、図23Aと23Eとの間、及び図23Dと23Eとの間も)、デバイスは仮想キーボードの表示を停止し、ディスプレイ上に電子デバイスのユーザからの手書き入力を受け入れるように構成された手書き入力領域(例えば、図23Eの領域2309)を表示する(2406)。図23D及び図23Eに示すように、縦方向から横方向への向きの変化を検出すると、デバイスは、手書き入力領域2309を表示し、もはやメッセージユーザインタフェースを表示しない。一部の実施形態では、手書き入力領域は、ユーザが以前に手書き入力アフォーダンスを選択したという判定に従って表示される(例えば、デバイスを横方向を向けると、ユーザが手書き入力領域の表示を手動で選択する必要なしに手書き入力領域が直ちに表示されることを確実にすべく、ユーザは手書き入力アフォーダンスを選択する)。このように、デバイス100を単に回転させるだけで、ユーザは手書き入力モードに入り、かつ手書き入力の提供を開始することができ、このように、メッセージアプリケーションにおいて手書き入力を提供するための効率的な人間と機械のインタフェースを作り出することができる。
一部の実施形態では、仮想キーボードの表示を停止することは、電子デバイスの向きが縦向きの間のメッセージユーザインタフェースに含まれる会話記録の表示を停止することを含む(2408)(図23Aと23Eとの間及び図23Dと図23Eとの間で示すように、デバイスを横向きに回転させた後、会話記録はもはや表示されない)。このようにして、手書き入力領域2309のみを表示することにより(すなわち、手書き入力領域2309が実質的にディスプレイ112全体を占める)、会話記録の表示を停止し、ユーザに、手書き入力を提供する大きなキャンバスを提示する。手書き入力を提供する大きなキャンバスを提示することは、デバイス100の操作性を向上させ、ユーザ-とデバイスのインタフェースをより効率的にする(例えば、ユーザに手書き入力を正確に提供するための十分なスペースを提供することによって)。
手書き入力領域2309を表示した後、ユーザは手書き入力を提供することができ(図24Bの動作2410~2416を参照して論じたように)、ユーザは予め記録された手書き入力の表現を選択することができる(動作2418~2426を参照して論じたように)。ユーザは、これらの動作を任意の順序で実行することができる(例えば、手書き入力を提供し、その後に表現を選択する、又はその逆、及び所望の手書きテキストを作成するためにこれらの操作を必要に応じて繰り返してもよい)。このようにして、ユーザは、メッセージアプリケーション内の会話用記録に追加する様々なメッセージを作成するために、新しい手書き入力を容易かつ効率的に提供し、タイプされた入力を提供し、及び/又は、予め記録された手書き入力を選択することができる。
ここで図24Bを参照すると、一部の実施形態では、デバイスは手書き入力領域において手書き入力を受信する(2410。例えば、図23Hに示すように、ユーザが「Thank y」を手書きし始める)。一部の実施形態では、手書き入力の受信に応じて、デバイスは、手書き入力の(リアルタイム/常時更新の)プレビュー(例えば、図23Hのプレビュー2312)を表示し、プレビューは、手書き入力がメッセージユーザインタフェース内に表示されるユーザインタフェースオブジェクト(メッセージ領域/吹き出し)を含む。図23H~図23Jに示すように、手書き入力のプレビューは、メッセージユーザインタフェース内の手書き入力を表示するために使用されるメッセージ吹き出しの右上隅に示される(例えば、手書き入力を選択して別のユーザに送信した後、手書き入力はメッセージユーザインタフェースのメッセージング吹き出し内に示される)。一部の実施形態では、手書き入力は、メッセージ吹き出し内には表示されず、代わりにメッセージユーザインタフェース内に独立のテキストとして表示される。メッセージング吹き出し内の手書き入力の一例が図23Bに示され(例えば、メッセージ吹き出し2305)、メッセージ吹き出しの外部の手書き入力の例が図23Bに示される(例えば、メッセージ吹き出し2307)。手書き入力の生のライブリアルタイムのプレビューを提供することによって、デバイス100の操作性が向上し、より効率的なユーザとデバイスのインタフェースが作り出される(例えば、手書き入力を提供する際に、ユーザが適切な入力を提供し、かつ、ユーザの間違いを低減するのに役立つ)。
一部の実施形態では、手書き入力領域に手書き入力を受信している間、デバイスは、(例えば、電子デバイスのユーザとともにメッセージセッションにいる第2のユーザの第2のデバイスにルーティングするサーバに、又は直接第2のデバイスに)ユーザが現在メッセージを手書きしているというインジケーションを表示する命令を送信する(2412)(例えば、図23N~図23Pのインジケーション2322などの、シミュレートされた手書きストロークを含むメッセージ吹き出しが、第2のデバイスにおけるメッセージユーザインタフェースの会話記録内に表示される)。一部の実施形態では、そのユーザが現在メッセージを手書きしているというインジケーション(例えば、図23N~図23Pの2322)は、ユーザが手書き入力領域以外の入力機構(例えば、仮想QWERTYキーボード)を使用してメッセージをタイプとしているときに提供されるインジケーションとは異なる。
一部の実施形態では、手書き入力領域内において手書き入力を受信している間、デバイスは、手書き入力が手書き入力領域のエッジの予め定義された距離内(例えば、1ピクセル、2ピクセル、3ピクセル、4ピクセル、5ピクセル又はある他の予め定義された距離)にあるかどうかを判定し(2414)、判定に従って、手書き入力の少なくとも一部を表示し続けながら、手書き入力領域の表示部分をシフトして手書き入力領域内に追加のスペースを顕示化させる。例えば、図23H~図23Jに示すように、手書き入力がエッジの予め定義された距離内に近づくと、手書き入力領域がシフトされて追加のスペースが顕示化され、ユーザが手書き入力を流れるように提供し続けることが可能になる。一部の実施形態では、手書き入力の少なくとも一部を継続して表示することによって、ユーザが追加の手書き入力の提供を続けながらコンテキストを提供するために、ユーザは以前に入力した手書きストロークの一部をなおも見ることができる。手書き入力領域の表示領域を動的にシフトすることにより、デバイス100の操作性が向上し、より効率的なユーザ-とデバイスのインタフェースが提供される(例えば、表示領域をシフトすることにより、ユーザは、手書き入力を途切れることなく提供し続けることができ、同時に、以前に手書きストロークを提供した部分をなおも見ることができる)。
一部の実施形態では、ユーザは、デバイスに手書き入力領域の表示部分を手動でシフトさせることができる(例えば、図23H~図23Jに示す「>」アフォーダンスを選択することによって)。一部の実施形態では、ユーザは、デバイスに手書き入力領域の表示部分をシフトさせるために、実質的に水平方向に、2本指スワイプジェスチャを提供することもできる(ユーザが、ユーザインタフェース2309上に現在表示されている特定の手書き入力の左又は右に、容易にナビゲートできるようにするために)。
一部の実施形態では、デバイスは、手書き入力の少なくとも一部に対する変更(例えば、ある以前に完了した手書きストロークの注釈又は装飾、又は手書き入力の一部を元に戻す要求)を受信し、変更の受信に応じて、デバイスは、変更に従って手書き入力の一部及びプレビュー(例えば、2312)を変更する(2416)。例えば、元に戻す要求に応じて(例えば、ユーザが手書き入力領域2309に近接した、又は手書き入力領域2309内に表示された元に戻すボタン(図示せず)をクリックする)、デバイスは、ユーザによって提供された最後の手書きストロークを削除し、同時に同じストロークをプレビュー2312から削除する。一部の実施形態では、ユーザが元に戻すボタン上をタップし、かつ元に戻すボタンに予め定義された時間(例えば2秒以上)接触し続けた場合、デバイスは手書きキャンバス(例えば、ユーザインタフェース/キャンバス2309)全体をクリアする。
ここで図24Cを参照すると、デバイスは、手書き入力領域内に(又は近くに/隣に)、電子デバイスのユーザからの予め記録された手書き入力の表現を表示する(2418)。一部の実施形態では、予め記録された手書き入力が、手書き入力領域の下方に表示され(例えば、図23Jに示すように、「my bad,」、「Happy Birthday」、及び「CONGRATS!!!」に対する表現を示す)、いずれもユーザによって選択可能である。一部の実施形態では、予め記録された手書き入力のうちの第1のものを選択した後、手書き入力領域は第1の予め記録された手書き入力を含むように更新され、次いで、ユーザは入力を変更して又はそれを会話記録内に含んで、他のユーザに送信することができる。一部の実施形態では、予め記録された手書き入力の表現に加えて、デバイスはまた、デフォルトの予め記憶された手書き入力の表現を表示する。
一部の実施形態では、予め記録された手書き入力を変更できることに加えて、ユーザは、それらを選択して他のユーザに送信することもできる(例えば、図23Bに示すように、入力2304は手書き入力「Thank you」の表現を選択するために提供される)。一部の実施形態では、デバイスは、第1の予め記録された手書き入力(例えば、図23Bの入力2304)の選択を受信し(2420)、及びメッセージセッションの他のユーザに関連付けられた第2のデバイスに、第1の予め記録された手書き入力(又はその表現、又は第1の予め記録された手書き入力を再作成する命令)を送信し(2422)、第1の予め記録された手書き入力を第2のデバイスに送信することは、第2のデバイスに、第1の予め記録された手書き入力を第2のデバイスにおいて予め定義されたペースで描画するように命令すること、を含む。
例えば、図23Q~図23Vに示すように、第2の電子デバイス2360上のメッセージアプリケーションの領域2324に対して、第1の予め記録された手書き入力「Thank you,」の表現のユーザ選択に応じて、第2のデバイス2360は、第1の予め記録された手書き入力を予め定義されたペースで描画する命令を受信する。予め記録された手書き入力の描画を正確にシミュレートするために利用されるインク関連技術に関する追加の詳細が、以下提供される。
一部の実施形態では、第1の予め記録された手書き入力を描画する代わりに、第2の電子デバイス2360が、第1の予め記録された手書き入力を表示だけする(2426)(すなわち、図面なしで上述した)。例えば、第2のデバイス2360は、描画効果をレンダリングする代わりに、図23Sに示すように、メッセージ領域2324を表示するだけである。別の言い方をすれば、一部の実施形態では、第1の予め記録された手書き入力が、第2のデバイス2360においてメッセージユーザインタフェースに加えられ、アニメーション効果なしで表示される(例えば、予め定義されたペースで手書き入力を描画することなく)。
一部の実施形態では、予め定義されたペースは、第1の予め記録された手書き入力を提供する間に、ユーザによって使用された書き込みペースに対応する(2424)。一部の実施形態では、予め定義されたペースは、第1の予め記録された手書き入力(例えば、手書き入力を提示するためのデフォルトペース)を提供する間に、ユーザによって使用されたペースとは異なる書き込みペースに対応する。
一部の実施形態では、手書き入力領域は、デバイスが縦向きの間に利用可能である(例えば、より大きなディスプレイを有するデバイスの場合)。一部の実施形態では、デバイスが縦向きである間に手書き入力領域にアクセスするために、手書き入力選択アフォーダンスがメッセージユーザインタフェース内に含まれる(例えば、図23Aの入力2302Aによって選択されるように示されるアフォーダンス、又は図23Aの入力2302Bによって選択されるように示されるアフォーダンス)。手書き入力選択アフォーダンスの選択の検出に応じて、デバイスは、仮想キーボードの表示を停止し、手書き入力領域及び電子デバイスのユーザからの予め記録された手書き入力の表現を表示する。一部の実施形態では、手書き入力選択アフォーダンスは、デバイスが、予め定義されたサイズを上回るタッチ感知ディスプレイ(例えば、APPLEのCupertino、CAからのiPad及びiPad miniデバイス上で利用可能なものなどの、少なくとも7.9インチのタッチ感知ディスプレイ)、又は予め定義された閾値を上回る解像度(APPLEの前述のデバイス上で利用可能なものなど、346ppiで2048×1536ピクセル、又はそれ以上)を有するタッチ感知ディスプレイ、を含む場合に縦向きである間でのみ、利用可能である。別の言い方をすれば、一部の実施形態では、より小さいスマートフォンの向きが縦向きである間は、より小さいスマートフォンは手書き入力選択アフォーダンスを全く表示させず、それゆえ、これらのより小さいデバイスの向きは横向きである間にのみ、手書き入力エリアが利用可能となる。
図24A~図24Cにおける動作が記載された特定の順序は単なる一例に過ぎず、記載された順序が動作が実行され得る唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。更に加えて、本明細書で説明される他の方法に関連して本明細書で説明される、他のプロセスの詳細もまた、上述された方法2400と類似の方式で適用可能であることに留意されたい。例えば、方法2400に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、図24A~図24Cを参照して上述した方法2400は、インクが表面に適用される様子を正確にシミュレートするために、ディスプレイ上にインクをレンダリングするために、以下に説明する1つ以上の技術を利用する。
一部の実施形態では、図25は、説明される様々な実施形態の原理に従って構成された、電子デバイス2500の機能ブロック図を示す。このデバイスの機能ブロックは、説明される様々な実施形態の原理を実行するために、ハードウェア、ソフトウェア、ファームウェア、又はそれらの組合せによって、任意選択的に実装される。図25で説明される機能ブロックが、説明される様々な実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックのあらゆる可能な組合せ若しくは分割、又は更なる定義を任意選択的に支持する。
図25に示されたように、電子デバイス2500は、ユーザインタフェースを表示するように構成されたディスプレイユニット2502、接触を受け取るように構成されたタッチ感知面ユニット2504、タッチ感知面ユニット2504との接触の強度を検出するための1つ以上のセンサユニット2506、及びディスプレイユニット2502、タッチ感知面ユニット2504及び1つ以上のセンサユニット2506に結合された処理ユニット2508とを含む。一部の実施形態では、処理ユニット2508は、表示ユニット2510、デバイス方向検出ユニット2512、手書き変更ユニット2514、送付ユニット2516、手書き入力選択ユニット2518、判定ユニット2520、及び/又は手書き入力領域シフトユニット2524、を含む。
処理ユニット2508は、電子デバイスが縦向きである間に、ディスプレイ(例えば、ディスプレイユニット2502)上に、仮想キーボードを含むメッセージユーザインタフェースを表示し(例えば、表示ユニット2510を用いて)、縦方向から横方向へのに電子デバイスの向きの変化を検出し(例えば、デバイス方向検出ユニット2512を用いて)、並びに、電子デバイスの向きの変化の検出に応じて、仮想キーボードの表示を停止し(例えば、表示ユニット2510を用いて)、及びディスプレイ上に、電子デバイスのユーザからの入力された手書き入力を受け入れるように構成された手書き入力領域を表示する(例えば、表示ユニット2510を用いて)、ように構成されている。
電子デバイス2500の一部の実施形態によれば、処理ユニットは、手書き入力領域において手書き入力を受信し(例えば、手書き変更ユニット2514を用いて)、手書き入力の受信に応じて手書き入力のプレビューを表示するように構成されており、プレビューは、手書き入力がメッセージユーザインタフェース内に表示される(例えば、表示ユニット2510を用いて)ユーザインタフェースオブジェクトを含む。
電子デバイス2500の一部の実施形態によれば、処理ユニットは、手書き入力の少なくとも一部の変更を受信し(例えば、手書き変更ユニット2514を用いて)、及び、変更の受信に応じて、変更に従って手書き入力の一部及びプレビューを変更する(例えば、手書き変更ユニット2514を用いて)、ように更に構成されている。
電子デバイス2500の一部の実施形態によれば、処理ユニットは、手書き入力を手書き入力領域内に受信している間に、ユーザが現在メッセージ手書きしているというインジケーションを表示する命令を送信する(例えば、送付ユニット2516を用いて)、ように更に構成されている。
電子デバイス2500の一部の実施形態によれば、処理ユニットは、電子デバイスのユーザからの予め記録された手書き入力の表現を、手書き入力領域内に表示する(例えば、表示ユニット2510を用いて)、ように更に構成されている。
電子デバイス2500の一部の実施形態によれば、処理ユニットは、第1の予め記録された手書き入力の選択を受信し(例えば、手書き入力選択ユニット2518を用いて)、及び、第1の予め記録された手書き入力を、メッセージセッション内の別のユーザに関連付けられた第2のデバイスに送信し(例えば、送付ユニット2516を用いて)、第1の予め記録された手書き入力を第2のデバイスに送信することは、第2のデバイスに、第1の予め記録された手書き入力を第2のデバイスにおいて予め定義されたペースで描画するように命令することを含む、ように更に構成されている。
電子デバイス2500の一部の実施形態によれば、予め定義されたペースは、第1の予め記録された手書き入力を提供する間にユーザによって使用された書き込みペースに対応する。
電子デバイス2500の一部の実施形態によれば、予め定義されたペースは、第1の予め記録された手書き入力を提供する間にユーザによって使用されたペースと異なる書き込みペースに対応する。
電子デバイス2500の一部の実施形態によれば、処理ユニットは、第1の予め記録された手書き入力の選択を受信し(例えば、手書き入力選択ユニット2518を用いて)、及び、第1の予め記録された手書き入力を、メッセージセッション内の別のユーザに関連付けられた第2のデバイスに送信し(例えば、送付ユニット2516を用いて)、第1の予め記録された手書き入力を第2のデバイスに送信することは、第2のデバイスに、第1の予め記録された手書き入力を第2のデバイスにおいて表示するように命令することを含む、ように更に構成されている。
電子デバイス2500の一部の実施形態によれば、処理ユニットは、手書き入力領域内において手書き入力を受信している間に、手書き入力が手書き入力領域のエッジの予め定義された距離内にあることを判定し(例えば、判定ユニット2522を用いて)、判定に従って、手書き入力の少なくとも一部を表示し続けながら、手書き入力領域の表示部分をシフトして手書き入力領域内に追加のスペースを顕示化させる(例えば、手書き入力領域シフトユニット2524を用いて)、ように更に構成されている。
電子デバイス2500の一部の実施形態によれば、仮想キーボードの表示を停止することは、電子デバイスの向きが縦向きである間にメッセージユーザインタフェースに含まれる会話記録の表示を停止することを含む。
上述の情報処理方法における動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述したように)又は特定用途向けチップなどの、情報処理機器内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図24A~図24Cを参照して上述した動作は、図1A、図1B又は図25に示す構成要素によって、任意選択的に実行される。例えば、一部の動作は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1の対応するイベント認識部180は、そのイベント情報を対応するイベント定義186に照会し、タッチ感知面上の第1の場所での第1の接触(又は、デバイスの回転)が、ユーザインタフェース上のオブジェクトの選択、又は1つの向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を、任意選択的に用いるか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されるかは明らかであるだろう。
図26A及び図26Bは、一部の実施形態に係る、メッセージアプリケーションにおいて、ユーザ特有の手書き入力を提供し提示するための方法2600を示すフロー図である。方法2600は、ディスプレイと、タッチ感知面とを有する電子デバイス(例えば、図3のデバイス300、又は、図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチ画面ディスプレイであり、タッチ感知面が、ディスプレイ上にあるか、ディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面から分離している。方法2600の一部の動作は、任意選択的に組み合わされ、及び/又は、一部の動作の順序が任意選択的に変えられる。
以下に説明するように、方法2600は、メッセージアプリケーション内にユーザ特有の手書き入力を提供し提示する直感的な方法を提供する。この方法は、ユーザが、例えば、タイプされた入力を手書き入力で効率的に自動置換することを可能にすることによって、デバイスのユーザ満足度を向上させ、より効率的な人間と機械のインタフェースを作り出すのに役立つ。バッテリ駆動デバイスの場合、そのような方法及びインタフェースは、電力を浪費せず、バッテリ充電の時間間隔を増大させる(例えば、タイプ入力の特定のシーケンスを関連する手書き入力で自動置換するために単一の入力のみを要求することによって)。
デバイスは、電子デバイスのユーザと少なくとも1つの他のユーザとの間のメッセージセッションの会話記録を含むメッセージユーザインタフェース(例えば、図23Aに示すように、ユーザと少なくとも1つの他のユーザとの間で交換されたメッセージを表示するメッセージ領域を含む)、仮想キーボード(例えば、図23Aに示す仮想QWERTYキーボード)、及び、メッセージ入力エリア(例えば、図23Bのメッセージ入力エリア2303)、をディスプレイ上に表示する(2602)。
デバイスはまた、仮想キーボードにおいて、複数のタイプ入力を受信する(2604)(ユーザがディスプレイ上の仮想QWERTYキーボードの複数のキーをタイプする)。例えば、図23Cに示すように(メッセージ入力エリア2303のクローズアップを示す)、ユーザは(換言すれば、複数のタイプ入力は以下の入力を含む)「Thank you for helping to play all of this!I think he is going to be really surprised!」を、タイプする。複数のタイプ入力を受信している間、デバイスは、複数のタイプ入力のうちの1つ以上のタイプ入力が、ユーザからの記憶された手書き入力に関連付けられた記憶された文字列と一致するかどうかを判定する。一部の実施形態では、記憶された文字列は、記憶された手書き入力に対してユーザが提供したラベルに対応する(2608)。例えば、ユーザは、様々な手書き入力を入力し、それぞれの手書き入力にラベルを関連付ける(例えば、図23K~図23Mに示すように、ユーザは、Thank youのラベルを、「Thank you」と最近タイプした手書きテキストに関連付ける。
1つ以上のタイプ入力が記憶された文字列に一致する(例えば、タイプ入力「Thank you」が、「Thank you」という記憶されたラベルと一致する)という判定に従って、デバイスは、メッセージ入力エリア内に表示される第1の文字セットに近接する第1の場所に、記憶された手書き入力の選択可能な表現(例えば、図23Cに示す、選択可能な表現2392A及び2392B)を表示し、第1の文字セットは、メッセージ入力エリア内に表示され、記憶された文字列と一致する1つ以上のタイプ入力に対応する文字を含む(2610)。
デバイスはまた、タッチ感知面を介して、記憶された手書き入力の選択可能な表現の選択を検出する(2612)(例えば、図23Cに示す入力2306のうちの1つを検出する)。記憶された手書き入力の選択可能な表現の選択の検出に応じて、デバイスは、第1の場所における記憶された手書き入力の選択可能な表現の表示を停止し、メッセージ入力エリア内で、1つ以上のタイプ入力に対応する第1の文字セットの表示を、記憶された手書き入力の表現の表示に置換する。例えば、図23Cに示すように、入力2306に応じて、デバイスは、選択可能な表現2392A/2392Bの表示を停止し、その代わりにタイプされた文字「Thank you」を、選択可能な表現に表示されていた記憶された手書き入力の表現に置換する。このようにして、ユーザは、タイプされたテキストを手書きテキストに自動置換するために単一の入力(選択可能な表現の選択だけ)を提供し、それによって、デバイス100の操作性を向上させ、ユーザ-とデバイスのインタフェースをより効率的にすることができる。
ここで図26Bを参照すると、一部の実施形態では、第1の文字セットを記憶された手書き入力の表現で置換した後、メッセージ入力エリア(例えばエリア2303)は、記憶された手書き入力の表現と、複数のタイプ入力のうちの少なくとも第1のタイプ入力との両方を含む(2614)。換言すれば、ユーザのメッセージは、手書きテキストとタイプされたテキストの両方を含む(図23Cに示すように)。このようにして、ユーザは、単一メッセージ内の特定のフレーズを、その単一メッセージの完全な内容に対する手書きテキストを送信する必要なくパーソナル化することができ、それによって、デバイス100の操作性を向上させ、ユーザとデバイスのインタフェースをより効率的にする。
一部の実施形態では、デバイスは、少なくとも1人の他のユーザにメッセージを送信する要求を受信し、要求の受信に応じて、デバイスは、会話記録内に記憶された手書き入力を予め定義されたペースで描画するアニメーションを含むユーザオブジェクトを表示する(2616)(図23Q~図23Vに示すように、第2の電子デバイス2360に関しては、一部の実施形態では、同じアニメーションがデバイス100において予め定義されたペースで描かれる)。一部の実施形態では、少なくとも1つの他のユーザにメッセージを送信する要求の受信に応じて、デバイスは、記憶された手書き入力を予め定義されたペースで描画するアニメーションを含むユーザインタフェースオブジェクトをレンダリングする(図23Q~図23Vに示すように)命令を送信する(サーバを介して、又は少なくとも1人の他のユーザに関連付けられた第2のデバイス2360に直接)。
一部の実施形態では、予め定義されたペースは、記憶された手書き入力を提供している間にユーザによって使用された書き込みペースに対応する(したがって、ユーザは、ユーザの手書きテキストと、以前書かれた際のユーザの手書きテキストの予め定義されたペースとの両方を含む、高度にカスタマイズされた手書きメッセージを提供することができる。)。一部の実施形態では、予め定義されたペースは、記憶された手書き入力を提供している間にユーザによって使用されたペースと異なる書き込みペースに対応する。
図26A及び図26Bにおける動作が記載された特定の順序は単なる一例に過ぎず、記載された順序が動作が実行され得る唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。更に加えて、本明細書で説明される他の方法に関連して本明細書で説明される、他のプロセスの詳細もまた、上述された方法2600と類似の方式で適用可能であることに留意されたい。例えば、方法2600に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、図26A及び図26Bを参照して上述した方法2600は、インクが表面に適用される方法を正確にシミュレートするために、ディスプレイ上にインクをレンダリングするために、以下に説明する1つ以上の技術を利用する。
一部の実施形態では、図27は、説明される様々な実施形態の原理に従って構成された、電子デバイス2700の機能ブロック図を示す。このデバイスの機能ブロックは、説明される様々な実施形態の原理を実行するために、ハードウェア、ソフトウェア、ファームウェア、又はそれらの組合せによって、任意選択的に実装される。図27で説明される機能ブロックが、説明される様々な実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックのあらゆる可能な組合せ若しくは分割、又は更なる定義を任意選択的に支持する。
図27に示されたように、電子デバイス2700は、ユーザインタフェースを表示するように構成されたディスプレイユニット2702、接触を受け取るように構成されたタッチ感知面ユニット2704、タッチ感知面ユニット2704との接触の強度を検出するための1つ以上のセンサユニット2706、及びディスプレイユニット2702、タッチ感知面ユニット2704及び1つ以上のセンサユニット2706に結合された処理ユニット2708とを含む。一部の実施形態では、処理ユニット2708は、表示ユニット2710、タイプグ入力受信ユニット2712、判定ユニット2714、検出ユニット2716、置換ユニット2718、第2のユニット2720、及び要求受信ユニット2722を含む。
処理ユニット2708は、ディスプレイ上にメッセージであって、メッセージユーザインタフェースは、ユーザと少なくとも1人の他のユーザと電子デバイスとの間のメッセージセッションの会話記録、仮想キーボードと、及びメッセージ入力エリアとを含む、メッセージユーザインタフェースを表示し(例えば、ディスプレイユニット2702とともに表示ユニット2710を用いて)仮想キーボードにおいて複数のタイプ入力を受信し(例えば、タイプ入力受信ユニット2712を用いて)、複数のタイプ入力を受信する間に、複数のタイプ入力のうちの1つ以上のタイプ入力が、ユーザからの記憶された手書き入力に関連付けられた記憶された文字列と一致するかどうかを判定し(例えば、判定ユニット2714を用いて)、1つ以上のタイプ入力が記憶された文字列と一致するという判定に従って、メッセージ入力エリア内に表示された第1の文字セットであって、第1の文字セットは、メッセージ入力エリア内に表示され、記憶された文字列に一致する1つ以上のタイプ入力に対応する文字を含む、第1の文字セットに近接した第1の場所において、記憶された手書き入力の選択可能な表現を表示し(例えば、表示ユニット2710を用いて)、記憶された手書き入力の選択可能な表現の選択を、タッチ感知面を介して検出し(例えば、検出ユニット2716を用いて)、記憶された手書き入力の選択可能な表現の選択の検出に応じて、記憶された手書き入力の選択可能な表現を第1の場所における表示を停止する(例えば、表示ユニット2710を用いて)、ように構成されており、メッセージ入力エリア内で、1つ以上のタイプ入力に対応する第1の文字セットの表示を、記憶された手書き入力の表現と置換する(例えば、置換ユニット2718を用いて)。
電子デバイス2700の一部の実施形態によれば、処理ユニットは、少なくとも1人の他のユーザにメッセージを送信する要求を受信し(例えば、要求受信ユニット2722を用いて)、要求の受信に応じて、記憶された手書き入力を予め定義されたペースで描画するアニメーションを含むユーザインタフェースオブジェクトを会話記録内に表示する(例えば、表示ユニット2710を用いて)、ように構成されている。
電子デバイス2700の一部の実施形態によれば、処理ユニットは、少なくとも1人の他のユーザにメッセージを送信する要求の受信に応じて、記憶された手書き入力を予め定義されたペースで描画するアニメーションを含むユーザインタフェースオブジェクトをレンダリングする命令を送信する(例えば、送付ユニット2720を用いて)、ように更に構成されている。
電子デバイス2700の一部の実施形態によれば、予め定義されたペースは、記憶された手書き入力を提供する間にユーザによって使用された書き込みペースに対応する。
電子デバイス2700の一部の実施形態によれば、予め定義されたペースは、記憶された手書き入力を提供する間にユーザによって使用されたペースと異なる書き込みペースに対応する。
電子デバイスに2700の一部の実施形態によれば、記憶された手書き入力の表現で第1の文字セットを置換した後、メッセージ入力エリアは、記憶された手書き入力の表現と、複数のタイプ入力のうちの少なくとも第1のタイプ入力との両方を含む。
電子デバイス2700の一部の実施形態によれば、記憶された文字列は、記憶された手書き入力に対してユーザが提供したラベルに対応する。
上述の情報処理方法における動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述したように)又は特定用途向けチップなどの、情報処理機器内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図26A及び図26Bを参照して上述した動作は、オプションとして、図1A、図1B又は図27に示される構成要素によって実行される。例えば、一部の動作は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、そのイベント情報をそれぞれのイベント定義186に照会し、タッチ感知面上の第1の場所における第1の接触(又は、デバイスの回転)が、ユーザインタフェース上のオブジェクトの選択、又は1つの向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を、任意選択的に用いるか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示されるコンポーネントに基づいてどのように実施されるかは明らかであるだろう。
図28A及び図28Bは、一部の実施形態に係る、メッセージアプリケーションにおいて、ユーザ特有の手書き入力を提供し提示するための方法(2800)を示すフロー図である。方法2800は、ディスプレイと、タッチ感知面とを有する電子デバイス(例えば、図3のデバイス300、又は、図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチ画面ディスプレイであり、タッチ感知面が、ディスプレイ上にあるか、ディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面から分離している。方法2800の一部の動作は、任意選択的に組み合わされ、及び/又は、一部の動作の順序が任意選択的に変えられる。
以下に説明するように、方法2800は、メッセージアプリケーション内にユーザ特有の手書き入力を提供し提示する直感的な方法を提供する。この方法は、カスタムキーボード上のキーとして、ユーザ特有の手書き文字を含むカスタムキーボードを作成するために、ユーザに、例えば予め定義されたトレーニング手順に簡単に従うことを可能にすることで、ユーザのデバイスに対するユーザ満足度を向上させ、より効率的な人間と機械のインタフェースを作り出すのに役立つ。バッテリ動作デバイスの場合、かかる方法及びインタフェースにより、電力を浪費せず、バッテリの充電の時間間隔が増大する。更に、ユーザが手書き文字を、キーとして備えるカスタムキ-ボードを容易に効率的にかつ迅速に作成することを可能にすることにより、デバイスの操作性が向上し(例えば、メッセージアプリケーションにおいて)ユーザとデバイスのインタフェースがより効率的になり(例えば、ユーザに、カスタムキーボードから選択した手書き入力を含むユーザのメッセージコンテンツを容易にカスタマイズすることを可能にすることにより)、加えて、ユーザがデバイスをより迅速にかつ効率的に使用することを可能にすることにより、電力使用量を低減し、デバイスのバッテリ寿命を改善する(例えば、ユーザはメッセージアプリケーションを閉じて、別のアプリケーションを開いて使用して手書き入力を入力又は見出し、次いで、メッセージアプリケーションに戻ってこれらの入力を使用する必要はなく、代わりに、ユーザはメッセージアプリケーション内でカスタムな手書き入力を直接、簡単に提供及び/又は選択する)。
デバイスは、タッチ感知面を介して第1の入力(キーボード準備モードをアクティブ化するための入力2326、次いで図23W~図23Xのトレーニング文字のそれぞれのセットに対するキーボード準備ユーザインタフェースを表示するための入力2328など、手書き文字を含むカスタムキーボードを準備する要求に対応する)を検出する(2802)。第1の入力(又は入力2326及び2328のなどの複数の入力)の検出に応じて、デバイスは、キーボード準備ユーザインタフェース(例えば、図23Yに示されるユーザインタフェース)をディスプレイ上に提示する。一部の実施形態では、キーボード準備ユーザインタフェースは、第1の強調文字を含むトレーニング文字の予め定義されたセットを表示する第1の部分(例えば、図23Yに示すユーザインタフェースの「THE QUICK BROWN FOX JUMPS OVER THE LAZY DOG.」を表示する部分)を含む(2804)。一部の実施形態では、第1の部分は、カスタムキーボードを準備している間にユーザがタイプしようとする文字のプレビューを提供する最上部であり、強調文字は、カスタムキーボードを準備する間にユーザが手書き対象の次の文字を表す(図23Y及び図23Zに示すように、「T」文字2330は、そのキャラクタに手書き入力を提供すべきであることをユーザに示すために、第1の部分において強調されている)。一部の実施形態では、キーボード準備ユーザインタフェースはまた、トレーニング文字の予め定義されたセットのうちの1つ以上の文字を表示する第2の部分を含み、1つ以上の文字は第2の強調文字(例えば、図23Y~図23Zの強調文字2332)を含む。例えば、第2の部分は、第1の部分/最上部の下方に表示される底部であり、第2の部分は、ユーザによって手書きされるべき次の文字を表す限定された数の文字(例えば、1、2、又は3)を含む。一部の実施形態では、第1及び第2の強調文字は同じ文字に対応するが、第2の強調文字は、図23Y~図23Zに示すように、第1の強調文字よりも大きなフォントサイズで表示される。
一部の実施形態では、手書き入力が受信されると、第1及び第2の部分の強調文字が変化する(2806)。一部の実施形態では、それぞれの手書き入力が受け入れ基準を満足するという判定に従って、デバイスは、トレーニング文字のセット内の次の文字を強調する(図23Z~図23AAに示すように、ユーザが受け入れ基準を満足する入力手書きを提供し続けると強調文字が変化する)。このようにして、ユーザは手書きすべき文字について、明確な視覚的手がかりを提供される。
一部の実施形態では、それぞれの手書き入力が受け入れ基準を満足しないという判定に従って、デバイスは、受け入れ基準を満足するために手書き入力をどのように修正すべきかについてのインジケーションをユーザに提供する。例えば、図23Yに示すように、ユーザは文字「T」の手書き入力を提供するが、その手書き入力は受け入れ基準を満足せず、そのため、デバイスは、ユーザにより大きな手書き入力を提供するように指図するインジケーション2330を表示する。
キーボード準備ユーザインタフェースを提示している間、デバイスは、タッチ感知面を介してトレーニング文字の予め定義されたセットに対応する手書き入力を受信する(2808)(図23Y~図23AAを参照して上述したように)。例えば、トレーニング文字の予め定義されたセットは、QWERTYキーボード上に表示されたそれらの文字に対応する(2810)。
手書き入力を受信した後、デバイスは、メッセージ入力エリア、及び複数のキーを含む仮想キーボードを備えるメッセージユーザインタフェースを表示する要求に対応する第2の入力を検出する(2812)(例えば、仮想キーボードはQWERTYキーボード(図23Aに示すものなど)、又は手書き入力に対応する手書き文字を含むカスタムキーボード(図23ACに示すものなど)である)。複数のキーのうちの第1のキーは、受信した手書き入力の第1の手書き入力に関連付けられる。一部の実施形態では、仮想キーボードはQWERTYキーボードである(2814)。例えば、図23Aに示すQWERTYキーボード上のキーは、ユーザからのそれぞれの手書き入力に、それぞれ関連付けられている。別の例として、仮想キーボードはキーを含むユーザ特有のキーボードであり、各キーは受信した手書き入力のうちの1つの表現を含む(図23ACに示すものなど)。
第2の入力の検出に応じて、デバイスは、メッセージ入力エリア、及び複数のキーを含む仮想キーボードを含む、メッセージユーザインタフェースを表示する(2818)。例えば、第2の入力は、メッセージアプリケーションを開く要求に対応する(例えば、ホームスクリーンページ上のアイコンをクリックすることによって)。デバイスは、タッチ感知面を介して、第1のキーの選択を受信する(2818)(例えば、ユーザは、図23AのQWERTYキーボード上又は図23ACのユーザ特有の手書きキーボード上に示された「p」キーの表現上をタップする)。第1のキーの選択の受信に応じて、デバイスは、メッセージ入力エリア内に第1の手書き入力の表現を出力する(例えば、ユーザが表示されたキーボード上で「p」キーをタップした後、以前の例を拡張しながら、デバイスは、図23W~図23ABを参照して上述した手書きトレーニングの練習中に提供されるものなどの「p」キーに対するユーザ特有の手書き入力を表示する)。
一部の実施形態では、第1の手書き入力の表現を出力することは、第1の手書き入力を受信している間に記録されたペースで第1の手書き入力をレンダリングすることを含む(2820)。
図28A及び図28Bにおける動作が記載された特定の順序は単なる一例に過ぎず、記載された順序が動作が実行され得る唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。更に加えて、本明細書で説明される他の方法に関連して本明細書で説明される、他のプロセスの詳細もまた、上述された方法2800と類似の方式で適用可能であることに留意されたい。例えば、方法2800に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、図24A~図24C、図26A及び図26B、並びに図28A及び図28Bを参照して上述した方法は、インクが表面に適用されるふるまいを正確にシミュレートするために、ディスプレイ上にインクをレンダリングするための、以下に説明する1つ以上の技術を利用する。
手書きGLレンダラ
手書きレンダラは、2つの主たるシステム、すなわちウェット及びドライによって定義することができる(下記の表1に示すように)。これらは、スクリーン上においてインクの外観のライフサイクルを提示する、2つの相互依存するレンダリングパイプラインである。一部の実施形態では、レンダリングパイプラインは、全てのサポートされたハードウェア(例えば、スマートフォン、ラップトップ、スマートウォッチなどの多くの異なる構成)上で動作する。
Figure 0007263481000001
一部の実施形態では、上述した(例えば、表1を参照して)各状態は、フレームバッファを表し、それ自身のシェーダパイプラインを含む。ウェット中間物とは、オフスクリーンで、にじむ挙動に対する時間ベースのパーティクルシミュレーションである動的環状化と連動して連続した線色の外観をもたらす、glBlendFunc(GL_ONE、GL_ONE_MINUS_SRC_ALPHA)を使用した多数のオーバーラップするドットからなるGL_POINTSを使用して、アレーを描画するものである。ウェット合成物とは、Self、ウェット中間物及び紙テクスチャのスペキュラウェットネスに対するフラグメントベースのノーマル判定を受信し、累積的に0%にフェードして、ドライ合成物を顕示化させるものである。ドライ中間物とは、オフスクリーンで、Self及びウェット中間物を受信して、セグメントレベル乗算ブレンディングに対して前処理をするものである。ドライ合成物とは、ドライ中間物及び紙テクスチャを受信して、ドライ中間物結果から色を適用するものである。
一部の実施形態では、スクリーン(例えば、デバイス100のディスプレイ112)に提示されると、ウェット合成物が、ドライ合成物の最上部にアルファブレンドされる。
にじむ挙動
インクが表面に適用されるふるまいを正確に模した、にじむ挙動をレンダリングするための例示的な式を、以下の表2に示す。
Figure 0007263481000002
一部の実施形態では、にじむ挙動は、正規化された寿命時間にわたって各頂点のポイントサイズを変更する時間ベースの効果である。一部の実施形態では、サイズは、ユーザの圧力(力)及び速度(ベイクダウン速度)のフィルタリング(平滑化)及び正規化された値によって決定される。
一部の実施形態では、シミュレーションが所与のポイントに対してそのフェーズを完了したとき、受信のためのドライパイプライン専用に指定されたチャネルに書き込まれる(例えば、このチャネルはドライパイプライン内のアルファオーバカバレッジを避けるため、ポイント当たり1回のみの書き込みとすることが重要である)。
動的環状化技術を実施するために使用される例示的な式を、以下の表3に示す。
Figure 0007263481000003
一部の実施形態では、ウェット中間物パスのフラグメントフェーズ中に、各GL_POINTが処理される。ポイントサイズとポイントのフラグメント座標とに基づいて、ポイントの環状化が一貫したエッジアルファフォールオフを保持することを確実にできる。この一貫性により、MSAA(マルチサンプリングされたアンチエイリアシング)の負担なしに、及びラインの重み/ポイントサイズに関係なく、一貫したラインエッジの外観を提供する。
スペキュラウェットネス技術を例示するマトリックスの例を、以下の表4に示す。
Figure 0007263481000004
一部の実施形態では、ウェット中間物及び紙テクスチャ色に対してラプラス畳み込みマトリックスを使用して、隣接するピクセル輝度に基づき2次元ベクトルが作成される(例を表4に示す)。このベクトルの方向と大きさは、3次元ベクトル(ノーマル)を計算するために使用される。このベクトルは、さながらバンプマップのように使用され、光の3次元位置に基づくフォンシェードウェットネスの外観を作成する。
セグメント分離を使用した乗算ブレンド
中間物
一部の実施形態では、オーバーラップする線セグメントは、特定の手書き入力とともに提供される。例を以下の表5に示す。
Figure 0007263481000005
表5に示す例のため、図5BはNEW_SEGMENT、図5CはPREVIOUS_SEGMENT、及び図5DはDIFFと呼ぶ。一部の実施形態では、ドライ中間物がウェット中間物から受信されるように設計された特定のチャネルに新しいデータが書き込まれると、そのデータはNEW_SEGMENTとして示される。一部の実施形態では、上記の表5に示す式を利用して、DIFFが色アタッチメントの以前の状態にシームレスに追加できることを確実にし、それによって、エッジに沿って同じ一貫したアルファカバレッジを提供する(以下の表6に例を示す)。
Figure 0007263481000006
一部の実施形態では、ALPHA(5E)を表す中間物フレームバッファの色アタッチメントの単一チャネルに、DIFFが加えられクランプされる。
Figure 0007263481000007
一部の実施形態では、にじむ技術に供するために以下の式が使用される:BLEND=DIFFTARGET_MULTIPLIER+(1.0-DIFFTARGET_MULTIPLIER)PREVIOUS_BLEND。一部の実施形態では、表7の図5Fの緑要素がDIFFであり、赤要素がPREVIOUS_BLENDである。一部の実施形態では、DIFFがスカラー(TARGET_MULTIPLIER)によって乗算され、以前の状態のこの積の逆に加えられる。この結果は、乗算ブレンド状態を表す単一チャネルに書き込まれる。このプロセス範囲にわたる固有アルファのため、アルファは別のチャネルに保存される。
合成物
一部の実施形態では、画面に提示すべき合成物フレームバッファへのパスをレンダリングする要求がなされたとき、その作業が中間物パスで行われていたため、このタスクは従来のブレンドモード動作よりもはるかにささいなものであり、かつ、とりわけアルファを正確に保存する。他の方法では、予め乗算したアルファを取得し、高価で不正確な作業を行って予め反乗算のような方法を使用してアルファを抽出する。
RGB=mix(BASE_COLOR,BLACK,linearstep(TARGET_MULTIPLIER,1.0,BLEND))。
A=ALPHAPAPER_TEXTURE。
一部の実施形態では、図5Fからの結果がBLENDであり、図5Eの結果がALPHAである。一部の実施形態では、乗算ブレンドを生成するこれらの技術は、インクが紙にどのように反応するかをより厳密にシミュレートする。これは、単一のストローク内で連続して(セグメントごとに)、色アタッチメント内の全ての他のピクセルと同時に、動作する。
セグメント校合を使用した乗算ブレンド
一部の実施形態では、セグメント分離ブレンディングの豊富さ及び複雑さが、ライブ描画設定においてセグメントあたり1パスを必要とする場合がある一方、可能な限り少数のパスで全ての非ライブ描画データをレンダリングするより最適化された方法を必要とする少数の場合がある(Undo、Thumbnail、Recentsなど)。これらの場合、それらの以前のセグメントとのオーバーラップのみが既知である、できるだけ多くのセグメントを校合することが理想的である。
パスエンドポイントを判定するための衝突検出
Figure 0007263481000008
表8の上の図6Aは、最終的な合成物の例を示す。表8の図6Bは、図6Aのレンダリングに必要な一連のパスを示す。
一部の実施形態では、全てのセグメントが既知の場合、高速列挙を使用して各セグメントを調べ、現在のパス内の全てのセグメントとの2次元ベクトル交差を判定する(これは以前のラインから切り離されたセグメントを含む。このシステムは、完全なストロークの開始及び終了には不確かである。)。交差が判定されると、この頂点群は、最後のセグメントを終了点としてフラグを立てることによって単一パスとして示される。一部の実施形態では、図6Bの第2の形状において、第2の形状は第1の形状と交差するように見えるが、これらの技術は、交差が最後の交差以降に列挙されたベクトル内に達するまで交差を判定しない。
図24A~図24C、図26A及び図26B、並びに図28A及び図28Bを参照して上述した方法とともに使用される技術に関する追加の詳細はまた、参照により本明細書に組み込まれる、2016年6月12日に出願された米国仮出願第62/349,116号に提供される。したがって、米国仮出願第62/349,116号に提供された詳細は、本明細書で提供される詳細に対する補足として役立ち、図24A~図24C、図26A及び図26B、並びに図28A及び図28Bを参照して上記で提供された詳細のいずれかに、結合され置換られ得る。
一部の実施形態では、図29は、説明される様々な実施形態の原理に従って構成された、電子デバイス2900の機能ブロック図を示す。このデバイスの機能ブロックは、説明される様々な実施形態の原理を実行するために、ハードウェア、ソフトウェア、ファームウェア、又はそれらの組合せによって、任意選択的に実装される。図29で説明される機能ブロックが、説明される様々な実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックのあらゆる可能な組合せ若しくは分割、又は更なる定義を任意選択的に支持する。
図29に示されたように、電子デバイス2900は、ユーザインタフェースを表示するように構成されたディスプレイユニット2902、接触を受け取るように構成されたタッチ感知面ユニット2904、タッチ感知面ユニット2904との接触の強度を検出するための1つ以上のセンサユニット2906、及びディスプレイユニット2902、タッチ感知面ユニット2904及び1つ以上のセンサユニット2906に結合された処理ユニット2908とを含む。一部の実施形態では、処理ユニット2908は、入力検出ユニット2910、表示ユニット2912、選択受信ユニット2914、手書き入力表現出力ユニット2916、手書き入力受信ユニット2918、を含む。
処理ユニット2908は、タッチ感知面を介して第1の入力を検出し(例えば、入力検出ユニット2910を用いて)、ディスプレイ上で提示される第1の入力の検出に応じて、キーボード準備ユーザインタフェースを表示し(例えば、ディスプレイユニット2902とともに表示ユニット2912を用いて)、キーボード準備ユーザインタフェースを提示している間に、トレーニング文字の予め定義されたセットに対応する手書き入力を、タッチ感知面を介して受信し(例えば、手書き入力受信ユニット2918を用いて)、手書き入力を受信した後、メッセージ入力エリア、及び複数のキーであって(例えば、入力検出ユニット2910を用いて)、複数のキーのうちの第1のキーは、受信された手書き入力の第1の手書き入力に関連付けられる、複数のキーを含む仮想キーボードを含むメッセージユーザインタフェースを表示する要求に対応する第2の入力を検出し第2の入力の検出に応じて、メッセージ入力エリア、及び複数のキーを含む仮想キーボードを含むメッセージユーザインタフェースを表示し(例えば、表示ユニット2912を用いて)、タッチ感知面を介して第1のキーの選択を受信し(例えば、選択受信ユニット2914を用いて)、第1のキーの選択の受信に応じて、メッセージ入力エリア内の第1の手書き入力の表現を出力する(例えば、手書き入力表現出力ユニット2916を用いて)、ように構成されている。
一部の実施形態では、トレーニング文字の予め定義されたセットは、QWERTYキーボード上に表示された文字に対応する。
一部の実施形態では、仮想キーボードはQWERTYキーボードである。
一部の実施形態では、仮想キーボードは、キーを含むユーザ固有のキーボードであり、各キーは、受信された手書き入力の1つの表現を含む。
一部の実施形態では、第1の手書き入力の表現を出力することは、第1の手書き入力を受信している間に記録されたペースで、第1の手書き入力をレンダリングすることを含む。
一部の実施形態では、キーボード準備ユーザインタフェースは、第1の強調文字を含むトレーニング文字の予め定義されたセットを表示する第1の部分、及びトレーニング文字の予め定義されたセットのうちの1つ以上の文字であって、第2の強調文字を含む1つ以上の文字を表示する第2の部分、を含む。
一部の実施形態では、強調文字は、手書き入力を受信すると変化する。
上述の情報処理方法における動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述したように)又は特定用途向けチップなどの、情報処理機器内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図28A及び図28Bを参照して上述された動作は、図1A、図1B、又は図29に示される構成要素によって、任意選択的に実行される。例えば、一部の動作は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1の対応するイベント認識部180は、そのイベント情報を対応するイベント定義186に照会し、タッチ感知面上の第1の場所での第1の接触(又は、デバイスの回転)が、ユーザインタフェース上のオブジェクトの選択、又は1つの向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を、任意選択的に用いるか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示されるコンポーネントに基づいてどのように実施されるかは明らかであるだろう。
メッセージ記録内のコンテンツを選択的にスクランチする
図30A~図30Gは、一部の実施形態に係る、異なるタイプのコンテンツをメッセージアプリケーションに迅速に見出すための例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、以下に説明するプロセスを示すために使用される。以下の実施例のうちの一部は、タッチ画面ディスプレイ上の入力(タッチ感知面とディスプレイとが組み合わされている場合)を参照して説明されるが、一部の実施形態では、デバイスは、図4Bに示すように、ディスプレイ450とは別個のタッチ感知面451上で入力を検出する。説明の便宜上、タッチ感知ディスプレイシステム112を有するデバイス上で実行する動作を参照して以下に説明する実施形態を検討する。そのような実施形態では、フォーカスセレクタは、任意選択的に、それぞれの指又はスタイラスの接触、指又はスタイラスの接触に対応する代表的な点(例えば、それぞれの接触の重心又はそれぞれの接触に関連付けられた点)、又は、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の重心である。しかしながら、以下で論じるユーザインタフェースをフォーカスセレクタと一緒に表示している間、タッチ感知面451上の接触の検出に応じて、ディスプレイ450及び別個のタッチ感知面451を有するデバイス上で、類似の動作が任意選択的に実行される。
図30Aに示すように、一部の実施形態では、ユーザは、所望のコンテンツを容易に見出すためにコンテンツをスクラッチダウンすることによって、メッセージアプリケーション内の異なるタイプのコンテンツを迅速に見出すことができる。ユーザは、図30Aのジェスチャ3002を提供し、これに応じて、デバイスは、第1のコンテンツタイプを有するコンテンツを含むメッセージ領域の表示サイズを縮小(すなわち、スクランチ/スクイッシュダウン)する(例えば、テキストのみのコンテンツを含むメッセージ領域を、図30Bのメッセージ領域3003に対するコンテンツなどのサイズに縮小する)。一部の実施形態では、ユーザがジェスチャ(例えば、ジェスチャ3004はジェスチャ3002の続きであるが、一部の実施形態では、ジェスチャ3004はジェスチャ3002とは別個のジェスチャである)を提供し続けると、メッセージ領域は更にサイズが縮小する(図30Cで、メッセージ領域3003は更にサイズが縮小する)。
ユーザは、第1のコンテンツタイプ以外のコンテンツタイプの表示サイズを縮小する追加のジェスチャを直感的に提供する(又は単一のジェスチャを提供し続ける)ことができる。図30Dに示すように、ジェスチャ3006(図30C)に応じて、第2のコンテンツタイプ(例えば、絵文字を含むテキスト)を有するコンテンツアイテムが、縮小された表示サイズ(メッセージ領域3001など)で表示される。図30Eに示すように、ジェスチャ3008(図30D)に応じて、第3のコンテンツタイプ(例えば、テキストレンダリング効果を含むテキスト)を有するコンテンツアイテムが、縮小された表示サイズ(図30Eのメッセージ領域3009など)で表示される。図30Fに示すように、ジェスチャ3010に応じて、第4のコンテンツタイプ(例えば、画像及び地図オブジェクトなどのグラフィカルコンテンツ)を有するコンテンツアイテムが、縮小された表示サイズ(図30Fのメッセージ領域3005及び3011など)で表示される。
一部の実施形態では、ユーザはまた、デピンチジェスチャ(例えば、ジェスチャ3012)に応じて、メッセージユーザインタフェースの一部を迅速に拡大することができる。ジェスチャ3012の検出に応じて、デバイスは、メッセージ領域がそれぞれのデフォルトサイズに戻るまで、全てのコンテンツタイプ(図30F~図30G)の表示サイズを拡大させる。このようにして、ユーザは長い混乱した会話記録を通して漫然とスクロールすることなく、所望のコンテンツを容易に検索することができる(その代わりに、ユーザは、会話記録内のコンテンツアイテムの高レベルの概観を迅速に見られるように、コンテンツを簡単にスクランチダウンすることができ、いったん所望の情報が見出せると、ユーザは、コンテンツアイテムを拡大して、所望の情報及び所望の情報の周囲のメッセージ領域を見ることができる)。
図31A及び図31Bは、一部の実施形態に係る、メッセージアプリケーションにおいて、異なるタイプのコンテンツを迅速に見出すための方法3100を示すフロー図である。方法3100は、ディスプレイと、タッチ感知面とを有する電子デバイス(例えば、図3のデバイス300、又は、図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチ画面ディスプレイであり、タッチ感知面が、ディスプレイ上にあるか、ディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面から分離している。方法3100の一部の動作は、任意選択的に組み合わされ、及び/又は、一部の動作の順序が任意選択的に変えられる。
以下で説明するように、方法3100は、メッセージアプリケーション内の異なるタイプのコンテンツを見出すための直感的な方法を提供する。この方法は、ユーザが、簡単なジェスチャを使用してメッセージアプリケーション内のコンテンツの表示サイズを迅速に縮小することを可能にすることにより、より効率的な人間と機械のインタフェースを作り出し、それによって、ユーザは所望のコンテンツを迅速に見出すことができる(例えば、ユーザは、長時間前に受け取ったかもしれない、絵文字、写真、ビデオ、又は他のタイプのコンテンツを迅速に見出すために、全てのテキストのみコンテンツをスクロールダウンすることができる)。バッテリ駆動デバイスの場合、この方法は、電力を浪費せず、バッテリ充電の時間間隔を増大させるのに役立つ(例えば、ユーザに、非効率的でバッテリを消耗させる技術を使用させる代わりに、所望のコンテンツを迅速に見出すことを可能にするによって)。更に、ユーザが所望のコンテンツを迅速に見出すことを可能にすることは、ユーザが、潜在的に大規模で検索困難な会話記録内の所望のコンテンツを容易に見出すことを可能にすることにより、デバイスの操作性を向上させ、ユーザとデバイスのインタフェース(例えば、メッセージアプリケーション内の)をより効率的にする。ユーザは、会話記録内のページ及びコンテンツのページを通してスクロールする必要はなく、代わりに、所望のコンテンツが容易に見出せるように、直感的なジェスチャを簡単に提供してコンテンツを容易に縮小することができる。
デバイスは、ディスプレイ上に、複数のコンテンツアイテムを含むメッセージユーザインタフェースを表示する(3102)。一部の実施形態では、メッセージユーザインタフェースは、図30Aに示すように、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含む。一部の実施形態では、複数のコンテンツアイテムは、第1のコンテンツタイプを有するコンテンツアイテムを含む。例えば、第1のコンテンツタイプの各コンテンツアイテムは、テキストベースであり、絵文字又は他のテキストレンダリング効果(見えないインク効果又はプライベートメッセージとして、本明細書で言及もした、コンテンツアイテムに上のジェスチャに応じてテキストを出現又は消滅させるなど)を含まない。一部の実施形態では、第1のコンテンツタイプは、メッセージユーザインタフェースを介して送受信されたテキストのみのメッセージを含む。一部の実施形態では、コンテンツアイテムは、メッセージユーザインタフェース(例えば、単一のメッセージ領域又は吹き出し)に表示される単一のユーザインタフェース要素に含まれるコンテンツに対応する。メッセージ領域3003は、図30Aに示す、第1のコンテンツタイプのコンテンツを含むコンテンツアイテムの一例である。
一部の実施形態では、複数のコンテンツアイテムは、第1のコンテンツタイプとは別個の第2のコンテンツタイプを有するコンテンツアイテムを含む。例えば、第2のコンテンツタイプは、カメラ画像、スクリーンショット、地図オブジェクト、テキストレンダリング効果を有するオブジェクト、などのメッセージユーザインタフェースを介して送受信される絵文字又はグラフィックコンテンツなどの、テキストのみのコンテンツ以外のコンテンツを含むメッセージに対応する。一部の実施形態では、第2のコンテンツタイプを有するコンテンツアイテムは、テキスト及び絵文字を含むメッセージ領域(例えば、図30Aのメッセージ領域3001)を含む。以下でより詳細に説明するように、メッセージユーザインタフェースは、第3のコンテンツタイプ(例えば、図30Cのメッセージ領域3009に含まれるコンテンツ)、及び、第4のコンテンツタイプ(例えば、図30A及び30Dの、メッセージ領域3005に含まれるコンテンツ及び画像3011)を有するコンテンツアイテムも含んでもよい。
一部の実施形態では、複数のコンテンツアイテムのうちのそれぞれのコンテンツアイテムが、それぞれの第1のサイズで表示される。一部の実施形態では、各コンテンツアイテムは、それぞれのデフォルト表示サイズで表示される。一部の実施形態では、異なるデフォルトサイズは、コンテンツタイプに関連付けられる(例えば、絵及び他のグラフィカルコンテンツは、テキストのみのコンテンツアイテムとは異なるデフォルト表示サイズを有する)。
メッセージユーザインタフェースを表示している間(及び、一部の実施形態では、フォーカスセレクタがメッセージユーザインタフェース上にある間)、デバイスは、タッチ感知面を介して、第1の入力を検出する(3104)。一部の実施形態では、第1の入力(例えば、図30Aに示すジェスチャ3002などのピンチジェスチャの第1の部分)は、複数のコンテンツアイテム内のコンテンツアイテムの少なくとも一部に対して、表示サイズ(又は拡大レベル)を縮小する第1の要求に対応する。一部の実施形態では、第1の要求は、あるテキストのみのコンテンツがメッセージユーザインタフェース内(例えば、図30Aに示すメッセージ領域3003を含むテキストのみコンテンツを含むメッセージ領域)に表示されている間に、受信される。
第1の入力の検出に応じて、デバイスは、第2のコンテンツタイプを有するコンテンツアイテムをそれぞれの第1のサイズで表示し続ける間に、第1のコンテンツタイプを有する少なくとも一部のコンテンツアイテムの表示サイズを縮小する(3106)。一部の実施形態では、表示サイズを縮小することは、第1のコンテンツタイプを有する全てのコンテンツアイテムの表示サイズを縮小することを含む。一部の実施形態では、表示サイズを縮小することは、ディスプレイ上で現在見えている第1のコンテンツタイプを有するコンテンツアイテムのみの表示サイズを縮小することを含む(例えば、ディスプレイ上のメッセージユーザインタフェース内で見えるメッセージセッションの一部内で現在見えていない間は、第1のコンテンツタイプのアイテムは、表示サイズを縮小できる又は縮小できない場合がある)。図30Bに示すように、ジェスチャ3002に応じて、デバイスはメッセージ領域3003の表示サイズを縮小する(かつ、テキストのみコンテンツを含む他のメッセージ領域に対して)。
このようにして、ユーザは、第1のタイプ以外のタイプを有する他のコンテンツを迅速に検索するために、メッセージユーザインタフェース内の第1のタイプのコンテンツ(例えば、テキストのみのコンテンツ)を容易にスクランチ又はスキッシュダウンすることができる。例えば、ユーザは、ページ及びテキストのみのコンテンツのページを通してスクロールすることなく、所望の写真又はビデオを迅速に検索することができ、それによって、迅速、効率的かつ直観的に、所望の(テキストではない)コンテンツを見出すことができる。更に、一部の実施形態では、コンテンツがスキッシュダウンされた後、会話記録に表示されるタイムスタンプが容易に目に見え、従って、ユーザは、長い会話記録を通して迅速に検索して関連する期間を見出すことができる。他の実施形態では、任意の他のユーザインタフェースが前述の特徴を使用し得る。例えば、任意のユーザインタフェースは、ウェブブラウザユーザインタフェース(画像、テキスト、ビデオなどを含む)、電子ブックユーザインタフェース(テキスト、テキストに関連付けられた画像などを含む)、その他などの、様々なコンテンツタイプのコンテンツを含む。
一部の実施形態では、第1のコンテンツタイプを有する少なくとも一部のコンテンツアイテムの表示サイズを縮小するとともに、デバイスは触覚フィードバックを提供する(3108)。一部の実施形態では、コンテンツアイテムのうちのいずれかの表示サイズを縮小するときはいつでも、触覚フィードバックを提供する(ジェスチャが受信されたこと、又はジェスチャ/入力が「リーガル」であったことを示すために)(例えば、メッセージング吹き出しのいずれかのタイプがスクランチダウンされ、デバイスは触覚フィードバックを提供する)。
一部の実施形態では、表示サイズを縮小することは、第1の入力の特性(移動距離、ピンチジェスチャ内の指同士間の空間、接触の特性強度)が、第1のコンテンツタイプに関連付けられた第1の表示サイズ縮小基準を満足するという判定に従って、表示サイズを縮小することを含む(3110)。
一部の実施形態では、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小した後、デバイスは、タッチ感知面を介して、メッセージユーザインタフェースをスクロールする要求に対応する第2の入力を検出する(3112)。第2の入力の検出に応じて、デバイスは、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部を縮小された表示サイズで、及び第2のコンテンツタイプを有するコンテンツアイテムをそれぞれの第1のサイズで表示し続けながら、メッセージユーザインタフェースをスクロールする。このようにして、ユーザは、一部のコンテンツアイテムを縮小した表示サイズに保ちながら、所望のコンテンツを容易にスクロールして検索することができる(所望のコンテンツアイテムをより容易に見出すことを援助するために)。
一部の実施形態では、ユーザは、メッセージユーザインタフェース内でコンテンツの表示サイズをスクランチダウンするために、一連のジェスチャ又は1つの連続ジェスチャを提供することができる。例えば、ジェスチャ3004に応じて、デバイスは、第1のコンテンツタイプを有するコンテンツの表示サイズを縮小し続ける(例えば、メッセージ領域3003のサイズが図30Bのそのサイズに比べて更に縮小される)。
一部の実施形態では、デバイスは、第3の入力(例えば、図30Cに示すジェスチャ3006などのピンチジェスチャ又はその一部)を検出する(3114)。第3の入力の検出に応じて、デバイスは、第2のコンテンツタイプを有するコンテンツアイテムの表示サイズを縮小する。例えば、図30Dに示すように、図30Cに示すジェスチャ3006に応じて、第2のコンテンツタイプを有するコンテンツアイテムの表示サイズを縮小する(例えば、メッセージ領域3001がここで、ジェスチャ3008に従って縮小した表示サイズで表示される)。
一部の実施形態では、メッセージユーザインタフェースは、第3のコンテンツタイプを有するコンテンツアイテム(例えば、テキストレンダリング効果に関連付けられたテキストを含むメッセージ領域3009に含まれるコンテンツ)を含む。第1及び第2のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小した後、デバイスは、第4の入力(例えば、図30Dに示すジェスチャ3008などのピンチジェスチャ又はその一部)を検出する(3116)。第4の入力の検出に応じて、デバイスは、第3のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小する(例えば、図30Eに示すように、メッセージ領域3009の表示サイズが縮小される)。
一部の実施形態では、メッセージユーザインタフェースは、第4のコンテンツタイプを有するコンテンツアイテム(例えば、画像、地図オブジェクト、及び他のタイプのグラフィックコンテンツなどのグラフィックコンテンツを含むメッセージ領域)を含む。第1、第2、及び第3のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小した後、デバイスは、第5の入力(例えば、図30Eに示すジェスチャ3010などのピンチジェスチャ又はその一部)を検出する。第5の入力の検出に応じて、デバイスは、第4のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小する(例えば、図30Fに示すように、デバイスは、メッセージ領域3011(画像)及びメッセージ領域3005(地図オブジェクト)に含まれるコンテンツの表示サイズを縮小する)。
一部の実施形態では、第1、第2、第3、及び第4のコンテンツタイプのそれぞれを有する少なくとも一部のコンテンツアイテムの表示サイズを縮小することは、コンテンツタイプのそれぞれに割り当てられた階層的な順序(例えば、予め定義された重要度順)に基づいて実行される。換言すれば、一部の実施形態は、入力(例えば、ピンチジェスチャ又は単一のピンチジェスチャの一部)に応じて、相次いでスクランチダウンされる少なくとも4つの異なるコンテンツタイプを含む。例えば、テキストだけのメッセージングの吹き出しが最初にスクランチダウンされた後、絵文字を含むメッセージングの吹き出しがスクランチダウンされ、続いてテキストレンダリング効果(例えば、プライベートメッセージ)に関連付けられたメッセージングの吹き出しが、次いで会話記録に含まれた写真がスクランチダウンされる(一部の実施形態では、写真はメッセージングの吹き出しに含まれない)。
一部の実施形態では、デバイスは、新しい入力(例えば、図30Fのジェスチャ3012などの1つ以上のデピンチジェスチャ)を受信する。新しい入力の受信に応じて、デバイスは、第1のコンテンツタイプを有する少なくとも一部のコンテンツアイテムの表示サイズを、それぞれの第1のサイズに復帰させる(図30Gに示すように、第1(3003)、第2(3001)、及び第4(3005)のコンテンツタイプを有するコンテンツアイテムを含むメッセージ領域のサイズを、全てそれらのそれぞれの第1/デフォルトサイズに戻す)。一部の実施形態では、新しい入力を利用して、スクランチダウンされた任意のコンテンツアイテムの表示サイズを、それらのそれぞれの第1のサイズに復帰させることができる(例えば、図30-F~図30Gに示すように、デピンチジェスチャ3012を使用して、いくつのコンテンツタイプを有するコンテンツアイテムの表示サイズを迅速に拡大させる)。一部の実施形態では、ユーザは、デピンチジェスチャ3012を徐々に実行することができ、各コンテンツアイテムは、それぞれの各コンテンツタイプを、適切な時間にそれぞれの第1のサイズに復帰させる。
一部の実施形態では、方法3100(又は以下の方法3300)中の任意の時点で、新しいメッセージが受信された(次いで、メッセージユーザインタフェース内の新しいメッセージ領域内に表示された)場合、デバイスは、メッセージの吹き出しをそれぞれの第1のサイズで表示する(それをスクランチダウンしながら表示する代わりに)。このようにして、ユーザはなおも新しいメッセージを見ることができる。
図31A及び図31Bにおける動作が記載された特定の順序は単なる一例に過ぎず、記載された順序が動作が実行され得る唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。加えて、本明細書で説明される他の方法に関連して本明細書で説明される、他のプロセスの詳細もまた、上述された方法3100と類似の方式で適用可能であることに留意されたい。例えば、方法3100に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、図32は、説明される様々な実施形態の原理に従って構成された、電子デバイス3200の機能ブロック図を示す。このデバイスの機能ブロックは、説明される様々な実施形態の原理を実行するために、ハードウェア、ソフトウェア、ファームウェア、又はそれらの組合せによって、任意選択的に実装される。図32で説明される機能ブロックが、説明される様々な実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックのあらゆる可能な組合せ若しくは分割、又は更なる定義を任意選択的に支持する。
図32に示されたように、電子デバイス3200は、ユーザインタフェースを表示するように構成されたディスプレイユニット3202、接触を受け取るように構成されたタッチ感知面ユニット3204、タッチ感知面ユニット3204との接触強度を検出するための1つ以上のセンサユニット3206、並びにディスプレイユニット3202、タッチ感知面ユニット3204及び1つ以上のセンサユニット3206に結合された処理ユニット3208とを含む。一部の実施形態では、処理ユニット3208は、表示ユニット3210、入力検出ユニット3212、表示サイズ縮小ユニット3214、触覚フィードバック提供ユニット3216、及び表示サイズ復帰ユニット3218を含む。
処理ユニット3208は、複数のコンテンツアイテムを含むメッセージユーザインタフェースを、ディスプレイ(例えば、ディスプレイユニット3202)上に表示するように構成されている(例えば、表示ユニット3210を用いて)。一部の実施形態では、複数のコンテンツアイテムは第1のコンテンツタイプを有するコンテンツアイテムを含み、複数のコンテンツアイテムは第1のコンテンツタイプとは別個の第2のコンテンツタイプを有するコンテンツアイテムを含み、複数のコンテンツアイテム内のそれぞれのコンテンツアイテムはそれぞれの第1のサイズで表示される。メッセージユーザインタフェースを表示している間、処理ユニットは、タッチ感知面を介して第1の入力を検出し、第1の入力の検出に応じて、第2のコンテンツタイプを有するコンテンツアイテムをそれらのそれぞれの第1のサイズで表示しながら、第1のコンテンツを有する少なくとも一部のコンテンツアイテムの表示サイズを縮小する、ように構成されている。
電子デバイス3200の一部の実施形態によれば、処理ユニットは、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小した後、タッチ感知面を介して、メッセージユーザインタフェースをスクロールする要求に対応する第2の入力を検出し(例えば、入力検出ユニット3212を用いて)、第2の入力の検出に応じて、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部を縮小した表示サイズで、及び第2のコンテンツタイプを有するコンテンツアイテムをそれらのそれぞれの第1のサイズで表示し続けながら、メッセージユーザインタフェースをスクロールする(例えば、表示ユニット3210を用いて)、ように構成されている。
電子デバイス3200の一部の実施形態によれば、処理ユニットは、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小するとともに、触覚フィードバックを提供する(例えば、触覚フィードバック提供ユニット3216を用いて)、ように更に構成されている。
電子デバイス3200の一部の実施形態によれば、処理ユニットは、新しい入力を受信し、新しい入力の受信に応じて、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを、それぞれの第1のサイズに復帰させる(例えば、表示サイズ復帰ユニット3218を用いて)、ように更に構成されている。
電子デバイス3200の一部の実施形態によれば、表示サイズを縮小することは、第1の入力の特性が第1のコンテンツタイプに関連付けられた第1の表示サイズ縮小基準を満足するという判定に従って、表示サイズを縮小することを含む(例えば、表示サイズ縮小ユニット3214を用いて)。
電子デバイス3200の一部の実施形態によれば、処理ユニットは、第3の入力を検出し(例えば、入力検出ユニット3212を用いて)、第3の入力の検出に応じて、第2のコンテンツタイプを有するコンテンツアイテムの表示サイズを縮小する(例えば、表示サイズ縮小ユニット3214を用いて)、ように更に構成されている。
電子デバイス3200の一部の実施形態によれば、メッセージユーザインタフェースは、第3のコンテンツタイプを有するコンテンツアイテムを含み、処理ユニットは、第1及び第2のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小した後、第4の入力を検出し(例えば、入力検出ユニット3212を用いて)、第4の入力の検出に応じて、第3のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小する(例えば、表示サイズ縮小ユニット3214を用いて)、ように更に構成されている。
電子デバイス3200の一部の実施形態によれば、メッセージユーザインタフェースは第4のコンテンツタイプを有するコンテンツアイテムを含み、処理ユニットは、第1、第2、及び第3のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小した後、第5の入力を検出し(例えば、入力検出ユニット3212を用いて)、第5の入力の検出に応じて、第4のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小する(例えば、表示サイズ縮小ユニット3214を用いて)、ように更に構成されている。
電子デバイス3200の一部の実施形態によれば、第1、第2、第3及び第4のコンテンツタイプのうちのいずれかを有する少なくとも一部のコンテンツアイテムの表示サイズを縮小することは、コンテンツタイプのそれぞれに割り当てられた階層的な順序に基づいて実行される。
上述の情報処理方法における動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述したように)又は特定用途向けチップなどの、情報処理機器内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図31A及び図31Bを参照して上述された動作は、図1A、図1B、又は図32に示す構成要素によって、任意選択的に実行される。例えば、一部の動作は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1の対応するイベント認識部180は、そのイベント情報を対応するイベント定義186に照会し、タッチ感知面上の第1の場所での第1の接触(又は、デバイスの回転)が、ユーザインタフェース上のオブジェクトの選択、又は1つの向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を、任意選択的に用いるか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示されるコンポーネントに基づいてどのように実施されるかは明らかであるだろう。
図33A及び図33Bは、一部の実施形態に係る、メッセージアプリケーションにおいて、異なるタイプのコンテンツを迅速に見出すための方法3300を示すフロー図である。方法3300は、ディスプレイと、タッチ感知面とを有する電子デバイス(例えば、図3のデバイス300、又は、図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチ画面ディスプレイであり、タッチ感知面が、ディスプレイ上にあるか、ディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面から分離している。方法3300の一部の動作は、任意選択的に組み合わされ、及び/又は、一部の動作の順序が任意選択的に変えられる。
以下で説明するように、方法3300は、メッセージアプリケーション内の異なるタイプのコンテンツを見出すための直感的な方法を提供する。この方法は、ユーザが簡単なジェスチャを使用してメッセージアプリケーション内のコンテンツの表示サイズを迅速に縮小することを可能にすることにより、より効率的な人間と機械のインタフェースを作り出し、それによって、ユーザは所望のコンテンツを迅速に見出すことができる(例えば、ユーザは、長時間前に受け取ったかもしれない、絵文字、写真、ビデオ、又は他のタイプのコンテンツを迅速に見出すために、全てのテキストのみのコンテンツをスクロールダウンすることができる)。バッテリ駆動デバイスの場合、この方法は、電力を浪費せず、バッテリ充電の時間間隔を増大させるのに役立つ(例えば、ユーザに、非効率的でバッテリを消耗させる技術を使用させる代わりに、所望のコンテンツを迅速に見出すことを可能にするによって)。更に、ユーザが所望のコンテンツを迅速に見出すことを可能にすることは、ユーザが、潜在的に大規模で検索困難な会話記録内の所望のコンテンツを容易に見出すことを可能にすることにより、デバイスの操作性を向上させ、ユーザとデバイスのインタフェース(例えば、メッセージアプリケーション内の)をより効率的にする。例えば、ユーザは、会話記録においてページ及びコンテンツのページを通してスクロールする必要はなく、代わりに、所望のコンテンツが容易に見出せるように、直感的なジェスチャを単に提供してコンテンツを容易に縮小することができる。
デバイスは、ディスプレイ上に、複数のコンテンツアイテムを含むメッセージユーザインタフェースを表示する(3302)。一部の実施形態では、メッセージユーザインタフェースは、図30Aに示すように、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含む。一部の実施形態では、複数のコンテンツアイテムは、第1のコンテンツタイプを有するコンテンツアイテムを含む。例えば、第1のコンテンツタイプの各コンテンツアイテムは、テキストベースであり、いかなる絵文字も又は他のテキストレンダリング効果(見えないインク効果又はプライベートメッセージとして、本明細書で言及もした、コンテンツアイテム上のジェスチャに応じてテキストを出現又は消滅させるなど)を含まない。一部の実施形態では、第1のコンテンツタイプは、メッセージユーザインタフェースを介して送受信されるテキストのみのメッセージを含む。一部の実施形態では、コンテンツアイテムは、メッセージユーザインタフェースに表示される単一のUI要素に含まれるコンテンツ(例えば、単一のメッセージ領域又は吹き出し)に対応する。メッセージ領域3003は、図30Aに示す、第1のコンテンツタイプのコンテンツを含むコンテンツアイテムの一例である。
一部の実施形態では、複数のコンテンツアイテムは、第1のコンテンツタイプとは別個の第2のコンテンツタイプを有するコンテンツアイテムを含む。例えば、第2のコンテンツタイプは、カメラ画像、スクリーンショット、地図オブジェクト、テキストレンダリング効果を有するオブジェクト、などのメッセージユーザインタフェースを介して送受信される絵文字又はグラフィックコンテンツなどの、テキストのみのコンテンツ以外のコンテンツを含むメッセージに対応する。一部の実施形態では、第2のコンテンツタイプを有するコンテンツアイテムは、テキスト及び絵文字を含むメッセージ領域(例えば、図30Aのメッセージ領域3001)を含む。以下でより詳細に説明するように、メッセージユーザインタフェースは、第3のコンテンツタイプ(例えば、図30Cのメッセージ領域3009に含まれるコンテンツ)、及び、第4のコンテンツタイプ(例えば、図30A及び30Dの、メッセージ領域3005に含まれるコンテンツ及び画像3011)を有するコンテンツアイテムも含んでもよい。
一部の実施形態では、複数のコンテンツアイテムのそれぞれのコンテンツアイテムが、それぞれの第1のサイズで表示される。一部の実施形態では、各コンテンツアイテムは、それぞれのデフォルト表示サイズで表示される。一部の実施形態では、異なるデフォルトサイズは、コンテンツタイプに関連付けられる(例えば、絵及び他のグラフィカルコンテンツは、テキストのみのコンテンツアイテムとは異なるデフォルト表示サイズを有する)。
メッセージユーザインタフェースを表示している間(及び、一部の実施形態では、フォーカスセレクタがメッセージユーザインタフェース上にある間)、デバイスは、タッチ感知面を介して、第1の入力を検出する(3304)。一部の実施形態では、第1の入力(例えば、図30Aに示すジェスチャ3002などのピンチジェスチャの第1の部分)は、複数のコンテンツアイテム内のコンテンツアイテムの少なくとも一部に対して、表示サイズ(又は拡大レベル)を縮小する第1の要求に対応する。一部の実施形態では、第1の要求は、あるテキストのみのコンテンツがメッセージユーザインタフェース内(例えば、図30Aに示すメッセージ領域3003を含むテキストのみコンテンツを含むメッセージ領域)に表示されている間に、受信される。
第1の入力の検出に応じて、第1のコンテンツタイプを有する第1のコンテンツアイテムが、予め定義された第1の表示サイズ縮小率によるそれぞれの第1のサイズより小さいそれぞれの第2のサイズに縮小されるように、デバイスは、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小する(3306)(例えば、メッセージ領域3003に含まれるコンテンツが、図30Aの第1のサイズから図30Bの第2のサイズへ縮小される)。第1の入力の検出に応じて、第2のコンテンツタイプを有する第2のコンテンツアイテムが、予め定義された第2の表示サイズ縮小率によるそれぞれの第1のサイズより小さいそれぞれの第3のサイズに縮小されるように、デバイスはまた、第2のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小する(3306)(例えば、メッセージ領域3001に含まれるコンテンツが、図30Cの第1のサイズから図30Dの第2のサイズへ縮小される)。一部の実施形態では、メッセージ領域3001に対するサイズの縮小は、ジェスチャ3002及び/又は3004に応じて実行される。一部の実施形態では、予め定義された第2の表示サイズ縮小率は、予め定義された第1の表示サイズ縮小率よりも小さい。別の言い方をすれば、第1のコンテンツタイプを有するコンテンツアイテムは、第2のコンテンツタイプを有するコンテンツアイテムに対してより小さい表示サイズに縮小される(第1のコンテンツタイプを有するコンテンツアイテムは、第2のコンテンツを有するコンテンツアイテムよりもスクランチダウンされる)。一部の実施形態では、第2のコンテンツタイプを有するコンテンツアイテムは、サイズがわずかだけ縮小し、第2のコンテンツタイプを有するコンテンツアイテムが、追加の入力(例えば、追加のピンチジェスチャ)の提供によって、サイズが更に縮小され得るという視覚的手がかりを、ユーザに提供する。例えば、図30Dに示すように、テキストのみのコンテンツ(例えば、図30Dのメッセージ領域3003)を含むメッセージ領域は、テキストに追加してコンテンツを含むメッセージ領域(例えば、図30Dのメッセージ領域3001)よりもスクランチダウンされる。
図31Aを参照して上述した動作3308及び3310は、動作3108及び3110にそれぞれ対応する。従って、動作3108及び動作3110に関する上記の説明は、動作3308及び動作3310にも適用可能である。
一部の実施形態では、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部、及び第2のコンテンツタイプを有するコンテンツアイテムの少なくとも一部、の表示サイズを縮小した後、デバイスは、タッチ感知面を介して、メッセージユーザインタフェースをスクロールする要求に対応する第2の入力を検出する(3312)。第2の入力の検出に応じて、デバイスは、第1のコンテンツタイプを有するコンテンツアイテムの表示サイズをそれぞれの第2のサイズに、及び第2のコンテンツタイプを有するコンテンツアイテムをそれぞれの第3のサイズに保持しながら、メッセージユーザインタフェースをスクロールする。
一部の実施形態では、デバイスは第3の入力を検出し、これに応じて、デバイスは、第2のコンテンツタイプを有するコンテンツアイテムの表示サイズを更に縮小する(3314)(例えば、図30Eに示すように、デバイスは、ジェスチャ3008などの連続的な又は新しいピンチジェスチャに応じて、メッセージ領域3001とその中に含まれるものを、更に縮小する)。
動作3316、3318、3320、及び3322は、図31Aを参照して上述した動作3116、3118、3120、及び3122に、それぞれ対応する。このように、動作3116、3118、3120、及び3122に関する上記の説明は、動作3316、3318、3320、及び3322にも適用可能である。
図33A及び図33Bでの動作が説明されている特定の順序は、単なる一つの例示であり、説明される順序が、それらの動作を実行することが可能な唯一の順序であることを示すことを、意図するものではない点を理解されたい。当業者であれば、本明細書で説明される動作の順序換えをする様々な方法を認識するであろう。加えて、本明細書で説明される他の方法に関連して本明細書で説明される、他のプロセスの詳細もまた、上述された方法3300と類似の方式で適用可能であることに留意されたい。例えば、方法3300に関連して上述された、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書で説明される他の方法に関連して本明細書で説明される、接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションの特性のうちの1つ以上を有する。簡潔にするために、これらの詳細は、ここでは繰り返さない。
一部の実施形態では、図34は、説明される様々な実施形態の原理に従って構成された、電子デバイス3400の機能ブロック図を示す。このデバイスの機能ブロックは、説明される様々な実施形態の原理を実行するために、ハードウェア、ソフトウェア、ファームウェア、又はそれらの組合せによって、任意選択的に実装される。図34で説明される機能ブロックが、説明される様々な実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックのあらゆる可能な組合せ若しくは分割、又は更なる定義を任意選択的に支持する。
図34に示されたように、電子デバイス3400は、ユーザインタフェースを表示するように構成されたディスプレイユニット3402、接触を受け取るように構成されたタッチ感知面ユニット3404、タッチ感知面ユニット3404との接触の強度を検出するための1つ以上のセンサユニット3406、及びディスプレイユニット3402、タッチ感知面ユニット3404及び1つ以上のセンサユニット3406に結合された処理ユニット3408とを含む。一部の実施形態では、処理ユニット3408は、表示ユニット3410、入力検出ユニット3412、表示サイズ縮小ユニット3414、触覚フィードバック提供ユニット3416、及び表示サイズ復帰ユニット3418を含む。
処理ユニット3408は、複数のコンテンツアイテムを含むメッセージユーザインタフェースをディスプレイ(例えば、ディスプレイユニット3402)上に表示するように構成されている(例えば、表示ユニット3410を用いて)。一部の実施形態では、複数のコンテンツアイテムは第1のコンテンツタイプを有するコンテンツアイテムを含み、複数のコンテンツアイテムは第1のコンテンツタイプとは別個の第2のコンテンツタイプを有するコンテンツアイテムを含み、複数のコンテンツアイテム内のそれぞれのコンテンツアイテムはそれぞれの第1のサイズで表示される。メッセージユーザインタフェースを表示している間に、タッチ感知面を介して、第1の入力を検出し(例えば、入力検出ユニット3412を用いて)、第1の入力の検出に応じて、第1のコンテンツタイプを有する第1のコンテンツアイテムが予め定義された第1の表示サイズ縮小率によってそれぞれの第1のサイズよりも小さいそれぞれの第2のサイズに縮小されるように、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小し(例えば、表示サイズ縮小ユニット3414を用いて)、及び、第2のコンテンツタイプを有する第2のコンテンツアイテムが予め定義された第2の表示サイズ縮小率によってそれぞれの第1のサイズよりも小さいそれぞれの第3のサイズに縮小されるように、第2のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小する(例えば、表示サイズ縮小ユニット3414を用いて)。一部の実施形態では、予め定義された第2の表示サイズ縮小率は、予め定義された第1の表示サイズ縮小率よりも小さい。
電子デバイス3400の一部の実施形態によれば、処理ユニットは、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小した後、タッチ感知面を介して、メッセージユーザインタフェースをスクロールする要求に対応する第2の入力を検出し(例えば、入力検出ユニット3412を用いて)、第2の入力の検出に応じて、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部を縮小した表示サイズで、及び第2のコンテンツタイプを有するコンテンツアイテムをそれらのそれぞれの第1のサイズで表示し続けながら、メッセージユーザインタフェースをスクロールする(例えば、表示ユニット3410を用いて)、ように構成されている。
電子デバイス3400の一部の実施形態によれば、処理ユニットは、第3の入力を検出し(例えば、入力検出ユニット3412を用いて)、第3の入力の検出に応じて、第2のコンテンツタイプを有する各コンテンツアイテムの表示サイズを更に縮小する(例えば、表示サイズ縮小ユニット3414を用いて)、ように構成されている。
電子デバイス3400の一部の実施形態によれば、処理ユニットは、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小すると共に、触覚フィードバックを提供する(例えば、触覚フィードバック提供ユニット3416を用いて)、ように更に構成されている。
電子デバイス3400の一部の実施形態によれば、処理ユニットは、新しい入力を受信し、新しい入力の受信に応じて、第1のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを、それぞれの第1のサイズに復帰する(例えば、表示サイズ復帰ユニット3418を用いて)、ように更に構成されている。
電子デバイス3400の一部の実施形態によれば、表示サイズを縮小することは、第1の入力の特性が第1のコンテンツタイプに関連付けられた第1の表示サイズ縮小基準を満足するという判定に従って、表示サイズを縮小することを含む(例えば、表示サイズ縮小ユニット3414を用いて)。
電子デバイス3400の一部の実施形態によれば、処理ユニットは、第3の入力を検出し(例えば、入力検出ユニット3412を用いて)、第3の入力の検出に応じて、第2のコンテンツタイプを有するコンテンツアイテムの表示サイズを縮小する(例えば、表示サイズ縮小ユニット3414を用いて)、ように更に構成されている。
電子デバイス3400の一部の実施形態によれば、メッセージユーザインタフェースは、第3のコンテンツタイプを有するコンテンツアイテムを含み、処理ユニットは、第1及び第2のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小した後、第4の入力を検出し(例えば、入力検出ユニット3412を用いて)、第4の入力の検出に応じて、第3のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小する(例えば、表示サイズ縮小ユニット3414を用いて)、ように更に構成されている。
電子デバイス3400の一部の実施形態によれば、メッセージユーザインタフェースは第4のコンテンツタイプを有するコンテンツアイテムを含み、処理ユニットは、第1、第2、及び第3のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小した後、第5の入力を検出し(例えば、入力検出ユニット3412を用いて)、第5の入力の検出に応じて、第4のコンテンツタイプを有するコンテンツアイテムの少なくとも一部の表示サイズを縮小する(例えば、表示サイズ縮小ユニット3414を用いて)、ように更に構成されている。
電子デバイス3400の一部の実施形態によれば、第1、第2、第3及び第4のコンテンツタイプのうちのいずれかを有する少なくとも一部のコンテンツアイテムの表示サイズを縮小することは、コンテンツタイプのそれぞれに割り当てられた階層的な順序に基づいて実行される。
上述の情報処理方法における動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述したように)又は特定用途向けチップなどの、情報処理機器内の1つ以上の機能モジュールを稼働することによって、任意選択的に実行される。
図33A及び図33Bを参照して上述された動作は、図1A、図1B、又は図34に示される構成要素によって、任意選択的に実行される。例えば、一部の動作は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1の対応するイベント認識部180は、そのイベント情報を対応するイベント定義186に照会し、タッチ感知面上の第1の場所での第1の接触(又は、デバイスの回転)が、ユーザインタフェース上のオブジェクトの選択、又は1つの向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を、任意選択的に用いるか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、それぞれのGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示されるコンポーネントに基づいてどのように実施されるかは明らかであるだろう。
統合メッセージ
図35A~図35APは、一部の実施形態に係る、デジタルカメラをメッセージアプリケーションに統合するための例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図42A~図42Dのプロセスを含む、以下に記載するプロセスを例示するために使用される。説明の便宜のために、一部の実施形態は、タッチ感知ディスプレイシステム112を有するデバイスに対して実行される動作を参照して説明する。かかる実施形態では、フォーカスセレクタは、任意選択的に、それぞれの指又はスタイラス接触、指又はスタイラス接触に対応する代表点(例えば、各接触の重心又はそれぞれの接触に関連付けられた点)、あるいは、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の重心である。しかし、類似の動作は、任意選択的に、図面に示されたユーザインタフェースをフォーカスセレクタと共にディスプレイ450に表示している間に、タッチ感知面451上の接触を検出することに応じて、ディスプレイ450と別個のタッチ感知面451とを有するデバイス上で実行される。
図35A~図35W及び図35AL~図35APは、メッセージアプリケーションの例示的なユーザインタフェース3500を示す。このユーザインタフェースは、会話記録3503と、メッセージ入力エリア3502と、アプリケーション拡張アフォーダンス3702又は3つのアクティブ化可能なアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、アプリケーションアフォーダンス3508)のうちのいずれかと、デジタルキーボード3501又はデジタル画像トレイ3806のうちのいずれかと、を含み、デジタル画像トレイ3806は、関連付けられたデジタルカメラからのライブプレビュー画像3514(画像キャプチャアフォーダンス3516と、2つ以上の関連付けられたデジタルカメラ間でライブプレビュー画像を切り換えるためのカメラ切換アフォーダンス3505とを含fむ)と、以前キャプチャされたデジタル画像3518とを含んでいる。会話記録3503は、ポータブル多機能デバイス100のユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含んでいる。メッセージ記録に含まれる他の各ユーザは、アバターのスタック4002に表示されるアバター(例えば、「Abe」のアバター3510)によって表される。
図35X~図35AKは、任意選択的でメッセージアプリケーション内で操作される、デジタル画像を編集するための例示的なユーザインタフェース3509を示す。このユーザインタフェース3509は、デジタル画像3518-4の表示と、種々の編集モードを可能にする編集アフォーダンス(鉛筆アフォーダンス3552、拡大ルーペアフォーダンス3554、テキストアフォーダンス3556、及び手書きアフォーダンス3558)と、編集アフォーダンスツールの色を設定するための色選択アフォーダンス3548と、デジタル画像上に作成された線、テキスト、又は手書きのサイズを設定するためのサイズ選択アフォーダンス3550と、デジタル画像の編集を取り消すための取消しアフォーダンス3549と、デジタル画像の編集を保存するための保存アフォーダンス3551と、を含んでいる。
図35A~図35Iは、デジタル画像をキャプチャし、メッセージアプリケーションを離れることなく、キャプチャされた画像をメッセージ記録(例えば、メッセージセッション)に投稿するための2つの例示的な実施形態を示す。双方の実施形態では、図35Bの接触3512によるデジタル画像アフォーダンス3504のアクティブ化を検出することによって、図35Aに示すような、メッセージ記録3503及びキーボード3501を表示するメッセージユーザインタフェースにおいて、デジタルカメラがアクセスされる。これに応じて、デジタル画像トレイ3806が、図35C及び図35Hで、デジタルキーボード3501に取って代わる。
第1の実施形態では、デバイス100は、図35Dの画像キャプチャアフォーダンス3516上の接触3512を含むタップジェスチャを検出する。これに応じて、デバイス100は、ライブプレビュー画像3514をキャプチャして、デジタル画像3518-5を生成し、更に、図35Eのメッセージ入力エリア3502に画像(例えば、画像の表現)を配置するが、このエリアは、画像をおさめるために拡張する。次に、デバイスは、図35Fのメッセージコンテンツ投稿アフォーダンス3520上の接触3522を含むタップジェスチャを検出する。これに応じて、デバイス100は、キャプチャされたデジタル画像3518-5をメッセージセッションに投稿し、図35Gの会話記録3503に画像を表示する。
第2の実施形態では、デバイス100は、図35Hの画像キャプチャアフォーダンス3516上の接触3524を含む押圧ジェスチャを検出する。続いて、デバイス100は、予め定義された強度閾値(例えば、IT又はIT)を超える接触3524の強度の増加を検出し、これに応じて、ライブプレビュー画像3514をキャプチャし、図35Iのデジタル画像3518-5を生成する。接触3512の強度が予め定義された強度閾値を超えて増加しなかった第1の実施形態とは対照的に、接触3516の強度が予め定義された強度閾値に到達したため、デバイス100は、キャプチャされたデジタル画像3518-5をメッセージセッションに直接投稿し、図35Iの会話記録3503に画像を表示する。
図35J~図35Oは、メッセージが、投稿されたデジタル画像に関連付けられた例示的な実施形態を示す。デバイス100は、図35Jの画像キャプチャアフォーダンス3516上の接触3526を含むタップジェスチャを検出する。これに応じて、デバイス100は、ライブプレビュー画像3514をキャプチャして、デジタル画像3518-5を生成し、更に、図35Kのメッセージ入力エリア3502に画像(例えば、画像の表現)を配置するが、このエリアは、画像をおさめるために拡張した。次に、デバイスは、図35Lのメッセージ入力エリア3502内の接触3528を含むタップジェスチャを検出する。これに応じて、デバイス100は、デジタル画像トレイ3806の表示をデジタルキーボード3501に置き換え、更にメッセージをおさめるために、メッセージ入力エリア3502を拡張して、図35Mのテキストカーソル3842を表示する。デバイス100はまた、メッセージ3530の入力を検出し、図35Mのキャプチャされたデジタル画像3518-5と共に、メッセージをメッセージ入力エリア3502に表示する。次に、デバイスは、図35Nのメッセージコンテンツ投稿アフォーダンス3520上の接触3532を含むタップジェスチャを検出する。これに応じて、デバイス100は、キャプチャされたデジタル画像3518-5及びメッセージ3530をメッセージセッションに投稿し、図35Oの会話記録3503内のメッセージ領域3534に、画像及びメッセージを表示する。メッセージ3530は、画像3518-5と同時にメッセージ入力エリア3502から投稿されたので、メッセージ領域3534は、図35Oの画像3518-5と重なって表示される。
図35P及び図35Qは、スワイプジェスチャが追加のデジタル画像を顕示化する例示的な実施形態を示す。デバイス100は、図35Pの位置3536-aから図35Qの位置3536-bまでの接触3536の左方への移動3538を含むスワイプジェスチャを検出する。これに応じて、デバイスは、移動3538に従って、デジタル画像トレイ3806を左方に移動させ、ライブプレビュー画像3514が、タッチスクリーン112の左側からスライドして消え、追加のデジタル画像3518-6及び3518-7が、図35Qで、タッチスクリーン112の右側からディスプレイ上にスライドして現れる外観を生成する。
図35R~図35Vは、以前にキャプチャされたデジタル画像がプレビューされ、メッセージセッションに投稿される2つの例示的な実施形態を示す。
第1の実施形態では、デバイス100は、図35Rにおいて、以前にキャプチャされたデジタル画像3518-4上の接触3540を含む押圧ジェスチャを検出する。次に、デバイス100は、第1の予め定義された強度閾値(例えば、IT)を超える接触3540の強度の増加を検出し、これに応じて、画像3518-4の拡大されたプレビュー3507を、図35Sのデジタル画像トレイ3806及び会話記録3503の一部の上に表示する。続いて、デバイスは接触3540の強度の減少を検出し、これに応じて、拡大プレビュー3507の表示を図35Tで停止する。
第2の実施形態では、デバイス100は、以前にキャプチャされたデジタル画像3518-4上の接触3544と、それに続く図35Uの第1の予め定義された強度閾値(例えば、IT)を超える接触3540の強度の増加とを含む押圧ジェスチャを検出する。これに応じて、デバイスは、図35Uのデジタル画像トレイ3806及び会話記録3503の一部の上に、画像3518-4の拡大プレビュー3507を表示する。次いで、デバイスは、第2の予め定義された強度閾値(例えば、IT)を超える接触3540の強度のさらなる増加を検出し、これに応じて、図35Vのメッセージ入力エリア3502にこの画像を配置する。以前にキャプチャされたデジタル画像3518-4は、メッセージコンテンツ投稿アフォーダンス3520をアクティブ化する入力(例えば、タップジェスチャ)の検出時に、メッセージセッションに投稿されてもよい。
図35W~図35ANは、メッセージセッションに画像を投稿する前にデジタル画像が編集される例示的な実施形態を示す。デバイス100は、図35Wのメッセージ入力エリア3502に画像が表示されている間に、デジタル画像3518-4上の接触3546を含むタップジェスチャを検出する。これに応じて、デバイスは画像編集ユーザインタフェース3509を開き、図35Xのデジタル画像3518-4の編集可能な表現3518-4aを表示する。
本デバイスは、図35Yの鉛筆アフォーダンス3552のアクティブ化と図35Zの口髭3562の描画とを検出する。次に、デバイスは、図35AAの拡大ルーペアフォーダンス3554のアクティブ化と、図35ABの拡大ルーペ3566の配置を検出する。ルーペ3566の倍率は、図35ACの位置3568-aから図35ADの位置3568-bへのタブ3568の移動3572によって増加する。ルーペ3566のサイズは、図35AEの位置3570-aから図35AFの位置3570-bへのタブ3570の移動3574によって増加する。続いて、デバイスは、図35AGのテキストアフォーダンス3556のアクティブ化と、図35AHのテキスト3578の入力とを検出する。次に、デバイスは、図35AIの手書きアフォーダンス3558のアクティブ化と、図35AJの手書き3582の入力とを検出する。
続いて、デバイスは、図35AKの保存アフォーダンス3551上の接触3586を含むタップジェスチャを検出する。これに応じて、デバイスはメッセージユーザインタフェース3500に戻り、編集されたデジタル画像3518-4aを図35ALのメッセージ入力エリア3502に表示する。次に、デバイスは、図35AMのメッセージコンテンツ投稿アフォーダンス3520上の接触3588を含むタップジェスチャを検出する。これに応じて、デバイス100は、編集されたデジタル画像3518-4aをメッセージセッションに投稿し、図35ANの会話記録3503に画像を表示する。
図35AO~図35APは、以前にキャプチャされたデジタル画像がプレビューされ、メッセージセッションに投稿される第3の例示的な実施形態を示す。デバイス100は、以前にキャプチャされたデジタル画像3518-4上の接触3590を含む押圧ジェスチャを検出し、次に図35AOの第1の予め定義された強度閾値(例えば、IT)を超える接触3590の強度の増加を検出する。これに応じて、図35AUにおいて、デバイスは、デジタル画像トレイ3806及び会話記録3503の一部の上に、画像3518-4の拡大プレビュー3507を表示する。続いて、デバイスは、第2の予め定義された強度閾値(例えば、IT)を超える接触3590の強度のさらなる増加を検出し、これに応じて、以前にキャプチャされたデジタル画像3518-4をメッセージセッションに直接投稿し、図35APの会話記録3503に画像を表示する。
図36A~図36ALは、一部の実施形態に係る、検索機能を統合して、リッチコンテンツをメッセージアプリケーションに投稿するための例示的なユーザインタフェースを例示する。これらの図におけるユーザインタフェースは、図44A~図44Dのプロセスを含む、以下に説明するプロセスを例示するために使用される。説明の便宜のために、一部の実施形態は、タッチ感知ディスプレイシステム112を有するデバイスに対して実行される動作を参照して説明する。かかる実施形態では、フォーカスセレクタは、任意選択的に、それぞれの指又はスタイラス接触、指又はスタイラス接触に対応する代表点(例えば、それぞれの接触の重心又はそれぞれの接触に関連付けられた点)、あるいは、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の重心である。しかし、類似の動作は、任意選択的に、図面に示されたユーザインタフェースをフォーカスセレクタと共にディスプレイ450に表示する間に、タッチ感知面451上の接触を検出したことに応じて、ディスプレイ450と別個のタッチ感知面451とを有するデバイス上で実行される。
図36A~図36Vは、メッセージアプリケーションの例示的なユーザインタフェース3500を示す。このユーザインタフェースは、会話記録3503と、メッセージ入力エリア3502と、アプリケーション拡張アフォーダンス3702又は3つのアクティブ化可能なアフォーダンス(デジタル画像アフォーダンス3504、検索アフォーダンス3602、及びアプリケーションアフォーダンス3508)のうちのいずれかと、任意選択的に、デジタルキーボード3501又は検索トレイ3629のうちのいずれかと、を含み、検索トレイ3629は、会話記録3503に対応するメッセージセッションに投稿され得るコンテンツ(例えば、3606,3608、及び3610)を含んでいる。会話記録3503は、ポータブル多機能デバイス100のユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージ及びコンテンツを含んでいる。メッセージ記録に含まれる他の各ユーザは、アバターのスタック4002に表示されるアバター(例えば、「Abe」のアバター3510)によって表される。
図36A~図36Sは、メッセージアプリケーションを離れることなく、電子デバイスに記憶されたマルチメディアコンテンツ及び/又はデバイス上で最近アクセスされたマルチメディアコンテンツを投稿するための2つの例示的な実施形態を示す。マルチメディアコンテンツは、図36Bの接触3604による検索アフォーダンス3602のアクティブ化を検出することによって、図36Aに示すような、メッセージ記録3503及びキーボード3501を表示するメッセージユーザインタフェースでアクセスされる。これに応じて、デバイス上で最近アクセスされたマルチメディアコンテンツ(デジタル録音3606、ソーシャルメディアエントリ3608、及びデジタル画像3610)を含む検索トレイ3629が、図36Cで、デジタルキーボード3501に取って代わる。
第1の実施形態では、デバイス100-1は、図36Dのデジタル録音上の接触3614を含むタップジェスチャの検出に応じて、図36Eのメッセージ入力エリア3502にデジタル録音3606を配置する。図36Fのメッセージコンテンツ投稿アフォーダンス3520上の接触3618を含むタップジェスチャの検出に応じて、デバイス100-1は、メッセージセッションにデジタル録音を投稿し、この記録を図36Gの会話記録3503に表示する。
図36Hに示すような、会話記録3503に対応するメッセージセッションに含まれる第2のユーザに対応するデバイス100-2は、図36Iのデジタル録音3616を受信する。図36Jの接触3622を含むデジタル録音3616上のタップジェスチャの検出に応じて、デバイス100-2は、図36Kで音波3624によって示されるように、デジタル録音を再生する。
第2の実施形態は、更に、スワイプジェスチャが最近デバイスによってアクセスされた追加のマルチメディアコンテンツを顕示化する例示的な実施形態を示す。デバイス100-1は、図36Lの位置3626-aから図36Mの位置3626-bまでの接触3626の左方への移動3628を含むスワイプジェスチャを検出する。これに応じて、デバイスは、移動3628に従って、検索トレイ3629を左方に移動させ、その結果、ソーシャルメディアエントリ3608は、タッチスクリーン112の左側からスライドして消え、追加のマルチメディアコンテンツ(ニュース記事3628及び映画プレビュー3630)が、図36Mで、タッチスクリーン112の右側からディスプレイ上にスライドして現れる外観を生成する。
デバイス100-1は、図36Nにおいて、デバイス100-1によって以前アクセスされたウェブページに関連するニュース記事3628上の接触3632を含む押圧ジェスチャを検出する。次に、デバイス100は、予め定義された強度閾値(例えば、ITL又はITD)を超える接触3632の強度の増加を検出し、これに応じて、記事に関連付けられた画像、ウェブサイトに関連付けられた組織(「Washington Gazette」)、及びニュース記事のタイトル(「Fireball in Wisconsin」)を含むニュース記事の表現3634をメッセージセッションに直接投稿し、図36Oの会話記録3503に表現3634を表示する。
図36P~図36Sは、インターネットのコンテンツがメッセージユーザインタフェース内からアクセスされる例示的な実施形態を示す。デバイス100-1は、図36Pで会話記録3503に表示されたニュース記事3634上の接触3636を含むタップジェスチャを検出する。これに応じて、デバイス100-1は、図36Qで、検索トレイ3629及び会話記録3503の一部の上に表示されたエリア3638内のニュース記事に関連付けられたウェブページにアクセスする。続いて、図36Rの位置3640-aから図36Sの位置3640-bまでの接触3640の移動3642を含むスワイプジェスチャの検出に応じて、デバイス100-1は、ウェブサイトからこのニュース記事のより多くをエリア3638に表示する。
図36T~図36Vは、インターネット上のマルチメディアコンテンツがメッセージユーザインタフェース内から検索される例示的な実施形態を示す。デバイス100-1は、図36Tの検索入力エリア3612上の接触3644を含むタップジェスチャの検出に応じて検索を開始する。これに応じて、デバイスは、図36Uで検索トレイ3629をデジタルキーボード3501に置き換える。次に、デバイス100-1は、図36Uで検索語3646(「Meteorite(隕石)」)の入力を検出する。これに応じて、図36Vでデジタルキーボード3501は、インターネットのコンテンツ(ニュース記事3628、写真3648、及びウィキページ3650)を含む検索トレイ3629に置き換えられる。
図36W~図36ALは、マルチメディアコンテンツが検索されて、メッセージアプリケーション内で実行される検索ユーザインタフェースからメッセージセッションに投稿される2つの例示的な実施形態を示す。図36Wは、会話記録3503と、メッセージ入力エリア3502と、アクティブ化可能な3つのアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508)と、デジタルキーボード3501と、を含むメッセージアプリケーションに関する例示的なユーザインタフェース3500を示す。
デバイス100-1は、図36Xでアプリケーションアフォーダンス3508上の接触3652を含むタップジェスチャを検出する。これに応じて、デジタルキーボード3501は、図36Yにおいて、メッセージアプリケーション内で動作可能なアプリケーションのための起動アイコン3601,3603,3605,3607,3609,3611,3613,及び3615を含むアプリケーション選択トレイ3654に置き換えられる。図36Zで、接触3656を含むタップジェスチャによる検索アプリケーションの起動アイコン3607のアクティブ化に応じて、デバイスは、図36AA及び図36ADで、メッセージユーザインタフェース3500の表示をデフォルト検索ユーザインタフェース3658に置き換える。
第1の実施形態では、デフォルト検索ユーザインタフェース3658は、デバイス100-1に関連する推奨コンテンツ(場所3662、公開ウェブページのニュース記事3664、デジタル録音3666、最近共有されたニュース記事3668、インターネットから最近共有された映画予告編3670、最近共有されたデジタル画像3672)を図36AAに表示する。図36ABの接触3674を含むタップジェスチャによる映画予告編3670の選択に応じて、デバイスは、図36ACのメッセージユーザインタフェース3500に切り換えて戻り、映画予告編3670をメッセージセッションに投稿して、この予告編を会話記録3503に表示する。
第2の実施形態では、メッセージ検索ユーザインタフェース内の検索によってアクセスされたインターネットのコンテンツが、メッセージアプリケーションを離れることなくメッセージセッションに投稿される。デバイス100-1は、図36ADで、デフォルト検索ユーザインタフェース3658の検索入力エリア3660上の接触3676を含むタップジェスチャを検出する。これに応じて、図36AEで、デバイスは、インターネット上の推奨コンテンツのトレンド(デジタル録音3678及び3680、並びにニュース記事3668及び3669)を含むトレンド検索ユーザインタフェース3659、及びデジタルキーボード3501を表示する。図36AFにおいて、検索語「Meteorites(隕石)」の入力を受信したことに応じて、デバイスは、「meteorites」に関連するインターネットのマルチメディアコンテンツ(ニュース記事3664,3678、及び3680、並びに映画予告編3670,3682、及び3684)と、検索結果の特定のカテゴリについて検索結果をフィルタリングするためのカテゴリフィルタアフォーダンス3617,3619,3621,3623、及び3625を含む検索結果ユーザインタフェース3661と、を表示する。
追加の検索結果は、図36AGの位置3686-aから図36AHの位置3686-bまでの接触3686の左方への移動3688を含むスワイプジェスチャをデバイス100-1が検出したことに応じて、表示される。これに応じて、図36AHで、デバイスは、移動3688に従って、映画予告編検索結果3670,3682及び3684を左方に移動させ、映画予告編3670が、タッチスクリーン112の左側からスライドして消え、追加の映画予告編3688が、タッチスクリーン112の右側からディスプレイ上にスライドして現れる外観を生成する。
図36AIの接触3690を含むタップジェスチャの検出による映画予告編3684の選択に応じて、図36AJで、デバイス100-1は、メッセージユーザインタフェース3500に切り換えて戻り、映画予告編3684を拡張メッセージ入力エリア3502のエリア3692に配置するが、このエリアは映画予告編384の選択を取り消すための取消アイコン3694を含んでいる。次に、映画予告編3684は、図36AKでメッセージコンテンツ投稿アフォーダンス3520上の接触3696を含むタップジェスチャの検出に応じて、メッセージセッションに投稿される。次に、映画予告編3684は、図36ALで会話記録3503に表示される。
図37A~図37DJは、一部の実施形態に係る、メッセージアプリケーションにおける対話型アプリケーションを統合するための例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図46A~図46C、図48A~図48D、図50A~図50C、図52A~図52C、図54A~図54C、図56A~図56B、及び図58のプロセスを含む、以下に説明するプロセスを示すために使用される。説明の便宜のために、一部の実施形態は、タッチ感知ディスプレイシステム112を有するデバイスに対して実行される動作を参照して説明する。かかる実施形態では、フォーカスセレクタは、任意選択的に、それぞれの指又はスタイラス接触、指又はスタイラス接触に対応する代表点(例えば、それぞれの接触の重心又はそれぞれの接触に関連付けられた点)、あるいは、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の重心である。しかし、類似の動作は、任意選択的に、図面に示されたユーザインタフェースをフォーカスセレクタと共にディスプレイ450に表示する間に、タッチ感知面451上の接触を検出したことに応じて、ディスプレイ450と別個のタッチ感知面451とを有するデバイス上で実行される。
図37A~図37DJは、「Andrew」によって操作される例示的な電子デバイス100-1と、「Abe」によって操作される電子デバイス100-2とを示す。デバイス100-1及び100-2上のユーザインタフェースはタイムスタンプ404を含み、特定の時刻に行われた一方のデバイスに対する入力を、他方のデバイスに対するその入力の影響と適合させることができる。例えば、図37AX及び図37AYにおいて、デバイス100-1上で、午前9時34分に、三目並べ(tic-tac-toe)のユーザインタフェース3782に「O」3792を配置することが、図37BFで、午前9時34分に、三目並べの通知3703及び三目並べのアプリケーションオブジェクト3705をデバイス100-2上の会話記録3700に表示することに対応する。
図37A~図37AMは、メッセージアプリケーション内で動作する対話型予約アプリケーションの例示的な実施形態を示す。対話型アプリケーションの動作は、メッセンジャユーザインタフェースの表示に取って代わる全画面アプリケーションユーザインタフェースの表示を含み、メッセージセッションに含まれるユーザが、会話記録に表示されたアプリケーションオブジェクトを介して、この全画面アプリケーションユーザインタフェースにアクセスすることができる。
図37A及び図37Jは、それぞれ、デバイス100-1及び100-2上のメッセージアプリケーションの例示的なユーザインタフェース3500を示す。ユーザインタフェース3500は、会話記録3700と、メッセージ入力エリア3502と、アプリケーション拡張アフォーダンス3702又は3つのアクティブ化可能なアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508)のうちのいずれかと、任意選択的に、メッセージをメッセージ入力エリア3502に入力するためのデジタルキーボード3501、アプリケーション選択トレイ3654、及びアプリケーションスワイプトレイ3892のうちの1つと、を含んでいる。会話記録3700は、特定のポータブル多機能デバイスのユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含む。メッセージ記録に含まれる他の各ユーザは、アバター(例えば、「Abe」のアバター3510、及び「Andrew」のアバター3511)によって表される。
図37A~図37Gは、予約を行うための対話型アプリケーションのアクティブ化を示す。デバイス100-1が、図37Bでアプリケーション拡張アフォーダンス3702上の接触3704を含むタップジェスチャを検出したことに応じて、アプリケーション拡張アフォーダンス3702は、図37Cで、3つのアクティブ化可能なアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、アプリケーションアフォーダンス3508)を表示するように拡張される。続いて、図37Dのアプリケーションアフォーダンス3508上の接触3706を含むタップジェスチャの検出に応じて、デバイスは、図37Eでアプリケーションスワイプトレイ3892を表示する。アプリケーションスワイプトレイ3892は、対話型予約アプリケーションの起動アイコン3708と、アプリケーションスワイプトレイ3892とアプリケーション選択トレイ3654とを切り換えるためのアプリケーションメニュートグルアフォーダンス3627とを含んでいる。
対話型予約アプリケーションは、図37Fの予約起動アイコン3708上の接触3710を含むタップジェスチャをデバイスが検出すると、図37Gにおいて、メッセージアプリケーション内で起動される。起動時に、デバイスは、付近を検索する場所を選択する入力アフォーダンス3720と、検索のパラメータを設定する3722-1及び3722-2と、検索を実行する3718と、予約を選択する3724と、を含む予約アプリケーションのユーザインタフェース3712を表示する。ユーザインタフェースはまた、予約を選択せずにユーザインタフェースを閉じる取消しアフォーダンス3714を含む。
図37H~図37ACは、対話型予約アプリケーションを使用する予約の選択及び変更を示す。デバイス100-1は、午前9時27分に図37Hの予約アフォーダンス3724-1上の接触3726を含むタップジェスチャによる「午後6時45分にJoe's Bistro」の予約の選択を検出する。これに応じて、デバイスは、予約アプリケーションユーザインタフェース3712の表示をメッセージユーザインタフェース3500に置き換える。デバイス100-1はまた、予約アプリケーションオブジェクト3728を表示するが、このオブジェクトには、会話記録3700の右側に、予約がデバイス100-1によって最初に行われたことを示す(この予約はJoe's Bistroでの午後6時45分における2人分であるとの)予約に関する情報が表示される。
デバイス100-1はまた、予約アプリケーションにおいて予約が行われたという情報をデバイス100-2に送信する。デバイス100-2は、デバイス100-1から送信された情報の受信に応じて、対応する会話記録3700の左側に対応する予約アプリケーションオブジェクト3728を表示し、別のデバイスが最初に予約を行ったことを示す。予約アプリケーションオブジェクトは、オブジェクトが予約アプリケーションに関連付けられていることのインジケーション3730を含んでいる。デバイス100-2は、図37Lで、メッセージ入力エリア3502上の接触3732を含むタップジェスチャに応じて、図37Mで、デジタルキーボード3501を表示する。次に、本デバイスは、デジタルキーボード3501からの入力を受信して、図37Nで、メッセージ投稿アフォーダンス3502上の接触3734を含むタップジェスチャを検出したことに応じて、図37Oの会話記録3700に表示されているように、予約時間がAndrewにとって不都合であることを示すメッセージ3736をメッセージセッションに投稿する。
続いて、デバイス100-2は、図37Pの会話記録3700内の場所3728-aに表示された予約アプリケーションオブジェクト3728上の接触3738を含むタップジェスチャによる予約アプリケーションセッションのアクティブ化を検出する。アクティブ化に応じて、本デバイスは図37Qの予約ユーザインタフェース3712を表示する。ユーザインタフェースは、予約の時間、利用者の数、又は場所を変更する入力アフォーダンス3740-1,3740-2及び3742を含んでいる。予約ユーザインタフェース3712はまた、メッセージユーザインタフェース3500に表示されたメッセージ入力エリア3501とは別個のメッセージ入力エリア3716を含む。予約ユーザインタフェース3712はまた、メッセージセッションに含まれる他のユーザに対応するAndrewのアバター3511を含む。予約ユーザインタフェース3712はまた、メッセージユーザインタフェースに戻るための終了アフォーダンス3714を含む。
デバイス100-2は、図37Rで、接触3744を含むメッセージ入力エリア3716内のタップジェスチャを検出し、図37Sのデジタルキーボード3501をアクティブ化する。本デバイスは、8時の予約が問題ないかどうかを尋ねる図37Tのメッセージ3746の入力と、図37Uの接触3748を含むタップジェスチャによる、メッセージをメッセージセッションに投稿する要求とを受信する。これに応じて、デバイスは、午前9時29分にメッセージをメッセージセッションに投稿し、図37Vでデジタルキーボード3501の表示を停止する。対応するデバイス100-1は、メッセージ3746を受信し、それを図37AEの会話記録に表示する。
デバイス100-1は、メッセージ入力エリア3502上で、図37AFの接触3758を含むタップジェスチャに応じて、図37AGでデジタルキーボード3501を表示する。続いて、本デバイスは、図37AHのメッセージ入力エリア3502に返信メッセージ3750の入力を受信するが、これは8:00の予約が問題ないことを示している。このメッセージは、図37AJの会話記録3700内に表示されるように、図37AIのメッセージ投稿アフォーダンス3520上の接触3760を含むタップジェスチャによって、午前9時30分にメッセージセッションに投稿される。
デバイス100-2は、午前9時30分に返信メッセージ3750を受信し、一時的にそれを図37Wの予約ユーザインタフェース3712内に表示する。次に、本デバイスは、予約時間を午後8時に変更するタップ入力を受信する。第1のタップ入力は、図37Xの入力アフォーダンス3740-1上の接触3752を含んで、本デバイスに入力アフォーダンス3740-1のドロップダウンメニューを図37Yに表示させ、ほかの予約時間を表示する。第2のタップ入力は、図37Zの「8:00PM」上の接触3754によって8時の予約時間を選択する。更新された予約の詳細が図37AAに表示される。デバイス100-2は、図37ABの接触3756を含む、終了アフォーダンス3714のタップジェスチャに応じて、図37ACのメッセージユーザインタフェース3500に戻る。予約アプリケーションオブジェクト3728は、予約時間の変更に応じて更新され、図37Pに表示されているような位置3728-aから、図37ACに表示されているような位置3728-bに、会話記録3700内を移動したものである。
会話記録3700の左側から右側への予約アプリケーションオブジェクト3728の移動は、デバイス100-2のユーザがアプリケーションセッションにおいて直近の入力を行ったことを示す。会話記録における予約アプリケーションオブジェクト3728の移動は、アプリケーションセッションにおいて直近の入力が行われた時間的順序を反映する(例えば、メッセージ3736がメッセージセッションに投稿される前に元の予約が行われ、予約更新はメッセージ3750がメッセージセッションに投稿された後に行われた)ものである。元の予約の時間的位置(例えば、メッセージ3736の投稿前)は、アプリケーションアーカイブアイコン3756の表示によって記録される。
一部の実施形態では、(例えば、タップジェスチャによる)アプリケーションアーカイブアイコンを選択すると、デバイスは、記録されている特定のイベントに関する情報を表示する(例えば、一部の実施形態では、アプリケーションアーカイブアイコン3756をタップすると、(例えば、会話記録内の又はアプリケーションユーザインタフェースを表示した後の)元の予約に関する情報が表示される)。
予約アプリケーションオブジェクト3728の表示は、デバイス100-2によって行われた予約の変更に応じて、デバイス100-1上でも更新される。デバイス100-1は、図37AJの場所3762-aから図37AKの場所3762-bまでの接触3761の移動3764を含むスワイプジェスチャに応じて、デジタルキーボード3501の表示を停止する。デバイス100-1は、次に、予約の変更についてデバイス100-2から送信された情報を受信する。これに応じて、デバイス100-1は、予約アプリケーションオブジェクト3728を図37AKにあるような位置3728-aから下方かつ左方に、図37ALにあるような位置3728-bまで移動することによって、予約アプリケーションオブジェクト3728を更新するが、これは、メッセージ3750がメッセージセッションに投稿された後、アプリケーションセッションの直近の入力がデバイス100-2によって行われたことを示している。アプリケーションアーカイブアイコン3756は、図37ALの予約アプリケーションオブジェクト(例えば、位置3728-a)が以前に占有していた会話記録3700の時間的場所に挿入される。
図37AO~図37BSは、メッセージアプリケーション内で動作する対話型三目並べアプリケーションの例示的な実施形態を示す。対話型アプリケーションの動作は、メッセンジャユーザインタフェースの一部の上のアプリケーションユーザインタフェースの表示を含み、この動作には、会話記録に表示されるアプリケーションオブジェクトによって、メッセージセッションに参加するユーザがアクセス可能である。
図37AO及び図37BDは、それぞれ、デバイス100-1及び100-2上のメッセージアプリケーションの例示的なユーザインタフェース3500を示す。ユーザインタフェース3500は、会話記録3700と、メッセージ入力エリア3502と、3つのアクティブ化可能なアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508)と、任意選択的にメッセージをメッセージ入力エリア3502に入力するためのデジタルキーボード3501、アプリケーション選択トレイ3654、及びアプリケーションスワイプトレイ3892のうちの1つと、を含んでいる。会話記録3700は、特定のポータブル多機能デバイスのユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含む。メッセージ記録に含まれる他の各ユーザは、アバター(例えば、「Abe」のアバター3510、及び「Andrew」のアバター3511)によって表される。
図37AO~図37AWは、対話型三目並べアプリケーションのアクティブ化を示す。図37AOの接触3768を含む、アプリケーションアフォーダンス3508上のタップジェスチャの検出に応じて、デバイス100-1は、図37Eのアプリケーションスワイプトレイ3892を表示する。アプリケーションスワイプトレイ3892は、対話型予約アプリケーションの起動アイコン3708と、アプリケーションスワイプトレイ3892とアプリケーション選択トレイ3654とを切り換えるためのアプリケーションメニュートグルアフォーダンス3627とを含んでいる。次に、デバイスは、図37AQの位置3770-aから図37ARの位置3770-bまでの接触3770の移動3772を含む、アプリケーションスワイプトレイ3892における左方へのスワイプジェスチャを検出する。これに応じて、図37ARで、デバイスは、移動3772に従って、アプリケーションスワイプトレイ3892を左方に移動させ、アプリケーション起動アイコン3708が、タッチスクリーン112の左側からスライドして消え、アプリケーション起動アイコン3774が、タッチスクリーン112の右側からディスプレイ上にスライドして現れる外観を生成する。スワイプジェスチャの完了後、デバイスには、図37ASのアプリケーションスライドトレイ3892内に対話型三目並べアプリケーションのアプリケーション起動アイコン3774を表示する。
デバイスが図37Fの接触3710を含む三目並べ起動アイコン3774上のタップジェスチャを検出すると、対話型三目並べアプリケーションが図37AUのメッセージアプリケーション内で起動される。アプリケーションの起動に応じて、アプリケーションスライドトレイは、それぞれO又はXとしてゲームをプレイするためのオプション3780-1及び3780-2を含むメニュー3778に置き換えられる。図37AVの接触3782を含むアフォーダンス3780-1上のタップジェスチャによって「O」の選択を検出したことに応じて、デバイス100-1は、図37AWのメッセージユーザインタフェース3500の一部の上に三目並べユーザインタフェース3784を表示する。ユーザインタフェース3784は、三目並べボード3791、ユーザインタフェースを閉じるための終了アフォーダンス3694、及びメッセージ入力エリア3502とは別個のメッセージ入力エリア3716を含む。デバイス100-1はまた、三目並べセッションの開始に応じて、三目並べアプリケーションオブジェクト3786を会話記録3700に配置する。
続いて、デバイス100-1は、図37AXの接触3788を含むタップジェスチャによって、図37AYの三目並べボード3791の中央の正方形への「O」3792の配置を検出する。デバイス100-1は、三目並べボード3791へ「O」3792を配置したことに応じて、アプリケーションアーカイブアイコン3790を図37AYの会話記録3700に配置し、記録内の指し手の時間的場所を記録する。一部の実施形態では、アプリケーションアーカイブアイコン3790を選択する(例えば、それをタップすることにより)と、アーカイブアイコンの一時的な場所に関連付けられたプレイを示す状態で、三目並べユーザインタフェース3782が開く。
デバイス100-1が三目並べセッションを開始している間に、デバイス100-2は、図37BEのように、別のデバイスのユーザがメッセージセッション内で対話型アプリケーションのセッションを同時に開始していることを示す会話記録3700内の三目並べアイコン3793を含む活動領域3703を表示する。デバイス100-2は、デバイス100-1の三目並べボード3791上に「O」3792が置かれたという情報を受信したことに応じて、図37BFの記録3700内にアプリケーションアーカイブアイコン3703及び三目並べアプリケーションオブジェクト3705を表示する。
図37BGの接触3707を含む、三目並べアプリケーションオブジェクト3705上のタップジェスチャの検出に応じて、デバイス100-2は、三目並べアプリケーションオブジェクト3705の下方に示すように(「タップしてダウンロード(tap to download)」)、三目並べアプリケーションがデバイスにまだ格納されていないので、三目並べアプリケーションをダウンロードする。進行中のダウンロードの指標3709は、図37BHの三目並べアプリケーションオブジェクト3705上に表示される。ダウンロードが完了すると、デバイス100-2は、図37BIの三目並べアプリケーションオブジェクト3705の下に「あなたの番(your turn)」を表示することによって、ユーザの番が移ることを示す。デバイスは、図37BJの接触3711を含む、三目並べアプリケーションオブジェクト3705上のタップジェスチャを検出すると、図37BKの記録3700に一部の上に三目並べユーザインタフェースを開く。
次に、デバイス100-2は、図37BLの接触3713を含むタップジェスチャによって、図37BMの三目並べボード3791の右上の四角に「X」3794の配置を検出する。デバイス100-2は、三目並べボード3791へ「X」3794を配置したことに応じて、アプリケーションアーカイブアイコン3715を図37BMの会話記録3700に配置し、記録内の指し手の時間的場所を記録する。デバイス100-2はまた、三目並べアプリケーションオブジェクト3705の場所を、図37BLの位置3705-aから図37BMの位置3705-bに移動させるが、これは、直近の三目並べの指し手が、デバイス100-2によってメッセージセッションの新しい時間的場所で行われたことを示している。
次に、デバイス100-2は、図37BNの接触3717を含む、終了アフォーダンス3694上のタップジェスチャに応じて、図37BOの三目並べユーザインタフェース3782を閉じる。デバイス100-2は、図37BOの接触3719を含むメッセージ入力エリア3502上のタップジェスチャを検出すると、図37BPのデジタルキーボード3501を表示する。次に、デバイス100-2は、図37BQのメッセージの入力を受信して、図37BRの接触3721を含むタップジェスチャを検出した後、図37BSのメッセージセッションにメッセージ3798を投稿する。
「X」3794がデバイス100-2上の三目並べボード3791上に置かれたという情報を受信したことに応じて、デバイス100-1は、情報が受信されたときに開いていた三目並べユーザインタフェースの表示を更新して、図37AZのボード3791上に「X」3794を表示する。デバイス100-1はまた、図37AZの会話記録3700の、次の時間的場所に三目並べアーカイブアイコン3796を表示し、図37AYの位置3786-aから図37AZの位置3786-bへ三目並べアプリケーションオブジェクト3786を移動させ、直近の三目並べの指し手は、デバイス100-2によってメッセージセッションの新しい時間的場所で行われたことを示す。
デバイス100-1は、デバイス100-2からメッセージ3798を受信するが、図37BAでは、三目並べユーザインタフェース3782は、メッセージユーザインタフェース3500上で開いたままである。これに応じて、デバイスは、メッセージ3798を三目並べユーザインタフェース3782内に一時的に表示し、メッセージを図37BAの三目並べユーザインタフェース3782の背後に示された会話記録3700に配置する。デバイス100-1は、図37BBの接触3701を含む、終了アフォーダンス3694上のタップジェスチャを検出した後、続いて図37BCの三目並べユーザインタフェース3782を閉じる。これによって、デバイス100-1及び100-2によってアプリケーションで行われた指し手をそれぞれ記録する三目並べアプリケーションアーカイブアイコン3790及び3796と、別のデバイス(例えば、デバイス100-2)がアプリケーション内で直近の指し手を行ったことを記録の左側のその位置によって示して、ユーザに着手を促す(「あなたの番」)三目並べアプリケーションオブジェクト3786と、三目並べユーザインタフェース3782が表示されている間に受信されたメッセージ3798と、を含む会話記録3700が顕示化される。
図37BT~図37DJは、メッセージアプリケーション内で動作する対話型ピザ注文アプリケーションの例示的な実施形態を示す。対話型アプリケーションの動作は、ディスプレイの一部(例えば、デジタルキーボード、アプリケーションスワイプトレイ、又はアプリケーション選択トレイを表示するために使用されることがある部分)の上のアプリケーション入力エリア、及びメッセージユーザインタフェースの会話記録内に表示され、対話型アプリケーションの出力を表示する対話型アプリケーションオブジェクトを表示させる。アプリケーション入力エリアは、対話型アプリケーションオブジェクトを介して、メッセージセッションのユーザにアクセス可能である。
図37BT及び図37CQは、それぞれ、デバイス100-2及び100-1上のメッセージアプリケーションの例示的なユーザインタフェース3500を示す。ユーザインタフェース3500は、会話記録3700と、メッセージ入力エリア3502と、アプリケーション拡張アフォーダンス3702又は3つのアクティブ化可能なアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508)のうちのいずれかと、任意選択的に、メッセージをメッセージ入力エリア3502に入力するためのデジタルキーボード3501、アプリケーション選択トレイ3654、及びアプリケーションスワイプトレイ3892のうちの1つと、を含んでいる。会話記録3700は、特定のポータブル多機能デバイスのユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含む。メッセージ記録に含まれる他の各ユーザは、アバター(例えば、「Abe」のアバター3510、及び「Andrew」のアバター3511)によって表される。
図37BT~図37CAは、ピザを注文する対話型アプリケーションのアクティブ化を示す。図37BTの接触3723を含むアプリケーション拡張アフォーダンス3702上のタップジェスチャに応じて、3つのアクティブ化可能なアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508)が、デバイス100-2によって図37BUに表示される。次に、本デバイスは、図37BVの接触3725を含む、アプリケーションアフォーダンス3508上のタップジェスチャの検出に応じて、図37BWのアプリケーションスワイプトレイ3892を表示する。アプリケーションスワイプトレイ3892は、対話型三目並べアプリケーションの起動アイコン3774と、アプリケーションスワイプトレイ3892とアプリケーション選択トレイ3654とを切り換えるアプリケーションメニュートグルアフォーダンス3627と、を含んでいる。図37BXの接触3727を含むアプリケーションメニュートグルアフォーダンス3627上のタップジェスチャを検出した後、デバイス100-2は、アプリケーションの複数の起動アイコン(メッセージアプリケーション固有のアプリケーションストアの起動アイコン3601、対話型三目並べアプリケーションの起動アイコン3603、対話型予約アプリケーションの起動アイコン3605、検索アプリケーションの起動アイコン3607、デジタルステッカパックの起動アイコン3609、ライブビデオストリーミングアプリケーションの起動アイコン3611、対話型ピザ注文アプリケーション用の起動アイコン3613、対話型デジタル音楽アプリケーションの起動アイコン3615)を含む図37BYのアプリケーション選択トレイ3654を表示する。
図37BZの接触3729を含む、ピザ注文アプリケーションの起動アイコン3613上のタップジェスチャをデバイス100-2が検出した後、ピザ注文アプリケーションが図37CAで起動される。デバイスは、ピザへのトッピングの追加、ピザからのトッピングの除去、ピザの注文、のためのそれぞれの入力アフォーダンス3733-1,3733-2及び3733-3と、表示を終了させる終了アフォーダンス3694と、を含むピザ注文アプリケーションの入力エリア3731を図37CAに表示する。デバイスはまた、会話記録3700にピザ注文アプリケーションオブジェクト3735を表示するが、これは、注文するピザの状態を表示しており、メッセージセッション内で、ピザ構築アプリケーションの対話型セッションに関する起動アイコンとしての役割を果たすものである。図37CAでは、ピザ注文アプリケーションオブジェクト3735は、ピザにトッピングが何も追加されていないことを示している。デバイス100-2は、ピザ注文アプリケーションのセッションがメッセージセッション内で開始されたという情報をデバイス100-1に送信する。
デバイス100-1は、デバイス100-2から送信された情報を受信し、これに応じて、ピザ注文アプリケーションオブジェクト3735を図37CRの会話記録3700に表示する。デバイスはまた、アプリケーションオブジェクト3735の下に「Abeがピザをシェアしたい」というインジケーションを表示する。
続いて、デバイス100-2は、図37CBの接触3737を含む、ピザにトッピングを追加するアフォーダンス3733-1上のタップジェスチャを検出し、図37CCのアフォーダンス3733-1からのトッピング選択のドロップダウンメニューを表示する。図37CDの接触3739を含むトッピング上のタップジェスチャの検出に応じて、図37CEで、ピザにペパロニ(pepperoni)が追加される。デバイスは、図37CEの会話記録3700内の(メッセージ3798の真下の)位置3735-aに表示されたピザ注文アプリケーションオブジェクト3735のピザ上にペパロニを表示する。デバイスはまた、図37CEのアプリケーションオブジェクト3735の下に「あなたはペパロニを追加しました」というインジケーションを表示する。デバイス100-2はまた、ピザにペパロニが追加されたという情報をデバイス100-1に送信する。
デバイス100-1は、デバイス100-2から送信された情報を受信し、これに応じて、図37CSのピザ注文アプリケーションオブジェクト3735に示されるピザ上にペパロニを表示する。続いて、デジタルキーボード3501は、図37CTの接触3759を含むメッセージ入力エリア上のタップジェスチャによって図37CUでアクティブ化される。デバイスは、図37CUのメッセージコンテンツ投稿アフォーダンス3520上のタップジェスチャに応じて、図37CVの会話記録3700に示すように、メッセージ3741を受信してメッセージセッションに投稿する。
デバイス100-2がデバイス100-1から投稿されたメッセージ3741を受信すると、ピザ注文アプリケーションオブジェクト3735は、図37CFのように、メッセージセッション内のその時間的順序に従って、タッチスクリーン112上を上方に移動する。デバイス100-2が、図37CGの接触3743を含むメッセージ入力エリア3502上のタップジェスチャを検出した後、図37CHにおいて、デジタルキーボード3501が、入力エリア3731に取って代わる。次に、図37CIのメッセージコンテンツ投稿アフォーダンス3520上のタップジェスチャに応じて、図37CJの会話記録3700に示されるように、デバイスはメッセージ3747を受信してメッセージセッションに投稿する。しかし、ピザ注文アプリケーションオブジェクト3735は、表示された会話記録3700の最上部に到達しているため、メッセージ3747を会話記録3700に配置したことに応じて移動しない。むしろ、メッセージ3741は、図37CJの会話記録の表示された部分の最上部に一時的にピン留めされているピザ注文アプリケーションオブジェクト3735の後方で、上方に移動する。
同様に、デバイス100-1は、デバイス100-2から投稿されたメッセージ3747を受信すると、ピザ注文アプリケーションオブジェクト3735は図37CWの会話記録3700の最上部にピン留めされる。メッセージ3741は、図37CWのアプリケーションオブジェクト3735の後ろでスライドしているかのように表示される。続いて、図37CXの接触3763を含むメッセージコンテンツ投稿アフォーダンス3520上のタップジェスチャに応じて、図37CYの会話記録3700に示されるように、デバイスはメッセージ3749を受信して、メッセージセッションに投稿する。ピザ注文アプリケーションオブジェクト3735は、メッセージセッションのユーザがピザを一緒に積極的に構築しているため、図37CYの会話記録3700の最上部にピン留めされたままである。
同様に、デバイス100-2上で、図37CKに示すように、メッセージセッションに投稿されたメッセージは、このデバイスがデバイス100-1によって投稿されたメッセージ3749を受信すると、ピザ注文アプリケーションオブジェクト3735の後ろでスライドを継続する。
次に、マッシュルームがデバイス100-1からピザに追加される。図37CZの接触3765を含む会話記録3700内のピザ注文アプリケーションオブジェクト3735上のタップジェスチャに応じて、ピザ注文アプリケーション入力エリア3731が、デバイス上に表示される。図37DBの接触3767を含む入力アフォーダンス3733-1上のタップジェスチャが図37DCのピザトッピングのドロップダウンメニューをアクティブ化した後で、キノコ(Mushroom)が選択される。図37DDの「キノコ」上の接触3769を含むタップジェスチャによって、デバイスには、図37DEのピザ注文アプリケーションオブジェクト3735のピザの上にキノコが表示される。デバイスはまた、図37DEのアプリケーションオブジェクト3735の下に「あなたはキノコを追加しました」というインジケーションを表示し、キノコがピザに追加されたという情報をデバイス100-2に送信する。
デバイス100-1から情報を受信すると、デバイス100-2は、図37CLのピザ注文アプリケーションオブジェクト3735内のピザにキノコを表示する。また、デバイスは、図37CLにおいて、ピザに「Andrewがキノコを加えました」というインジケーションを、記録3700のアプリケーションオブジェクト3735の下に表示する。次に、図37CMの接触3751を含むメッセージコンテンツ投稿アフォーダンス3520上のタップジェスチャの検出に応じて、図37CNで、デバイスはメッセージ3753を受信して、メッセージセッションに投稿する。
デバイス100-1は、図37DFの会話記録3700に表示されているように、メッセージ3753を受信する。続いて、ピザは、デバイス100-1によってピザ注文アプリケーションに関連付けられた業者から注文される。本デバイスは、図37DGの接触3771を含む注文アフォーダンス3733-3上のタップジェスチャを検出し、図37DHのように、注文の詳細を設定するアフォーダンス(支払のオプションを選択するアフォーダンス3773-1、及び、配達先を選択するアフォーダンス3773-2)、並びに、業者に発注するアフォーダンス(アフォーダンス3773-3)をピザ注文アプリケーション入力エリア3731に表示する。図37DIの接触3775を含む注文アフォーダンス3773-3上のタップジェスチャを検出すると、図37DJでピザは注文される。ピザを注文したことに応じて、デバイス100-1は、ピザ注文アプリケーションを閉じて、会話記録3700を全画面モードで表示し、ピザ注文アプリケーションオブジェクト3735のピンを外し、それを会話記録3700内の元の時間的位置に戻し、その時点で「Abeはピザを構築し始めました」と表し、会話記録の最後にピザ注文アプリケーションアーカイブアイコン3755を表示し、注文イベントをメッセージセッションの時間的順序に記録する。デバイス100-1はまた、ピザが注文されたという情報をデバイス100-2に送信する。
デバイス100-1の情報を受信すると、デバイス100-2は同様に、図37COの会話記録3700の最後に、メッセージセッション中のこの時点で「アンドリューがピザを注文した」ことを示すピザ注文アプリケーションアーカイブアイコン3755を表示する。デバイス1002はまた、会話記録の表示された部分の最上部からピザ注文アプリケーションオブジェクト3735のピンを外し、図37CQに示すように、会話記録3700内の元の時間的位置3735-aにアプリケーションオブジェクトを表示する。図37CPの位置3757-aから図37CQの位置3757-bへの接触3757の移動3759を含む下向きのスワイプジェスチャを検出すると、記録3700の全画面表示がアクティブ化され、デバイスはデジタルキーボード3501の表示を停止する。
図38A~図38AZは、一部の実施形態に係る、メッセージアプリケーションにおけるアプリケーションを統合する例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図60A~図60Dのプロセスを含む、以下に記載するプロセスを例示するために使用される。説明の便宜のために、一部の実施形態は、タッチ感知ディスプレイシステム112を有するデバイスに対して実行される動作を参照して説明する。かかる実施形態では、フォーカスセレクタは、任意選択的に、それぞれの指又はスタイラス接触、指又はスタイラス接触に対応する代表点(例えば、それぞれの接触の重心又はそれぞれの接触に関連付けられた点)、あるいは、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の重心である。しかし、類似の動作は、任意選択的に、図面に示されたユーザインタフェースをフォーカスセレクタと共にディスプレイ450に表示する間に、タッチ感知面451上の接触を検出したことに応じて、ディスプレイ450と別個のタッチ感知面451とを有するデバイス上で実行される。
図38A~図38O及び図38R~図38ZAはメッセージアプリケーションの例示的なユーザインタフェース3500を示す。このユーザインタフェース3500は、会話記録3503と、メッセージ入力エリア3502と、アプリケーション拡張アフォーダンス3702又は3つのアクティブ化可能なアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508)と、任意選択的に、デジタルキーボード3501、デジタル画像トレイ3806、デジタルキャンバストレイ3854、アプリケーション選択トレイ3654、及びアプリケーションスワイプトレイ3892のうちの1つと、を含んでいる。会話記録3503は、ポータブル多機能デバイス100-1のユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含んでいる。メッセージ記録に含まれる他の各ユーザは、アバターのスタック4002に表示されるアバター(例えば、「Abe」のアバター3510)によって表される。
図38A~図38Yは、デジタル画像及びデジタルカメラがメッセージアプリケーションに統合される例示的な実施形態を示す。図38Aは、メッセージアプリケーションのユーザインタフェース3500を例示し、このユーザインタフェースには、会話記録3503、デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、アプリケーションアフォーダンス3508、及び会話記録3503に関連するメッセージセッションに投稿するためにテキストに変換される音声を受信するためのマイクロフォンアフォーダンス3802を含むメッセージ入力エリア3502、が含まれる。デバイス100-1は、デジタルカメラアフォーダンス3504上の図38Bの接触3804を含むタップジェスチャを検出し、これに応じて、図38Cのデジタル画像トレイ3806を表示する。会話記録3503は、デジタル画像トレイ3806に合わせるために縮小する。デジタル画像トレイには、画像キャプチャアフォーダンス3516と2つ以上の関連付けられたデジタルカメラの間でライブプレビュー画像を切り換えるためのカメラ切換アフォーダンス3505とを含む関連付けられたデジタルカメラからのライブプレビュー画像3514と、以前にキャプチャされたデジタル画像3518と、が含まれる。
図38D~図38Gは、デジタル画像トレイ上で双方向にスクロールさせることにより異なるアフォーダンスを表示させる例示的な実施形態を示す。デバイス100-1は、図38Dの位置3808-aから図38Eの位置3808-bへの接触3808の左方への移動3810を含むスワイプジェスチャを検出する。これに応じて、デバイスは、移動3810に従って、デジタル画像トレイ3806を左方に移動させ、ライブプレビュー画像3514が、タッチスクリーン112の左側からスライドして消え、追加のデジタル画像3518-6及び3518-7が、図38Eで、タッチスクリーン112の右側からディスプレイ上にスライドして現れる外観を生成する。
次に、デバイスは、図38Fの位置3812-aから図38Gの位置3812-bへの接触3812の右方への移動3814を含むスワイプジェスチャを検出する。これに応じて、デバイスは、移動3814に従って、デジタル画像トレイ3806を右方に移動させ、デジタル画像3518-3,3518-4,3518-6、及び3518-7が、タッチスクリーン112の右側からスライドして消える外観を生成し、図38Gのタッチスクリーン112の左側から、全画面カメラアフォーダンス3816及び写真ライブラリアフォーダンス3818を顕示化する。
図38H~図38Mは、メッセージアプリケーションユーザインタフェースから全画面カメラのライブプレビュー画像にアクセスすることによって、デジタル画像がキャプチャされて、メッセージセッションに投稿される例示的な実施形態を示す。デバイス100-1は、全画面カメラアフォーダンス3816上の図38Hの接触3820を含むタップジェスチャを検出し、これに応じて、図38Iのデジタルカメラユーザインタフェース3822を表示する。デジタルカメラユーザインタフェース3822には、ライブプレビュー画像3514と画像キャプチャアフォーダンス3822との全画面表示が含まれる。続いて、デバイスは、図38Jにおいて、画像キャプチャアフォーダンス3822上の接触3824を含むタップジェスチャを検出する。これに応じて、デバイス100は、ライブプレビュー画像3514をキャプチャしてデジタル画像3518-5を生成し、画像を図38Kのメッセージ入力エリア3502に配置し、このエリアは画像に合わせるように拡張する。次に、デバイスは、図38Lのメッセージコンテンツ投稿アフォーダンス3520上の接触3826を含むタップジェスチャを検出する。これに応じて、デバイス100は、キャプチャされたデジタル画像3518-5をメッセージセッションに投稿し、図38Mの会話記録3503に画像を表示する。
図38N~図38Rは、写真ライブラリに保存されたデジタル画像がアクセスされて、メッセージアプリケーションユーザインタフェースからメッセージセッションに投稿される例示的な実施形態を示す。図38Nで、接触3828の右方への移動を含むスワイプジェスチャの検出に応じて、全画面カメラアフォーダンス3816及び写真ライブラリアフォーダンス3818が、タッチスクリーン112の左側からデジタル画像トレイ3806に顕示化される。次に、デバイス100-1は、図38Oの接触3830を含むタップジェスチャを写真ライブラリアフォーダンス3818上で検出し、これに応じて、図38Pの写真ライブラリユーザインタフェース3832を表示する。写真ライブラリユーザインタフェース3832は、デジタル画像のコレクションにアクセスするアフォーダンス3834を含み、そのコレクションからデジタル画像をメッセージセッションに投稿することができる。デバイスは、取消アフォーダンス3836上の接触3838を含むタップジェスチャを検出することによって、デバイスは、以前にキャプチャされたデジタル画像をメッセージセッションに投稿することなく、図38Rのメッセージユーザインタフェース3500の表示に戻る。
図38R~図38Yは、デジタルキーボードの表示が写真トレイの表示に取って代わる例示的な実施形態、及びその逆の例示的な実施形態を示す。写真トレイ3806を表示している間に、デバイス100-1は、図38Rの接触3840を含むメッセージ入力エリア3502上のタップジェスチャを検出する。これに応じて、デバイスは、写真トレイ3806を図38Sのデジタルキーボード3501に置き換える。デバイスはまた、このタップジェスチャに応じて、メッセージ入力エリア3502を拡張し、そこにテキストカーソル3842を表示し、デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508は、図38Sのアプリケーション拡張アフォーダンス3702に折り畳まれる。
デバイスは、図38Tのメッセージ入力エリア3502内に表示されたメッセージの入力を検出する。メッセージの入力に応じて、マイクロフォンアフォーダンス3802は、図38Tのメッセージコンテンツ投稿アフォーダンス3520に置き換えられる。メッセージコンテンツ投稿アフォーダンス3520上の図38Uの接触3844を含むタップジェスチャの検出に応じて、デバイスはメッセージをメッセージセッションに投稿し、メッセージ3846を図38Vの会話記録3503に表示する。次に、デバイスは、図38Vのアプリケーション拡張アフォーダンス3702上の接触3848を含むタップジェスチャを検出したことに応じて、図38Wで、3つのアクティブ化可能なアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508)を表示する。図38Xのデジタル画像アフォーダンス3504上での接触3850を含むタップジェスチャの検出に応じて、デバイスは、デジタルキーボード3501を図38Yのデジタル画像トレイ3806に置き換える。
図38Z~図38AHは、デジタルキャンバスがメッセージアプリケーションに統合される例示的な実施形態を示す。図38Zは、メッセージアプリケーションのユーザインタフェース3500を例示し、このユーザインタフェースには、会話記録3503、デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、アプリケーションアフォーダンス3508、メッセージ入力エリア3502、が含まれる。デバイス100-1は、デジタルキャンバスアフォーダンス3506上の図38AAの接触3852を含むタップジェスチャを検出し、これに応じて図38ABのデジタルキャンバス3854を表示する。デジタルキャンバストレイ3854は、デジタルキャンバス3858と、デジタルキャンバス3858上のさまざまな表現モードを可能にする表現モードアフォーダンス3860と、デジタルキャンバス3858上の表現用の色を設定する色選択アフォーダンス3856と、を含んでいる。
図38AC~図38AHは、デジタルキーボードの表示がデジタルキャンバストレイの表示に取って代わる例示的実施形態及びその逆の例示的実施形態を示す。デジタルキャンバストレイ3854を表示している間に、デバイス100-1は、図38ACの接触3862を含むメッセージ入力エリア3502上のタップジェスチャを検出する。これに応じて、デバイスは、デジタルキャンバストレイ3854を図38ADのデジタルキーボード3501に置き換える。デバイスではまた、このタップジェスチャに応じて、メッセージ入力エリア3502を拡張し、そこにテキストカーソル3842を表示し、デジタル画像アフォーダンス3504と、デジタルキャンバスアフォーダンス3506と、アプリケーションアフォーダンス3508は、図38ADのアプリケーション拡張アフォーダンス3702に折り畳まれる。
次に、デバイスは、図38AEのアプリケーション拡張アフォーダンス3702上の接触3864を含むタップジェスチャの検出に応じて、図38AFで、3つのアクティブ化可能なアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、アプリケーションアフォーダンス3508)を表示する。図38AGのデジタルキャンバスアフォーダンス3506上での接触3866を含むタップジェスチャの検出に応じて、デバイスは、デジタルキーボード3501を図38AHのデジタルキャンバストレイ3858に置き換える。
図38AI~図38ASは、対話型アプリケーションがメッセージアプリケーションに統合される例示的な実施形態を示す。図38AIは、メッセージアプリケーションの例示的なユーザインタフェース3500を示し、このユーザインタフェースには、会話記録3503、デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、アプリケーションアフォーダンス3508、メッセージ入力エリア3502、が含まれる。デバイス100-1は、アプリケーションアフォーダンス3508上の図38AJの接触3868を含むタップジェスチャを検出し、これに応じて、図38AKの、対話型アプリケーションの起動アイコン3708とアプリケーションメニュートグルアフォーダンス3627とを含むアプリケーションスワイプトレイ3892を表示する。続いて、デバイスは、図38ALのアプリケーションメニュートグルアフォーダンス3627上の接触3870を含むタップジェスチャを検出し、これに応じて、アプリケーションスワイプトレイ3892をアプリケーション選択トレイ3654に置き換え、このアプリケーション選択トレイ3654には、図38AMにおいて、アプリケーションの複数の起動アイコン(メッセージアプリケーション固有のアプリケーションストアの起動アイコン3601、対話型三目並べアプリケーションの起動アイコン3603、対話型予約アプリケーションの起動アイコン3605、検索アプリケーションの起動アイコン3607、デジタルステッカパックの起動アイコン3609、ライブビデオストリーミングアプリケーションの起動アイコン3611、対話型ピザ注文アプリケーションの起動アイコン3613、対話型デジタル音楽アプリケーションの起動アイコン3615)が含まれる。
図38AC~図38AHには、デジタルキーボードの表示がアプリケーション起動トレイの表示に取って代わる例示的な実施形態及びその逆の例示的な実施形態を示す。アプリケーション選択トレイ3654を表示している間に、デバイス100-1は、図38ANの接触3872を含むメッセージ入力エリア3502上のタップジェスチャを検出する。これに応じて、デバイスは、図38AOで、アプリケーション選択トレイ3654をデジタルキーボード3501に置き換える。デバイスは更に、タップジェスチャに応じて、メッセージ入力エリア3502を拡張し、そこにテキストカーソル3842を表示し、デジタル画像アフォーダンス3504と、デジタルキャンバスアフォーダンス3506と、アプリケーションアフォーダンス3508は、図38AOのアプリケーション拡張アフォーダンス3702に折り畳まれる。
図38APのアプリケーション拡張アフォーダンス3702上の接触3874を含むタップジェスチャの検出に応じて、続いてデバイスは、図38AQで、3つのアクティブ化可能なアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508)を表示する。図38ARのアプリケーションアフォーダンス3508上の接触3876を含むタップジェスチャの検出に応じて、デバイスは、デジタルキーボード3501を図38ASのアプリケーション選択トレイ3654に置き換える。
図38AT~図38AVは、キーボードの表示をおさめるためにメッセージ記録が縮小する例示的な実施形態を示す。図38ATは、メッセージアプリケーションの例示的なユーザインタフェース3500を例示し、このユーザインタフェースには、会話記録3503、デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、アプリケーションアフォーダンス3508、及びメッセージ入力エリア3502、が含まれる。デバイス100-1は、図38AUのメッセージ入力エリア3502上の接触3878を含むタップジェスチャを検出し、これに応じて、図38AVのデジタルキーボード3501の表示に合わせるように会話記録3503を縮小する。本デバイスは、このタップジェスチャに応じて、メッセージ入力エリア3502を拡張し、そこにテキストカーソル3842を表示し、デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508は、図38AVのアプリケーション拡張アフォーダンス3702に折り畳まれる。
図38AV~図38AZは、デバイスのユーザが、グループメッセージセッションの単一の参加者と、その人のアバターとの対話を介して対話することができる例示的な実施形態を示す。図38AVは、会話記録3503、デジタルキーボード3501、メッセージ入力エリア3502、及びアプリケーション拡張アフォーダンス3702を含むメッセージアプリケーションの例示的なユーザインタフェース3500を示す。会話記録3503は、ポータブル多機能デバイス100-1のユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含んでいる。メッセージ記録に含まれる他の各ユーザは、メッセージユーザインタフェース3500のアバターのスタック4002に表示されるアバター(例えば、「Abe」のアバター3510及び「Mary Todd」のアバター4008)によって表される。
一実施形態では、メッセージセッションに含まれる別のユーザと対話するためのアクションのメニューが、ユーザのアバターをタップすることによって表示される。デバイス100-1は、図38AWで、Abeのアバター3510上の接触3880を含むタップジェスチャを検出する。一部の実施形態では、ユーザ入力は深押しジェスチャである。これに応じて、デバイスは、図38AXにおいて、電話、テレビ電話、個別のメッセージ、電子メール、デジタル描画、又は支払によってAbeと直接対話するためのアクティブ化可能なメニュー項目3884-1~3884-6のメニュー3882を表示する。次に、デバイスは、図38AYのメニュー項目3884-3上の接触3886を含むタップ入力を検出した後、図38AZで、Abeとの個人的なメッセージ会話記録3700をアクティブ化する。
図39A~図39AWは、一部の実施形態に係る、メッセージアプリケーションに電子ステッカを統合する例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図62A~図62C及び図64A~図64Cのプロセスを含む、以下に記載するプロセスを例示するために使用される。説明の便宜のために、一部の実施形態は、タッチ感知ディスプレイシステム112を有するデバイスに対して実行される動作を参照して説明する。かかる実施形態では、フォーカスセレクタは、任意選択的に、それぞれの指又はスタイラス接触、指又はスタイラス接触に対応する代表点(例えば、それぞれの接触の重心又はそれぞれの接触に関連付けられた点)、あるいは、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の重心である。しかし、類似の動作は、任意選択的に、図面に示されたユーザインタフェースをフォーカスセレクタと共にディスプレイ450に表示する間に、タッチ感知面451上の接触を検出したことに応じて、ディスプレイ450と別個のタッチ感知面451とを有するデバイス上で実行される。
図39A~図39AWは、メッセージアプリケーションの例示的なユーザインタフェース3500を示している。このユーザインタフェースは、会話記録3700と、メッセージ入力エリア3502と、アプリケーション拡張アフォーダンス3702又は3つのアクティブ化可能なアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508)のうちのいずれかと、任意選択的に、デジタルキーボード3501、アプリケーション選択トレイ3654、及びアプリケーションスワイプトレイ3892のうちの1つと、を含んでいる。会話記録3503は、ポータブル多機能デバイス100のユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含んでいる。メッセージ記録に含まれる他の各ユーザは、アバター(例えば、「Abe」のアバター3510)によって表される。
図39A~図39C、図39AB~図39AF及び図39AU~図39AWは、メッセージアプリケーションの電子ステッカパックにアクセスする3つの例示的な実施形態を示す。各実施形態は、メッセージアプリケーションの例示的なユーザインタフェース3500から始まり、このユーザインタフェースには、図39A、図39AB、及び図39AUのように、会話記録3503、デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、アプリケーションアフォーダンス3508、及び会話記録3503に関連付けられたメッセージセッションに投稿するためにテキストに変換される音声を受信するためのマイクロフォンアフォーダンス3802を含むメッセージ入力エリア3502、が含まれる。
第1の実施形態では、デバイス100-1は、図39Bのアプリケーションアフォーダンス3508上の接触3902を含むタップジェスチャを検出し、これに応じて、図39Cで、電子ステッカ3906,3908及び3910を有するステッカパック3904とアプリケーションメニュートグルアフォーダンス3627とを含むアプリケーションスワイプトレイ3892を表示する。
第2の実施形態では、デバイス100-1は、図39ABのアプリケーションアフォーダンス3508上の接触3934を含むタップジェスチャを検出し、これに応じて、図39ACの対話型予約アプリケーションの起動アイコン3708とアプリケーションメニュートグルアフォーダンス3627とを含むアプリケーションスワイプトレイ3892を表示する。次に、デバイスは、図39ADの位置3936-aから図39AEの位置3936-bまでの接触3936の移動3938を含む、アプリケーションスワイプトレイ3892における左方へのスワイプジェスチャを検出する。これに応じて、デバイスは、図39AEで、移動3938に従ってアプリケーションスワイプトレイ3892を左方に移動させ、アプリケーション起動アイコン3708が、タッチスクリーン112の左側からスライドして消え、ステッカパック3904がタッチスクリーン112の右側からディスプレイをスライドしてくる外観を生成する。スワイプジェスチャの完了後、デバイスには、図39AFのアプリケーションスライドトレイ3892内に、電子ステッカ3906,3908,3910を有するステッカパック3904とアプリケーションメニュートグルアフォーダンス3627とが表示される。
第3の実施形態では、デバイス100-1は、アプリケーションアフォーダンス3508上の図39AUの接触3952を含むタップジェスチャを検出し、これに応じて、アプリケーション選択トレイ3654を表示するが、このアプリケーション選択トレイ3654には、図38AMにおいて、アプリケーションの複数の起動アイコン(メッセージアプリケーション固有のアプリケーションストアの起動アイコン3601、対話型三目並べアプリケーションの起動アイコン3603、対話型予約アプリケーションの起動アイコン3605、検索アプリケーションの起動アイコン3607、電子ステッカパックの起動アイコン3609、ライブビデオストリーミングアプリケーションの起動アイコン3611、対話型ピザ注文アプリケーションの起動アイコン3613、対話型デジタル音楽アプリケーションの起動アイコン3615)が含まれる。続いて、デバイスは、図39AVの電子ステッカパックの起動アイコン3609上の接触3954を含むタップジェスチャを検出し、これに応じて、図39AWで、アプリケーション選択トレイ3654を、電子ステッカ3906,3908及び3910とアプリケーションメニュートグルアフォーダンス3627とを含むステッカパック3904に置き換える。
図39D~図39P及び図39Z~図39AAは、電子ステッカをメッセージセッションに投稿する例示的な実施形態を示す。各実施形態は、図39D、図39H、図39K、図39N、及び図39Zのように、会話記録3503と、メッセージ入力エリア3502と、電子ステッカ3906,3908及び3910を有する電子ステッカパック3904とを含む、メッセージアプリケーションの例示的なユーザインタフェース3500から始まる。
第1の実施形態では、電子ステッカは、電子ステッカ上のタップに応じて、メッセージ入力エリアを介して会話記録に投稿される。デバイス100-1は、図39Dの雪片ステッカ3908上の接触3912を含むタップジェスチャを検出する。これに応じて、デバイスは、図39Eのメッセージ入力エリア3502に雪片ステッカ3908を配置する。次に、デバイスは、図39Fのメッセージコンテンツ投稿アフォーダンス3520上の接触3914を含むタップジェスチャを検出する。これに応じて、デバイス100は、図39Gに示すように、記録3700に投稿されたメッセージの次の時間的位置に対応する場所3908-aに雪片ステッカ3908を投稿する。
第2の実施形態では、電子ステッカは、ドラッグジェスチャによって会話記録にドラッグされ、会話記録にドラッグされた場所で、メッセージセッションに投稿される。デバイス100-1は、接触3916の移動3918を含むドラッグジェスチャを検出するが、このドラッグジェスチャは、電子ステッカ3906上で、図39Hのステッカパック3904内の位置3916-aから、図39Iの会話記録3700内の位置3916-bへと開始されたものである。これに応じて、雪だるまステッカ3906は、移動3918に従って、図39Hのステッカパック内のその初期位置3906-aから、図39Iの会話記録内の位置3906-bにドラッグされる。図39Jの位置3906-bに表示されるように、会話記録3700内の接触3916がリフトオフすると、雪だるまステッカ3906がメッセージセッションに投稿される。
第3の実施形態では、電子ステッカは、会話記録に完全にドラッグされていないときには、メッセージセッションに投稿されない。デバイス100-1は、接触3920の移動3922を含むドラッグジェスチャを検出するが、このドラッグジェスチャは、電子ステッカ3910上で、図39Kのステッカパック3904内の位置3920-aから開始され、依然図39Lのステッカパック3904内にある位置3920-bへと向かうものである。これに応じて、そりステッカ3910は、移動3922に従って、図39Kのステッカパック3904内のその初期位置3910-aから、依然図39Lのステッカパック3904内にある位置3910-bにドラッグされる。ステッカパック3904内の接触3920をリフトオフすると、図39Mの元の位置3920-aに表示されているように、そりステッカ3910は会話記録内にはドラッグされなかったので、メッセージセッションには投稿されない。
第4の実施形態では、電子ステッカは、ドラッグジェスチャによって会話記録にドラッグされ、会話記録にドラッグされた場所に最も近い予め定義された位置でメッセージセッションに投稿される。デバイス100-1は、接触3924の移動3926を含むドラッグジェスチャを検出するが、このドラッグジェスチャは、電子ステッカ3908上で、図39Nのステッカパック3904内の位置3924-aから、図39Oの会話記録3700内の位置3924-bへと開始されたものである。これに応じて、雪片ステッカ3908は、移動3926に従って、図39Nのステッカパック内のその初期位置3908-aから、図39Oの会話記録内の位置3908-cにドラッグされる。会話記録3700内の接触3924のリフトオフ時に、雪片ステッカ3908は位置3908-dに再配置される。これは、デバイスがドラッグジェスチャに対応する接触のリフトオフを検出したときにステッカがあった場所(例えば、場所3908-c)に最も近いメッセージ領域(例えば、メッセージ領域3749)内の場所に該当する。
第5の実施形態では、深押しジェスチャの検出に応じて、記録に投稿されたメッセージの次の時間的位置で、電子ステッカがメッセージセッションに直接投稿される。デバイス100-1は、図39Yの雪だるまステッカ3906上の接触3932を含む押圧ジェスチャを検出する。次に、デバイス100-1は、予め定義された強度閾値(例えば、IT又はIT)を超える接触3932の強度の増加を検出し、これに応じて、図39AAに示すように、記録3700に投稿されたメッセージの次の時間的位置に対応する位置3906-cに表示されるように、雪だるまステッカをメッセージセッションに直接投稿する。
図39P~図39Xは、電子ステッカがアニメーション化された例示的な実施形態を示す。図39Pでは、雪だるまステッカ3906が、図39H~図39Jで配置されたように、会話記録3700の場所3906-bに表示されている。図39Q~図39Tにおいて、雪だるまステッカ3906は、アニメーション状態3930-a、3930-b、及び3930-cを繰り返し、自分の箒を上げ下げするように見える。
図39U~図39Xにおいて、雪だるまステッカ3906のアニメーション3930は、ステッカパック3904内のステッカを深押しすることによってプレビューされる。デバイス100-1は、図39Uの雪だるまステッカ3906上の接触3928を含む押圧ジェスチャを検出する。次に、デバイス100-1は、図39Vの予め定義された強度閾値(例えば、IT又はIT)を超える接触3928の強度の増加を検出し、これに応じて、図39V~図39Xで、雪だるまステッカ3906はアニメーション状態3930-a、3930-b及び3930-cを繰り返す。一部の実施形態では、アニメーションに関連付けられたステッカは、ステッカパックに表示されるときに連続的にアニメーション化される。
図39AF~図39ATは、電子ステッカに関する位置、サイズ、及び/又は回転が変更される例示的な実施形態を示す。
一実施形態では、電子ステッカのサイズは、ステッカ上の接触の圧力に応じて変化する。図39AG~図39AIでは、図39AGの位置3940-aから図39AIの位置3940-cまでの接触3940の移動3942を含むドラッグジェスチャによって、雪だるまステッカ3906がステッカパック3904から会話記録3700にドラッグされる。ドラッグジェスチャの間、デバイス100-1は、図39AGと図39AHとの間、及び図39AHと図39AIとの間で接触3940の強度の増加を検出する。これに応じて、雪だるまステッカ3940は連続的に大きくなる。次に、デバイスは、図39AIと図39AJとの間で接触3940の強度の減少を検出し、これに応じて、雪だるまステッカ3906のサイズが小さくなる。
一実施形態では、電子ステッカの回転は、ステッカ上の接触による回転ジェスチャに応じて変化する。デバイス100-1は、図39AKの位置3940-cから図39ALの位置3940-dまでの接触3940の回転3944を含む反時計回りの回転ジェスチャを検出する。これに応じて、雪だるまステッカ3906は、図39AKの位置3906-eから図39ALの位置3906-fまで、回転3944に従って反時計回りに回転する。タッチスクリーン112からの接触3940のリフトオフを検出したことに応じて、雪だるまステッカ3906は、会話記録3700に存在する間に、ステッカパック内のその元の外観に対して回転して大きく表示されるように、図39AMの会話記録3700内の位置3906-fでメッセージセッションに投稿される。
一実施形態では、電子ステッカの位置を、最初にステッカを会話記録内に配置した後で変更することができる。デバイス100-1は、ステッカが最初に図39AMの記録に配置された後に、会話記録3700内の雪だるまステッカ3906上で開始するドラッグジェスチャを検出する。ドラッグジェスチャには、図39ANの位置3946-aから図39AOの位置3946-bまでの接触3946の移動3948が含まれる。これに応じて、雪だるまステッカは、移動3948に従って、図39ANの位置3906-fから図39AOの位置3906-gに移動する。
一実施形態では、電子ステッカのサイズが、最初に会話記録でステッカを配置した後に変更される。上述のジェスチャの続きとして、デバイス100-1は、図39AOと図39APとの間の接触3946の強度の増加を検出する。これに応じて、図39APには、雪だるまステッカ3940が、より大きく表示される。
一実施形態では、電子ステッカの回転が、最初に会話記録でステッカを配置した後に変更される。上述のジェスチャの続きとして、デバイス100-1は、図39AQの位置3946-bから図39ARの位置3946-cまでの接触3946の回転3950を含む反時計回りの回転ジェスチャを検出する。これに応じて、雪だるまステッカ3906は、回転3944に従って、図39AQの位置3906-gから図39ARの位置3906-hまで反時計回りに回転する。タッチスクリーン112からの接触3946のリフトオフを検出したことに応じて、雪だるまステッカ3906は、会話記録3700に存在する間に、図39ASに表示されるように、記録内に戻される。デバイスは、位置3906-hにある雪だるまステッカ3906の向きに関する情報を、会話記録3700に関連付けられたメッセージセッションに含まれる他のユーザに対応する電子デバイスに送信する。
一実施形態では、電子ステッカの位置、サイズ、及び/又は回転は、メッセージセッションに投稿された後に第2のユーザによって変更される。デバイス100-1は、会話記録3700に関連付けられたメッセージセッションに含まれる別のユーザ(例えば、「Abe」)に対応する別のデバイスから情報を受信する。この情報は、Abeが、図39ASに示すような向き(例えば、位置)3906-hから図39ATに示すような向き3906-Iに雪だるまステッカ3906の位置、サイズ、及び回転を変更することを伝達する。これに応じて、デバイス100-1は、向き3906-Iを有する雪だるまステッカ3906を図39ATに表示する。
図40A~図40Wは、一部の実施形態に係る、アバターを介してメッセージ記録の他のユーザと対話する例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図66及び図68A~図68Bのプロセスを含む、以下に記載するプロセスを例示するために使用される。説明の便宜のために、一部の実施形態は、タッチ感知ディスプレイシステム112を有するデバイスに対して実行される動作を参照して説明する。かかる実施形態では、フォーカスセレクタは、任意選択的に、それぞれの指又はスタイラス接触、指又はスタイラス接触に対応する代表点(例えば、それぞれの接触の重心又はそれぞれの接触に関連付けられた点)、あるいは、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の重心である。しかし、類似の動作は、任意選択的に、図面に示されたユーザインタフェースをフォーカスセレクタと共にディスプレイ450に表示する間に、タッチ感知面451上の接触を検出したことに応じて、ディスプレイ450と別個のタッチ感知面451とを有するデバイス上で実行される。
図40A~図40Wは、会話記録3503と、メッセージ入力エリア3502と、アクティブ化可能な3つのアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508)と、を含むメッセージアプリケーションに関する例示的なユーザインタフェース3500を示す。会話記録3503は、ポータブル多機能デバイス100-1のユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含んでいる。メッセージ記録に含まれる他の各ユーザは、アバターのスタック4002に表示されるアバター(例えば、「Abe」のアバター3510及び「Mary Todd」のアバター4008)によって表される。
図40A~図40Fは、デバイスが、異なる種類のユーザ入力を検出することに基づいて異なる動作を実行する場合に、アバターを介してメッセージセッションの別のユーザと対話する2つの例示的な実施形態を示す。
第1の実施形態では、メッセージセッションに含まれる別のユーザと対話するアクションのメニューが、ユーザのアバターをタップすることによって表示される。デバイス100-1は、図40BのAbeのアバター3510上の接触4004を含むタップジェスチャを検出する。これに応じて、デバイスは、電話、テレビ電話、個別のメッセージ、電子メール、デジタル描画、又は支払によってAbeと直接対話するアクティブ化可能なメニュー項目3884-1~3884-6のメニュー3882を表示する。
第2の実施形態では、スタックされたアバターは、アバターのスタックを深押しすることによって、スタックの最上部に異なるアバターを表示するサイクル動作を行う。デバイス100-1は、図40Dの接触4006を含む押圧ジェスチャを、Abeのアバター3510を最上部に表示するアバターのスタック4002上で検出する。続いて、デバイスは、図40Eの予め定義された強度閾値(例えば、IT又はIT)を超える接触4006の強度の増加を検出し、これに応じて、図40E及び図40Fにおいて、アバターのスタック4002をシャッフルして、Mary Toddのアバター4008を最上部に表示する。
図40G~図40Rは、アバターを介してメッセージセッションの別のユーザに支払を行う例示的な実施形態を示す。デバイス100-1は、Mary Toddのアバター4008を最上部に表示するアバターのスタック4002に対する図40Gの接触4010を含む押圧ジェスチャを検出する。次に、デバイスは、予め定義された強度閾値(例えば、IT又はIT)を超える接触4010の強度の増加を検出し、これに応じて、Mary Toddと直接対話するためのアクティブ化可能なメニュー項目3884-1~3884-6のメニュー3882を表示し、図40Hの会話記録3503の表示を不鮮明にする。メニュー3882は、デバイスが図40Iで接触4010のリフトオフを検出した後、表示されたままである。
次に、デバイス100-1は、図40Jで、支払アクションのためのアクティブ化可能なメニュー項目3884-6上の接触4012を含むタップジェスチャを検出する。これに応じて、デバイスは、図40Kにおいて、終了アフォーダンス4016と、実行アフォーダンス4018と、支払額を入力するためのデジタルキーパッド4015とを含む、支払エリア4014を表示する。次に、デバイスは、図40Lで、支払金額($60)の入力を検出し、続いてメッセージ入力エリア4019で接触4020を含むタップジェスチャを検出する。これに応じて、デバイスは、図40Mで、デジタルタッチパッド4014をデジタルキーボード4017に置き換える。図40Nのメッセージ4019の入力と、図40Oの実行アフォーダンス4018上の接触4022を含むタップジェスチャと、の検出に応じて、デバイスは、図40Pに確認エリア4024を表示することによって、デバイス100-1のユーザに自分自身の識別情報を確認するように促す。図40Qの接触4026を含む識別情報確認入力の受信に応じて、デバイスは、Mary Toddへの$60の支払を実行し、メッセージセッションに支払の確認を投稿し、図40Rの会話記録3503内に支払確認4028を表示する。
図40S~図40Wは、デバイスが、異なる種類のユーザ入力を検出することに基づいて異なる動作を実行する場合に、アバターを介してメッセージセッションの別のユーザと対話する2つの例示的な実施形態を示す。
第1の実施形態では、アバターのスタックをタップすることにより、複数のアバターを広げ、特定のアバターを選択することができる。デバイス100-1は、図40Sのアバターのスタック4002上で、接触4030を含むタップジェスチャを検出する。これに応じて、デバイスは、図40Tのタッチスクリーン112の上部で横方向に、アバターのスタック4002内のアバター(「Abe」のアバター3510、「Mary Todd」のアバター4008、「Chuck」のアバター4032、「Issac」のアバター4034、及び「Edwin」のアバター4036)を広げるものである。
第1の実施形態の続きでもある第2の実施形態では、特定のアバターを深押しすることにより、そのアバターに対応するユーザと対話するためのアクティブ化可能なアクションのメニューが呼び出される。デバイス100-1は、Mary Toddのアバター4008上の図40Uの接触4038を含む押圧ジェスチャを検出する。次に、デバイスは、予め定義された強度閾値(例えば、IT又はIT)を超える接触4038の強度の増加を検出し、これに応じて、図40Vで、Mary Toddと直接対話するためのアクティブ化可能なメニュー項目3884-1~3884-6のメニュー3882を表示し、会話記録3503の表示を不鮮明にする。デバイスが図40Wの接触4038のリフトオフを検出した後、メニュー3882は表示されたままである。
図41A~図41Hは、一部の実施形態に係る、データ検出器をメッセージアプリケーションに統合する例示的なユーザインタフェースを示す。これらの図におけるユーザインタフェースは、図70A及び図70Bのプロセスを含む、以下に記載するプロセスを説明するために使用される。説明の便宜のために、一部の実施形態は、タッチ感知ディスプレイシステム112を有するデバイスに対して実行される動作を参照して説明する。かかる実施形態では、フォーカスセレクタは、任意選択的に、それぞれの指又はスタイラス接触、指又はスタイラス接触に対応する代表点(例えば、それぞれの接触の重心又はそれぞれの接触に関連付けられた点)、あるいは、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の重心である。しかし、類似の動作は、任意選択的に、図面に示されたユーザインタフェースをフォーカスセレクタと共にディスプレイ450に表示する間に、タッチ感知面451上の接触を検出したことに応じて、ディスプレイ450と別個のタッチ感知面451とを有するデバイス上で実行される。
図41A~図41Hは、インターネット上で入手可能な追加のコンテンツに関連して、メッセージセッションに含まれる別のユーザに関連付けられた第2の電子デバイスから受信したメッセージ内の単語又はフレーズを第1の電子デバイス100-1が検出する2つの例示的な実施形態を示す。図41Aは、会話記録3503と、メッセージ入力エリア3502と、アクティブ化可能な3つのアフォーダンス(デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、及びアプリケーションアフォーダンス3508)と、を含むメッセージアプリケーションに関する例示的なユーザインタフェース3500を示す。会話記録3503は、ポータブル多機能デバイス100-1のユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含んでいる。メッセージ記録に含まれる他の各ユーザは、アバターのスタック4002に表示されるアバター(例えば、「Mary Todd」のアバター4008)によって表される。
第1の実施形態では、デバイスは、選択可能なアフォーダンスを表示することによって、メッセージユーザインタフェース内の識別された単語又はフレーズに関連する追加のコンテンツを見るようにユーザに促す。デバイス100-1は、図41Aの会話記録3503に表示されたMary Toddからのメッセージ4102を受信する。本デバイスは、フレーズ4101(「Meteorite Catcher(隕石捕獲者)」)を、インターネット上で情報が入手可能な映画の名前として認識する。これに応じて、デバイスは、選択可能なアフォーダンス4104を表示し、ユーザに映画についての「詳細情報を見る」ように促す。次に、デバイスは、図41Bの選択可能なアフォーダンス4104上の接触4106を含むタップジェスチャを検出する。これに応じて、デバイスは、図41Cで、映画についてのポスターの表示4110と映画についての紹介情報4112とを含む、インターネット上で発見された映画に関する情報を表示する情報エリア4108を表示する。
第2の実施形態では、デバイスは、当該単語又はフレーズを強調表示することによって、識別された単語又はフレーズに関連する追加のコンテンツを別の検索ユーザインタフェースで見るようにユーザに促す。デバイス100-1は、図41Dの会話記録3503に表示された、Abeからのメッセージ4114を受信する。本デバイスは、フレーズ4103(「Astron Omer」)をインターネット上で情報が入手可能な俳優の名前として認識する。これに応じて、デバイスはフレーズ4103の強調表示4116を表示して、フレーズを選択するようにユーザを促す。続いて、デバイスは、図41Eのフレーズ4103上の接触4118を含むタップジェスチャを検出する。これに応じて、デバイスは、図41Fにおいて、フレーズ4103のインターネット検索の分類された結果(新しい記事3664、3678、及び3680、並びに映画プレビュー3670、3682、及び3684)を表示する検索ユーザインタフェース3661を表示する。デバイスは、映画プレビュー3670上で、図41Gの接触4120を含むタップジェスチャを検出する。これに応じて、デバイスは、映画プレビュー3670をメッセージセッションに投稿し、図41Hの会話記録3503に映画プレビュー3670を表示する。
図42A~図42Dは、一部の実施形態に係る、メッセージアプリケーション内でデジタル画像をキャプチャ及び投稿する方法4200を示すフロー図である。方法4200は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別個である。方法4200におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下で説明するように、方法4200は、メッセージアプリケーション内でデジタル画像をキャプチャして投稿する直観的な方法を提供する。この方法は、メッセージアプリケーション内でデジタル画像をキャプチャして投稿するときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによって、より効率的なヒューマンマシンインタフェースを作成するものである。バッテリ駆動の電子デバイスでは、ユーザがメッセージアプリケーション内のデジタル画像をより迅速かつ効率的にキャプチャして投稿することができれば、電力が節約され、バッテリ充電間隔が長くなる。
デバイスは、ディスプレイ上の(例えば、メッセージアプリケーションの)メッセージユーザインタフェース(例えば、図35Aのタッチスクリーン112上のユーザインタフェース3500)と、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの会話記録(例えばディスプレイの第1のエリアに表示されるもの、例えば図35Aの会話記録3503)を含むメッセージユーザインタフェースと、キーボード(例えばディスプレイの第2のエリアに表示されるもの、例えば図35Aのキーボード3501)と、メッセージ入力エリア(例えば、図35Aのエリア3502)と、デジタル画像アフォーダンス(例えば、図35Aのアフォーダンス3504)と、を表示する(4202)。
メッセージユーザインタフェースを表示している間に、デバイスは、デジタル画像アフォーダンスをアクティブ化する入力を検出する(4204)(例えば、タッチ感知ディスプレイを有する電子デバイスにおいて、デジタル画像アフォーダンス上のタップジェスチャを検出する)。例えば、図35Bにおいて、デバイス100-1は、デジタル画像アフォーダンス3504上の接触3512を含む入力を検出する。
デジタル画像アフォーダンスをアクティブ化する入力を検出したことに応じて、デバイスは、キーボードの表示を複数のデジタル画像の表示に置き換える(4206)が、この複数のデジタル画像は、メモリに記憶された1つ以上のデジタル画像と、デジタルカメラからのライブプレビュー画像とを含む。例えば、図35Bの接触3512を含むタップジェスチャの検出に応じて、デバイスは、図35Bのデジタルキーボード3501を、ライブプレビュー画像3514と以前にキャプチャされたデジタル画像3518とを含むデジタル画像トレイ3806に置き換える。
一部の実施形態では、メッセージユーザインタフェースは、デジタル画像アフォーダンスのアクティブ化を検出する前にデジタルキーボードを表示していない(例えば、会話記録が最大化されており、デジタル画像アフォーダンスの表示を含む)。例えば、図38Bにおいて、接触3804を含む入力がデジタル画像アフォーダンス3504で検出された場合、メッセージユーザインタフェース3500は、会話記録3700の全画面版を表示している。これに応じて、デバイスは、図38Cのデジタル画像トレイ3806の表示をおさめるために、会話記録3700の表示を縮小する。
一部の実施形態では、キーボードの表示に取って代わることは、キーボードの上に複数のデジタル画像を表示することを含む。一部の実施形態では、キーボードの表示に取って代わることは、キーボードを表示することを停止し、キーボードが表示されていた場所に(例えば、図35B及び図35Cのように)複数のデジタル画像を表示することを含む。
一部の実施形態では、複数のデジタル画像は、デジタル画像のスクロール可能なアレイである。例えば、図35P~図35Qにおいて、図35Pの位置3536-aから図35Qの位置3536-bまでの接触3536の移動3538を含むドラッグジェスチャが、デジタル画像トレイを左方にスクロールして、以前にキャプチャされた追加のデジタル画像3518-6及び3518-7が顕示化する。
一部の実施形態では、複数のデジタル画像には、最近共有された画像、最近受信された画像、会話の参加者を含む画像(例えば、顔認識によって識別されたもの)、デバイス内の前向きデジタルカメラからのリアルタイム画像、またはデバイス内の後向きデジタルカメラからのリアルタイム画像が含まれる。
一部の実施形態では、メモリに記憶されており、デジタル画像アフォーダンスをアクティブ化する入力の検出に応じて表示される1つ以上のデジタル画像は、メッセージセッション中にキャプチャ(及び又は投稿)されたデジタル画像から構成される(4208)。
デバイスは、複数のデジタル画像内に表示されたライブ画像を選択する入力を検出する(4210)(例えば、タッチ感知ディスプレイを有する電子デバイスにおいて、ライブ画像上のタップジェスチャを検出する)。例えば、図35Dにおいて、接触3512が、ライブプレビュー画像3514上(例えば、ライブプレビュー画像3514上に表示される画像キャプチャアフォーダンス3516上)で検出される。
ライブ画像を選択する入力を検出したことに応じて、デバイスは、会話記録の表示を保持しながら、デジタルカメラを用いてデジタル画像をキャプチャする(4212)。例えば、図35Dの接触3512を含む入力を検出したことに応じて、電子デバイス100-1は、図35Eのメッセージ入力エリア3502に表示されるデジタル画像3518-5をキャプチャする。
一部の実施形態では、デジタル画像をキャプチャした後、デバイスは、デジタルカメラによってキャプチャされたデジタル画像を会話記録に表示し(4214)、キャプチャされたデジタル画像の表現を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに送信し、当該1つ以上の電子デバイスは、メッセージセッションに対応する会話記録内に、当該キャプチャされたデジタル画像の表現を表示する。例えば、デバイス100-1は、図35Fのメッセージコンテンツ投稿アフォーダンス3520上の接触3522を含む入力を検出し、これに応じて、図35Gの会話記録3503にキャプチャされたデジタル画像3518-5を表示する。また、デバイス100-1は、デジタル画像3518-5の表現を、メッセージセッションの他のユーザ(例えば「Abe」)に関連付けられた他の電子デバイスに送信する。
一部の実施形態では、キャプチャされた画像は、ライブ画像の選択時に自動的にメッセージセッションに投稿される。例えば、図35H~図35Gの接触3524を含む深押しのジェスチャの検出に応じて、図35Iの会話記録3503に表示されるように、デバイス100-1はキャプチャされたデジタル画像3518-5をメッセージセッションに自動的に投稿する。一部の実施形態では、デバイスは、入力(例えば、タップ、押圧、深押し、ダブルタップ、マルチフィンガタップ、長押し、又は接触の移動を含む入力)を検出し、入力の種類に応じて、キャプチャされたデジタル画像をメッセージ入力エリアに配置するか、又はメッセージセッションに直接投稿する(例えば、会話記録に表示する)。例えば、更に、図35C~図35Iには、タップジェスチャが、デバイスにキャプチャされた画像をメッセージ入力エリアに配置させ(例えば、図35D~図35Fのように)、深押し(又はマルチフィンガ入力)が、デバイスに画像をメッセージセッションに直接投稿させる(例えば、図35H-35Iのように)場合の例示的な実施形態が示されている。
一部の実施形態では、キャプチャされた画像がメッセージ入力エリアに表示され、ユーザが、(例えば、タップジェスチャで送信アイコンをアクティブ化することによって)この画像をメッセージセッションに投稿する。例えば、図35Fのメッセージコンテンツ投稿アフォーダンス3520のアクティブ化によって、図35Gのメッセージ記録3503に表示されるように、デバイスは、キャプチャされた画像をメッセージセッションに投稿する。
一部の実施形態では、デジタルカメラによってキャプチャされたデジタル画像(又は任意の以前にキャプチャされた画像)を会話記録に表示して、キャプチャされた画像の表現を送信する前に、デバイスは、(例えば、図35Vに示されるように)メッセージ入力エリアに、デジタルカメラによってキャプチャされたデジタル画像(又は以前にキャプチャされた任意の画像)を表示する。デバイスは、デジタルカメラによってキャプチャされたデジタル画像(又は以前にキャプチャされた任意のデジタル画像)をメッセージ入力エリアに表示している間に、画像編集モードをアクティブ化する入力を検出する(例えば、図35Wの接触3546)。画像編集モードをアクティブ化する入力を検出したことに応じて、デバイスは、メッセージユーザインタフェースの表示をデジタル写真編集ユーザインタフェース(例えば、図35Xのユーザインタフェース3509)の表示に置き換え、デジタルカメラによってキャプチャされたデジタル画像(又は任意の以前にキャプチャされたデジタル画像)が、デジタル写真編集ユーザインタフェース(例えば、図35Xのデジタル画像3518-4)に表示される。デジタル写真編集モードを表示している間に、デバイスは、デジタルカメラによってキャプチャされたデジタル写真(又は任意の以前にキャプチャされたデジタル画像)を編集する入力を検出する。例えば、この入力は、デバイス100-1に図35Zの口ひげ3562を描画させたり、図35ABに拡大ルーペ3566を配置したり、図35AB~図35AFに拡大ルーペ3566を設定したり、図35AHに「Senor Snowman(セニョール雪だるま)」3578を入力したり、あるいは図35AJに手書き3582を追加するものである。デバイスは、デジタルカメラによってキャプチャされたデジタル写真(又は任意の以前にキャプチャされたデジタル画像)を編集する入力を検出したことに応じて、デジタルカメラによってキャプチャされたデジタル画像を編集する(例えば、上述のように、画像の上に描画し、拡大し、タイプし、手書きする)(4216)。デジタルカメラによってキャプチャされたデジタル画像を編集した後、デバイスはデジタル画像編集モードを終了させる入力を検出する(例えば、図35AKの接触3586)。デジタル画像編集モードを終了させる入力を検出したことに応じて、デバイスは、デジタルカメラによってキャプチャされて編集されたデジタル画像(又は任意の以前にキャプチャされたデジタル画像)をメッセージ入力エリアに表示する(例えば、図35ALに図示されたように)。
一部の実施形態では、デジタル画像編集モードを終了させる入力を検出したことに応じて、デバイスは、デジタルカメラによってキャプチャされて編集されたデジタル画像を会話記録に表示し、編集された画像の表現を、メッセージセッションに含まれる別のユーザに対応する少なくとも1つの他の電子デバイスに送信する。
一部の実施形態では、上述の説明に従って、任意のデジタル画像(例えば、以前にキャプチャされたデジタル画像3518のうちの任意のもの)をメッセンジャアプリケーションから編集し、次にメッセージセッションに投稿することができる。
一部の実施形態では、ライブプレビュー画像を選択する入力の検出に応じて、デジタル画像をキャプチャした後、デバイスは、デジタル画像(例えば、図35Kのメッセージ入力エリア3502に表示されるデジタル画像3518-5)をメッセージ入力エリアに表示する。メッセージ入力エリアにデジタル画像を表示している間に、デバイスは、メッセージ入力エリアにおけるメッセージ(例えば、図35Mのメッセージ3530などのテキストメッセージ)の入力を検出する。メッセージ入力エリアへのメッセージの入力を検出した後、デバイスは、メッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出する(例えば、図35Nの接触3532などの送信アイコン上のタップジェスチャを検出する)が、このコンテンツはデジタル画像とメッセージとを含んでいる。メッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出したことに応じて、デバイスは、会話記録にデジタル画像(例えば、図35Oの会話記録3503内のデジタル画像3518-5)を表示し、デバイスは、会話記録に(例えば、メッセージ領域内に)メッセージを表示する(4218)が、このメッセージ(例えば、メッセージ領域)は、会話記録において、デジタル画像と部分的に重なる。例えば、メッセージ3534は、図35Oの会話記録3503内のデジタル画像3518-5と部分的に重なる。デバイスはまた、メッセージセッションに含まれる少なくとも1人の他のユーザ(例えば、図35Oの「Abe」)に対応する1つ以上の電子デバイスに、デジタル画像の表現とメッセージとを送信するが、当該1つ以上の電子デバイスは、メッセージセッションに対応する会話記録にこのデジタル画像の表現とメッセージ(例えば、メッセージ領域)とを表示し、このメッセージ(例えば、メッセージ領域)は、メッセージセッションに対応する会話記録内のデジタル画像の表現と部分的に重なる。
一部の実施形態では、ライブ画像を選択する入力を検出したことに応じて、ライブ画像を選択する入力が1つ以上の入力エリア表示基準(例えば、入力における接触の移動、タイミング、及び/又は強度、に基づく1つ以上の基準)を満たすという判定に従って(例えば、入力エリア表示基準が接触3512を含むタップジェスチャによって満たされる場合に、図35D及び図35Eに示すように)、デバイスは、メッセージ入力エリアに、デジタルカメラによってキャプチャされたデジタル画像を表示し(4220)、ライブ画像を選択する入力が1つ以上の記録エリア表示基準(例えば、入力における接触の移動、タイミング、及び/又は強度に基づく1つ以上の基準であり、入力エリア表示基準とは異なる)を満たすという判定に従って(例えば、接触3524を含む押圧ジェスチャによって記録エリア表示基準が満たされる場合に、図35H及び図35Iに示すように)、デバイスは、デジタルカメラによってキャプチャされたデジタル画像を会話記録に表示し、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに対して、デジタルカメラによってキャプチャされたデジタル画像をメッセージセッションに対応する会話記録に表示するための命令を送信する。
一部の実施形態では、電子デバイスは、タッチ感知面上の接触の強度を検出するように構成された1つ以上のセンサを備える。複数のデジタル画像内に表示されたライブ画像を選択する入力を検出することには、デバイスが、ディスプレイ上のライブ画像の表示に対応するタッチ感知面上の場所で第1の接触を検出する(4222)ことが含まれる。1つ以上の記録エリア表示基準は、その基準が満たされるためには、タッチ感知面上の第1の接触の特性強度が対応する強度閾値を満たすことを必要とする(例えば、接触3524の特性強度が予め定義された強度閾値(例えば、IT又はIT)を満たすので、記録エリア表示基準が図35Iで満たされる)。1つ以上の入力エリア表示基準は、選択基準が満たされるために、タッチ感知面上の接触の特性強度が対応する強度閾値を満たすことを必要としない(例えば、接触3512の特性強度が予め定義された強度閾値(例えば、IT又はIT)を満たさないにもかかわらず、入力エリア表示基準は図35D及び図35Eの図で満たされる)。
一部の実施形態では、入力エリア表示基準は、第1の接触の特性強度が第1の強度閾値と第2の強度閾値との間にあるときに満たされ、記録エリア表示基準は、第1の接触の特性強度が第2の強度閾値と第3の強度閾値との間にあるときに満たされる。一部の実施形態では、第2の強度閾値は第1の強度閾値より大きく、第3の強度閾値は第2の強度閾値より大きい(例えば、タップすると、画像をメッセージセッションに投稿する前にメッセージ入力エリアにデジタル画像を表示し、軽押しする(又は深押しする)と、デジタル画像をメッセージセッションに直接投稿する)。一部の実施形態では、第2の強度閾値は第1の強度閾値未満であり、第3の強度閾値は第2の強度閾値未満である(例えば、深押しすると、画像をメッセージセッションに投稿する前にメッセージ入力エリアにデジタル画像を表示し、タップすると、デジタル画像をメッセージセッションに直接投稿する)。
一部の実施形態では、タッチ感知面上のタップジェスチャ(例えば、図35Dの接触3512を含むタップジェスチャ)の検出(4224)により、1つ以上の入力エリア表示基準が満たされる。
一部の実施形態では、複数のデジタル画像内に表示されたライブプレビュー画像(又は以前にキャプチャされたデジタル画像)を選択する入力を検出する前に、デバイスは、複数のデジタル画像内の第1のデジタル画像の表示に対応する場所で、プレビュー強度閾値を超える第2の接触の特性強度の増加を検出することを含む第2の入力の第1の部分を検出する。例えば、デバイス100-1は、図35Rと35Sとの間の予め定義された強度閾値(例えば、IT又はIT)を超えて増加する強度の、接触3540を含む入力を検出する。一部の実施形態では、第1のデジタル画像はライブプレビュー画像(例えば、ライブプレビュー画像3514)である。ISE、第1のデジタル画像は以前にキャプチャされた画像(例えば、以前にキャプチャされた図35Rのデジタル画像3518-4)である。
第2の入力の第1の部分を検出したことに応じて、デバイスは、第1のデジタル画像のサイズを増加させる(4226)。例えば、接触3540の強度の増加を検出したことに応じて、デバイス100-1は、図35Sのデジタル画像3518-4の拡大プレビュー3507を表示する。一部の実施形態では、第1のデジタル画像のサイズは、第2の接触の特性強度の増加に従って動的に増加する。第1のデジタル画像のサイズを増加させた後、プレビュー強度閾値未満の第2の接触の特性強度の低下を検出することを含んだ第2の入力の第2の部分を検出し、第2の入力の第2の部分を検出したことに応じて、第1のデジタル画像のサイズを縮小する。例えば、デバイス100-1は、図35Sと図35Tとの間への接触3540の強度の低下を検出し、これに応じて、図35Tのデジタル画像トレイ内の画像3518-4を元のサイズに縮小する。
一部の実施形態では、デバイスは、フォーカスセレクタが、複数のデジタル画像における第1のデジタル画像に対応するメッセージユーザインタフェース内の第1の場所にある間に開始する第1のスワイプジェスチャを含むユーザ入力を検出し、この第1のスワイプジェスチャはフォーカスセレクタを第1の方向に移動させる(例えば、タッチ感知ディスプレイなどのタッチ感知面上の接触によって、第1のデジタル画像から開始して、第1の方向に(例えば、ディスプレイの端部に向かって)移動するドラッグジェスチャを検出するか、あるいは、カーソル又は他のポインタがディスプレイ上の第1のデジタル画像にある間に開始して、ディスプレイ上の第1の方向にポインタを移動させるタッチ感知面上の接触によるスワイプジェスチャを検出する)。例えば、デバイス100-1は、図35Pの場所3536-aから図35Qの場所3536-bまでの接触3536の移動3538を含む左方へのスワイプジェスチャを検出する。
第1のスワイプジェスチャの検出に応じて、デバイスは、ディスプレイ上の第1の方向へ複数のデジタル画像の表示をスクロールし(4228)、このスクロール表示は、複数のデジタル画像において、ディスプレイの第1の端部からスクロールして消えるデジタル画像の表示を停止することと、複数のデジタル画像において、ディスプレイの第2の(例えば、反対側の)端部から現れる新しいデジタル画像を表示することと、を含む(例えば、写真はディスプレイからスワイプジェスチャの方向にスクロールして消え、新しい画像がディスプレイの反対側の端部からディスプレイ上にもたらされる)。例えば、図35Qにおいて、デバイス100-1は、移動3538に従って、デジタル画像トレイ3806を左方に移動させ、ライブプレビュー画像3514が、タッチスクリーン112の左側からスライドして消え、追加のデジタル画像3518-6及び3518-7が、図35Qで、タッチスクリーン112の右側からディスプレイ上にスライドして現れる外観を生成する。
一部の実施形態では、デバイスは、フォーカスセレクタが複数のデジタル画像における第1のデジタル画像に対応するメッセージユーザインタフェース内の第1の場所にある間に開始する第2のスワイプジェスチャを含むユーザ入力を検出し、第1のスワイプジェスチャはフォーカスセレクタを第2の方向(例えば、第1の方向とは反対の方向)に移動させる、例えば、デバイスは、第1のデジタル画像で開始して第2の方向に(例えば、ディスプレイの反対側の端部に向かって)移動する、タッチ感知ディスプレイなどのタッチ感知面上の接触によってドラッグジェスチャを検出するか、あるいは、カーソル又は他のポインタがディスプレイ上の第1のデジタル画像にある間に開始してディスプレイ上の第2の方向にポインタを移動させるタッチ感知面上の接触によってスワイプジェスチャを検出する。例えば、デバイス100-1は、図38Fの位置3812-aから図38Gの位置3828-bへの接触3812の移動を含む右方へのスワイプジェスチャを検出する。
第2のスワイプジェスチャの検出に応じて、デバイスは、デジタルカメラの第1アフォーダンスと写真ライブラリの第2アフォーダンスとを表示する(4230)(例えば、ディスプレイの第1端部から顕示化する)。例えば、図38Gの接触3812の移動3814を含むスワイプジェスチャの検出に応じて、全画面カメラアフォーダンス3816及び写真ライブラリアフォーダンス3818が、タッチスクリーン112の左側からデジタル画像トレイ3806に顕示化される。
一部の実施形態では、デジタルカメラの第1アフォーダンス(例えば、図38Hのカメラアフォーダンス3816)を表示する間に、デバイスは、デジタルカメラの第1アフォーダンスをアクティブ化する入力(例えば、図38Hの接触3820)を検出し、デジタルカメラの第1のアフォーダンスをアクティブ化する当該入力を検出したことに応じて、デバイスは、メッセージユーザインタフェースのうちの少なくとも一部(例えば、図38Iに表示されたユーザインタフェース3822)の上にデジタルカメラのユーザインタフェースを表示する(4232)。一部の実施形態では、対話型アプリケーションユーザインタフェースが、(例えば、図38Iのように)メッセージユーザインタフェースの表示に完全に取って代わる。
一部の実施形態では、写真ライブラリの第2のアフォーダンス(図38Oのアフォーダンス3818)を表示する間に、デバイスは、写真ライブラリの第2のアフォーダンスをアクティブ化する入力(例えば、図38Oの接触3830)を検出し、写真ライブラリの第2のアフォーダンスをアクティブ化する入力を検出したことに応じて、デバイスは、メモリに記憶された1つ以上のデジタル画像と、デジタルカメラからのライブプレビュー画像とを含む複数のデジタル画像を表示することを停止し(4234)、デジタル写真ライブラリ(例えば、電子デバイスに記憶された写真ライブラリ又は遠隔地に記憶された写真ライブラリ)からの複数のデジタル画像を表示する。例えば、図38Oの接触3830を含む入力の検出に応じて、デバイス100-1は、図38Oのメッセンジャユーザインタフェース3500の表示を図38Pの写真ライブラリユーザインタフェース3832に置き換える。
デジタル写真ライブラリから複数のデジタル画像を表示している間に、デバイスは、デジタル写真ライブラリから複数のデジタル画像内のデジタル画像を選択する入力を検出し、デジタル写真ライブラリからデジタル画像を選択する入力を検出したことに応じて、デバイスは、デジタル写真ライブラリからのデジタル画像を会話記録に表示する。一部の実施形態では、デジタル画像は、画像の選択時に自動的にメッセージセッションに投稿される。一部の実施形態では、デジタル画像がメッセージ入力エリアに表示され、ユーザが、(例えば、タップジェスチャで送信アイコンをアクティブ化することによって)この画像をメッセージセッションに投稿する。デバイスはまた、メッセージセッションに含まれる少なくとも1人の他のユーザ(例えば、「Abe」)に対応する1つ以上の電子デバイスに、デジタル写真ライブラリからのデジタル画像の表現を送信し、これら1つ以上の電子デバイスは、デジタル写真ライブラリからの当該デジタル画像の表現を、メッセージセッションに対応する会話記録に表示する。
図42A~図42Dにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600,800,1000,1200,1400,1600,1800,2100,2400,2600,2800,3100,3300,4400,4600,4800,5000,5200,5400,5600,5800,6000,6200、6400、6600、6800、及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図42A~図42Dに関して上述した方法4200にも、類似した方法で適用可能であることに留意されたい。例えば、方法4200に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600,800,1000,1200,1400,1600,1800,2100,2400,2600,2800,3100,3300,4400,4600,4800,5000,5200,5400,5600,5800,6000,6200,6400,6600,6800,及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図43は、説明されるさまざまな実施形態の原理に従って構成された電子デバイス4300の機能ブロック図を示す。本デバイスの機能ブロックは、説明されるさまざまな実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図43で説明される機能ブロックが、説明されるさまざまな実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択的にサポートする。
図43に示すように、電子デバイス4300は、ユーザインタフェースを表示するように構成されたディスプレイユニット4302と、タッチ感知面ユニット4304と、任意選択のセンサユニット(単数又は複数)4306と、画像をキャプチャするように構成されたデジタルカメラユニット4308と、メモリユニット4310と、ディスプレイユニット4302とデジタルカメラユニット4308とタッチ感知面ユニット4304とメモリユニット4310とに連結された処理ユニット4312と、を含んでいる。一部の実施形態では、処理ユニットは、表示可能化ユニット4314、検出ユニット4316、画像キャプチャユニット4318、送信ユニット4320、編集ユニット4322、及びスクロールユニット4324を含む。
処理ユニット4312は、(例えば、表示可能化ユニット4314により)ディスプレイユニット上にメッセージユーザインタフェースを表示するように構成され、このメッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、キーボードと、メッセージ入力エリアと、デジタル画像アフォーダンスとを含む。処理ユニット4312は、メッセージユーザインタフェースを表示している間に、デジタル画像アフォーダンスをアクティブ化する入力を(例えば、検出ユニット4316を用いて)検出するように更に構成されている。処理ユニット4312は、デジタル画像アフォーダンスをアクティブ化する入力を検出したことに応じて、(例えば、表示可能化ユニット4314により)キーボードの表示を複数のデジタル画像の表示に置き換えるように更に構成されており、この複数のデジタル画像には、メモリユニット4310に記憶された1つ以上のデジタル画像とデジタルカメラユニット4308からのライブプレビュー画像とが含まれる。処理ユニット4312は更に、複数のデジタル画像内に表示されたライブ画像を選択する入力を(例えば、検出ユニット4316を用いて)検出するように更に構成されている。処理ユニット4312は、ライブ画像を選択する入力の検出に応じて、会話記録の表示を保持しながら、デジタル画像をデジタルカメラユニット4308で(例えば、画像キャプチャユニット4318を用いて)キャプチャするように更に構成されている。
一部の実施形態では、処理ユニット4312は、デジタル画像をキャプチャした後、デジタルカメラ4308によってキャプチャされたデジタル画像を会話記録に(例えば、表示可能化ユニット4314を用いて)表示し、キャプチャされたデジタル画像の表現を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット4320を用いて)送信するように構成されており、当該1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に、キャプチャされたデジタル画像の表現を表示する。
一部の実施形態では、処理ユニット4312は、デジタルカメラユニット4308によってキャプチャされたデジタル画像を会話記録に表示しキャプチャされた画像の表現を送信する前に、(例えば、表示可能化ユニット4314を用いて)デジタルカメラユニット4308によってキャプチャされたデジタル画像をメッセージ入力エリアに表示するように構成されている。処理ユニット4312は、デジタルカメラユニット4308によってキャプチャされたデジタル画像をメッセージ入力エリアに表示しながら、画像編集モードをアクティブ化する入力を(例えば、検出ユニット4316を用いて)検出するように更に構成されている。処理ユニット4312は、画像編集モードをアクティブ化する入力を検出したことに応じて、メッセージユーザインタフェースの表示を(例えば、表示可能化ユニット4314を用いて)デジタル写真編集ユーザインタフェースの表示に置き換えるように更に構成され、デジタルカメラユニット4308によってキャプチャされたデジタル画像が、デジタル写真編集ユーザインタフェースに表示される。処理ユニット4312は、デジタル写真編集モードを表示している間に、デジタルカメラユニット4308によってキャプチャされたデジタル写真を編集する入力を(例えば、検出ユニット4316を用いて)検出するように更に構成されている。処理ユニット4312は、デジタルカメラユニット4308によってキャプチャされたデジタル写真を編集する入力を検出したことに応じて、デジタルカメラユニット4308によってキャプチャされたデジタル画像を(編集ユニット4322を用いて)編集するように更に構成されている。処理ユニット4312は、デジタルカメラユニット4308によってキャプチャされたデジタル画像を編集した後、デジタル画像編集モードを終了させる入力を(例えば、検出ユニット4316で)検出するように更に構成されている。処理ユニット4312は、デジタル画像編集モードを終了させる入力の検出に応じて、メッセージ入力エリアに、デジタルカメラユニット4308によってキャプチャされて編集されたデジタル画像を(例えば、表示可能化ユニット4314で)表示するように更に構成されている。
一部の実施形態では、処理ユニット4312は、ライブプレビュー画像を選択する入力の検出に応じて、デジタル画像をキャプチャした後、メッセージ入力エリアにデジタル画像を(例えば、表示可能化ユニット4314を用いて)表示するように構成されている。処理ユニット4312は、デジタル画像をメッセージ入力エリアに表示しながら、メッセージ入力エリア内のメッセージの入力を(例えば、検出ユニット4316を用いて)検出するように更に構成されている。処理ユニット4312は更に、メッセージ入力エリア内のメッセージの入力を検出した後、メッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を(例えば、検出ユニット4316で)検出するように更に構成されており、当該コンテンツにはデジタル画像及びメッセージが含まれる。処理ユニット4312は、メッセージ入力エリアの内容をメッセージセッションに投稿する要求に対応する入力を検出したことに応じて、会話記録にデジタル画像を(例えば、表示可能化ユニット4314を用いて)表示して、会話記録にメッセージであって、メッセージは、会話記録内でデジタル画像と部分的に重なり、メッセージを(例えば、表示可能化ユニット4314で)表示し、デジタル画像の表現及びメッセージを、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット4320で)送信するように更に構成され、当該1つ以上の電子デバイスは、当該デジタル画像の表現及びメッセージを、当該メッセージセッションに対応する会話記録に表示し、当該メッセージは、メッセージセッションに対応する会話記録内で当該デジタル画像の表現と部分的に重なる。
一部の実施形態では、処理ユニット4312は、ライブ画像を選択する入力の検出に応じて、ライブ画像を選択する入力が1つ以上の入力エリア表示を満たすという判定に従って、デジタルカメラユニット4308によってキャプチャされたデジタル画像をメッセージ入力エリアに(例えば、表示可能化ユニット4314を用いて)表示するように構成されている。処理ユニット4312は、ライブ画像を選択する入力が1つ以上の記録エリア表示基準を満たすという判定に従って、デジタルカメラユニット4308によってキャプチャされたデジタル画像を会話記録に(例えば、表示可能化ユニット4314で)表示して、デジタルカメラユニット4308によってキャプチャされたデジタル画像をメッセージセッションに対応する会話記録に表示する命令を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット4320で)送信するように更に構成されている。
一部の実施形態では、電子デバイスは、タッチ感知面ユニット4304上の接触の強度を検出するように構成された1つ以上のセンサユニット4306を備える。一部の実施形態では、複数のデジタル画像内に表示されたライブ画像を選択する入力を検出することには、ディスプレイユニット上のライブ画像の表示に対応するタッチ感知面ユニット4304上の場所に第1の接触を検出することが含まれる。一部の実施形態では、1つ以上の記録エリア表示基準は、その基準が満たされるためには、タッチ感知面ユニット4304上の第1の接触の特性強度が対応する強度閾値を満たすことを必要とする。一部の実施形態では、1つ以上の入力エリア表示基準は、その選択基準が満たされるために、タッチ感知面ユニット4304上の接触の特性強度が対応する強度閾値を満たすことを必要とはしない。
一部の実施形態では、タッチ感知面ユニット4304上のタップジェスチャの検出時に、1つ以上の入力エリア表示基準が満たされる。
一部の実施形態では、処理ユニット4312は、複数のデジタル画像内に表示されたライブ画像を選択する入力を検出する前に、複数のデジタル画像内の第1のデジタル画像の表示に対応する場所で、プレビュー強度閾値を超える第2の接触の特性強度の増加を検出することを含む第2の入力の第1の部分を(例えば、検出ユニット4316を用いて)検出するように構成されている。処理ユニット4312は、第2入力の第1部分の検出に応じて、第1デジタル画像のサイズを増加させるように更に構成されている。処理ユニット4312は、第1のデジタル画像のサイズを増加させた後、プレビュー強度閾値未満への第2の接触の特性強度の低下を検出することを含む第2の入力の第2の部分を(例えば検出ユニット4316を用いて)検出するように更に構成されている。処理ユニット4312は、第2の入力の第2の部分の検出に応じて、第1のデジタル画像のサイズを減少させるように更に構成されている。
一部の実施形態では、処理ユニット4312は、フォーカスセレクタが複数のデジタル画像における第1のデジタル画像に対応するメッセージユーザインタフェース内の第1の場所にある間に開始する、第1のスワイプジェスチャを含むユーザ入力を(例えば検出ユニット4316を用いて)検出するように構成され、第1のスワイプジェスチャはフォーカスセレクタを第1の方向に移動させる。処理ユニット4312は、第1のスワイプジェスチャの検出に応じて、ディスプレイユニット上の第1の方向へ複数のデジタル画像の表示を(例えば、スクロールユニット4324を用いて)スクロールするように更に構成され、このスクロール表示は、複数のデジタル画像において、ディスプレイユニットの第1の端部からスクロールして消えるデジタル画像の表示を停止することと、複数のデジタル画像において、ディスプレイユニットの第2の端部から現れた新しいデジタル画像を表示することと、を含む。
一部の実施形態では、処理ユニット4312は、フォーカスセレクタが、複数のデジタル画像における第1のデジタル画像に対応するメッセージユーザインタフェース内の第1の場所にある間に開始する、第2のスワイプジェスチャを含むユーザ入力を(例えば、検出ユニット4316を用いて)検出するように構成され、第1のスワイプジェスチャはフォーカスセレクタを第2の方向に移動させる。処理ユニット4312は、第2のスワイプジェスチャの検出に応じて、デジタルカメラユニット4308の第1のアフォーダンスと写真ライブラリの第2のアフォーダンスとを(例えば、表示可能化ユニット4314を用いて)表示するように更に構成されている。
一部の実施形態では、処理ユニット4312は、デジタルカメラユニット4308の第1アフォーダンスを表示している間に、デジタルカメラユニット4308の第1アフォーダンスをアクティブ化する入力を(例えば、検出ユニット4316を用いて)検出するように構成されている。処理ユニット4312は、デジタルカメラユニット4308の第1アフォーダンスをアクティブ化する入力の検出に応じて、メッセージユーザインタフェースの少なくとも一部にわたって、デジタルカメラユニット4308のユーザインタフェースを(例えば、表示可能化ユニット4314を用いて)表示するように更に構成されている。
一部の実施形態では、処理ユニット4312は、写真ライブラリの第2アフォーダンスを表示している間に、写真ライブラリの第2アフォーダンスをアクティブ化する入力を(例えば、検出ユニット4316を用いて)検出するように構成されている。処理ユニット4312は、写真ライブラリの第2のアフォーダンスをアクティブ化する入力を検出したことに応じて、メモリユニット4310に記憶された1つ以上のデジタル画像とデジタルカメラユニット4308からのライブプレビュー画像とを含む複数のデジタル画像を(例えば、表示可能化ユニット4314を用いて)表示することを停止して、デジタル写真ライブラリからの複数のデジタル画像を表示するように更に構成されている。処理ユニット4312は、デジタル写真ライブラリからの複数のデジタル画像を表示している間に、デジタル写真ライブラリからの複数のデジタル画像における一つのデジタル画像を選択する入力を(例えば、検出ユニット4316を用いて)検出するように更に構成されている。処理ユニット4312は、更に、デジタル写真ライブラリからデジタル画像を選択する入力を検出したことに応じて、デジタル写真ライブラリからの当該デジタル画像を会話記録に(例えば、表示可能化ユニット4314を用いて)表示し、デジタル写真ライブラリからの当該デジタル画像の表現を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット4320を用いて)送信するように更に構成され、当該1つ以上の電子デバイスは、デジタル写真ライブラリからの当該デジタル画像の表現を、当該メッセージセッションに対応する会話記録に表示する。
一部の実施形態では、メモリユニット4310に記憶され、かつデジタル画像アフォーダンスをアクティブ化する入力の検出に応じて表示される、1つ以上のデジタル画像は、メッセージセッション中にキャプチャされたデジタル画像から構成される。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって、任意選択的に実施される。
図42A~図42Dを参照して上述された動作は、図1A、図1B又は図43に示される構成要素によって、任意選択的に実施される。例えば、検出動作4204及び4210は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図44A~図44Dは、一部の実施形態に係る、メッセージアプリケーション内のマルチメディアコンテンツを検索して共有する方法4400を例示するフロー図である。方法4400は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別個である。方法4400におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下に説明するように、方法4400は、メッセージアプリケーション内のマルチメディアコンテンツを検索して共有する直感的な方法を提供する。この方法は、メッセージアプリケーション内のマルチメディアコンテンツを検索して共有するときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによってより効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、ユーザがメッセージアプリケーション内のマルチメディアコンテンツをより迅速かつ効率的に検索して共有することができれば、電力が節約され、バッテリ充電間隔が増大することになる。
デバイスは、(例えば、メッセージアプリケーションの、図36A及び図36Yのユーザインタフェース3500などの)メッセージユーザインタフェースをディスプレイに表示する(4402)が、このメッセージユーザインタフェースは、電子デバイスのユーザと(例えば、図36A及び図36Yのアバター3510によって表される「Abe」などの別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの会話記録(例えば、ディスプレイの第1のエリアに表示されるもの、例えば、図36A及び図36Yの会話記録3503)と、検索アフォーダンス(例えば、図36Aの検索アフォーダンス3602又は図36Yの検索起動アイコン3607)と、を含んでいる。一部の実施形態では、メッセージユーザインタフェースは、メッセージセッションに投稿される準備の整ったコンテンツ(例えば、図36A及び図36Yのメッセージコンテンツ入力エリア3502)を表示するように構成されたメッセージ入力エリアを含む。一部の実施形態では、メッセージユーザインタフェースは、例えばディスプレイの第2のエリアに表示されるキーボード(例えば、図36Aのデジタルキーボード3501)を含む。
一部の実施形態では、検索アフォーダンスは、メッセージユーザインタフェース内の対話型アプリケーションの複数の起動アイコン内の検索アプリケーションの起動アイコンとして表示される(例えば、検索起動アイコン3607は、起動アイコン3601、3603,3605,3609,3611,3613,及び3615を有するアプリケーション選択トレイ3654の中に表示される)。一部の実施形態では、検索アフォーダンスは、メッセージアプリケーション内の対話型アプリケーションのための複数の起動アイコンと共に表示される検索アプリケーション起動アイコン(4404)である。
一部の実施形態では、メッセージユーザインタフェースに対話型アプリケーションの複数の起動アイコンを表示する前に、メッセージユーザインタフェースには、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの会話記録(例えば、ディスプレイの第1のエリアに表示されるもの)と、(例えば、ディスプレイの第2のエリアに表示される)キーボードと、メッセージ入力エリアと、アプリケーションアフォーダンスと、が含まれていた。例えば、図36Wにおいて、ユーザインタフェース3500には、会話記録3503と、キーボード3501と、メッセージコンテンツ入力エリア3502と、アプリケーションアフォーダンス3508と、が含まれる。デバイスは、アプリケーションアフォーダンスをアクティブ化するユーザ入力を検出し(例えば、図36Xの接触3652を含む入力)、アプリケーションアフォーダンスをアクティブ化するユーザ入力の検出に応じて、キーボードの表示を対話型アプリケーションの複数の起動アイコンの表示に置き換える(4406)(例えば、図36Yのアプリケーション選択トレイ3654は、図36Xのデジタルキーボード3501に取って代わる)。
一部の実施形態では、メッセージユーザインタフェースは、アプリケーションアフォーダンスの検出前に、デジタルキーボードを表示していない(例えば、会話記録が最大化されており、アプリケーションアフォーダンスの表示を含んでいる)。例えば、図38AJ~図38AMに例示されているように。
一部の実施形態では、キーボードの表示に取って代わることは、キーボードの上に対話型アプリケーションのための複数の起動アイコンを表示することを含む。一部の実施形態では、キーボードの表示に取って代わることは、キーボードを表示することを停止し、キーボードが表示されていた場所に、対話型アプリケーションの複数の起動アイコンを表示することを含む。
メッセージユーザインタフェースを表示している間に、デバイスは、検索アフォーダンスをアクティブ化する入力を検出する(4408)。例えば、入力は、図36Bの検索アフォーダンス3602上の接触3604を含む入力か、又は図36Zの検索アプリケーション起動アイコン3607上の接触3656を含む入力である。
検索アフォーダンスをアクティブ化する入力を検出することに応じて(4410)、デバイスは、メッセージユーザインタフェースを表示することをやめ、検索ユーザインタフェースを表示するが、この検索ユーザインタフェースは、検索フィールド及び複数の分類されたコンテンツアイテムを含み、この複数の分類されたコンテンツアイテムは、少なくとも、電子デバイスに記憶されたコンテンツアイテムとインターネットからのコンテンツアイテムとを含むものである。例えば、図36Zの検索アプリケーション起動アイコン3607をアクティブ化したことに応じて、デバイス100-1は、メッセンジャユーザインタフェース3500の表示を停止し、投稿のための推奨コンテンツとして分類されるコンテンツアイテム3662,3664,3666,3668,3670,3672(例えば、デバイスの現在の場所3662、インターネットからアクセスされるニュース記事3664、デバイス上で再生されるデジタル録音3666)と、最近共有されたコンテンツ(例えば、インターネットからアクセスされたニュース記事3668、インターネットからアクセスされた映画予告編3670、及びデジタル画像3672)と、を含む図36AAのサーチユーザインタフェース3658を表示する。
一部の実施形態では、コンテンツアイテムは、以下のような推奨コンテンツを含む。これらの推奨コンテンツとしては、デバイス上で開いているコンテンツ、デバイス上で最近アクセスされたコンテンツ(例えば、図36AAのコンテンツ3662,3664、及び3666)、メッセージセッションに関連するコンテンツ(例えば、メッセージセッションの任意のユーザに関連付けられたものとして識別されたコンテンツ)、デバイス上で開いているか、又は最近開いたコンテンツに関連するウェブコンテンツ(例えば、図36AAのコンテンツ3664,3668、及び3670)、メッセージセッションに関連するウェブコンテンツ、デバイスの場所に関連するコンテンツ(例えば、図36AAのコンテンツ3662)、最近共有されたコンテンツ(例えば、図36AAのコンテンツ3668,3670、及び3672)、最近受信されたコンテンツ、及び/又は流行しているコンテンツ(例えば、ソーシャルネットワーキングアプリケーションにおいて、例えば、図36AEのコンテンツ3678,3680,3668、及び3669)などがある。ISE、コンテンツアイテムは検索フィールドの入力に関連する(例えば、コンテンツ3664,3678,3680,3670,3682,及び3684は、図36AFの単語「Meteorites」の検索結果である)ものである。一部の実施形態では、コンテンツは、リッチリンク、音楽、アプリケーションリンク、及び/又はウェブリンクを含む。一部の実施形態では、複数の分類されたコンテンツアイテムは、コンテンツ分類によって整理されたスクロール可能なコンテンツアイテムのリストとして表示される(例えば、図36AG~図36Hの追加コンテンツは検索結果を左方にスクロールすることによってアクセスされる)。
検索ユーザインタフェースを表示している間に、デバイスは、複数の分類されたコンテンツアイテムの第1のコンテンツアイテムを選択する入力を検出する(例えば、タッチ感知ディスプレイを有する電子デバイスにおいて、第1のコンテンツアイテム上のタップジェスチャを検出する)。例えば、デバイス100-1は、図36ABの映画予告編3670上の接触3674を含むタップジェスチャと、図36AIの映画予告編3684上の接触3690を含むタップジェスチャとを検出する。
複数の分類されたコンテンツアイテム(4414)内の第1のコンテンツアイテムを選択する入力を検出した後、デバイスは検索ユーザインタフェースの表示を停止し、第1のコンテンツアイテムをメッセージユーザインタフェース内の会話記録に表示する。例えば、図36ABの映画予告編3670上の接触3674を含むタップジェスチャの検出に応じて、デバイス100-1は検索ユーザインタフェース3658の表示を図36ACのメッセージユーザインタフェース3500の表示に置き換える。同様に、図36AIの映画予告編3684上の接触3690を含むタップジェスチャの検出に応じて、デバイス100-1は検索ユーザインタフェース3658の表示を図36AJのメッセージユーザインタフェース3500の表示に置き換える。
デバイスはまた、第1のコンテンツアイテム(例えば、第1のコンテンツアイテムに関する情報)を、メッセージセッションに含まれる少なくとも1人の他のユーザ(例えば、「Abe」)に対応する1つ以上の電子デバイス(例えば、第2の)に送信し(4416)、当該1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に第1のコンテンツアイテムを表示する。
一部の実施形態では、第1のコンテンツアイテムを選択する入力を検出することは、フォーカスセレクタが第1のコンテンツアイテム上にある間に第1の入力を検出し、選択された第1のコンテンツアイテムをメッセージ入力エリアに表示することを含んでいる。例えば、図36AI~図36AJに例示されているように。一部の実施形態では、選択されたコンテンツアイテムをメッセージ入力エリアに表示している間に、デバイスは、メッセージ入力エリアのコンテンツをメッセージセッションの会話記録に投稿する第2の入力を検出する。例えば、デバイス100-1は、図36AKの送信アフォーダンス3520上の接触3696を含むタップ入力を検出し、図36ALの会話記録3503に表示されるように、映画予告編3684をメッセージセッションに投稿する。
一部の実施形態では、第1のコンテンツアイテムを選択する入力の検出に応じて、第1のコンテンツアイテムがメッセージセッションの会話記録に表示される(例えば、メッセージセッションに直接投稿される)。例えば、図36ABの映画予告編3670上の接触3674を含むタップジェスチャの検出に応じて、図36ACの会話記録3503に表示されるように、デバイス100-1はこの映画予告編を直接メッセージセッションに投稿する。
一部の実施形態では、検索ユーザインタフェースを表示している間に、複数の分類されたコンテンツアイテムにおける第1のコンテンツアイテムを選択する入力を検出する前に、デバイス(4418)は検索フィールドでクエリーの入力を受信し、検索フィールドでクエリーの入力を受信したことに応じて、表示された複数の分類されたコンテンツアイテムを更新して、クエリーを満足するコンテンツアイテムを表示する。例えば、図36ADの検索ユーザインタフェース3658を表示している間に、デバイス100-1は、検索フィールド3660で検索クエリー「Meterorites」の入力を受信し、これに応じて、図36AFにおいて、クエリーを満足する更新されたコンテンツアイテムを有する検索ユーザインタフェース3661を表示する。
一部の実施形態では、第1のコンテンツアイテムを選択する入力を検出したことに応じて、デバイス(4420)は、第1のコンテンツアイテムをメッセージ入力エリアに表示し、第1のコンテンツアイテムをメッセージ入力エリアに表示している間に、メッセージ入力エリア内でメッセージ(例えば、テキストメッセージ)の入力を受信する。メッセージ入力エリア内でメッセージの入力を受信した後、デバイスは、メッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出する(例えば、送信アイコン上のタップジェスチャを検出する)が、このコンテンツは第1のコンテンツアイテム及びメッセージを含んでいる。メッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出したことに応じて、デバイスは、第1のコンテンツアイテムを会話記録に表示し、このメッセージを会話記録に(例えば、メッセージ領域内に)表示するが、このメッセージは、会話記録内で(例えば、メッセージ領域内で)第1のコンテンツアイテムと部分的に重なり、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに第1のコンテンツアイテム及びメッセージを送信し、当該1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に第1のコンテンツアイテム及びメッセージを表示し、当該メッセージ(例えば、メッセージ領域)は、メッセージセッションに対応する会話記録内の第1のコンテンツアイテムと部分的に重なる。
一部の実施形態では、第1のコンテンツアイテムを選択する入力を検出したことに応じて、デバイス(4422)は、第1のコンテンツアイテムを選択する入力が1つ以上の入力エリア表示基準(例えば、入力における接触の移動、タイミング及び/又は強度に基づく1つ以上の評価基準)を満たすという判定に従って、(例えば、図36AI~図36AJに示すように)メッセージ入力エリアに第1のコンテンツアイテムを表示し、第1のコンテンツアイテムを選択する入力が、1つ以上の記録エリア表示基準(例えば、入力における接触の移動、タイミング及び/又は強度に基づく1つ以上の評価基準であって、これらは入力エリア表示基準とは異なる)を満たすという判定に従って、第1のコンテンツアイテムを会話記録に(例えば、図36AB及び図36ACに示すように)表示し、第1のコンテンツアイテムを、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに送信し、当該1つ以上の電子デバイスは、当該メッセージセッションに対応する会話記録に、第1のコンテンツアイテムを表示する。
一部の実施形態では、電子デバイスは、タッチ感知面上の接触の強度を検出するように構成された1つ以上のセンサを備える。複数のコンテンツアイテムの中の第1のコンテンツアイテムを選択する入力を検出することは、ディスプレイ上の第1のコンテンツアイテムの表示に対応するタッチ感知面上の場所における第1の接触を検出することを含む。1つ以上の記録エリア表示基準は、その基準が満たされるためには、タッチ感知面上の第1の接触の特性強度が対応する強度閾値を満たすことを必要とする(例えば、接触3674の特性強度が予め定義された強度閾値(例えば、IT又はIT)を満たす場合に、図36ABにおいて、記録エリア表示基準が満たされる)。1つ以上の入力エリア表示基準は、選択基準が満たされるために、タッチ感知面上の接触の特性強度が対応する強度閾値を満たすことを必要としない(例えば、接触3690の特性強度が予め定義された強度閾値(例えば、IT又はIT)をたとえ満たさなくても、入力エリア表示基準は、図36AI及び図36AJの図で満たされる)。
一部の実施形態では、(4424)入力エリア表示基準は、第1の接触の特性強度が第1の強度閾値と第2の強度閾値との間にあるときに満たされ、記録エリア表示基準は、第1の接触の特性強度が第2の強度閾値と第3の強度閾値との間にあるときに満たされる。一部の実施形態では、第2の強度閾値は第1の強度閾値より大きく、第3の強度閾値は第2の強度閾値より大きく(例えば、タップすると、コンテンツアイテムをメッセージセッションに投稿する前にメッセージ入力エリアにコンテンツアイテムを表示し、軽押しする(又は深押しする)と、第1のコンテンツアイテムをメッセージセッションに直接投稿する)。一部の実施形態では、第2の強度閾値は第1の強度閾値を下回り、第3の強度閾値は第2の強度閾値を下回る(例えば、軽押しする(又は深押しする)と、コンテンツアイテムをメッセージセッションに投稿する前にメッセージ入力エリアにコンテンツアイテムを表示し、タップすると、第1のコンテンツアイテムをメッセージセッションに直接投稿する)。
一部の実施形態では、タッチ感知面上のタップジェスチャ(例えば、図36AIの接触3690を含むタップジェスチャ)の検出により、1つ以上の入力エリア表示基準が満たされる(2426)。
一部の実施形態では、メッセージユーザインタフェース内の会話記録に第1のコンテンツアイテムを表示している間に、デバイス(4428)は、第1のコンテンツアイテムに対応する場所で第1の接触による第1の入力を検出し、この第1の入力の検出に応じて、第1の接触が1つ以上の拡張基準(例えば、タップ、深押し、又は長押しのジェスチャ)を満たすという判定に従って、デバイスは、第1のコンテンツアイテムに関連付けられたコンテンツの拡張バージョンを表示する。例えば、デバイス100-1は、図36Pの会話記録3503に表示されたニュース記事3634上の接触3636を含むタップジェスチャを検出する。これに応じて、デバイス100-1は、図36Qで、検索トレイ3629及び会話記録3503の一部の上に表示されたエリア3638内のニュース記事に関連付けられたウェブページにアクセスする。続いて、図36Rの位置3640-aから図36Sの位置3640-bまでの接触3640の移動3642を含むスワイプジェスチャの検出に応じて、デバイス100-1は、ウェブサイトからこのニュース記事のより多くをエリア3638に表示する。
一部の実施形態では、コンテンツの拡張バージョンとは、ウェブサイトへのナビゲーション、会話記録に表示された第1のコンテンツアイテムより多くのコンテンツを表示するアプリケーションプレビュープラッタ(platter)の表示、ビデオの表示、又はメッセージアプリケーション内の対話型アプリケーションの開始のことである。
一部の実施形態では、デバイスは、会話記録において、電子デバイスに記憶された追加のコンテンツと、インターネット上で入手可能な追加のコンテンツ(例えば、ビジネス/レストラン情報、音楽情報、映画情報;Siri/オントロジアプリケーションの定型文言の挿入)とに関連する単語又はフレーズを検出する(4430)。例えば、デバイス100-1は、フレーズ4103(「Astron Omer」)をインターネット上で情報が入手可能な俳優の名前として認識する。これに応じて、デバイスは、図41Dのフレーズ4103の強調表示4116を表示し、このフレーズを選択するようにユーザを促す。続いて、デバイスは、図41Eのフレーズ4103上の接触4118を含むタップジェスチャを検出する。これに応じて、デバイスは、図41Fにおいて、フレーズ4103のインターネット検索の分類された結果(新しい記事3664、3678、及び3680、並びに映画プレビュー3670、3682、及び3684)を表示する検索ユーザインタフェース3661を表示する。デバイスは、映画プレビュー3670上で、図41Gの接触4120を含むタップジェスチャを検出する。これに応じて、デバイスは、映画プレビュー3670をメッセージセッションに投稿し、図41Hの会話記録3503に映画プレビュー3670を表示する。一部の実施形態では、単語又はフレーズを検出することは、検索アフォーダンスをアクティブ化する入力を検出することに応じて行われる。検索ユーザインタフェースに表示される複数の分類されたコンテンツアイテムは、会話記録で検出された単語又はフレーズに関連付けられた、電子デバイスに記憶されたコンテンツアイテムを含む。
一部の実施形態では、デバイスは、会話記録において、電子デバイスに記憶された追加のコンテンツと、インターネット上で入手可能な追加のコンテンツ(例えば、ビジネス/レストラン情報、音楽情報、映画情報;Siri/オントロジアプリケーションの定型文言の挿入)とに関連する単語又はフレーズを検出する(4432)。一部の実施形態では、単語又はフレーズを検出することは、検索アフォーダンスをアクティブ化する入力を検出することに応じて行われる。検索ユーザインタフェースに表示される複数の分類されたコンテンツアイテムは、会話記録で検出された単語又はフレーズに関連付けられた、インターネットからのコンテンツアイテムを含む。
図44A~図44Dにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600,800,1000,1200,1400,1600,1800,2100,2400,2600,2800,3100,3300,4200,4600,4800,5000,5200,5400,5600,5800,6000,6200,6400,6600,6800,及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図44A~図44Dに関して上述した方法700にも、類似した方法で適用可能であることに留意されたい。例えば、方法4400に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600,800,1000,1200,1400,1600,1800,2100,2400,2600,2800,3100,3300,4200,4600,4800,5000,5200,5400,5600,5800,6000,6200,6400,6600,6800,及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図45は、説明されるさまざまな実施形態の原理に従って構成された電子デバイス4500の機能ブロック図を示す。本デバイスの機能ブロックは、説明されるさまざまな実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図45で説明される機能ブロックが、説明されるさまざまな実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択的にサポートする。
図45に示すように、電子デバイス4500は、ユーザインタフェースを表示するように構成されたディスプレイユニット4502と、タッチ感知面ユニット4504と、ディスプレイユニット4502とタッチ感知面ユニット4504とに連結された処理ユニット4506とを含む。一部の実施形態では、処理ユニットは、表示可能化ユニット4508と、検出ユニット4510と、送信ユニット4512と、選択ユニット4514と、更新ユニット4316とを含む。
処理ユニット4506は、(例えば、表示可能化ユニット4508を用いて)ディスプレイユニット4502上のメッセージユーザインタフェースと、電子デバイス4500のユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録を含むメッセージユーザインタフェースと、検索アフォーダンスとを表示するように構成されている。処理ユニット4506は更に、メッセージユーザインタフェースを表示している間に、検索アフォーダンスをアクティブ化する入力を(例えば、検出ユニット4510を用いて)検出するように更に構成されている。処理ユニット4506は、検索アフォーダンスをアクティブ化する入力を検出したことに応じて、メッセージユーザインタフェースを(例えば、表示可能化ユニット4508で)表示することを停止して、検索ユーザインタフェースを表示するように更に構成されており、この検索ユーザインタフェースは、検索フィールド及び複数の分類されたコンテンツアイテムを含み、この複数の分類されたコンテンツアイテムは、少なくとも、電子デバイス4500に記憶されたコンテンツアイテムとインターネットからのコンテンツアイテムとを含んでいる。処理ユニット4506は、検索ユーザインタフェースを表示している間に、複数の分類されたコンテンツアイテムの中の第1のコンテンツアイテムを選択する入力を(例えば、検出ユニット4510を用いて)検出するように更に構成されている。処理ユニット4506は、当該複数の分類されたコンテンツアイテムにおける第1のコンテンツアイテムを選択する入力を検出した後、検索ユーザインタフェースを(例えば、表示可能化ユニット4508を用いて)表示することを停止し、メッセージユーザインタフェース内の会話記録に第1のコンテンツアイテムを表示し、第1のコンテンツアイテムを、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット4512を用いて)送信するように更に構成され、当該1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に第1のコンテンツアイテムを表示する。
一部の実施形態では、処理ユニット4506は、検索ユーザインタフェースを表示している間に、かつ、複数の分類されたコンテンツアイテムにおける第1のコンテンツアイテムを選択する入力を検出する前に、(例えば、受信入力ユニット4518を用いて)検索フィールドのクエリーの入力を受信するように構成されている。処理ユニット4506は、検索フィールドにおけるクエリーの入力の受信に応じて、表示された複数の分類されたコンテンツアイテムを(例えば、更新ユニット4516で)更新してクエリーを満足するコンテンツアイテムを表示するように更に構成されている。
一部の実施形態では、処理ユニット4506は、第1のコンテンツアイテムを選択する入力の検出に応じて、メッセージ入力エリアに第1のコンテンツアイテムを(例えば、表示可能化ユニット4508を用いて)表示するように構成されている。処理ユニット4506は、メッセージ入力エリアに第1のコンテンツアイテムを表示している間に、メッセージ入力エリアにメッセージの入力を(例えば、受信入力ユニット4518を用いて)受信するように更に構成されている。処理ユニット4506は、メッセージ入力エリアにメッセージの入力を受信した後、メッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出するように更に構成されており、当該コンテンツは第1のコンテンツアイテム及びメッセージを含んでいる。処理ユニット4506は更に、メッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出したことに応じて、会話記録に第1のコンテンツアイテムを(例えば、表示可能化ユニット4508を用いて)表示して、会話記録にメッセージであって、メッセージは、会話記録内で第1のコンテンツアイテムと部分的に重なる、メッセージを(例えば、表示可能化ユニット4508を用いて)表示し、第1のコンテンツアイテム及びメッセージを、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット4512を用いて)送信し、当該1つ以上の電子デバイスは、第1のコンテンツアイテム及びメッセージを、当該メッセージセッションに対応する会話記録に表示するように更に構成されており、当該メッセージは、メッセージセッションに対応する会話記録内で第1のコンテンツアイテムと部分的に重なる。
一部の実施形態では、処理ユニット4506は、第1のコンテンツアイテムを選択する入力の検出に応じて、第1のコンテンツアイテムを選択する入力が1つ以上の入力エリア表示基準を満たすという判定に従って、第1のコンテンツアイテムをメッセージ入力エリアに(例えば、表示可能化ユニット4508を用いて)表示するように構成されている。処理ユニット4506は、第1のコンテンツアイテムを選択する入力が1つ以上の記録エリア表示基準を満たすという判定に従って、第1のコンテンツアイテムを会話記録に(例えば、表示可能化ユニット4508を用いて)表示し、第1のコンテンツアイテムをメッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット4512で)送信するように更に構成され、当該1つ以上の電子デバイスは、当該メッセージセッションに対応する会話記録に第1のコンテンツアイテムを表示する。
一部の実施形態では、電子デバイス4500は、タッチ感知面ユニット4504上の接触の強度を検出するように構成された1つ以上のセンサユニットを備える。一部の実施形態では、複数のコンテンツアイテムにおける第1のコンテンツアイテムを選択する入力を検出することは、ディスプレイユニット4502上の第1のコンテンツアイテムの表示に対応するタッチ感知面ユニット4504上の場所における第1の接触を検出することを含む。一部の実施形態では、1つ以上の記録エリア表示基準は、その基準が満たされるためには、タッチ感知面ユニット4504上の第1の接触の特性強度が対応する強度閾値を満たすことを必要とする。一部の実施形態では、1つ以上の入力エリア表示基準は、その選択基準が満たされるためには、タッチ感知面ユニット4504上の接触の特性強度が対応する強度閾値を満たすことを必要とはしない。
一部の実施形態では、タッチ感知面ユニット4504上のタップジェスチャが検出されると、1つ以上の入力エリア表示基準が満たされる。
一部の実施形態では、処理ユニット4506は、メッセージユーザインタフェース内の会話記録に第1のコンテンツアイテムを表示している間に、第1のコンテンツアイテムに対応する場所で第1の接触による第1の入力を(例えば、検出ユニット4510を用いて)検出するように構成されている。処理ユニット4506は、第1の入力を検出することに応じて、第1の接触が1つ以上の拡張基準を満たすという判定に従って、第1のコンテンツアイテムに関連付けられたコンテンツの拡張バージョンを(例えば、表示可能化ユニット4508を用いて)表示するように更に構成されている。
一部の実施形態では、処理ユニット4506は、会話記録において、電子デバイス4500に記憶された追加のコンテンツと、インターネット上で入手可能な追加のコンテンツとに関連する単語又はフレーズを検出するように構成され、検索ユーザインタフェースに表示される複数の分類されたコンテンツアイテムは、会話記録で検出された単語又はフレーズに関連する、電子デバイス4500に記憶されたコンテンツアイテムを含む。
一部の実施形態では、処理ユニット4506は、会話記録において、電子デバイス4500に記憶された追加のコンテンツに関連する単語又はフレーズと、インターネット上で入手可能な追加のコンテンツとを検出するように構成され、検索ユーザインタフェースに表示される複数の分類されたコンテンツアイテムは、会話記録で検出された単語又はフレーズに関連する、インターネットからのコンテンツアイテムを含む。
一部の実施形態では、検索アフォーダンスは、メッセージアプリケーション内の対話型アプリケーションに関する複数の起動アイコンと共に表示される検索アプリケーション起動アイコンである。
一部の実施形態では、処理ユニット4506は、メッセージユーザインタフェースであって、メッセージユーザインタフェースは、電子デバイス4500のユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、キーボードと、メッセージ入力エリアと、アプリケーションアフォーダンスとを含んでいたものである、メッセージユーザインタフェースに対話型アプリケーションの複数の起動アイコンを表示する前に、処理ユニット4506は、アプリケーションアフォーダンスをアクティブ化するユーザ入力を(例えば、検出ユニット4510を用いて)検出するように構成されている。処理ユニット4506は、アプリケーションアフォーダンスをアクティブ化するユーザ入力の検出に応じて、キーボードの表示を対話型アプリケーションの複数の起動アイコンの表示に置き換えるように更に構成されている。
図44A~図44Dを参照して上述した動作は、図1A、図1B又は図43に示される構成要素によって、任意選択的に実施される。例えば、検出動作4408及び4412は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図46A~図46Cは、一部の実施形態に係る、対話型アプリケーションをメッセージアプリケーションに追加する方法4600を示すフロー図である。方法4600は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別個である。方法4600におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下で説明するように、方法4600は、対話型アプリケーションをメッセージアプリケーションに追加する直感的な方法を提供する。この方法は、対話型アプリケーションをメッセージアプリケーションに追加するときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによってより効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、ユーザが対話型アプリケーションをメッセージアプリケーションに、より迅速かつ効率的に追加することができれば、電力が節約され、バッテリ充電の間隔が長くなる。
デバイスは、ディスプレイ上にメッセージアプリケーションのメッセージユーザインタフェース(例えば、図38AQのメッセージユーザインタフェース3500)を表示し(4602)、このメッセージユーザインタフェースは、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、図38AQの会話記録3503などの、ディスプレイの第1のエリアに表示される)会話記録と、アプリケーションアフォーダンス(例えば、図38AQのアプリケーションアフォーダンス3508)と、を含んでいる。一部の実施形態では、メッセージユーザインタフェースは、メッセージセッションに投稿される準備の整ったコンテンツ(例えば、図38AQのメッセージ入力エリア3502)を表示するように構成されたメッセージ入力エリアを含む。一部の実施形態では、メッセージユーザインタフェースは、例えば、ディスプレイの第2のエリアに表示されるキーボード(例えば、図38AQのデジタルキーボード3501)を含む。
メッセージユーザインタフェースを表示している間に、デバイスは、アプリケーションアフォーダンスをアクティブ化する入力を検出する(4604)。例えば、図38ARのアプリケーションアフォーダンス3508上の接触3876を含むタップジェスチャである。
アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて(例えば、会話記録の表示を保持しながら)、デバイスは、アプリケーションストアの起動アイコンと、対話型アプリケーションのための複数の起動アイコンとを同時に表示し(4606)、対話型アプリケーションの対応する起動アイコンのアクティブ化は、メッセージアプリケーション内に表示される対応するアプリケーションを起動する。例えば、図38ARの接触3876を含むタップジェスチャの検出に応じて、デバイス100-1は、アプリケーションストアの起動アイコン3601及び対話型アプリケーションの他の起動アイコン(例えば、三目並べアプリケーションの起動アイコン3603、予約アプリケーションの起動アイコン3605、ライブビデオストリーミングアプリケーションの起動アイコン3611、及び音楽アプリケーションの起動アイコン3615)を含むアプリケーション選択トレイ3654を表示する。
一部の実施形態では、メッセージユーザインタフェースは、アプリケーションアフォーダンスをアクティブ化する入力を検出する直前にデジタルキーボードを表示していない(例えば、会話記録が最大化されており、アプリケーションアフォーダンスの表示を含むか、又は、キーボードがメッセージアプリケーション内に表示される対話型アプリケーション用のユーザインタフェースに置き換えられている)。一部の実施形態では、対話型アプリケーションの複数の起動アイコンが、キーボードの表示に取って代わる。一部の実施形態では、キーボードの表示に取って代わることは、キーボードを表示することを停止し、キーボードが表示されていた場所に、対話型アプリケーションの複数の起動アイコンを表示することを含む。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に操作される対応するアプリケーションの機能の(例えば、全てよりも少ない)サブセットを実行するように構成されている(4608)。例えば、一部の実施形態では、起動アイコン3601のアクティブ化に応じて起動されるアプリケーションストアアプリケーションは、メッセージアプリケーション内で動作可能なアプリケーションのダウンロードのみを可能にする。これに対して、対応するアプリケーションストアアプリケーションは(例えば、メッセージアプリケーションの外でデバイスのホームスクリーンから起動されたように)、メッセージアプリケーション内で動作可能なアプリケーション及びメッセージアプリケーションの外部で動作可能なアプリケーションのダウンロードを可能にする。
一部の実施形態では、対話型アプリケーション起動アイコンは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの識別子を表示する(4610)。例えば、図38ASにおいて、アプリケーションストア起動アイコン3601は、メッセージアプリケーションの外部で動作するアプリケーションストアアプリケーションと同じ又は類似の「A」ロゴを含んでいる。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションによって表示されるコンテンツの(例えば、すべてよりは少ない)一部を表示する(4612)。例えば、一部の実施形態では、起動アイコン3601のアクティブ化に応じて起動されるアプリケーションストアアプリケーションは、メッセージアプリケーション内で動作可能な全てのダウンロード可能なアプリケーションのみを表示する。これに対して、(例えば、メッセージアプリケーションの外でデバイスのホームスクリーンから起動されるような)対応するアプリケーションストアアプリケーションは、メッセージアプリケーション内で動作可能な、及びメッセージアプリケーションの外部で動作可能な、全てのダウンロード可能なアプリケーションを表示する。
一部の実施形態では、対話型アプリケーションは、予め定義された入力の検出時に、メッセージアプリケーションとは別個に動作する対応するアプリケーションをデバイスに起動させる(4614)。例えば、図38ASのアプリケーションストア起動アイコン3601上の第1の入力(例えば、タップ、押圧、深押し、長押し又はマルチフィンガジェスチャ)に応じて、デバイスはメッセージアプリケーション内でアプリケーションストアアプリケーションを起動する。図38ASのアプリケーションストア起動アイコン3601上の(例えば、異なる)第2の入力(例えば、タップ、押圧、深押し、長押し又はマルチフィンガジェスチャ)に応じて、デバイスはメッセージアプリケーションの外部でアプリケーションストアアプリケーションを起動する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションとは別々に操作される(4616)。例えば、起動アイコン3601のアクティブ化に応じて起動されたアプリケーションストアアプリケーションは、当該アプリケーションの外部で動作する対応するアプリケーションストアアプリケーションが実行されていないときに、動作することができる。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションと連携して操作される(4618)。例えば、起動アイコン3601のアクティブ化に応じて起動されたアプリケーションストアアプリケーションは、当該アプリケーションの外部で動作する対応するアプリケーションストアアプリケーションが実行されていないときには、動作しなくてもよい。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの一時記憶用メモリの専用部分とは異なる一時記憶用メモリの専用部分を有する(4620)。例えば、一部の実施形態では、起動アイコン3601に対応するアプリケーションストアアプリケーションを使用してダウンロードされたアプリケーションの記録は、メッセージアプリケーションの外部で動作する対応するアプリケーションストアアプリケーションを使用してダウンロードされたアプリケーションの記録とは異なるメモリ部分に記憶される。
一部の実施形態では、メッセージアプリケーションとは別個に動作する対応するアプリケーションは、その対話型アプリケーションの一時的な記憶用メモリの専用部分にアクセスするように構成されている(4622)。例えば、一部の実施形態では、メッセージアプリケーションの外部で動作する対応するアプリケーションストアアプリケーションは、起動アイコン3601に対応するアプリケーションストアアプリケーションを使用してダウンロードされたアプリケーションの記録にアクセスすることができる。
次に、デバイスは、アプリケーションストアの起動アイコンをアクティブ化する入力を検出する(4624)。例えば、デバイス100-1は、図38ASのアプリケーションストア起動アイコン3601上の接触を含むタップジェスチャを検出する。
アプリケーションストアの起動アイコンをアクティブ化する入力を検出したことに応じて、デバイス(4626)は、メッセージユーザインタフェースを表示することを停止し、電子デバイスにダウンロード可能な少なくとも1つの対話型アプリケーションの表示を含むアプリケーションストアユーザインタフェースを表示する。例えば、図38ASのアプリケーションストア起動アイコン3601上の接触を含むタップジェスチャの検出に応じて、デバイス100-1は、メッセージユーザインタフェース3500の表示をアプリケーションストアユーザインタフェースの表示に置き換える。
アプリケーションストアユーザインタフェースを表示している間に、デバイスは、電子デバイスのメモリに記憶されていない第1の対話型アプリケーションをダウンロードする要求に対応する入力を検出する(4628)。例えば、デバイス100-1は、デバイスに格納されていない三目並べアプリケーションのアイコン上の接触を含むタップジェスチャを検出する。一部の実施形態では、この入力は、ダウンロードアイコン上のタップジェスチャであり、これによって、デバイス上の第1の対話型アプリケーションの自動のダウンロード及びインストールを開始する(例えば、デバイスがタップジェスチャを検出するとすぐに、アプリケーションはデバイス上でダウンロードを開始する)。一部の実施形態では、この入力は、ダウンロード確認アイコン上のタップジェスチャであり、ユーザに第1の対話型アプリケーションをダウンロードしたいことを確認し、第1の対話型アプリケーションの自動のダウンロード及びインストールを開始する(例えば、タップジェスチャの検出に応じて、デバイスはダウンロード要求を確認する要求を表示し、及び/又はユーザの識別情報を確認する)。
デバイス(4630)は、第1の対話型アプリケーションをダウンロードする要求に対応する入力を検出したことに応じて、第1の対話型アプリケーションを電子デバイスのメモリにダウンロードし、アプリケーションストアユーザインタフェースの表示をメッセージユーザインタフェース(例えば、図38ASのメッセージユーザインタフェース3500)の表示に置き換え、メッセージユーザインタフェースは、会話記録(例えば、図38ASの会話記録3503)と、対話型アプリケーションの複数の起動アイコンのうちの少なくともいくつか(例えば、図38ASのアプリケーション選択トレイ3654に表示された起動アイコンのうちのいくつか)と、を含んでいる。一部の実施形態では、メッセージユーザインタフェースはまた、メッセージ入力エリア(例えば、図38ASのメッセージ入力エリア3502)も含む。また、デバイスは、第1の対話型アプリケーションに対応する起動アイコンを、対話型アプリケーション用の複数の起動アイコンの表示に追加する(例えば、デバイスは、図38ASのアプリケーション選択トレイ3654に三目並べアプリケーションをダウンロードするアプリケーション起動アイコン3603を追加する)。
一部の実施形態では、第1の対話型アプリケーションに対応する起動アイコンを対話型アプリケーションの複数の起動アイコンの表示に追加することは、第1の対話型アプリケーションがダウンロードされていることを示す指標(例えば、アニメーション)を表示すること(4632)を含むものである。例えば、図37BHの三目並べアプリケーションのダウンロードを示す指標3709と同様の指標である。
一部の実施形態では、指標(例えば、アニメーション)は、第1の対話型アプリケーションのダウンロードの進捗を示す(4634)。例えば、図37BHでは、アプリケーションが完全にダウンロードされるまで、指標3709内の部分円のサイズは、ダウンロードされたアプリケーションのパーセンテージに従って増加する。
図46A~図46Cにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600,800,1000,1200,1400,1600,1800,2100,2400,2600,2800,3100,3300,4200,4600,4800,5000,5200,5400,5600,5800,6000,6200,6400,6600,6800,及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図46A~図46Cに関して上述した方法4600にも、類似した方法で適用可能であることに留意されたい。例えば、方法4600に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600,800,1000,1200,1400,1600,1800,2100,2400,2600,2800,3100,3300,4200,4600,4800,5000,5200,5400,5600,5800,6000,6200,6400,6600,6800,及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図47は、上述の本発明の原理に従って構成された電子デバイス4700の機能ブロック図を示す。本デバイスの機能ブロックは、本発明の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって実装することができる。図47で説明される機能ブロックが、上述の本発明の原理を実施するために、組み合わされ、又はサブブロックに分離されてもよいことが当業者には理解されよう。したがって、本明細書の説明は、本明細書に記載された機能ブロックの任意の可能な組み合わせ又は分離又はさらなる定義をサポートすることができる。
図47に示すように、電子デバイス4700は、ディスプレイユーザインタフェースを表示するように構成されたディスプレイユニット4702と、接触を検出するように構成されたタッチ感知面ユニット4704と、ディスプレイユニット4702及びタッチ感知面ユニット4704に連結された処理ユニット4706とを含む。一部の実施形態では、処理ユニット4706は、検出ユニット4708と、表示可能化ユニット4710と、停止ユニット4712と、ダウンロードユニット4714と、表示置換ユニット4716と、追加ユニット4718と、を含んでいる。
処理ユニット4706は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイユニット4702に表示することを可能にし、このメッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、アプリケーションアフォーダンスとを含み(例えば、表示可能化ユニット4710を用いて)、メッセージユーザインタフェースを表示している間に、アプリケーションアフォーダンスをアクティブ化する入力を(例えば、検出ユニット4708を用いて)検出し、アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、アプリケーションストアの起動アイコンと対話型アプリケーションの複数の起動アイコンとの表示を同時に可能にし、対話型アプリケーションの対応する起動アイコンのアクティブ化は、メッセージアプリケーション内に(例えば、表示可能化ユニット4710を用いて)表示される対応するアプリケーションを起動し、アプリケーションストアの起動アイコンをアクティブ化する入力を(例えば、検出ユニット4708を用いて)検出し、アプリケーションストアの起動アイコンをアクティブ化する入力を検出したことに応じて、メッセージユーザインタフェースの表示を(例えば、停止ユニット4712を用いて)停止して、電子デバイスにダウンロード可能な少なくとも1つの対話型アプリケーションの表示を含むアプリケーションストアユーザインタフェースの表示を(例えば、表示可能化ユニット4710を用いて)可能にし、アプリケーションストアユーザインタフェースを表示している間に、電子デバイスのメモリに記憶されていない第1の対話型アプリケーションをダウンロードする要求に対応する入力を(例えば、検出ユニット4708を用いて)検出し、第1の対話型アプリケーションをダウンロードする要求に対応する入力を検出したことに応じて、第1の対話型アプリケーションを電子デバイスのメモリに(例えば、ダウンロードユニット4714を用いて)ダウンロードし、アプリケーションストアユーザインタフェースの表示をメッセージユーザインタフェースの表示に(例えば、表示置換ユニット4716を用いて)置き換え、メッセージユーザインタフェースは、会話記録と、対話型アプリケーションの複数の起動アイコンのうちの少なくともいくつかとを含み、第1の対話型アプリケーションに対応する起動アイコンを、対話型アプリケーションの複数の起動アイコンの表示に(例えば、追加ユニット4718を用いて)追加する、ように構成されている。
一部の実施形態では、第1の対話型アプリケーションに対応する起動アイコンを対話型アプリケーションの複数の起動アイコンの表示に追加することは、第1の対話型アプリケーションがダウンロードされていることを示す指標を表示することを含むものである。
一部の実施形態では、この指標は、第1の対話型アプリケーションのダウンロードの進捗を示す。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの機能のサブセットを実行するように構成されている。
一部の実施形態では、対話型アプリケーション起動アイコンは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの識別子を表示する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションによって表示されるコンテンツの一部を表示する。
一部の実施形態では、対話型アプリケーションは、予め定義された入力の検出時に、メッセージアプリケーションとは別個に動作する対応するアプリケーションをデバイスに起動させる。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションとは別々に動作する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションと連携して動作する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの一時記憶用メモリの専用部分とは異なる一時記憶用メモリの専用部分を有する。
一部の実施形態では、メッセージアプリケーションとは別個に動作する対応するアプリケーションは、対話型アプリケーションの一時的な記憶用メモリの専用部分にアクセスするように構成されている。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって、任意選択的に実施される。
図46A~図46Cを参照して上述した動作は、図1A、図1B又は図47に示される構成要素によって、任意選択的に実施される。例えば、検出動作4604及び4624は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。それぞれの予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図48A~図48Dは、一部の実施形態に係る、メッセージアプリケーションのユーザインタフェース以外のユーザインタフェースからメッセージセッションへメッセージを投稿する方法4800を示すフロー図である。方法4800は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法4800におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下に説明するように、方法4800は、メッセージアプリケーションのユーザインタフェース以外のユーザインタフェースからメッセージセッションにメッセージを投稿する直感的な方法を提供する。この方法は、メッセージアプリケーションのユーザインタフェース以外のユーザインタフェースからメッセージセッションにメッセージを投稿するときの、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによって、より効率的なヒューマンマシンインタフェースを作成することができる。バッテリ駆動の電子デバイスでは、ユーザがメッセージアプリケーションのユーザインタフェース以外のユーザインタフェースからメッセージセッションにメッセージをより迅速かつ効率的に投稿することができれば、電力が節約され、バッテリ充電の間隔が増大することになる。
デバイスは、ディスプレイ上のメッセージアプリケーションのメッセージユーザインタフェース(例えば、図37F、図37O、及び図37ASのメッセージユーザインタフェース3500)を表示し(4802)、メッセージユーザインタフェースには、電子デバイスのユーザと少なくとも1人の他の{別の電子デバイスの}ユーザとの間のメッセージセッションの(例えば、図37F、図37O、及び図37ASの会話記録3700などのディスプレイの第1のエリアに表示される)会話記録と、第1のメッセージ入力エリア(例えば、図37F、図37O及び図37ASの図のメッセージ入力エリア3502)と、対話型アプリケーションの起動アイコン(例えば、メッセージアプリケーション内で動作して、メッセージセッションのすべての参加者が更新することができるメッセージアプリケーション、例えば、対話型予約アプリケーションの起動アイコン3708、図37Oの記録3700に表示された予約対話型アプリケーションオブジェクト3728、及び図37ASの対話型三目並べアプリケーションの起動アイコン3774)と、が含まれる。
一部の実施形態では、対話型アプリケーションがメッセージセッションに投稿されると、セッションの任意の参加者が対話型アプリケーションを開くことができ、対話型アプリケーション内で変更を加え(例えば、地図上の場所を変更したり、ピザのトッピングを選択したり、予定を立てたり変更したり、あるいは三目並べなどのゲームで手番を行った)、変更はメッセージセッションのすべての参加者に送信される。例えば、予約対話型アプリケーションのセッションが、図37Oの記録3700の予約アプリケーションオブジェクト3728の表示によって示されるように、会話記録3700に対応するメッセージセッションに投稿されると、メッセージ記録に含まれる任意のユーザは、アプリケーションセッションを開き、予約の時間を変更することができる。これは、例えば、図37P~図37ACに示されており、ここで、デバイス100-2のオペレータであるAndrewは、デバイス100-1のオペレータであるAbeによってなされた予約時間を、図37Pに示す午後6時30分から、図37ACに示す午後8時に変更する。
一部の実施形態では、第1のメッセージ入力エリアは、メッセージセッションに投稿される準備が整っているテキスト及び他のコンテンツを表示するように構成されている。例えば、図37Nのメッセージ3736の入力を受信した後、図37Oの会話記録3700内のメッセージ3736の表示によって示されるように、このメッセージはメッセージセッションに投稿される。
一部の実施形態では、この対話型アプリケーションの起動アイコンは、メッセージユーザインタフェース内の他の対話型アプリケーションの複数の起動アイコンと共に同時に表示される(4804)。例えば、対話型三目並べアプリケーションの起動アイコン3603と対話型予約アプリケーションの起動アイコン3605とが、アプリケーション選択トレイ3654内に、対話型アプリケーションの他の起動アイコン(例えば、ライブビデオストリーミングアプリケーションのアプリケーション起動アイコン3611、対話型ピザ注文アプリケーションのアプリケーション起動アイコン3613、及び対話型音楽アプリケーションのアプリケーション起動アイコン3615)と共に表示される。
一部の実施形態では、対話型アプリケーション起動アイコンは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの識別子を表示する(4806)。例えば、対話型予約アプリケーションのアプリケーション起動アイコン3708は、メッセージアプリケーションの外部で動作する対応する予約アプリケーションの同心円識別子を表示する。
メッセージユーザインタフェースを表示している間に、デバイスは、対話型アプリケーションの起動アイコンをアクティブ化する入力を検出する(4808)。一部の実施形態では、この入力は、起動アイコン上のタップジェスチャである。例えば、デバイス100-1は、図37Fの起動アイコン3708上の接触3710を含むタップジェスチャを検出し、図37Gの対応する対話型予約アプリケーションをアクティブ化する。例えば、デバイス100-2は、図37Pの予約アプリケーションオブジェクト3728上の接触3738を含むタップジェスチャを検出し、図37Qの対応する対話型予約アプリケーションをアクティブ化する。例えば、デバイス100-1は、図37ATの三目並べアプリケーション起動アイコン3774上の接触3776を含むタップジェスチャを検出し、図37AUの対応する対話型三目並べアプリケーションを起動する。
一部の実施形態では、対話型アプリケーションの起動アイコンをアクティブ化する入力を検出することには、対話型アプリケーションの起動アイコンに対応する場所で第1の接触による第1の入力を検出することと、第1の入力の検出に応じて、対話型アプリケーションの実行方法についての複数のオプションを含むメニューを表示すること(例えば、三目並べを「X」又は「O」としてプレイすること、フルスクリーンモードか又はメッセージユーザインタフェース内に埋め込まれた状態で、対話型アプリケーションを操作すること)と、対話型アプリケーションの実行方法に関する複数のオプションのうちの第1のオプションを選択する第2の入力を検出すること、が含まれる(4810)。
例えば、デバイス100-1は、図37ATの三目並べ起動アイコン3774上の接触3776を含むタップジェスチャを検出する。接触の検出に応じて、デバイスは、各々「O」又は「X」としてゲームをプレイするためのオプション3780-1及び3780-2を含むメニュー3778を表示する。図37AVの接触3782を含むアフォーダンス3780-1上のタップジェスチャによって「O」の選択を検出したことに応じて、デバイス100-1は、図37AWのメッセージユーザインタフェース3500の一部の上に三目並べユーザインタフェース3784を表示する。
一部の実施形態では、第2の入力は、第1のオプションを選択するために、第1の接触を第1のオプションに対応する場所までドラッグするか、又は第1の接触の強度を増加させるなど、第1の入力の続きである。一部の実施形態では、第2の入力は、第1のオプションに対応する場所で第2の接触、例えば第1のオプション上のタップジェスチャによる。一部の実施形態では、メニューは、起動アイコン及び/又は複数の起動アイコンの最上部に表示される。一部の実施形態では、メニューは対話型起動アイコンの表示を置き換え、そのことには、起動アイコン又は複数の起動アイコンの表示を停止して、起動アイコン(単数又は複数)が表示されていた場所にメニューを表示することが含まれる。例えば、図37AUのメニュー3778は、図37ATの接触3776の検出に応じて、対話型起動アイコン3774の表示に取って代わる。
対話型アプリケーションの起動アイコンをアクティブ化する入力を検出したことに応じて、デバイスは、対話型アプリケーションのユーザインタフェース(例えば、「対話型アプリケーションユーザインタフェース」)を表示する(4812)。対話型アプリケーションユーザインタフェースは、第1のメッセージ入力エリアとは異なる第2のメッセージ入力エリアを含む。例えば、対話型予約アプリケーションユーザインタフェース3712は、図37F及び図37Pのメッセージユーザインタフェース3500に表示されたメッセージ入力エリア3502とは別の、図37G及び図37Qのメッセージ入力エリア3716を含んでいる。同様に、対話型三目並べアプリケーションユーザインタフェース3784は、図37AWの背景に見られるように、メッセージユーザインタフェース3500に表示されたメッセージ入力エリア3502とは別の、図37AWのメッセージ入力エリア3716を含む。
一部の実施形態では、対話型アプリケーションユーザインタフェースは、メッセージユーザインタフェースの少なくとも一部の上に表示される。例えば、図37AWのメッセージユーザインタフェース3500の一部の上に、対話型三目並べアプリケーションユーザインタフェース3784が表示される。対話型アプリケーションユーザインタフェースがメッセージユーザインタフェースの一部の上に表示される一部の実施形態では、対話型アプリケーションユーザインタフェースの表示を強調するために、メッセージユーザインタフェースをぼやかしたり、退色させたり、さもなければ不鮮明にする。
一部の実施形態では、対話型アプリケーションユーザインタフェースは、メッセージユーザインタフェースの表示に取って代わる。例えば、図37Gに示す対話型予約アプリケーションユーザインタフェース3712は、アクティブ化時に、図37Fのメッセージユーザインタフェース3500の表示に取って代わる。
一部の実施形態では、対話型アプリケーションユーザインタフェース、又は対話型アプリケーションユーザインタフェースの一部(例えば、対話型アプリケーションユーザインタフェースがディスプレイ上の複数の連続エリアに表示される)がメッセージ記録内に表示される。例えば、図37CAの記録3700内に表示されたピザアプリケーションオブジェクト3735は、注文中のピザの現在の状態を表示するので、対話型ピザ注文アプリケーションのユーザインタフェースの非連続的部分である。例えば、図37CDのピザに追加されたペパロニに応じて、ピザ注文アプリケーションオブジェクト3735は、図37CEのピザ上にペパロニを表示する。
一部の実施形態では、対話型アプリケーションのユーザインタフェースは、少なくとも1人のアバターを含み(4814)、当該少なくとも1人のアバターにおける各対応するアバターは、メッセージセッションに含まれる少なくとも1人の他のユーザにおけるユーザに対応する。例えば、対話型予約アプリケーションのユーザインタフェース3712は、図37Gの(例えば、Abeによって操作される)デバイス100-1上に表示されるとき、Abeに対応するアバター3510を表示し、(例えば、Andrewによって操作される)デバイス100-2に表示されたときに、Andrewに対応するアバター3511を表示する。
一部の実施形態では、対話型アプリケーションのユーザインタフェースは、アバターのスタック(例えば、図40Aのアバターのスタック4002などの、アバターの重なり合ったスタック)として表示される複数のアバターを含む(4816)。
一部の実施形態では、対話型アプリケーションユーザインタフェースを表示している間に、デバイス(4818)は、対話型アプリケーションのユーザインタフェース内のアバターに対応する場所で、第3の接触によって第3の入力を検出し、この第3の入力の検出に応じて、アバターに関連付けられたションのメニュー(例えば、アバターに関連付けられたユーザに個人的なメッセージを送信したり、電話をかけたり、ビデオチャットしたり、支払を送信したり、及び/又はデジタルタッチを送信したりするためのメニュー)を表示する。一部の実施形態では、メニュー又はアクションは、対話型アプリケーションのユーザインタフェースの最上部に置かれる。例えば、接触が予約アプリケーションユーザインタフェース3712内のアバター3510上にある間に、図37AMから図37ANへの接触3799の特性強度の増加を含む入力の検出に応じて、アクション3884のメニュー3882が図37ANに表示される。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの機能の(例えば、全部よりは少ない)サブセットを実行するように構成されている(4820)。例えば、一部の実施形態では、メッセージアプリケーション内で動作する対話型予約アプリケーションは、レストランの予約を可能にするように構成されているが、ユーザがレストランに対してコメントできるようには構成されていない。これに対して、メッセージアプリケーションの外部で動作可能な対応する予約アプリケーションは、レストランを予約して、レストランに対してコメントすることを可能にするように構成されている。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションによって表示されるコンテンツの(例えば、全部よりは少ない)一部を表示する(4822)。例えば、一部の実施形態では、メッセージアプリケーション内で動作する対話型予約アプリケーションは、レストランの評価を表示するが、レストランに対するユーザのコメントは表示しない。これに対して、メッセージアプリケーションの外部で動作可能な対応する予約アプリケーションは、レストランの評価とレストランに対するユーザのコメントの双方を表示する。
一部の実施形態では、対話型アプリケーションは、予め定義された入力の検出時に、メッセージアプリケーションとは別個に動作する対応するアプリケーションをデバイスに起動させる(4824)。例えば、図37Fの対話型予約アプリケーション起動アイコン3708上の第1の入力(例えば、タップ、押圧、深押し、長押し又はマルチフィンガジェスチャ)に応じて、デバイスは、メッセージアプリケーション内で対話型予約アプリケーションを起動する。図37Fの対話型予約アプリケーション起動アイコン3708上の第2の(例えば、異なる)入力(例えば、タップ、押圧、深押し、長押し又はマルチフィンガジェスチャ)に応じて、デバイスは、メッセージアプリケーションの外部で予約アプリケーションを起動する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションとは別々に動作する(4826)。例えば、図37Fの起動アイコン3708のアクティブ化に応じて起動される対話型予約アプリケーションは、メッセージアプリケーションの外部で動作する対応する予約アプリケーションが動作していないときに動作可能である。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションと連携して動作する(4828)。例えば、図37Fの起動アイコン3708のアクティブ化に応じて起動される対話型予約アプリケーションは、メッセージアプリケーションの外部で動作する対応する予約アプリケーションが動作していないときには動作することができない。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの一時記憶用メモリの専用部分とは異なる一時記憶用メモリの専用部分を有する(4830)。例えば、一部の実施形態では、メッセージアプリケーション内で動作する対話型予約アプリケーションを使用して行われた予約の記録は、メッセージアプリケーションの外部で動作する対応する予約アプリケーションを使用して行われた予約の記録とは異なるメモリ部分に記憶される。
一部の実施形態では、メッセージアプリケーションとは別個に動作する対応するアプリケーションは、対話型アプリケーションの一時的な記憶用メモリの専用部分にアクセスするように構成されている(4832)。例えば、一部の実施形態では、メッセージアプリケーションの外部で動作する対応する予約アプリケーションは、メッセージアプリケーション内で動作する対話型予約アプリケーションを使用して行われた予約の記録にアクセスすることができる。
対話型アプリケーションユーザインタフェースを表示している間に、デバイスは、第2のメッセージ入力エリア内の第1のメッセージの入力を検出する(4834)。例えば、対話型予約アプリケーションユーザインタフェース3712を表示している間に、デバイス100-2は、図37Sのメッセージ入力エリア3716内のメッセージ3746の入力を検出する。
第2のメッセージ入力エリアにおける第1のメッセージの入力を検出したことに応じて、デバイスは、第1のメッセージを第2のメッセージ入力エリアに表示する(4836)。例えば、メッセージ3746の入力の検出に応じて、デバイス100-2は、図37Tのメッセージ入力エリア3716にメッセージを表示する。
第2のメッセージ入力エリアに第1のメッセージを表示している間に、デバイスは、第2のメッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出する(4838)。一部の実施形態では、この入力は送信アイコン上のタップジェスチャである。例えば、デバイス100-2は、図37Uの送信アフォーダンス3520上の接触3748を含む入力を検出する。
第2のメッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出したことに応じて、デバイスは、第1のメッセージを、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の(例えば、第2の)電子デバイスに送信し(4840)、当該1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に第1のメッセージを表示する。例えば、図37Uの送信アフォーダンス3520上の接触3748を含む入力の検出に応じて、デバイス100-2は、午前9時29分にメッセージ3746を、メッセージセッションに含まれるAbeに関連付けられた他のデバイス100-1に送信する。デバイス100-1はメッセージ3746を受信し、図37AEの午前9時29分にそれを会話記録3700内に表示する。
一部の実施形態では、第2のメッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出した後で、対話型アプリケーションのユーザインタフェースを表示している間に、デバイスは、対話型アプリケーションを終了させる入力(例えば、閉じるボタン上のタップ、例えば、図37ABの終了アフォーダンス3714上の接触3756を含むタップジェスチャ)を検出し、対話型アプリケーションを終了させる入力を検出したことに応じて、デバイス(4842)は、対話型アプリケーションのユーザインタフェースの表示を停止し、メッセージユーザインタフェースを表示するが、メッセージユーザインタフェースは、会話記録における第1のメッセージの表示を含んでいる。例えば、図37ABの終了アフォーダンス3714上の接触3756を含むタップジェスチャに応じて、デバイス100-2は、図37ABの対話型予約アプリケーションユーザインタフェース3712の表示を図37ACのメッセージユーザインタフェース3500の表示に置き換える。デバイス100-2が対話型予約アプリケーションユーザインタフェース3712を図37U及び図37Vに表示している間に投稿されたメッセージ3746は、図37ACの会話記録3700に表示される。
一部の実施形態では、対話型アプリケーションのユーザインタフェースを(例えば全画面モードで)表示している間に、デバイス(4844)はメッセージセッションに関連するメッセージを受信し、メッセージセッションに関連するメッセージの受信に応じて、対話型アプリケーションのユーザインタフェースの最上部に置かれたこのメッセージを一時的に表示する例えば、図37Pの会話記録3700に対応するメッセージセッションに関連付けられた図37Vの全画面モードにおける対話型予約アプリケーションのユーザインタフェース3712を表示する間に、デバイス100-2は、午前9時30分に会話記録3700に対応するメッセージセッションに関連付けられたメッセージ3750を受信し、たとえ会話記録3700がユーザインタフェース3712に表示されないとしても、図37Wのユーザインタフェース3712の上にメッセージを一時的に表示する。
一部の実施形態では、他のメッセージセッションに関連付けられたメッセージは、受信されると、対話型アプリケーションユーザインタフェース上に表示されない。例えば、図41Dの会話記録3503に関連付けられたメッセージセッションに、午前9時28分に投稿されたメッセージ4114は、たとえデバイス100-2が、会話記録3503に関連付けられたメッセージセッションにも含まれるユーザ「Andrew」に対応していても、図37Q~図37Tの対話型ユーザインタフェース3712には(例えば、午前9時28分に)表示されない。
図48A~図48Dにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、5000、5200、5400、5600、5800、6000、6200、6400、6600、6800、及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図48A~図48Dに関して、上述した方法4800にも、類似した方法で適用可能であることに留意されたい。例えば、方法4800に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、5000、5200、5400、5600、5800、6000、6200、6400、6600、6800、及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図49は、上述の本発明の原理に従って構成された電子デバイス4900の機能ブロック図を示す。本デバイスの機能ブロックは、本発明の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって実装することができる。図49で説明される機能ブロックが、上述の本発明の原理を実施するために、組み合わされ、又はサブブロックに分離されてもよいことが当業者には理解されよう。したがって、本明細書の説明は、本明細書に記載された機能ブロックの任意の可能な組合せ又は分離又はさらなる定義をサポートすることができる。
図49に示すように、電子デバイス4900は、ユーザインタフェースを表示するように構成されたディスプレイユニット4902と、接触を検出するように構成されたタッチ感知面ユニット4904と、ディスプレイユニット4902及びタッチ感知面ユニット4904に連結された処理ユニット4906とを含む。一部の実施形態では、処理ユニット4906は、検出ユニット4908と、表示可能化ユニット4910と、停止ユニット4912と、送信ユニット4914と、受信ユニット4916とを含む。
処理ユニット4906は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイユニット4902に(例えば、表示可能化ユニット4910を用いて)表示することを可能にし、このメッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、第1のメッセージ入力エリアと、対話型アプリケーションの起動アイコンとを含み、メッセージユーザインタフェースを表示している間に、対話型アプリケーションの起動アイコンをアクティブ化する入力を(例えば、検出ユニット4908を用いて)検出し、対話型アプリケーションの起動アイコンをアクティブ化する入力を検出したことに応じて、対話型アプリケーションのユーザインタフェースの表示を(例えば、表示可能化ユニット4910を用いて)可能にし、対話型アプリケーションユーザインタフェースは、第1のメッセージ入力エリアとは異なる第2のメッセージ入力エリアを含み、対話型アプリケーションユーザインタフェースを表示している間に、第2のメッセージ入力エリア内の第1のメッセージの入力を(例えば、検出ユニット4908を用いて)検出し、第2のメッセージ入力エリアにおける第1のメッセージの入力を検出したことに応じて、第1のメッセージを第2のメッセージ入力エリアに表示することを(例えば、表示可能化ユニット4910を用いて)可能にし、第2のメッセージ入力エリアに第1のメッセージを表示している間に、第2のメッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を(例えば、検出ユニット4908を用いて)検出し、第2のメッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出したことに応じて、第1のメッセージを、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット4914を用いて)送信し、当該1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に第1のメッセージを表示する。
一部の実施形態では、処理ユニット4906は、第2のメッセージ入力エリアのコンテンツをメッセージセッションに投稿する要求に対応する入力を検出した後で、対話型アプリケーションのユーザインタフェースを表示している間に、対話型アプリケーションを終了させる入力を(例えば、検出ユニット4908を用いて)検出し、対話型アプリケーションを終了させる入力の検出に応じて、対話型アプリケーションのユーザインタフェースの表示を(例えば、停止ユニット4912を用いて)停止し、メッセージユーザインタフェースの表示を(例えば、表示可能化ユニット4910を用いて)可能にする、ように更に構成され、メッセージユーザインタフェースは会話記録への第1のメッセージの表示を含む。
一部の実施形態では、対話型アプリケーションの起動アイコンは、メッセージユーザインタフェース内の他の対話型アプリケーションの複数の起動アイコンと共に同時に表示される。
一部の実施形態では、対話型アプリケーションの起動アイコンをアクティブ化する入力を検出することには、対話型アプリケーションの起動アイコンに対応する場所の第1の接触による第1の入力を検出することと、第1の入力の検出に応じて、対話型アプリケーションの実行方法に関する複数のオプションを含むメニューを表示することと、対話型アプリケーションの実行方法に関する複数のオプションのうちの第1のオプションを選択する第2の入力を検出すること、が含まれる。
一部の実施形態では、対話型アプリケーションのユーザインタフェースは、少なくとも1人のアバターを含み、少なくとも1人のアバターのうちの各それぞれのアバターは、メッセージセッションに含まれる少なくとも1人の他のユーザの中のユーザに対応する。
一部の実施形態では、対話型アプリケーションのユーザインタフェースは、アバターのスタックとして表示される複数のアバターを含む。
一部の実施形態では、処理ユニット4906は、対話型アプリケーションユーザインタフェースを表示している間に、対話型アプリケーションのユーザインタフェース内のアバターに対応する場所で第3の接触によって第3の入力を(例えば、検出ユニット4908を用いて)検出し、第3の入力の検出に応じて、アバターに関連付けられたアクションのメニューの表示を(例えば、表示可能化ユニット4910を用いて)可能にするように更に構成される。
一部の実施形態では、処理ユニット4906は、更に、対話型アプリケーションのユーザインタフェースを表示している間に、メッセージセッションに関連付けられたメッセージを(例えば、受信ユニット4916を用いて)受信し、メッセージセッションに関連するメッセージを受信したことに応じて、対話型アプリケーションのユーザインタフェースの最上部に置かれたメッセージの表示を(例えば、表示可能化ユニット4910を用いて)一時的に可能にするように構成される。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの機能のサブセットを実行するように構成されている。
一部の実施形態では、対話型アプリケーション起動アイコンは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの識別子を表示する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションによって表示されるコンテンツの一部を表示する。
一部の実施形態では、対話型アプリケーションは、予め定義された入力の検出時に、メッセージアプリケーションとは別個に動作する対応するアプリケーションをデバイスに起動させる。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションとは別々に動作する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションと連携して動作する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの一時記憶用メモリの専用部分とは異なる一時記憶用メモリの専用部分を有する。
一部の実施形態では、メッセージアプリケーションとは別個に動作する対応するアプリケーションは、対話型アプリケーションの一時的な記憶用メモリの専用部分にアクセスするように構成されている。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって、任意選択的に実施される。
図48A~図48Dを参照して上述した動作は、図1A、図1B又は図49に示される構成要素によって、任意選択的に実施される。例えば、検出動作4808及び4834は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と比較し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図50A~図50Cは、一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法5000を例示するフロー図である。方法5000は、ディスプレイ、タッチ感知面、及びタッチ感知面との接触の強度を検出する1つ以上のセンサを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法5000におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下で説明するように、方法5000は、メッセージアプリケーションにおいて対話型アプリケーションを使用する直感的な方法を提供する。この方法は、メッセージアプリケーションにおいて対話型アプリケーションを使用するときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによって、より効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、ユーザがメッセージアプリケーションで対話型アプリケーションをより迅速かつ効率的に使用することができれば、電力が節約され、バッテリ充電の間隔が増大することになる。
デバイスは、ディスプレイ上にメッセージアプリケーションのメッセージユーザインタフェースを表示し(5002)、このメッセージユーザインタフェースは、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、メッセージ入力エリアと、会話記録内に表示される対話型アプリケーションのアイコン(「対話型アプリケーションアイコン」又は「対話型アプリケーションオブジェクト」)とを含む。
本明細書で使用される場合、「対話型アプリケーションアイコン」及び「対話型アプリケーションオブジェクト」は、互換的に使用されて、メッセージセッションの会話記録に表示される項目を指し、これは、メッセージアプリケーション内の対話型アプリケーション、特にメッセージセッション内で開始された対話型アプリケーションのセッションに関連付けられている。メッセージセッション内でアクティブ化されると、対話型アプリケーションオブジェクトは、関連付けられた対話型アプリケーション、特にメッセージセッション内で開始された対話型アプリケーションのセッションに関するユーザインタフェースの起動を引き起こす。
例えば、図37Kのメッセージユーザインタフェース3500は、会話記録3700と、メッセージ入力エリア3502と、対話型予約アプリケーションに対応するアイコン(例えば、オブジェクト)3728とを含む。アイコン3728は、アイコンが対話型予約アプリケーションに関連付けられていることを表す識別子3730を含んでいる。アイコン3728はまた、対話型アプリケーションの関連するセッションに入力されたコンテンツに関する情報(例えば、American Fareを提供するJoe's Bistroで午後6時45分に2人分の予約がなされたとの情報)を含む。
別の実施例として、図37BIのメッセージユーザインタフェース3500は、会話記録3700、メッセージ入力エリア3502、対話型三目並べアプリケーションに対応するアイコン(例えば、オブジェクト)3705を含む。アイコン3705は、メッセージセッションにおいてユーザによって入力されたX及びOを有する三目並べボードの識別画像を含む。
別の実施例として、図37CTのメッセージユーザインタフェース3500は、会話記録3700、メッセージ入力エリア3502、及び対話型ピザ注文アプリケーションに対応するアイコン(例えば、オブジェクト)3735を含む。アイコン3735は、対話型アプリケーションに関する識別情報を含まないが、対話型アプリケーションの関連付けられたセッションで行われた入力に関する情報、即ち、計画中のピザにペパロニが追加されたという情報を含んでいる。
一部の実施形態では、対話型アプリケーションの関連するアプリケーション又はセッションの状態に関するさらなる情報が、対話型アプリケーションアイコン/オブジェクトに近接して表示される。例えば、図37BFでは、アイコン3705の下に追加情報3795が表示され、対応する対話型三目並べアプリケーションがデバイス100-2のメモリに記憶されていないことを示す。別の実施例では、図37CSにおいて、追加情報3797が、アイコン3735の下に表示され、これは、Abeが、アイコン3735に関連する対話型ピザ注文アプリケーションのセッションで計画中のピザにペパロニを追加したこと(例えば、アプリケーションのセッションで直近に行われた変更も共に)を示す。
一部の実施形態では、対話型アプリケーションの関連するアプリケーション又はセッションの状態に関するさらなる情報は、対話型アプリケーションアイコン/オブジェクトに近接して表示されない。例えば、図37Kでは、対話型アプリケーションのセッションの関連するアプリケーションの状態に関する追加情報は、対話型アプリケーションアイコン3728に近接して表示されない。
一部の実施形態では、対話型アプリケーション起動アイコンは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの識別子を表示する(5004)。一部の実施形態では、対話型アプリケーションアイコン/オブジェクトは、アプリケーションアイコン/オブジェクトに関連付けられた対話型アプリケーションのユーザインタフェースの起動を可能にすることによって、アプリケーション起動アイコンとして機能する。例えば、図37Pの接触3738を含む入力によって、対話型アプリケーションアイコン3728をアクティブ化すると、デバイス100-2は、図37Qの対応する対話型予約アプリケーションのユーザインタフェース3712を表示する。アイコン3728の表示は、メッセージアプリケーションとは別個に動作する対応する予約アプリケーションの識別子3730を含む。
メッセージユーザインタフェースを表示している間、デバイスは、対話型アプリケーションのアイコンをアクティブ化する入力を検出する(5006)。一部の実施形態では、この入力はアイコン上のタップジェスチャである。例えば、デバイス100-2は、図37Pの対話型予約アプリケーションのアイコン3728上の接触3738を含む入力を検出する。別の実施例として、デバイス100-2は、図37BJの対話型三目並べアプリケーションのアイコン3705上の接触3711を含む入力を検出する。別の実施例として、デバイス100-1は、図37CZの対話型ピザ注文アプリケーションのアイコン3735上の接触3765を含む入力を検出する。
対話型アプリケーションのアイコンをアクティブ化する入力を検出したことに応じて、デバイスは、第1の状態の対話型アプリケーションのユーザインタフェース(「対話型アプリケーションユーザインタフェース」)を表示する(5008)。例えば、デバイス100-2は、図37QのJoe's Bistroの2人分の午後6時45分の予約の表示を含む第1の状態の対話型予約アプリケーションに関するユーザインタフェース3712を表示する。別の実施例として、デバイス100-2は、図37BKに、三目並べボード3791の中央の四角への「O」の表示と、三目並べボード3791への「X」の不表示と、を含む第1の状態の対話型三目並べアプリケーションのユーザインタフェース3782を表示する。別の実施例として、デバイス100-1は、アプリケーションオブジェクト3735に表示されたピザ上のペパロニの表示を含む第1の状態のアプリケーション入力エリア3731及びアプリケーションオブジェクト3735を含む対話型ピザ注文アプリケーションの非連続的なユーザインタフェースを表示する。一部の実施形態では、対話型アプリケーションの出力表示(例えば、図37DAのアプリケーションオブジェクト3735に表示されたピザ)も、アプリケーション入力エリアに含まれる(例えば、図37DAの入力エリア3731のコーナーにピザを表示することができる)。
一部の実施形態では、対話型アプリケーションユーザインタフェースは、メッセージユーザインタフェースの少なくとも一部の上に表示される。例えば、図37BKのメッセージユーザインタフェース3500の一部の上に、対話型三目並べアプリケーションのユーザインタフェース3782が表示される。
一部の実施形態では、対話型アプリケーションユーザインタフェースは、メッセージユーザインタフェースの表示に取って代わる。例えば、図37Qの対話型予約アプリケーションのユーザインタフェース3712は、図37Pのメッセージユーザインタフェースの表示に取って代わる。
一部の実施形態では、対話型アプリケーションユーザインタフェースがメッセージ記録内に表示される。例えば、図37CAの記録3700内に表示されたピザアプリケーションオブジェクト3735は、注文中のピザの現在の状態を表示するので、対話型ピザ注文アプリケーションのユーザインタフェースの非連続的部分である。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションによって表示されるコンテンツの(例えば、全部よりは少ない)一部を表示する(5010)。例えば、一部の実施形態では、メッセージアプリケーション内で動作する対話型予約アプリケーションは、レストランの予約を可能にするように構成されているが、ユーザがレストランに対してコメントできるようには構成されていない。これに対して、メッセージアプリケーションの外部で動作可能な対応する予約アプリケーションは、レストランを予約して、レストランに対してコメントすることを可能にするように構成されている。
一部の実施形態では、対話型アプリケーションは、予め定義された入力の検出時に、メッセージアプリケーションとは別個に動作する対応するアプリケーションをデバイスに起動させる(5012)。例えば、図37Pの対話型予約アプリケーションアイコン3728上の第1の入力(例えば、タップ、押圧、深押し、長押し又はマルチフィンガジェスチャ)に応じて、デバイスはメッセージアプリケーション内で対話型予約アプリケーションを起動する。図37Pの対話型予約アプリケーションアイコン3728上の第2の異なる入力(例えば、タップ、押圧、深押し、長押し又はマルチフィンガジェスチャのうちの異なるもの)に応じて、デバイスはメッセージアプリケーションの外部の予約アプリケーションを起動する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションとは別々に動作する(5014)。例えば、図37Pのアイコン3728のアクティブ化に応じて起動される対話型予約アプリケーションは、メッセージアプリケーションの外部で動作する対応する予約アプリケーションが動作していないときに動作可能である。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションと連携して動作する(5016)。例えば、図37Pのアイコン3728のアクティブ化に応じて起動される対話型予約アプリケーションは、メッセージアプリケーションの外部で動作する対応する予約アプリケーションが動作していないときには動作することができない。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの一時記憶用メモリの専用部分とは異なる一時記憶用メモリの専用部分を有する(5018)。例えば、一部の実施形態では、図37Pのアイコン3728のアクティブ化に応じて起動され、かつメッセージアプリケーション内で動作する対話型予約アプリケーションを使用して行われた予約の記録は、メッセージアプリケーションの外部で動作する対応する予約アプリケーションを使用して行われた予約の記録とは異なるメモリ部分に記憶される。
一部の実施形態では、メッセージアプリケーションとは別個に動作する対応するアプリケーションは、対話型アプリケーションの一時的な記憶用メモリの専用部分にアクセスするように構成されている。例えば、一部の実施形態では、メッセージアプリケーションの外部で動作する対応する予約アプリケーションは、図37Pのアイコン3728のアクティブ化に応じて起動され、かつメッセージアプリケーション内で動作する対話型予約アプリケーションを使用して行われた予約の記録にアクセスすることができる。
対話型アプリケーションのユーザインタフェースを表示している間に、デバイスは、対話型アプリケーションのユーザインタフェース内で第1のユーザ入力を検出する(5022)。例えば、デバイス100-2は、図37Xの接触3752及び図37Zの接触3754を含む対話型予約ユーザインタフェース3712の入力を検出する。別の実施例として、デバイス100-2は、図37BLの接触3713を含む対話型三目並べアプリケーションユーザインタフェース3782の入力を検出する。別の実施例として、デバイス100-1は、図37DBの接触3767及び図37DDの接触3769を含む対話型ピザ注文アプリケーションユーザインタフェース3731(例えば、アプリケーション入力エリア3731)の入力を検出する。
対話型アプリケーションのユーザインタフェース内の第1のユーザ入力を検出した(又は検出した後に)ことに応じて、デバイス(5023)は、対話型アプリケーションのユーザインタフェースの表示を第1の状態から第2の状態に変更し(例えば、第2の「O」を三目並べボードに配置する)、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の(例えば、第2の)電子デバイスに、第1のユーザ入力が対話型アプリケーションのユーザインタフェースで行われたことを示す情報(例えば、メタメッセージ、命令、入力の指標の表現)を送信し、当該1つ以上の電子デバイスは、第1のユーザ入力の指標を表示する(例えば、第1のユーザ入力が行われたことを示す)。
例えば、デバイス100-2は、図37AAの対話型予約アプリケーションユーザインタフェース3712の入力アフォーダンス3740-1において、予約時間を午後6時45分から午後8時に変更する。デバイス100-2はまた、予約の時間が変更されたという情報を午前9時31分にデバイス100-1に送信する。午前9時31分に情報を受信したことに応じて、デバイス100-1は、会話記録3700内のアプリケーションアイコン(例えば、オブジェクト)3728の表示を、図37AKの位置3728-aから図37ALの位置3728-bへ移動させることによって、かつ、アプリケーションアイコン3728内に表示される予約時間を図37AKの午後6時45分から図37ALの午後8時に変更することによって、対話型予約アプリケーションのセッションの状態の変化を示す。
別の実施例では、デバイス100-2は、図37BMの対話型三目並べアプリケーションユーザインタフェース3782に表示された三目並べボード3791の右上隅に「X」3794を配置する。デバイス100-2はまた、午前9時35分に、「X」が三目並べボード3791上に配置されたという情報をデバイス100-1に送信する。午前9時35分に情報を受信したことに応じて、デバイス100-1は、図37AZの三目並べボード3791の右上隅に「X」3794を表示することによって、かつ、会話記録3700内のアプリケーションアイコン(例えば、オブジェクト)3786の表示を、図37AYの位置3786-aから図37AZの位置3786-bへ移動することによって、並びに、図37AZのアプリケーションアイコン3786のすぐ下の会話記録3700内の追加情報3795「あなたの番」を表示することによって、対話型三目並べアプリケーションのセッションに関する状態の変化を示す。
別の実施例では、デバイス100-1は、図37DEのアプリケーションオブジェクト3735内に表示されたピザの上のキノコを表示する。デバイス100-1はまた、午前9時42分に、キノコがピザに追加されたという情報をデバイス100-2に送信する。午前9時42分に情報を受信したことに応じて、デバイス100-2は、図37CLのアプリケーションオブジェクト(例えばアイコン)3735上にキノコを表示することによって、かつ、アプリケーションオブジェクト3735の下の追加情報3747を図37CKの「あなたはペパロニを追加しました」から図37CLの「アンドリューがキノコを追加しました」に変更することによって、対話型ピザ注文アプリケーションのセッションに関する状態の変化を示す。
一部の実施形態では、第1のユーザ入力が対話型アプリケーションのユーザインタフェースで行われたことを示す情報は、メッセージセッションに対応する会話記録内における対話型アプリケーションの対応するアイコンを移動させる(例えば、会話記録の最後まで、及び/又はその反対側まで)情報を含んでいる(5024)。
例えば、対話型アプリケーションアイコンは、メッセージセッションで最初に開かれた(例えば、投稿された)ときに、会話記録の特定の場所に配置される。その後、メッセージセッションに含まれるユーザに対応するデバイスが対話型アプリケーションのセッションの状態を変更したときに、対話型アプリケーションアイコンが記録の最後に移動する。
例えば、デバイス100-1に送信された情報は、デバイスに、図37AKの位置3728-aから図37ALの位置3728-bへ会話記録3700のアプリケーションアイコン(例えば、オブジェクト)3728の表示を移動させる。
別の実施例では、デバイス100-1に送信された情報は、デバイスに、図37AYの位置3786-aから図37AZの位置3786-bに会話記録3700のアプリケーションアイコン(例えば、オブジェクト)3786の表示を移動させる。
一部の実施形態では、第1のユーザ入力が対話型アプリケーションのユーザインタフェースで行われたことを示す情報は、対話型アプリケーションの対応するアイコンを、メッセージセッションに対応する会話記録の第1の側から、会話記録の第2の側に移動させる情報を含んでいる(5026)。
例えば、対話型アプリケーションのアイコンが記録の右側から記録の左側に移動して、メッセージセッションに含まれる別のユーザ(例えば、別のユーザに対応するデバイス)が、対話型アプリケーションの関連セッションにおいて直近の入力を行った(例えば、メッセージセッション内で共有される対話型アプリケーション内で自分のターンを行った)ことを示す。一部の実施形態では、この情報は、1つ以上のデバイスに、アイコンが第1の側に既に表示されているアイコンのみを移動させる(例えば、投稿が電子デバイスのユーザによって行われたことを示す側、例えば、メッセージアプリケーションユーザインタフェース3500に表示された会話記録3506及び3700の右側)(例えば、先行する状態が、1つ以上のデバイスにおけるあるデバイスがアプリケーションオブジェクトを移動させることを満たさなければならない)。そうでなければ、情報が受信されたときに会話記録の第2の側に既にアプリケーションオブジェクトが表示されていた場合、デバイスは、情報(例えば、命令)を受信すると、第2の側でのアプリケーションオブジェクトの表示を保持する。
例えば、デバイス100-1に送信された情報は、このデバイスに、会話記録3700内のアプリケーションアイコン(例えば、オブジェクト)3728の表示を、図37AKの会話記録3700の右側の位置3728-aから、図37ALの会話記録3700の左側の位置3728-bへ移動させる。
別の実施例では、デバイス100-1に送信された情報は、このデバイスに、会話記録3700内のアプリケーションアイコン(例えば、オブジェクト)3786の表示を、図37AYの会話記録3700の右側の位置3786-aから、図37AZの会話記録3700の左側の位置3784-bへ移動させる。
一部の実施形態では、(例えば、新しい入力が対応する対話型アプリケーションのセッション内で受信されたことを表すために)アプリケーションアイコン/オブジェクトが会話記録内の第1の一時的な場所から第2の一時的な場所に移動されると、アプリケーションアイコン/オブジェクトを第1の場所に表示させた直前の入力を記録するために、アーカイブアイコン/オブジェクトは、第1の一時的な場所の会話記録に配置される。
例えば、デバイス100-1は、午前9時31分に、予約時間がデバイス100-2によって変更されたという情報を受信する。これに応じて、デバイスは、対話型予約アプリケーションアイコン/オブジェクト3728を、図37AKの記録3700の第1の一時的な場所に対応する位置3728-aから、図37ALの記録3700の第2の一時的な場所に対応する位置3728-bに移動させる。記録3700の第1の一時的な場所(例えば、位置3728-b)に対応する時間に予約が最初に行われたことを記録するために、デバイス100-1は、最初に行われた入力に関する(例えば、午後6時45分の予約が提案/推奨されたとの)情報と、対応する対話型アプリケーションを識別するシンボル(例えば、対話型予約アプリケーションに対応する同心円シンボル)と、を含む対話型予約アプリケーションアーカイブアイコン/オブジェクト3756を表示する。一部の実施形態では、対話型アプリケーションアーカイブアイコン/オブジェクトは、入力を記述するテキストとアプリケーションシンボルのうちの1つのみを含む。一部の実施形態では、対話型アプリケーションアーカイブアイコン/オブジェクトは、入力を記述するテキストとアプリケーションシンボルの両者を含む。
一部の実施形態では、対話型アプリケーションアーカイブアイコン/オブジェクトがアクティブ化されると、その時間に関連する入力に関する追加情報が表示される。一部の実施形態では、入力が行われた(例えば、その時に行われた特定の三目並べの動作を示す)時点で、対話型アプリケーションのセッションの状態に対応する状態で対話型アプリケーションのユーザインタフェースを開くことによって、この情報が表示される。一部の実施形態では、この情報は、会話記録の内部又は上に表示される(例えば、対話型アプリケーションアーカイブアイコン/オブジェクトの拡張として、又はメッセージユーザインタフェースの上/内に表示されるポップアップエリアとして、(会話記録の少なくとも一部の上に))。
一部の実施形態では、ユーザ及びメッセージセッションの他の参加者による会話に投稿されたメッセージが、ディスプレイの両側に表示される場合、アイコンは常に直近の入力を行ったユーザに対応する側に表示される(例えば、会話記録の第1の側に対話型アプリケーションアイコンを表示することは、電子デバイスのユーザが対話型アプリケーションユーザインタフェースにおいて直近の入力を行ったことを示し、会話記録の第2の側に対話型アプリケーションアイコンを表示することは、メッセージセッションに含まれる別のユーザが対話型アプリケーションユーザインタフェースに直近の入力を行ったことを示す)。
一部の実施形態では、対話型アプリケーションが順番ベースのアプリケーションである場合、対話型アプリケーションのアイコンは、入力を行う番のユーザに対応する記録の側に常に表示される(例えば、会話記録の第1の側の対話型アプリケーションアイコンの表示は、それが入力を行うメッセージセッションの番に含まれる別のユーザであることを示し、会話記録の第2の側の対話型アプリケーション起動アイコンの表示は、それが入力をする当該ユーザの番であることを示す)。
一部の実施形態では、第1のユーザ入力が対話型アプリケーションのユーザインタフェースで行われたことを示す情報は、テキストを表示させる情報を含み(5028)、これは、第1ユーザ入力が、メッセージセッションに対応する会話記録内の対話型アプリケーションの対応するアイコンの下(又は、アイコンの上、次、近く、又は近接)で行われたことを示す。
例えば、デバイス100-1に送信された情報は、デバイスに、図37AZのアプリケーションアイコン3786の下に(例えば真下に)会話記録3700中で、「あなたの番」という追加情報3795を表示させる。
例えば、デバイス100-2に送信された情報は、デバイスに、図37CLのアプリケーションオブジェクト3735の下に(例えば真下に)「Andrewはキノコを追加しました」という追加情報3747を表示させる。
一部の実施形態では、テキストを表示することは、情報を受信する前にアプリケーションオブジェクトの近くに表示されたテキストを変更する(例えば、更新する)ことを含む。例えば、デバイス100-2に送信された情報は、このデバイスに、アプリケーションオブジェクト3735の下に(例えば、真下に)表示された追加情報3747を、図37CKの「あなたはペパロニを追加しました」から、図37CLの「Andrewはキノコを追加しました」に更新させる。
一部の実施形態では、テキストは、ユーザに対して、ユーザ入力をする番(例えば、「あなたがプレイする番」)であること、又は入力を行う別のユーザの番(例えば、「Abeがプレイする番」)であることを示す。一部の実施形態では、テキストは、ユーザ入力を行ったユーザの名前を示す(例えば、「Abeが「X」をプレイしました」、又は「Andrewが予約を変更しました」など)。
一部の実施形態では、第1のユーザ入力が対話型アプリケーションのユーザインタフェースで行われたことを示す情報は、対話型アプリケーションの対応するアイコンの外観を変更させる情報を含む(5030)。
例えば、デバイス100-1に送信された情報によって、デバイスは、アプリケーションアイコン3728内に表示された予約時間を、図37AKの午後6時45分から図37ALの午後8時に変更する。
別の実施例では、デバイス100-2に送信された情報によって、デバイスは、図37CLのアプリケーションオブジェクト(例えば、アイコン)3735上に、キノコを表示する。
一部の実施形態では、第1のユーザ入力が対話型アプリケーションのユーザインタフェースで行われたことを示す情報には、対話型アプリケーションの対応するユーザインタフェースの表示を第1の状態から第2の状態に変更させる情報が含まれている(5032)。
一部の実施形態では、第1のユーザが入力を行ったときに、対応する対話型ユーザインタフェースが別のデバイス上に表示されている場合(例えば、第1のユーザが入力を行ったという情報を他のデバイスが受信した場合)、当該他のユーザのディスプレイがリアルタイムで更新される(例えば、「X」が第2のユーザの三目並べボード上にリアルタイムで配置される)。
例えば、デバイス100-1が、午前9時35分にデバイス100-2上で、(例えば、会話記録3700に対応するメッセージセッションに関連付けられた対応する三目並べアプリケーションユーザインタフェース3782に表示された)対応する三目並べボード3791に「X」3794が置かれたという情報を受信するときに、対話型三目並べアプリケーションユーザインタフェース3782が、図37AYのデバイス100-1のタッチスクリーン112上に表示される。これに応じて、デバイス100-1は、(例えば、デバイスがこの情報を受信したときに対話型三目並べアプリケーションユーザインタフェース3782が表示されていたため)図37AZの三目並べボード3791上に「X」3794を表示する。
一部の実施形態では、対応する対話型インタフェースが他のデバイス上に表示されていないとき、対応する対話型ユーザインタフェースは、このデバイス上で開くと更新される。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの機能の(例えば、全部よりは少ない)サブセットを実行するように構成されている(5034)。例えば、一部の実施形態では、メッセージアプリケーション内で動作する対話型予約アプリケーションは、レストランの予約を可能にするように構成されているが、ユーザがレストランに対してコメントできるようには構成されていない。これに対して、メッセージアプリケーションの外部で動作可能な対応する予約アプリケーションは、レストランを予約して、レストランに対してコメントすることを可能にするように構成されている。
図50A~図50Cにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5200、5400、5600、5800、6000、6200、6400、6600、6800、及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図50A~図50Cに関して、上述した方法5000にも、類似した方法で適用可能であることに留意されたい。例えば、方法5000に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5200、5400、5600、5800、6000、6200、6400、6600、6800、及び7000)に関連して本明細書に記載の[接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーション]のうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図51は、上述の本発明の原理に従って構成された電子デバイス5100の機能ブロック図を示す。本デバイスの機能ブロックは、本発明の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって実装することができる。図51で説明される機能ブロックが、上述の本発明の原理を実施するために、組み合わされ、又はサブブロックに分離されてもよいことが当業者には理解されよう。したがって、本明細書の説明は、本明細書に記載された機能ブロックの任意の可能な組合せ若しくは分離又はさらなる定義をサポートすることができる。
図51に示すように、電子デバイス5100は、ユーザインタフェースを表示するように構成されたディスプレイユニット5102と、接触を検出するように構成されたタッチ感知面ユニット5104と、ディスプレイユニット5102及びタッチ感知面ユニット5104に連結された処理ユニット5106とを含む。一部の実施形態では、処理ユニット5106は、検出ユニット5108、表示可能化ユニット5110、表示変更ユニット5112、及び送信ユニット5114を含む。
処理ユニット5106は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイユニット5102に(例えば、表示可能化ユニット5110を用いて)表示することを可能にし、このメッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアと、会話記録内に表示される対話型アプリケーションのアイコンとを含み、メッセージユーザインタフェースを表示している間に、対話型アプリケーションのアイコンをアクティブ化する入力を(例えば、検出ユニット5108を用いて)検出し、対話型アプリケーションのアイコンをアクティブ化する入力を検出したことに応じて、第1の状態(例えば、表示可能化ユニット5110を用いて)で対話型アプリケーションのユーザインタフェースの表示を可能にし、対話型アプリケーションのユーザインタフェースを表示している間に、対話型アプリケーションのユーザインタフェース内で第1のユーザ入力を(例えば、検出ユニット5108を用いて)検出し、対話型アプリケーションのユーザインタフェース内での第1のユーザ入力の検出に応じて、対話型アプリケーションのユーザインタフェースの表示を第1の状態から第2の状態に(例えば、表示変更ユニット5112を用いて)変更し、かつ、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに、第1のユーザ入力が(例えば、送信ユニット5114を用いて)対話型アプリケーションのユーザインタフェースで行われたことを示す情報を送信し、当該1つ以上の電子デバイスは、第1のユーザ入力の指標を表示する、ように構成されている。
一部の実施形態では、第1のユーザ入力が対話型アプリケーションのユーザインタフェースで行われたことを示す情報は、メッセージセッションに対応する会話記録内の対話型アプリケーションの対応するアイコンの移動を引き起こす情報を含んでいる。
一部の実施形態では、第1のユーザ入力が対話型アプリケーションのユーザインタフェースで行われたことを示す情報は、対話型アプリケーションの対応するアイコンを、メッセージセッションに対応する会話記録の第1の側から、会話記録の第2の側に移動させる情報を含んでいる。
一部の実施形態では、第1のユーザ入力が対話型アプリケーションのユーザインタフェースで行われたことを示す情報は、テキストを表示させる情報を含み、第1のユーザ入力が行われたことを、メッセージセッションに対応する会話記録内の対話型アプリケーションの対応するアイコンの下に示す。
一部の実施形態では、第1のユーザ入力が対話型アプリケーションのユーザインタフェースで行われたことを示す情報は、対話型アプリケーションの対応するアイコンの外観を変更させる情報を含む。
一部の実施形態では、第1のユーザ入力が対話型アプリケーションのユーザインタフェースで行われたことを示す情報は、対話型アプリケーションの対応するユーザインタフェースの表示を第1の状態から第2の状態に変更させる情報を含んでいる。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの機能のサブセットを実行するように構成されている。
一部の実施形態では、対話型アプリケーション起動アイコンは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの識別子を表示する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションによって表示されるコンテンツの一部を表示する。
一部の実施形態では、対話型アプリケーションは、予め定義された入力の検出時に、メッセージアプリケーションとは別個に動作する対応するアプリケーションをデバイスに起動させる。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションとは別々に動作する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションと連携して動作する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの一時記憶用メモリの専用部分とは異なる一時記憶用メモリの専用部分を有する。
一部の実施形態では、メッセージアプリケーションとは別個に動作する対応するアプリケーションは、対話型アプリケーションの一時的な記憶用メモリの専用部分にアクセスするように構成されている。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって、任意選択的に実施される。
図50A~図50Cを参照して上述した動作は、図1A及び図1B又は図51に示される構成要素によって、任意選択的に実施される。例えば、検出動作5006及び5022は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図52A~図52Cは、一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法5200を示すフロー図である。方法5200は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法5200におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下で説明するように、方法5200は、メッセージアプリケーションにおいて対話型アプリケーションを使用する直感的な方法を提供する。この方法は、メッセージアプリケーションにおいて対話型アプリケーションを使用するときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによって、より効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、ユーザがメッセージアプリケーションで対話型アプリケーションをより迅速かつ効率的に使用することができれば、電力が節約され、バッテリ充電の間隔が増大することになる。
デバイスは、ディスプレイ上にメッセージアプリケーションのメッセージユーザインタフェースを表示し(5202)、このメッセージユーザインタフェースは、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、メッセージ入力エリアと、を含む。例えば、(Andrewによって操作される)デバイス100-2は、会話記録3700及びメッセージ入力エリア3502を含む、図37J及び図37BDのメッセージユーザインタフェース3500を表示する。
メッセージユーザインタフェースを表示している間に、デバイスは、メッセージセッションに含まれる別のユーザに対応する(第2の)電子デバイス(例えば、図37F及び図37AVにおいて、Abeによって操作されるデバイス100-1)から、会話記録内の対話型アプリケーションのアイコン(「対話型アプリケーションアイコン」又は「対話型アプリケーションオブジェクト」)を表示するための命令を受信する(5204)。
一部の実施形態では、メッセージユーザインタフェースを表示している間に、デバイスは、メッセージセッションに含まれる別のユーザに対応する(第2の)電子デバイス(例えば、図37F及び図37AVにおいてAbeによって操作されるデバイス100-1)から、対話型アプリケーションのセッションがメッセージセッション内で開始されたという情報(例えば、メタメッセージ、命令、又は対話型アプリケーションアイコン/オブジェクトの表現)を受信する。一部の実施形態では、この情報は、電子デバイスに、対話型アプリケーションのセッションのアイコンを会話記録に表示させる。
例えば、図37Fの起動アイコン3708上の接触3710を含む入力(例えば、タップジェスチャ)の検出によって引き起こされる対話型予約アプリケーションのセッションの開始時に、デバイス100-1は、対話型予約アプリケーションのセッションが開始されたという情報をデバイス100-2に送信する。デバイス100-2は図37Jの情報を受信する。別の実施例として、対話型三目並べアプリケーションのセッションの開始時に、デバイス100-2は、図37BEで、デバイス100-1から、対話型三目並べアプリケーションのセッション(例えば、ゲーム)が開始されたという情報を受信する。
当該命令を受信したことに応じて、デバイスは、会話記録に対話型アプリケーションのアイコン(例えば、対話型アプリケーションオブジェクト)を表示する(5208)。
一部の実施形態では、メッセージセッション内で対話型アプリケーションのセッションが開始されたという情報の受信に応じて、デバイスは、会話記録において、メッセージセッション内で開始された対話型アプリケーションのセッションに関連付けられた、対話型アプリケーションのアイコンを表示する。
例えば、図37Jで、デバイス100-1から情報を受信したことに応じて、デバイス100-2は、対話型予約アプリケーションアイコン/オブジェクト3730を図37Kの会話記録3700に表示する。別の実施例として、図37BEで、デバイス100-1から情報を受信したことに応じて、デバイス100-2は、対話型三目並べアプリケーションアイコン/オブジェクト3705を図37BFの会話記録3700に表示する。
一部の実施形態では、対話型アプリケーション起動アイコンは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの識別子を表示する(5026)。一部の実施形態では、対話型アプリケーションアイコン/オブジェクトは、アプリケーションアイコン/オブジェクトに関連付けられた対話型アプリケーションのユーザインタフェースの起動を可能にすることによって、アプリケーション起動アイコンとして機能する。
一部の実施形態では、対話型アプリケーションアイコン/オブジェクトは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの識別子を表示する。例えば、図37Kにおいて、対話型予約アプリケーションアイコン/オブジェクト3730は、メッセージアプリケーションとは別個に動作する予約アプリケーションに対応する同心円のシンボルを表示する。
対話型アプリケーションのアイコンを会話記録に表示している間に、デバイスは、対話型アプリケーションのアイコンをアクティブ化する(例えば、アプリケーションを起動する)入力(例えば、タップジェスチャ)を検出する(5212)。例えば、デバイス100-2は、対話型予約アプリケーションをアクティブ化する図37Pの対話型アプリケーションアイコン/オブジェクト3728上の接触3738を含む入力を検出する。別の実施例では、デバイス100-2は、対話型三目並べアプリケーションをアクティブ化する、図37BGの、対話型アプリケーションアイコン/オブジェクト3705上の接触3707を含む入力を検出する。
会話記録に表示された対話型アプリケーションのアイコンをアクティブ化する入力を検出したことに応じて(5212)、対話型アプリケーションのアイコンに対応する対話型アプリケーションが電子デバイスのメモリに記憶されているという判定に従って、デバイスは、対話型アプリケーションのユーザインタフェース(「対話型アプリケーションユーザインタフェース」)を表示する(5214)。
例えば、図37Pの接触3738を含むアクティブ化入力が検出されたときに、対話型予約アプリケーションがデバイスに記憶されていたため、デバイス100-2は、図37Qの対話型予約アプリケーションユーザインタフェース3712を表示する。
一部の実施形態では、対話型アプリケーションユーザインタフェースは、メッセージユーザインタフェースの少なくとも一部の上に表示される。例えば、図37BKのメッセージユーザインタフェース3500の一部の上に、対話型三目並べアプリケーションのユーザインタフェース3782が表示される。
一部の実施形態では、対話型アプリケーションユーザインタフェースは、メッセージユーザインタフェースの表示に取って代わる。例えば、図37Qの対話型予約アプリケーションのユーザインタフェース3712は、図37Pのメッセージユーザインタフェースの表示に取って代わる。
一部の実施形態では、対話型アプリケーションユーザインタフェースがメッセージ記録内に表示される。例えば、図37CAの記録3700内に表示されたピザアプリケーションオブジェクト3735は、注文中のピザの現在の状態を表示するので、対話型ピザ注文アプリケーションのユーザインタフェースの非連続的部分である。
会話記録に表示された対話型アプリケーションのアイコンをアクティブ化する入力を検出した(5212)ことに応じて、かつ、対話型アプリケーションのアイコンに対応する対話型アプリケーションが電子デバイスのメモリに記憶されていないという判定に従って、デバイスは、リモートサーバ(例えば、メッセージアプリケーションの対話型アプリケーションを含むオンラインアプリケーションストアの一部であるサーバ)から対話型アプリケーションを電子デバイスのメモリにダウンロードし、対話型アプリケーションをリモートサーバからダウンロードした後に、対話型アプリケーションのユーザインタフェースを表示する。
例えば、図37BGの接触3707を含むアクティブ化入力が検出されたときに、アプリケーションがデバイスのメモリに記憶されていなかったために、デバイス100-2は、図37BHのダウンロード状態指標3709によって示されるように、対話型三目並べアプリケーションアイコン/オブジェクト3705に対応する対話型三目並べアプリケーションをダウンロードする。
一部の実施形態では、対話型アプリケーションをダウンロードすることは、ユーザ入力が対話型アプリケーションのダウンロードの承認を示す許可ステップを含む(例えば、アプリケーションのダウンロード及び/又はユーザの同一性を確認することをユーザに促すオブジェクトが表示される)一部の実施形態では、ダウンロードは、ユーザの許可を必要とせずに、バックグラウンドで行われる。
一部の実施形態では、ダウンロードはメッセージユーザインタフェースから離れずに行われる。一部の実施形態では、メッセージユーザインタフェースの表示を保持しながらダウンロードが行われる。
一部の実施形態では、対話型アプリケーションユーザインタフェースは、メッセージユーザインタフェースの少なくとも一部の上に表示される。例えば、図37BKのメッセージユーザインタフェース3500の一部の上に、対話型三目並べアプリケーションのユーザインタフェース3782が表示される。
一部の実施形態では、対話型アプリケーションユーザインタフェースは、メッセージユーザインタフェースの表示に取って代わる。例えば、図37Qの対話型予約アプリケーションのユーザインタフェース3712は、図37Pのメッセージユーザインタフェースの表示に取って代わる。
一部の実施形態では、対話型アプリケーションユーザインタフェースがメッセージ記録内に表示される。例えば、図37CAの記録3700内に表示されたピザアプリケーションオブジェクト3735は、注文中のピザの現在の状態を表示するので、対話型ピザ注文アプリケーションのユーザインタフェースの非連続的部分である。
一部の実施形態(5232)では、対話型アプリケーションが電子デバイスのメモリに記憶されていないという判定に従って、対話型アプリケーションのアイコンは第1の外観を有し、電子デバイスのメモリに記憶されているという判定に従って、対話型アプリケーションのアイコンは第1の外観とは異なる第2の外観を有する。
一部の実施形態では、対話型アプリケーションが電子デバイスのメモリに記憶されていないという判定に従って、デバイスは、対話型アプリケーションのアイコンの近くに(例えば、その下、上、隣に、又は近接して)、対話型アプリケーションがデバイスのメモリに記憶されていないことを示す追加情報を表示する。例えば、デバイス100-2は、対応する対話型三目並べアプリケーションがデバイスのメモリに記憶されていないので、図37BFのアイコン3705の下に追加情報「ダウンロードするためにタップして下さい」を表示する。これに対して、デバイス100-2は、対応する対話型三目並べアプリケーションがデバイスのメモリにダウンロードされた後、図37BIのアイコン3705の下に追加情報「あなたの番です」を表示する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの機能の(例えば、全部よりは少ない)サブセットを実行するように構成されている(5216)。例えば、一部の実施形態では、メッセージアプリケーション内で動作する対話型予約アプリケーションは、レストランの予約を可能にするように構成されているが、ユーザがレストランに対してコメントできるようには構成されていない。これに対して、メッセージアプリケーションの外部で動作可能な対応する予約アプリケーションは、レストランを予約して、レストランに対してコメントすることを可能にするように構成されている。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションによって表示されるコンテンツの(例えば、全部よりは少ない)一部を表示する(5218)。例えば、一部の実施形態では、メッセージアプリケーション内で動作する対話型予約アプリケーションは、レストランの予約を可能にするように構成されているが、ユーザがレストランに対してコメントできるようには構成されていない。これに対して、メッセージアプリケーションの外部で動作可能な対応する予約アプリケーションは、レストランを予約して、レストランに対してコメントすることを可能にするように構成されている。
一部の実施形態では、対話型アプリケーションは、予め定義された入力の検出時に、メッセージアプリケーションとは別個に動作する対応するアプリケーションをデバイスに起動させる(5220)。例えば、図37Pの対話型予約アプリケーションアイコン3728上の第1の入力(例えば、タップ、押圧、深押し、長押し又はマルチフィンガジェスチャ)に応じて、デバイスはメッセージアプリケーション内で対話型予約アプリケーションを起動する。図37Pの対話型予約アプリケーションアイコン3728上の第2の(例えば、異なる)入力(例えば、タップ、押圧、深押し、長押し又はマルチフィンガジェスチャ)に応じて、デバイスは、メッセージアプリケーションの外部で予約アプリケーションを起動する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションとは別々に動作する(5222)。例えば、図37Pのアイコン3728のアクティブ化に応じて起動される対話型予約アプリケーションは、メッセージアプリケーションの外部で動作する対応する予約アプリケーションが動作していないときに動作可能である。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションと連携して動作する(5224)。例えば、図37Pのアイコン3728のアクティブ化に応じて起動される対話型予約アプリケーションは、メッセージアプリケーションの外部で動作する対応する予約アプリケーションが動作していないときには動作することができない。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの一時記憶用メモリの専用部分とは異なる一時記憶用メモリの専用部分を有する(5226)。例えば、一部の実施形態では、図37Pのアイコン3728のアクティブ化に応じて起動され、かつメッセージアプリケーション内で動作する対話型予約アプリケーションを使用して行われた予約の記録は、メッセージアプリケーションの外部で動作する対応する予約アプリケーションを使用して行われた予約の記録とは異なるメモリ部分に記憶される。
一部の実施形態では、メッセージアプリケーションとは別個に動作する対応するアプリケーションは、対話型アプリケーションの一時的な記憶用メモリの専用部分にアクセスするように構成されている(5228)。例えば、一部の実施形態では、メッセージアプリケーションの外部で動作する対応する予約アプリケーションは、図37Pのアイコン3728のアクティブ化に応じて起動され、かつメッセージアプリケーション内で動作する対話型予約アプリケーションを使用して行われた予約の記録にアクセスすることができる。
一部の実施形態(5232)では、デバイスは、対話型アプリケーションの終了を検出し、対話型アプリケーションの終了を検出したことに応じて、対話型アプリケーションのユーザインタフェースの表示を停止し、会話記録を含むメッセージユーザインタフェースを表示し(例えば、部分的又は完全な表示を復元する)、対話型アプリケーションのアイコンは、会話記録内のある位置に表示される。
例えば、デバイス100-2は、図37ABの終了(termination)(終了(exiting))アフォーダンス3714上の接触3756を含む終了入力の検出に応じて、図37ACの記録3700内の対話型予約アプリケーションアイコン/オブジェクト3728を含むメッセージユーザインタフェース3500を表示する。
別の実施例では、デバイス100-2は、図37BNの終了(termination)(終了(exiting))アフォーダンス3694上の接触3717を含む、終了入力の検出に応じて、図37BOの記録3700内の対話型三目並べアプリケーションアイコン/オブジェクト3705を含む、図37BNの対話型三目並べアプリケーションユーザインタフェース3782の表示によって不鮮明にされたメッセージユーザインタフェース3500の部分表示を図37BOで復旧する。
一部の実施形態では、会話記録内のアイコンの位置は、アイコンを表示する命令が受信された(例えば、別のユーザが対話型アプリケーションのセッションを要求したとき)時間的順序に依存する。一部の実施形態では、会話記録内のアイコンの位置は、ユーザが対話型アプリケーションを終了した時間的順序に依存する(例えば、アプリケーションを閉じることによって記録内のアイコンが押される)。一部の実施形態では、アイコンの位置は、(例えば、任意のユーザによる)直近の入力が対話型アプリケーション内で行われた時間的順序に依存する。
図52A~図52Cにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5400、5600、5800、6000、6200、6400、6600、6800、及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図52A~図52Cに関して、上述した方法5200にも、類似した方法で適用可能であることに留意されたい。例えば、方法5200に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5400、5600、5800、6000、6200、6400、6600、6800、及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図53は、上述の本発明の原理に従って構成された電子デバイス5300の機能ブロック図を示す。本デバイスの機能ブロックは、本発明の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって実装することができる。図53で説明される機能ブロックが、上述の本発明の原理を実施するために、組み合わされ、又はサブブロックに分離されてもよいことが当業者には理解されよう。したがって、本明細書の説明は、本明細書に記載された機能ブロックの任意の可能な組合せ又は分離又はさらなる定義をサポートすることができる。
図53に示すように、電子デバイス5300は、ユーザインタフェースを表示するように構成されたディスプレイユニット5302と、接触を検出するように構成されたタッチ感知面ユニット5304と、ディスプレイユニット5302及びタッチ感知面ユニット5304に連結された処理ユニット5306とを含む。一部の実施形態では、処理ユニット5306は、検出ユニット5308と、表示可能化ユニット5310と、停止ユニット5312と、ダウンロードユニット5314と、受信ユニット5316とを含む。
処理ユニット5306は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイユニット5302上に(例えば、表示可能化ユニット5310を用いて)表示することを可能にし、このメッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアと、を含み、メッセージユーザインタフェースを表示している間に、メッセージセッションに含まれる別のユーザに対応する電子デバイスから、(例えば、受信ユニット5316を用いて)会話記録内の対話型アプリケーションのアイコンの表示を引き起こす情報を受信し、この情報を受信したことに応じて、会話記録に対話型アプリケーションのアイコンの表示を(例えば、表示可能化ユニット5310を用いて)可能にし、対話型アプリケーションのアイコンを会話記録に表示している間に、対話型アプリケーションのアイコンをアクティブ化する入力を(例えば、検出ユニット5308を用いて)検出し、会話記録に表示された対話型アプリケーションのアイコンをアクティブ化する入力を検出したことに応じて、対話型アプリケーションのアイコンに対応する対話型アプリケーションが電子デバイスのメモリに記憶されているという判定に従って、対話型アプリケーションのユーザインタフェースの表示を(例えば、表示可能化ユニット5310を用いて)可能にし、対話型アプリケーションのアイコンに対応する対話型アプリケーションが電子デバイスのメモリに記憶されていないという判定に従って、当該対話型アプリケーションをリモートサーバから電子デバイスのメモリに(例えば、ダウンロードユニット5314を用いて)ダウンロードし、更に、リモートサーバから対話型アプリケーションをダウンロードした後、対話型アプリケーションのユーザインタフェースの表示を(例えば、表示可能化ユニット5310を用いて)可能にする、ように構成されている。
一部の実施形態では、処理ユニット5306は、対話型アプリケーションの終了を(例えば、検出ユニット5308を用いて)検出し、対話型アプリケーションの終了を検出したことに応じて、対話型アプリケーションのユーザインタフェースの表示を(例えば、停止ユニット5312を用いて)停止し、会話記録を含むメッセージユーザインタフェースの表示を(例えば、表示可能化ユニット5310を用いて)可能にし、対話型アプリケーションのアイコンは会話記録内のある位置に表示されるように、更に構成されている。
一部の実施形態では、対話型アプリケーションが電子デバイスのメモリに記憶されていないという判定に従って、対話型アプリケーションのアイコンは第1の外観を有し、対話型アプリケーションが電子デバイスのメモリに記憶されているという判定に従って、対話型アプリケーションのアイコンは第1の外観とは異なる第2の外観を有する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する、対応するアプリケーションの機能のサブセットを実行するように構成されている。
一部の実施形態では、対話型アプリケーション起動アイコンは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの識別子を表示する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションによって表示されるコンテンツの一部を表示する。
一部の実施形態では、対話型アプリケーションは、予め定義された入力の検出時に、メッセージアプリケーションとは別個に動作する対応するアプリケーションをデバイスに起動させる。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションとは別々に動作する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションと連携して動作する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの一時記憶用メモリの専用部分とは異なる一時記憶用メモリの専用部分を有する。
一部の実施形態では、メッセージアプリケーションとは別個に動作する対応するアプリケーションは、対話型アプリケーションの一時的な記憶用メモリの専用部分にアクセスするように構成されている。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって、任意選択的に実施される。
図52A~図52Cを参照して上述した動作は、オプションとして、図1A、図1B又は図53に示される構成要素によって、任意選択的に実施される。例えば、検出動作5210及び5234は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触がユーザインタフェース上のオブジェクトの選択などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図54A~図54Cは、一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法5400を示すフロー図である。方法5400は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法5400におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下で説明するように、方法5400は、メッセージアプリケーションにおいて対話型アプリケーションを使用する直感的な方法を提供する。この方法は、メッセージアプリケーションにおいて対話型アプリケーションを使用するときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによって、より効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、ユーザがメッセージアプリケーションで対話型アプリケーションをより迅速かつ効率的に使用することができれば、電力が節約され、バッテリ充電の間隔が増大することになる。
デバイスは、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイ上に表示する(5402)。このメッセージユーザインタフェースには、電子デバイスのユーザと少なくとも1人の他の(例えば、別の電子デバイスの)ユーザとの間のメッセージセッションの、ディスプレイの第1のエリアに表示される会話記録と、会話記録内に表示される第1の対話型アプリケーションオブジェクトと、メッセージ入力エリアと、このメッセージ入力エリアとは異なりかつディスプレイの第2のエリアに表示される第1の対話型アプリケーションの入力エリアと、が含まれ、第1の対話型アプリケーションの入力エリアは、1つ以上の入力アフォーダンスを含んでいる。
例えば、図37CA及び図37DAにおいて、デバイス100-2及び100-1は、タッチスクリーン112の最上部に表示された会話記録3700と、会話記録3700内の対話型ピザ注文アプリケーションオブジェクト3735と、タッチスクリーン112の下部に表示された対話型ピザ注文アプリケーション入力エリア3731と、を含むメッセージユーザインタフェース3500を各々表示する。対話型ピザ注文入力エリア3731は、(例えば、注文のために)計画中のピザにトッピングを追加するため、ピザからトッピングを除去するため、ピザを注文するため、の入力アフォーダンス3733-1、3733-2及び3733-3を含む。
一部の実施形態では、対話型アプリケーションオブジェクトは、ユーザ入力に応じて、対話型アプリケーションの出力を表示する(例えば、対話型アプリケーションの出力を対話型アプリケーションオブジェクトに表示する)。例えば、図37CB及び図37CDの接触3737及び3739を含む、ピザにペパロニを追加する入力に応じて、図37CEの対話型ピザ注文アプリケーションオブジェクト3735にペパロニが表示される。
一部の実施形態では、会話記録がディスプレイの第1のエリアに表示されている間に、対話型アプリケーションの入力エリアがディスプレイの第2のエリアに表示される。
一部の実施形態では、第1の対話型アプリケーションの入力エリアの表示は、会話記録と、第1の対話型アプリケーションオブジェクトと、及び/又はメッセージ入力エリアとの表示に(例えば、第1の対話型アプリケーションオブジェクトをアクティブ化する入力の検出に応じて)取って代わる。
一部の実施形態では、デバイス(5404)は、コンテンツが投稿された時間的順序に従って会話記録内にメッセージセッションに投稿されたコンテンツを表示し、対話型アプリケーションオブジェクトは、対話型アプリケーションのセッションが開始された時間的順序に関連付けられた会話記録内の位置に表示される。例えば、対話型アプリケーションオブジェクトは、会話記録の他のオブジェクト(例えば、メッセージ、マルチメディア、及び他のコンテンツ)に対して、ユーザが最初に対話型アプリケーションのセッションをメッセージセッションに投稿したときの時間的順序に従って配置される。
例えば、図37CE~図37CFでは、メッセージ3798が最初に(例えば、図37BSの9時36分に)メッセージセッションに投稿され、アプリケーションオブジェクト3735が(例えば図37CAの午後9時37分に)2番目に投稿され、メッセージ3741が最後に(例えば図37CVの午前9時39分に)投稿されたため、会話記録内のメッセージ3798と3741との間に、対話型ピザ注文アプリケーションオブジェクト3735が配置される。
一部の実施形態では、デバイス(5406)は、会話記録内に時間的順序に表示されるコンテンツの、会話記録の端部(例えば、会話記録の最上部)に向かっての(例えば、新しいコンテンツがメッセージセッションに投稿されるときの)同期移動を表示し、表示されるコンテンツは、第1の対話型アプリケーションオブジェクトを含み、第1の対話型アプリケーションオブジェクトが会話記録の端部から所定の距離内にあるという判定に従って、デバイスは、第1の対話型アプリケーションオブジェクトをディスプレイ上の固定された場所(例えば、会話記録の最上部)に表示する。
例えば、図37CEにおいて、メッセージ3798及び対話型ピザ注文アプリケーションオブジェクト3735は、上述のようにメッセージセッションにそれらが投稿された時間的順序に従って表示される。メッセージ3741がメッセージセッションに投稿されたことに応じて、デバイス100-2は、メッセージ3798を上方に移動してタッチスクリーン112の最上部から消えさせ、対話型ピザ注文アプリケーションオブジェクト3735を、図37CEの位置3735-aから図37CFの位置3735-bまで、会話記録3700の最上部まで移動させる。対話型ピザ注文アプリケーションオブジェクト3735は、(例えば、位置3735-bにある)会話記録の表示された部分の最上部付近に関する予め定義された位置に表示されるので、メッセージ3747が図37CJのメッセージセッションに投稿されたときは、上に移動し続けない(例えば、位置3735-bに表示されたままである)。
一部の実施形態では、ディスプレイ上の固定された場所に第1の対話型アプリケーションオブジェクトを表示している間に、デバイスは、会話記録内で時間的順序に表示された他のコンテンツの同期移動を継続して表示する(5408)。
例えば、図37CI~図37CKでは、対話型ピザ注文アプリケーションオブジェクト3735は、位置3735-bに固定表示されているが、メッセージ3741は、図37CJのメッセージ3747、及び図37CKのメッセージ3749がメッセージセッションに投稿されるにつれて、タッチスクリーン112上をスクロールして上昇し続ける。
一部の実施形態では、会話記録に時間的順序で表示された他のコンテンツの同期移動を継続して表示することは、他のコンテンツが第1の対話型アプリケーションオブジェクトの後ろで移動するように見えるように、デバイスが他のコンテンツをアニメーション化することを含む(5410)(例えば、第1の対話型アプリケーションUIが会話記録上でホバーするように見え、新しいコンテンツがメッセージセッションに投稿されると、上方向にスクロールし続ける)。
例えば、図37CI~図37CKでは、対話型ピザ注文アプリケーションオブジェクト3735は、位置3735-bに固定されている間に、図37CJのメッセージ3747、及び図37CKのメッセージ3749がメッセージセッションに投稿されるにつれて、メッセージ3741は、対話型ピザ注文アプリケーションオブジェクト3735の後ろをスライドするようにアニメーション化される。
一部の実施形態では、ディスプレイ上の固定場所に第1の対話型アプリケーションオブジェクトを表示している間に、デバイス(5418)は、第1の対話型アプリケーションを閉じる要求(例えば、ディスプレイ上の固定位置から対話型アプリケーションオブジェクトを固定解除する入力)を検出し、第1の対話型アプリケーションを閉じる要求(又はディスプレイ上の固定位置から対話型アプリケーションオブジェクトを固定解除する要求)を検出したことに応じて、ディスプレイ上の固定位置に第1の対話型アプリケーションオブジェクトを表示することを停止し、対話型アプリケーションのセッションが開始された時間的順序に関連付けられた会話記録内の位置に第1の対話型アプリケーションオブジェクトを表示する(例えば、第1の対話型アプリケーションUIは会話記録の最上部から固定解除され、記録内の元の位置に戻る)。
一部の実施形態では、対話型アプリケーションオブジェクトをディスプレイ上の固定位置から固定解除する入力は、対話型アプリケーションユーザインタフェースの表示を終了させない(例えば、対話型ピザ注文アプリケーションオブジェクト3735は、タッチスクリーン112上の固定場所から、対話型ピザ注文アプリケーション入力3731の表示を終了させることなく、固定解除することができる)。
一部の実施形態では、ディスプレイ上(例えば、会話記録の表示部分)の固定位置から対話型アプリケーションオブジェクトを固定解除する入力は、(例えば、タッチスクリーン112などのタッチ感知面上で検出される)ユーザ入力である。例えば、アプリケーションオブジェクト3735は、図37DIの注文アフォーダンス3773-3上の接触3775を含むピザを注文する入力(例えば、更に対話型ピザ注文アプリケーションを閉じる入力)に応じて、図37DIの会話記録3700の固定位置3735-bから、図37DJの元の位置3735-a(例えば、メッセージセッションの元の一時的な位置)に移動する。
一部の実施形態では、ディスプレイ上の固定位置(例えば、会話記録の表示部分)から対話型アプリケーションオブジェクトを固定解除する入力は、メッセージセッションに含まれる別のユーザに対応する別の電子デバイスからの入力(例えば、メタメッセージ、命令、又は情報)である。例えば、アプリケーションオブジェクト3735は、ピザが注文されたとの情報をデバイス100-1から受信したことに応じて、デバイス100-2のタッチスクリーン112上において、図37CNの会話記録3700の固定位置3735-bから、図37CO(図37CQで明示されるように)の元の位置3735-a(例えば、メッセージセッションの元の一時的な位置)に移動する。
一部の実施形態では、対話型アプリケーションオブジェクトをディスプレイ上の固定位置(例えば、会話記録の表示された部分)から固定解除する入力は、先行する条件(例えば、最初の対話型アプリケーションのタイムアウト)に応じて自動的に生成される入力(例えば、コマンド)である。
一部の実施形態では、対話型アプリケーションオブジェクトは、対話型アプリケーションの表示及び/又はユーザインタフェースである。
一部の実施形態では、対話型アプリケーションオブジェクトは、メッセージセッション内で開始された対話型アプリケーションのセッションの起動アイコンである。
1つ以上の入力アフォーダンスを含む第1の対話型アプリケーションの入力エリアを含むメッセージユーザインタフェースを表示している間に、デバイスは、対話型アプリケーションの入力エリア内の第1の入力アフォーダンスをアクティブ化する入力を検出する(5420)。例えば、デバイス100-2は、図37CBの接触3737、図37CDの接触3739を含めて、計画中のピザにペパロニを追加する入力を検出する。
一部の実施形態では、第1の入力アフォーダンスをアクティブ化する入力を検出した後、デバイス(5422)は、(例えば、ピザにトッピングを追加する)第1の入力アフォーダンスをアクティブ化する入力に従って、第1の対話型アプリケーションに対応する第1の対話型アプリケーションオブジェクトを更新し、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の(例えば、第2の)電子デバイスに、情報(例えば、メタメッセージ、命令、又は更新された対話型アプリケーションオブジェクトの表現)を送信するが、この情報は第1入力アフォーダンスのアクティブ化に関連する(例えば、メッセージセッションの対応する会話記録内に表示された第1の対話型アプリケーションに対応する対話型アプリケーションオブジェクトを更新するための命令及び/又はピザにペパロニが追加されたという情報)ものである。
例えば、デバイス100-2は、図37CEのピザにペパロニを追加することによって、対話型ピザ注文アプリケーションオブジェクト3735の表示を更新し、ペパロニをピザに追加したという情報を午前9時38分にデバイス100-1に送信する。次に、デバイス100-1は、図37CSにおいて、ペパロニをピザに追加することによって、対話型ピザ注文アプリケーションオブジェクト3735の表示を更新する。
一部の実施形態では、会話記録内に第1の対話型アプリケーションオブジェクトを表示する前に、デバイス(5426)は、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、アプリケーションアフォーダンスとを含むメッセージユーザインタフェースを表示する。例えば、デバイス100-1は、図37ANの会話記録3700及びアプリケーションアフォーダンス3508を含むメッセージユーザインタフェース3500を表示する。
メッセージユーザインタフェースを表示している間に、デバイスは、アプリケーションアフォーダンスをアクティブ化する入力を検出する(例えば、アプリケーションアフォーダンスに対応する場所でタップジェスチャを検出する)。例えば、入力は、図37AOのアプリケーションアフォーダンス3508上の接触3768を含む。
アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、デバイスは、ディスプレイの第1のエリアに会話記録の少なくとも一部の表示を保持し、第2の対話型アプリケーションアイコン(例えば、第2の対話型アプリケーションの起動アイコン)を表示するが、これは(例えば、スクロール可能な対話型アプリケーションパネル内の)ディスプレイの第2のエリアにおける複数の対話型アプリケーションアイコンのうちの1つである。例えば、デバイス100-1は、図37APのアプリケーションスライドトレイ3892に対話型予約アプリケーション起動アイコン3708を表示する。
一部の実施形態では、アプリケーションアフォーダンスをアクティブ化する前に、メッセージユーザインタフェースが電子キーボードの表示を含む場合、スクロール可能な対話型アプリケーションパネルの表示がキーボードの表示に取って代わる。例えば、図37BWのアプリケーションスライドトレイ3892の表示は、図37BVのデジタルキーボード3501の表示に取って代わる。
一部の実施形態では、アプリケーションアフォーダンスをアクティブ化する前に、メッセージユーザインタフェースが、会話記録の全画面表示を含む場合、スクロール可能な対話型アプリケーションパネルの表示がメッセージ記録の表示の一部に取って代わる。例えば、図37AOの全画面モードで表示された会話記録3700は、図37APのアプリケーションスライドトレイ3892の表示に合わせるように縮小する。
第2の対話型アプリケーションアイコンをディスプレイの第2のエリアに表示する間に、デバイスは、ディスプレイの第2のエリアに対応する場所に第1の接触の水平移動を含む第1のスワイプジェスチャを検出する。例えば、デバイス100-1は、図37AQの位置3770-aから図37ARの位置3770-bまでの接触3770の移動3772を含むスワイプジェスチャを検出する。
第1のスワイプジェスチャが1つ以上の対話型アプリケーションアイコン切換基準を満たすとの判定に従って、デバイスは、ディスプレイの第2のエリアで、第2の対話型アプリケーションアイコンの表示を、第1の対話型アプリケーションに対応する第1の対話型アプリケーションアイコンの表示に置き換える。例えば、デバイス100-1は、図37AQのスライドトレイ3892内の対話型予約アプリケーション起動アイコン3708を図37ASのスライドトレイ3892内の対話型三目並べアプリケーション起動アイコン3774に置き換える。
一部の実施形態では、対話型アプリケーションアイコン切換基準は、第1のスワイプジェスチャの水平移動の長さが所定の移動閾値を満たすという基準を含む。一部の実施形態では、所定の移動閾値は、接触の移動の速度によって変化する。
第1の対話型アプリケーションアイコンをディスプレイの第2のエリアに表示している間に、デバイスは、第1の対話型アプリケーションアイコンをアクティブ化する入力を検出し、第1の対話型アプリケーションアイコンをアクティブ化する入力を検出したことに応じて、デバイスは、会話記録内に第1の対話型アプリケーションのユーザインタフェースを表示し(例えば、第1の対話型アプリケーションオブジェクトを表示する)、第1の対話型アプリケーションアイコンの表示を停止する(例えば、ディスプレイの第2のエリア内で、第1の対話型アプリケーションアイコンの表示を、第1の対話型アプリケーションの入力エリアの表示に置き換える)。例えば、デバイス100-2は、会話記録3700に対話型ピザ注文アプリケーションオブジェクト3735を表示し、アプリケーション選択トレイ3654の表示を(図37BZの対話型ピザ注文起動アイコン3613を含む)、図37CAの対話型ピザ注文アプリケーション入力エリア3731に置き換える。
一部の実施形態では、会話記録内に第1の対話型アプリケーションオブジェクトを表示する前に、デバイス(5428)は、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、アプリケーションアフォーダンスとを含むメッセージユーザインタフェースを表示する。例えば、デバイス100-1は、図38AQの会話記録3503とアプリケーションアフォーダンス3508とを含むメッセージユーザインタフェース3500を表示する。
メッセージユーザインタフェースを表示している間に、デバイスは、アプリケーションアフォーダンスをアクティブ化する入力を検出する(例えば、アプリケーションアフォーダンスに対応する場所でタップジェスチャを検出する)。例えば、入力は、図38ARのアプリケーションアフォーダンス3508上の接触3876を含む。
アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、デバイスは、会話記録の少なくとも一部の表示をディスプレイの第1のエリアに保持し、対話型アプリケーションの複数の起動アイコンを含むディスプレイの第2のエリアに、第1の対話型アプリケーションの起動アイコンを表示する。例えば、デバイス100-1は、会話記録3503の表示を保持し、図38ASのアプリケーション選択トレイ3654を表示する。
一部の実施形態では、アプリケーションアフォーダンスのアクティブ化を検出する前に、メッセージユーザインタフェースが電子キーボードの表示を含む場合、対話型アプリケーションの複数の起動アイコンの表示がキーボードの表示に取って代わる。例えば、図38ASのアプリケーション選択トレイ3654は、図38ARのデジタルキーボードに取って代わる。
一部の実施形態では、アプリケーションアフォーダンスのアクティブ化を検出する前に、メッセージユーザインタフェースが、会話記録の全画面表示を含む場合、対話型アプリケーションの複数の起動アイコンの表示がメッセージ記録の表示の一部に取って代わる。例えば、図37AOの全画面モードで表示された会話記録3700は、図37APのアプリケーションスライドトレイ3892の表示に合わせるように縮小する。
対話型アプリケーションの複数の起動アイコンを表示している間に、デバイスは、第1の対話型アプリケーションの起動アイコンをアクティブ化する入力を検出する。例えば、入力は、図37BZのピザ注文アプリケーション起動アイコン3613上の接触3729を含んでいる。
第1の対話型アプリケーションの起動アイコンをアクティブ化する入力を検出(例えば、第1の対話型アプリケーションの起動アイコンに対応する場所でタップジェスチャを検出する)したことに応じて、デバイスは、第1の対話型アプリケーションのユーザインタフェースを会話記録内に表示する(例えば、第1の対話型アプリケーションオブジェクトを表示する)。例えば、デバイス100-2は、図37CAの対話型ピザ注文アプリケーションオブジェクト3735を記録3700内に表示する。
一部の実施形態では、第1の対話型アプリケーションの起動アイコンをアクティブ化する入力を検出したことに応じて、デバイスは、ディスプレイの第2エリアにおいて、対話型アプリケーションの複数の起動アイコンの表示を、第1の対話型アプリケーションの入力エリアの表示に置き換える(5426)。例えば、図37CAの対話型ピザ注文アプリケーション入力エリア3731は、図37BZのアプリケーション選択トレイ3654の表示に取って代わる。
図54A~図54Cにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5600、5800、6000、6200、6400、6600、6800、及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図54A~図54Cに関して、上述した方法5400にも、類似した方法で適用可能であることに留意されたい。例えば、方法5400に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5600、5800、6000、6200、6400、6600、6800、及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図55は、説明されるさまざまな実施形態の原理に従って構成された電子デバイス5500の機能ブロック図を示す。本デバイスの機能ブロックは、説明されるさまざまな実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図55で説明される機能ブロックが、説明されるさまざまな実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択的にサポートする。
図55に示すように、電子デバイス5500は、ディスプレイユニット5502と、タッチ感知面ユニット5504と、ディスプレイユニット5502とタッチ感知面ユニット5504とに連結された処理ユニット5510とを含む。一部の実施形態では、処理ユニット5510は、表示可能化ユニット5512、検出ユニット5514、更新ユニット5516、送信ユニット5518、保持ユニット5520、及び置換ユニット5522を含む。
処理ユニット5510は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイユニット5502上に(例えば、表示可能化ユニット5512を用いて)表示可能にするように構成される。このメッセージユーザインタフェースには、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの、ディスプレイの第1のエリアに表示された会話記録と、第1の対話型アプリケーションに対応する、会話記録内に表示される第1の対話型アプリケーションオブジェクトと、メッセージ入力エリアと、メッセージ入力エリアとは異なりかつディスプレイの第2のエリアに表示される第1の対話型アプリケーションの入力エリアと、が含まれ、当該第1の対話型アプリケーションの入力エリアは、1つ以上の入力アフォーダンスを含んでいる。処理ユニット5510はまた、対話型アプリケーションの入力エリア内の第1入力アフォーダンスをアクティブ化する入力を(例えば、検出ユニット5514を用いて)検出するように構成されている。
一部の実施形態では、処理ユニット5510は、第1の入力アフォーダンスをアクティブ化する入力を検出した後、第1の入力アフォーダンスをアクティブ化する入力に従って、第1の対話型アプリケーションに対応する第1の対話型アプリケーションオブジェクトを(例えば、更新ユニット5516を用いて)更新し、メッセージセッションの対応する会話記録内に表示された第1の対話型アプリケーションに対応する対話型アプリケーションオブジェクトの(例えば、更新ユニット5516による)更新をもたらす情報を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット5518を用いて)送信するように更に構成されている。
一部の実施形態では、メッセージセッションに投稿されたコンテンツは、コンテンツが投稿された時間的順序に従って会話記録内に表示され、対話型アプリケーションオブジェクトは、対話型アプリケーションのセッションが開始された時間的順序に関連付けられた会話記録内の位置に表示される。
一部の実施形態では、処理ユニット5510は、会話記録内に時間的順序で表示されたコンテンツに関する、会話記録の端部に向けての同期移動の表示を(例えば、表示可能化ユニット5512を用いて)可能にし、表示されたコンテンツは第1の対話型アプリケーションオブジェクトを含み、第1の対話型アプリケーションオブジェクトが会話記録の端部から所定の距離内にあるという判定に従って、第1の対話型アプリケーションオブジェクトをディスプレイユニット5502上の固定場所に表示することを(例えば、表示可能化ユニット5512を用いて)可能にする、ように更に構成されている。
一部の実施形態では、処理ユニット5510は、ディスプレイユニット5502上の固定された場所に第1の対話型アプリケーションオブジェクトを表示している間に、会話記録内で時間的順序に表示された他のコンテンツの同期移動を継続して表示するように更に構成されている。
一部の実施形態では、会話記録と共に時間的順序で表示された他のコンテンツの同期移動を継続して表示することは、他のコンテンツが第1の対話型アプリケーションオブジェクトの後ろで移動するしているように見えるように、他のコンテンツをアニメーション化することを含む。
一部の実施形態では、処理ユニット5510は、第1の対話型アプリケーションオブジェクトをディスプレイユニット5502の固定場所に表示している間に、第1の対話型アプリケーションを閉じる要求を(例えば、検出ユニット5514を用いて)検出し、第1の対話型アプリケーションを閉じる要求を検出したことに応じて、ディスプレイユニット5502上の固定場所に第1の対話型アプリケーションオブジェクトを(例えば、表示可能化ユニット5512を用いて)表示することを停止し、対話型アプリケーションのセッションが開始された時間的順序に関連付けられた会話記録内の位置に第1の対話型アプリケーションオブジェクトの表示を(例えば、表示可能化ユニット5512を用いて)可能にする、ように更に構成されている。
一部の実施形態では、処理ユニット5510は、会話記録内に第1の対話型アプリケーションオブジェクトを表示する前に、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録とアプリケーションアフォーダンスとを含むメッセージユーザインタフェースの表示を(例えば、表示可能化ユニット5512を用いて)可能にし、メッセージユーザインタフェースを表示する間に、アプリケーションアフォーダンスをアクティブ化する入力を(例えば、検出ユニット5514を用いて)検出し、アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、会話記録の少なくとも一部分をディスプレイの第1のエリアに表示することを(例えば、保持ユニット5520を用いて)保持し、ディスプレイの第2のエリアに(複数の対話型アプリケーションアイコンの1つである)第2の対話型アプリケーションアイコンを表示することを(例えば、表示可能化ユニット5512を用いて)可能にし、第2の対話型アプリケーションアイコンをディスプレイの第2のエリアに表示する間に、ディスプレイの第2のエリアに対応する場所での第1の接触の水平移動を含む第1のスワイプジェスチャを(例えば、検出ユニット5514を用いて)検出し、第1のスワイプジェスチャが1つ以上の対話型アプリケーションアイコン切換基準を満たすとの判定に従って、ディスプレイの第2のエリアで、第2の対話型アプリケーションアイコンの表示を、第1の対話型アプリケーションに対応する第1の対話型アプリケーションアイコンの表示に(例えば、置換ユニット5522を用いて)置き換え、第1の対話型アプリケーションアイコンをディスプレイの第2のエリアに表示する間に、第1の対話型アプリケーションアイコンをアクティブ化する入力を(例えば、検出ユニット5514を用いて)検出し、第1の対話型アプリケーションアイコンをアクティブ化する入力を検出したことに応じて、会話記録内での第1の対話型アプリケーションのユーザインタフェースの表示を(例えば、表示可能化ユニット5512を用いて)可能にし、第1の対話型アプリケーションアイコンを表示することを(例えば、表示可能化ユニット5512を用いて)停止する、ように更に構成されている。
一部の実施形態では、処理ユニット5510は、会話記録内に第1の対話型アプリケーションオブジェクトを表示する前に、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録とアプリケーションアフォーダンスとを含むメッセージユーザインタフェースの表示を(例えば、表示可能化ユニット5512を用いて)可能にし、メッセージユーザインタフェースを表示する間に、アプリケーションアフォーダンスをアクティブ化する入力を(例えば、検出ユニット5514を用いて)検出し、アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、会話記録の少なくとも一部をディスプレイの第1のエリアに表示することを(例えば、保持ユニット5520を用いて)続け、対話型アプリケーションの複数の起動アイコンを含むディスプレイの第2のエリアに、第1の対話型アプリケーションの起動アイコンの(例えば、表示可能化ユニット5512を用いて)表示を可能にし、対話型アプリケーションの複数の起動アイコンを表示する間に、第1の対話型アプリケーションの起動アイコンをアクティブ化する入力を(例えば、検出ユニット5514を用いて)検出し、第1の対話型アプリケーションの起動アイコンをアクティブ化する入力を検出したことに応じて、第1の対話型アプリケーションのユーザインタフェースを会話記録内に表示することを(例えば、表示可能化ユニット5512を用いて)可能にする、ように更に構成されている。
一部の実施形態では、処理ユニット5510は、第1の対話型アプリケーションの起動アイコンをアクティブ化する入力を検出したことに応じて、ディスプレイの第2のエリアにおいて、対話型アプリケーションの複数の起動アイコンの表示を第1の対話型アプリケーションの入力エリアの表示に(例えば、置換ユニット5522を用いて)置き換えるように、更に構成される。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって、任意選択的に実施される。
図54A~図54Cを参照して上述した動作は、図1A、図1B又は図55に示される構成要素によって、任意選択的に実施される。例えば、検出動作5420及び5428は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図56A及び図56Bは、一部の実施形態に係る、メッセージアプリケーションにおいて対話型アプリケーションを使用する方法5600を示すフロー図である。方法5600は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法5600におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下で説明するように、方法5600は、メッセージアプリケーションにおいて対話型アプリケーションを使用する直感的な方法を提供する。この方法は、メッセージアプリケーションにおいて対話型アプリケーションを使用するときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによって、より効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、ユーザがメッセージアプリケーションで対話型アプリケーションをより迅速かつ効率的に使用することができれば、電力が節約され、バッテリ充電の間隔が増大することになる。
デバイスは、ディスプレイ上にメッセージアプリケーションのメッセージユーザインタフェースを表示する(5602)が、このメッセージユーザインタフェースは、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、第1の対話型アプリケーション(例えば、食事、映画、ホテルなどの予約に関する対話型アプリケーション)に対応する会話記録内に表示される第1の対話型アプリケーションオブジェクト(例えば、予約アプリケーションオブジェクト)と、メッセージ入力エリアと、を含んでいる。例えば、デバイス100-2は、会話記録3700と、対話型予約アプリケーションオブジェクト3728と、メッセージ入力エリア3502とを含むメッセージユーザインタフェース3500を図37Oに表示する。
デバイスは、会話記録内に表示された第1の対話型アプリケーションオブジェクトに対応するタッチ感知面上の場所にフォーカスセレクタがある間に、第1の入力を検出する(5604)(例えば、第1の対話型アプリケーションオブジェクトの場所で、タッチ感知面上の接触によるジェスチャを検出するか、あるいは、カーソル又は他のポインタが第1の対話型アプリケーションオブジェクトの場所にある間に、タッチ感知面上の接触によるジェスチャを検出する)。例えば、デバイス100-2は、図37Pの記録3700内に表示された対話型予約アプリケーションオブジェクト3728上に接触3738を含む入力を検出する。
第1の入力の検出に応じて、デバイスは、メッセージ入力エリアとは異なる第1の対話型アプリケーションの入力エリアを表示する(5606)が、第1の対話型アプリケーションの入力エリアは、1つ以上の入力アフォーダンス(例えば、ラジオボタン、テキスト入力フィールド、チェックボックス、プルダウンリスト、及び/又はフォームフィールド)を含む。例えば、デバイス100-2は、図37Qの入力アフォーダンス3740-1及び3740-2を含む対話型予約アプリケーションユーザインタフェース3712を表示する。
一部の実施形態では、(例えば、第1の対話型アプリケーションオブジェクトをアクティブ化する入力の検出に応じて)第1の入力を検出したことに応じて、第1の対話型アプリケーションの入力エリアの表示は、会話記録と、第1の対話型アプリケーションオブジェクトと、及び/又はメッセージ入力エリアと、の表示に取って代わる(5608)。例えば、図37Qの対話型予約アプリケーションユーザインタフェース3712の表示は、図37Pにおける、会話記録3700と、対話型予約アプリケーションオブジェクト3728と、メッセージ入力エリア3502とを含む、メッセージユーザインタフェース3500の表示に取って代わる。
第1の対話型アプリケーションの入力エリアを表示している間に、デバイスは、1つ以上の入力アフォーダンス上の1つ以上の入力を検出する(5610)。例えば、デバイス100-2は、図37Xの入力アフォーダンス3740-1上の接触3752と、図37Zの入力アフォーダンス3740-1上の接触3754と、を含む入力を検出する。
1つ以上の入力アフォーダンス上の1つ以上の入力を検出した後、デバイス(5612)は、第1の対話型アプリケーションを更新し(例えば、会話記録における予約アプリケーションオブジェクト内のフィールドを更新する)、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の(例えば、第2の)電子デバイスに命令(例えば、情報、命令、又は更新された対話型アプリケーションオブジェクトの表現)を送信して、メッセージセッションの対応する会話記録内に表示された第1の対話型アプリケーションの対応するユーザインタフェースを更新し(例えば、対応する第1の対話型アプリケーションオブジェクト又は第1の対話型アプリケーションの他のユーザインタフェースを更新する)、第1の対話型アプリケーションの入力エリアの表示を停止する。
例えば、デバイス100-2は、図37AAの入力アフォーダンス3740-1における予約時間を更新する。デバイス100-2はまた、予約の時間が午後8時に変更されたという情報をデバイス100-1に送信し、これによって、図37ALで、デバイス100-1に、午後8時の予約時間を示すように対話型予約アプリケーションオブジェクト3728を更新させ、記録3700内の対話型予約アプリケーションオブジェクト3728の表示を、図37AKの位置3728-aから図37ALの位置3728-bに移動させ、対話型予約アプリケーションアーカイブアイコン3756を記録3700内に(例えば、対話型予約アプリケーションオブジェクト3728の元の位置3728-aに)表示させる。図37ACにおいて、デバイス100-2はまた、対話型予約アプリケーションユーザインタフェースの表示を停止する。
一部の実施形態では、(例えば、第1の対話型アプリケーションの入力エリアの表示を停止する要求に対応する入力を検出したことに応じて)会話記録、第1の対話型アプリケーションオブジェクト、及び/又はメッセージ入力エリアが再表示される。例えば、図37ACにおいて、デバイス100-2は、記録3700と、対話型予約アプリケーションオブジェクト3728と、メッセージ入力エリア3502とを含むメッセージユーザインタフェース3500を再表示する。
一部の実施形態では、第1の対話型アプリケーションを更新すること(5614)は、入力アフォーダンスのうちの1つに対する入力を検出したことに応じて生じる。例えば、図37BLで、三目並べボード3791(例えば、入力アフォーダンス)上の接触3713を含む入力の検出に応じて、対話型三目並べアプリケーションオブジェクト3705が更新される(例えば、図37BLの記録3700の位置3705-aから、図37BMの記録位置3705-bに移動する)。
一部の実施形態では、第1の対話型アプリケーションの更新(5616)は、第1の対話型アプリケーションの入力エリアの表示を停止する要求に対応する入力を検出したことに応じて生じる。例えば、対話型予約アプリケーションオブジェクト3728は、図37ABにおいて、終了アフォーダンス3714上の接触3756を含む入力(予約に対する変更を確認して、対話型予約アプリケーションユーザインタフェース3712を閉じるための要求に対応する)を検出したことに応じて、図37ACで8:00の予約を表示するように更新する。別の実施例では、図37DIの入力アフォーダンス3773-3上の接触3775を含み、かつ、ピザを注文して対話型ピザ注文アプリケーションの入力エリア3731を閉じるための要求に対応している入力に応じて、対話型ピザ注文アプリケーションオブジェクト3735の位置が図37DJで更新される。
一部の実施形態では、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の(例えば、第2の)電子デバイスに命令を送信(5618)して(例えば、情報、命令、又は更新された対話型アプリケーションオブジェクトの表現を送信すること)、第1の対話型アプリケーションの対応するユーザインタフェースを更新することが、入力アフォーダンスのうちの1つに対する入力を検出したことに応じて生じる。例えば、デバイス100-2は、図37BLにおいて、三目並べボード3791(例えば、入力アフォーダンス)上の接触3713を含む入力を検出したことに応じて、午前9時35分に、「X」3794が三目並べボード3791上に置かれたという情報を送信する。デバイス100-1は、午前9時35分に情報を受信し、対話型三目並べアプリケーションユーザインタフェース3782を更新して、対応する三目並べボード3791に「X」3794を表示する。
一部の実施形態では、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の(例えば、第2の)電子デバイスに命令を送信(5620)して(例えば、情報、命令、又は更新された対話型アプリケーションオブジェクトの表現を送信すること)、第1の対話型アプリケーションの対応するユーザインタフェースを更新することが、第1の対話型アプリケーションの入力エリアの表示を停止する要求に対応する入力を検出したことに応じて生じる。例えば、装置100-2は、図37ABにおいて、終了アフォーダンス3714上の接触3756を含む入力(予約に対する変更を確認して対話型予約アプリケーションユーザインタフェース3712を閉じるための要求に対応する)を検出したことに応じて、予約が8:00に変更されたという情報を午前9時31分にデバイス100-1に送信する。デバイス100-1はこの情報を受信し、図37ALで、午前9時31分に、記録3700の対話型予約アプリケーションオブジェクト3729の表示を更新する。
一部の実施形態では、第1の対話型アプリケーションの入力エリアの表示を停止すること(5622)は、入力アフォーダンスに対する入力の検出に応じて生じる。例えば、デバイス100-1は、ピザを注文する要求に対応する図37DIの入力アフォーダンス3773-3上の接触3775を含む入力に応じて、図37DJで、対話型ピザ注文アプリケーション入力エリア3731の表示を停止する。
一部の実施形態では、第1の対話型アプリケーションの入力エリアの表示を停止する(5624)ことは、終了アフォーダンスに対する入力を検出したことに応じて生じる。(例えば、「完了」、「保存」又は「終了」アイコン上の、又は第1の対話型アプリケーションの入力エリア外のディスプレイ上のエリアに対するタップジェスチャの検出)。例えば、図37ABにおいて、終了アフォーダンス3714上の接触3756を含む入力を検出したことに応じて、デバイス100-2は、図37ACにおいて、対話型予約アプリケーションユーザインタフェース3712の表示を停止する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの機能の(例えば、全部よりは少ない)サブセットを実行するように構成されている。例えば、一部の実施形態では、メッセージアプリケーション内で動作する対話型予約アプリケーションは、レストランの予約を可能にするように構成されているが、ユーザがレストランに対してコメントできるようには構成されていない。これに対して、メッセージアプリケーションの外部で動作可能な対応する予約アプリケーションは、レストランを予約して、レストランに対してコメントすることを可能にするように構成されている。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションによって表示されるコンテンツの(例えば、全部よりは少ない)一部を表示する。例えば、一部の実施形態では、メッセージアプリケーション内で動作する対話型予約アプリケーションは、レストランの予約を可能にするように構成されているが、ユーザがレストランに対してコメントできるようには構成されていない。これに対して、メッセージアプリケーションの外部で動作可能な対応する予約アプリケーションは、レストランを予約して、レストランに対してコメントすることを可能にするように構成されている。
一部の実施形態では、対話型アプリケーションは、予め定義された入力の検出時に、メッセージアプリケーションとは別個に動作する対応するアプリケーションをデバイスに起動させる。例えば、図37Pの対話型予約アプリケーションアイコン3728上の第1の入力(例えば、タップ、押圧、深押し、長押し又はマルチフィンガジェスチャ)に応じて、デバイスはメッセージアプリケーション内で対話型予約アプリケーションを起動する。図37Pの対話型予約アプリケーションアイコン3728上の第2の(例えば、異なる)入力(例えば、タップ、押圧、深押し、長押し又はマルチフィンガジェスチャ)に応じて、デバイスは、メッセージアプリケーションの外部で予約アプリケーションを起動する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションとは別々に動作する。例えば、図37Pのアイコン3728のアクティブ化に応じて起動される対話型予約アプリケーションは、メッセージアプリケーションの外部で動作する対応する予約アプリケーションが動作していないときに動作可能である。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションと連携して動作する。例えば、図37Pのアイコン3728のアクティブ化に応じて起動される対話型予約アプリケーションは、メッセージアプリケーションの外部で動作する対応する予約アプリケーションが動作していないときには動作することができない。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの一時記憶用メモリの専用部分とは異なる一時記憶用メモリの専用部分を有する。例えば、一部の実施形態では、図37Pのアイコン3728のアクティブ化に応じて起動され、かつメッセージアプリケーション内で動作する対話型予約アプリケーションを使用して行われた予約の記録は、メッセージアプリケーションの外部で動作する対応する予約アプリケーションを使用して行われた予約の記録とは異なるメモリ部分に記憶される。
一部の実施形態では、メッセージアプリケーションとは別個に動作する対応するアプリケーションは、対話型アプリケーションの一時的な記憶用メモリの専用部分にアクセスするように構成されている。例えば、一部の実施形態では、メッセージアプリケーションの外部で動作する対応する予約アプリケーションは、図37Pのアイコン3728のアクティブ化に応じて起動され、かつメッセージアプリケーション内で動作する対話型予約アプリケーションを使用して行われた予約の記録にアクセスすることができる。
一部の実施形態では、対話型アプリケーションアイコン/オブジェクトは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの識別子を表示する。例えば、図37Kにおいて、対話型予約アプリケーションアイコン/オブジェクト3730は、メッセージアプリケーションとは別個に動作する予約アプリケーションに対応する同心円のシンボルを表示する。
図56A~図56Bにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5800、6000、6200、6400、6600、6800、及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図56A及び図56Bに関して、上述した方法4500にも、類似した方法で適用可能であることに留意されたい。例えば、方法5600に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5800、6000、6200、6400、6600、6800、及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図57は、説明されるさまざまな実施形態の原理に従って構成された電子デバイス5700の機能ブロック図を示す。本デバイスの機能ブロックは、説明されるさまざまな実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図57で説明される機能ブロックが、説明されるさまざまな実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択的にサポートする。
図57に示すように、電子デバイス5700は、ディスプレイユニット5702と、タッチ感知面ユニット5704と、ディスプレイユニット5702とタッチ感知面ユニット5704とに連結された処理ユニット5710とを含む。一部の実施形態では、処理ユニット5710は、表示可能化ユニット5712、検出ユニット5714、更新ユニット5716、送信ユニット5718、及び置換ユニット5720を含む。
処理ユニット5710は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイユニット5702上に(例えば、表示可能化ユニット5712を用いて)表示可能にするように構成され、このメッセージユーザインタフェースには、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、第1の対話型アプリケーションに対応する、会話記録内に表示される第1の対話型アプリケーションオブジェクトと、メッセージ入力エリアと、が含まれている。処理ユニット5710は、また、会話記録内に表示される第1の対話型アプリケーションオブジェクトに対応するタッチ感知面ユニット5704上の場所にフォーカスセレクタがある間に、(例えば、検出ユニット5714を用いて)第1の入力を検出するように構成されている。第1の入力を検出したことに応じて、処理ユニット5710は、メッセージ入力エリアとは異なる第1の対話型アプリケーションの入力エリアの表示を(例えば、表示可能化ユニット5712を用いて)可能にするように構成され、第1の対話型アプリケーションの入力エリアは、1つ以上の入力アフォーダンスを含む。第1の対話型アプリケーションの入力エリアを表示している間に、処理ユニット5710は、1つ以上の入力アフォーダンス上の1つ以上の入力を(例えば、検出ユニット5714を用いて)検出するように構成されている。処理ユニット5710は、1つ以上の入力アフォーダンス上の1つ以上の入力を検出した後、第1の対話型アプリケーションを(例えば、更新ユニット5716を用いて)更新し、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに、メッセージセッションの対応する会話記録内に表示された第1の対話型アプリケーションの対応するユーザインタフェースの更新をもたらす情報を(例えば、送信ユニット5718を用いて)送信し、第1の対話型アプリケーションの入力エリアの表示を(例えば、表示可能化ユニット5712を用いて)停止するように構成されている。
一部の実施形態では、第1の入力を検出したことに応じて、第1の対話型アプリケーションの入力エリアの表示は、会話記録と、第1の対話型アプリケーションオブジェクトと、及び/又はメッセージ入力エリアと、の表示を(例えば、置換ユニット5720を用いて)置き換える。
一部の実施形態では、第1の対話型アプリケーションを更新することは、入力アフォーダンスのうちの1つに対する入力を検出したことに応じて生じる。
一部の実施形態では、第1の対話型アプリケーションの更新は、第1の対話型アプリケーションの入力エリアの表示を停止する要求に対応する入力を検出したことに応じて生じる。
一部の実施形態では、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに、第1の対話型アプリケーションの対応するユーザインタフェースの更新をもたらす情報を送信することは、入力アフォーダンスのうちの1つに対する入力を検出したことに応じて生じる。
一部の実施形態では、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに、第1の対話型アプリケーションの対応するユーザインタフェースの更新をもたらす情報を送信することは、第1の対話型アプリケーションの入力エリアの表示を停止する要求に対応する入力を検出したことに応じて生じる。
一部の実施形態では、第1の対話型アプリケーションの入力エリアの表示を停止することは、入力アフォーダンスのうちの1つに対する入力の検出に応じて生じる。
一部の実施形態では、第1の対話型アプリケーションの入力エリアの表示を停止することは、終了アフォーダンスに対する入力を検出したことに応じて生じる。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって、任意選択的に実施される。
図56A及び図56Bを参照して上述した動作は、図1A、図1B又は図57に示される構成要素によって、任意選択的に実施される。例えば、検出動作5604及び5610は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図58は、一部の実施形態に係る、メッセージアプリケーションにおける対話型アプリケーションの使用を可能にする方法5800を示すフロー図である。方法5800は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法5800におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下で説明するように、方法5800は、メッセージアプリケーションにおいて対話型アプリケーションの使用を可能にする直感的な方法を提供する。この方法は、メッセージアプリケーションにおいて対話型アプリケーションの使用を可能にするときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによって、より効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、ユーザがメッセージアプリケーションで対話型アプリケーションをより迅速かつ効率的に使用することができることを可能にすることにより、電力が節約され、バッテリ充電の間隔が増大することになる。
一部の実施形態では、デバイスは、1つ以上のプロセッサ、メモリ、及びディスプレイを有し、メッセージアプリケーション及び複数の他のアプリケーションはメモリに記憶され、複数の他のアプリケーションにおける各アプリケーションは、電子デバイス上の通常動作に関する(例えば、メッセージアプリケーションとは別個の独立型アプリケーションとしての)通常モードと、電子デバイス上のメッセージアプリケーション内での動作に関する組込モードとを有する。
一部の実施形態では、電子デバイスには、タッチ感知面、例えばトラックパッド又はタッチ感知ディスプレイが含まれる。一部の実施形態では、電子デバイスは、タッチ感知面上の接触の強度を検出するように構成された1つ以上のセンサを備える。
デバイス(5802)は、複数のトグルアフォーダンスを表示し、複数のトグルアフォーダンスにおける各トグルアフォーダンスは、メモリに記憶された複数の他のアプリケーションにおける対応するアプリケーションを有し、各トグルアフォーダンスは、メッセージアプリケーション内における組込モードでの対応するアプリケーションの動作に関するメッセージアプリケーション内での各起動アイコンの表示を可能にする第1の状態を有し、各トグルアフォーダンスは、メッセージアプリケーション内における組込モードでの対応するアプリケーションの動作を防止するために、メッセージアプリケーション内での各起動アイコンの表示を防止する第2の状態を有し、複数のトグルアフォーダンスは、第1の状態で表示される第1のアプリケーションに関する第1のトグルアフォーダンスと、第2の状態で表示される第2のアプリケーションに関する第2のトグルアフォーダンスとを含む。
複数のトグルアフォーダンスを表示している間に、デバイスは、第1のトグルアフォーダンスに対応する第1の場所での第1のユーザ入力を検出する(5804)(例えば、ディスプレイ上の第1のトグルアフォーダンスの場所に対応するタッチ感知面上の場所でタップ又はスワイプジェスチャを検出すること)。
第1のトグルアフォーダンスに対応する第1の場所での第1のユーザ入力を検出したことに応じて、デバイス(5806)は、第1トグルアフォーダンスを第1状態から第2状態に変更し、メッセージアプリケーション内の第1アプリケーションの対応する起動アイコンの表示を回避する。
一部の実施形態では、複数のトグルアフォーダンスを表示する間に、デバイス(5808)は、第2のトグルアフォーダンスに対応する第2の場所で第2のユーザ入力を検出(例えば、ディスプレイ上の第2のトグルアフォーダンスの場所に対応するタッチ感知面上の場所でタップ又はスワイプジェスチャを検出する)し、第2のトグルアフォーダンスに対応する第2の場所での第2のユーザ入力の検出に応じて、第2のトグルアフォーダンスを第2状態から第1状態に変更し、メッセージアプリケーション内で第2のアプリケーションの対応する起動アイコンの表示を可能にする。
図58における動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、6000、6200、6400、6600、6800、及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図58に関して、上述した方法5800にも、類似した方法で適用可能であることに留意されたい。例えば、方法5800に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、6000、6200、6400、6600、6800、及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図59は、説明されるさまざまな実施形態の原理に従って構成された電子デバイス5900の機能ブロック図を示す。本デバイスの機能ブロックは、説明されるさまざまな実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図59で説明される機能ブロックが、説明されるさまざまな実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択的にサポートする。
図59に示すように、電子デバイス5900は、ディスプレイユニット5902と、タッチ感知面ユニット5904と、ディスプレイユニット5902とタッチ感知面ユニット5904とに連結された処理ユニット5910とを含む。一部の実施形態では、メッセージアプリケーション及び複数の他のアプリケーションが電子デバイス5900のメモリに記憶され、複数の他のアプリケーションにおける各アプリケーションは、電子デバイス5900上の通常動作に関する通常モードと、電子デバイス5900上のメッセージアプリケーション内での動作に関する組込モードとを有する。一部の実施形態では、処理ユニット5910は、表示可能化ユニット5912、検出ユニット5914、及び変更ユニット5916を含む。
処理ユニット5910は、複数のトグルアフォーダンスの(例えば、表示可能化ユニット5912を用いて)表示を可能にするように構成されている。一部の実施形態では、複数のトグルアフォーダンスにおける各トグルアフォーダンスは、メモリに記憶された複数の他のアプリケーションの中の対応するアプリケーションを有する。各トグルアフォーダンスは、メッセージアプリケーション内における組込モードでの対応するアプリケーションの動作に関するメッセージアプリケーション内での各起動アイコンの表示を可能にする第1の状態を有し、各トグルアフォーダンスは、メッセージアプリケーション内における組込モードでの対応するアプリケーションの動作を回避するために、メッセージアプリケーション内での各起動アイコンの表示を回避する第2の状態を有し、複数のトグルアフォーダンスは、第1の状態で表示される第1のアプリケーションに関する第1のトグルアフォーダンスと、第2の状態で表示される第2のアプリケーションに関する第2のトグルアフォーダンスとを含む。複数のトグルアフォーダンスを表示している間に、処理ユニット5910は、第1のトグルアフォーダンスに対応する第1の場所で第1のユーザ入力を(例えば、検出ユニット5914を用いて)検出するように構成されている。処理ユニット5910は、第1のトグルアフォーダンスに対応する第1の場所での第1のユーザ入力を検出したことに応じて、第1のトグルアフォーダンスを第1の状態から第2の状態に(例えば、変更ユニット5916を用いて)変更し、メッセージアプリケーション内の第1アプリケーションの対応する起動アイコンの表示を(例えば、表示可能化ユニット5912を用いて)回避するように構成される。
一部の実施形態では、複数のトグルアフォーダンスを表示している間に、処理ユニット5910は、第2のトグルアフォーダンスに対応する第2の場所で第2のユーザ入力を(例えば、検出ユニット5914を用いて)検出するように更に構成され、第2のトグルアフォーダンスに対応する第2の場所で第2のユーザ入力を検出したことに応じて、第2のトグルアフォーダンスを第2の状態から第1の状態に(例えば、変更ユニット5916を用いて)変更し、メッセージアプリケーション内の第2アプリケーションの対応する起動アイコンの表示を(例えば、表示可能化ユニット5912を用いて)可能にする。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって、任意選択的に実施される。
図58を参照して上述した動作は、図1A、図1B又は図59に示される構成要素によって、任意選択的に実施される。例えば、表示動作5802及び検出動作5804は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図60A~図60Dは、一部の実施形態に係る、関連するアプリケーションを有するメッセージアプリケーション内をナビゲートする方法6000を示すフロー図である。方法6000は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法6000におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下に説明するように、方法5000は、関連するアプリケーションを有するメッセージアプリケーション内をナビゲートする直感的な方法を提供する。この方法は、関連するアプリケーションを有するメッセージアプリケーション内をナビゲートするときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによってより効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、ユーザが関連するアプリケーションを有するメッセージアプリケーション内をより迅速かつ効率的にナビゲートすることができれば、電力が節約され、バッテリ充電の間隔が増大することになる。
デバイスは、ディスプレイ上に(メッセージアプリケーションの)メッセージユーザインタフェースを表示し(6002)、このメッセージユーザインタフェースは、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、メッセージ入力エリアと、デジタル画像アフォーダンスと、デジタルタッチアフォーダンスと、アプリケーションアフォーダンスとを含んでいる。一部の実施形態では、メッセージユーザインタフェースは、例えば、ディスプレイの第2のエリアに表示されるようなキーボードを含む。
例えば、図38Aにおいて、デバイス100-1は、メッセージユーザインタフェース3500をタッチスクリーン112上に表示する。メッセージユーザインタフェース3500には、会話記録3503、デジタル画像アフォーダンス3504、デジタルキャンバスアフォーダンス3506、アプリケーションアフォーダンス3508、及びメッセージ入力エリア3502が含まれる。図38AVにおいて、メッセージユーザインタフェースはまた、デジタルキーボード3501を含む。
一部の実施形態では、メッセージユーザインタフェースは、アクティブ化時に電子デバイスに音声録音を可能にするように構成されたマイクロフォンアフォーダンスを含む(6004)。例えば、図38Aにマイクロフォンアフォーダンス3802がある。
一部の実施形態では、メッセージユーザインタフェースはまた、メッセージセッションに含まれる第1の他のユーザに対応する少なくとも1人のアバターを含み(6006)、アクティブ化されたときに、メッセージユーザインタフェース上に重ねられた少なくとも1人のアバターに関連付けられたアクティブ化可能なメニュー項目を含むメニューを電子デバイスが表示することを可能にするように構成されている。
例えば、図38A及び図38AWにおいて、会話記録3503は、ポータブル多機能デバイス100-1のユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含んでいる。メッセージ記録に含まれる他の各ユーザは、アバターのスタック3892に表示されるアバター(例えば、「Abe」のアバター3510)によって表される。図38AWの接触3880を含む入力によって、Abeのアバター3510がアクティブ化すると、デバイスは、図38AXでアクティブ化可能なメニュー項目3884を含むメニュー3882を表示する。
一部の実施形態では、少なくとも1人のアバターに関連付けられたアクティブ化可能なメニュー項目を含むメニューは、アクティブ化されると第1の他のユーザとのデジタルタッチアクション(例えば、図38AXのメニュー項目3884-5)を開始するメニュー項目と、アクティブ化されると最初の他のユーザとのみメッセージを開始するメニュー項目(例えば、メッセージメニュー項目を選択すると、電子デバイスのユーザと第1の他のユーザとの間の個人的なメッセージユーザインタフェースを電子デバイスに表示させる)(例えば、図38AXのメニュー項目3884-3)と、アクティブ化されると第1の他のユーザと電子メールを開始するメニュー項目(例えば、図38AXのメニュー項目3884-4)と、アクティブ化されると第1の他のユーザとの通話を開始するメニュー項目(例えば、図38AXのメニュー項目3884-1)と、アクティブ化されると第1の他のユーザとテレビ会議を開始するメニュー項目(例えば、図38AXのメニュー項目3884-2)と、及び/又はアクティブ化されると第1の他のユーザとの支払アクションを開始するメニュー項目(例えば、図38AXのメニュー項目3884-6)とを含む(6008)。
メッセージユーザインタフェースを表示している間に、デバイスは、タッチ感知面上の第1の入力を検出する(6010)(例えば、タッチ感知ディスプレイを有する電子デバイスについて、タップジェスチャを検出する)。例えば、入力は、図38Bのデジタル画像アフォーダンス3504上の接触3804と、図38AAのデジタルキャンバスアフォーダンス3506上の接触3852と、図38AJのアプリケーションアフォーダンス3508の接触3868と、のうちの1つを含む。
第1の入力の検出に応じて、デバイス(6012)は、フォーカスセレクタがデジタル画像アフォーダンスに対応するメッセージユーザインタフェース内の場所にある間に、第1の入力が行われたという判定に従って、メッセージユーザインタフェース内に複数のデジタル画像(例えば、図38Cのデジタル画像トレイ3806内のデジタル画像3514及び3518)を表示し、フォーカスセレクタがデジタルキャンバスアフォーダンスに対応するメッセージユーザインタフェース内の場所にある間に、第1の入力が行われたという判定に従って、メッセージユーザインタフェース内にデジタル描画キャンバス(例えば、図38AHのデジタルタッチトレイ3854におけるデジタル描画キャンバス3858)を表示し、フォーカスセレクタがアプリケーションアフォーダンスに対応するメッセージユーザインタフェース内の場所にある間に、第1の入力が行われたという判定に従って、メッセージユーザインタフェース内に(例えば、対話型)アプリケーションの1つ以上の起動アイコン(例えば、図38AKのアプリケーションスワイプトレイ3892内のアプリケーション起動アイコン3708、又は図38ANのアプリケーション選択トレイ3654内のアプリケーション起動アイコン3601、3603、3605、3607、3609、3611、3613及び3615)を表示する。
一部の実施形態では、メッセージユーザインタフェース内に複数のデジタル画像を表示することは、第1の入力が検出された時点でメッセージユーザインタフェースがキーボードの表示を含んでいたという判定に従って、キーボードの表示を複数のデジタル画像の表示に置き換えることであって、当該複数のデジタル画像は、デジタルカメラからのライブプレビュー画像を含む、ことと、第1の入力が検出された時点でメッセージユーザインタフェースがキーボードの表示を含んでいなかったという判定に従って、会話記録をディスプレイの第1のエリアに表示して、複数のデジタル画像をディスプレイの第2のエリアに表示することであって、当該複数のデジタル画像は、デジタルカメラからのライブプレビュー画像を含む、ことと、を含んでいる(6014)。
例えば、図38Cにおいて、図38Bの会話記録3503のサイズに関して、光学センサ164からのライブプレビュー画像3514及び以前にキャプチャされたデジタル画像3518を含むデジタル画像トレイ3806の表示に合わせるように、会話記録3503のサイズが縮小される。
別の実施例では、図38Xのデジタルキーボード3501の表示は、図38Yにおいて、光センサ164からのライブプレビュー画像3514及び以前にキャプチャされたデジタル画像3518を含むデジタル画像トレイ3806の表示に置き換えられる。
一部の実施形態では、キーボードの表示に取って代わることは、キーボードの上に複数のデジタル画像を表示することを含む。一部の実施形態では、キーボードの表示に取って代わることは、キーボードを表示することを停止して、キーボードが表示されていた場所に複数のデジタル画像を(例えば、図38X及び図38Yのように)表示することを含む。
一部の実施形態では、複数のデジタル画像は、デジタル画像のスクロール可能なアレイである。例えば、デジタル画像トレイ3806は、追加のデジタル画像3518-6及び3518-7を顕示化するために、図38Eでスクロールされる。
一部の実施形態では、複数のデジタル画像には、最近共有された画像、最近受信された画像、(例えば、顔認識によって識別されるような)会話の参加者を含む画像、デバイス内の前向きデジタルカメラからのリアルタイム画像、又はデバイス内の後向きデジタルカメラからのリアルタイム画像が含まれる。
一部の実施形態では、複数のデジタル画像は、デジタルカメラからのライブプレビュー画像(例えば、図38Cのライブプレビュー画像3514)と、メッセージセッション中にキャプチャされた複数のデジタル画像とからなる。
一部の実施形態では、第2の入力が検出された時点で会話記録が最大化されていた場合、会話記録の表示は、複数のデジタル画像の表示に部分的に置き換えられる。例えば、会話記録3503の表示は、図38Cのデジタル画像トレイ3806に部分的に置き換えられる。
一部の実施形態では、複数のデジタル画像を表示している間に、デバイス(6016)は、複数のデジタル画像内のデジタル画像を選択する入力(例えば、図35Dのライブプレビュー画像3514上の接触3512を含む入力)を検出し、複数のデジタル画像内のデジタル画像を選択する入力を検出した後、選択されたデジタル画像を会話記録に表示し(例えば、図35G及び図35Iの会話記録3503内のキャプチャされたデジタル画像3518-5の表示)、選択されたデジタル画像の表現を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに送信し、当該1つ以上の電子デバイスは、選択されたデジタル画像の表現をメッセージセッションに対応する会話記録に表示する。
一部の実施形態では、デジタル画像は、選択時に自動的にメッセージセッションに投稿される。例えば、デジタル画像3518-5は、図35H及び図35Iの接触3524を含む入力に応じて、図35Iのメッセージセッションに自動的に投稿される。
一部の実施形態では、デジタル画像がメッセージ入力エリアに表示され、更に、ユーザが、(例えば、タップジェスチャで送信アイコンをアクティブ化することによって)この画像をメッセージセッションに投稿する。例えば、デジタル画像3518-5は、図35Dの接触3512を含む入力の検出に応じて、図35Eのメッセージ入力エリア3502に表示される。デジタル画像3518-5は、次に、図35Fの投稿アフォーダンス3520上の接触3522を含む入力の検出に応じて、図35Gのメッセージセッションに投稿される。
一部の実施形態では、デバイス(6018)は、複数のデジタル画像内に表示されたライブ画像を選択する入力を検出し(例えば、タッチ感知ディスプレイを有する電子デバイスについて、ライブ画像上のタップジェスチャを検出する)、ライブ画像を選択する入力を検出したことに応じて、会話記録の表示を保持しながら、デジタルカメラによってデジタル画像をキャプチャする。例えば、図35Dのライブプレビュー画像3514上に表示されたキャプチャアフォーダンス3516上の接触3512を含む入力を検出したことに応じて、デバイスは、図35Eの会話記録3503の表示を保持しながら、キャプチャされたデジタル画像3518-5をキャプチャする。
一部の実施形態では、デジタル画像をキャプチャした後、デバイスは、デジタルカメラによってキャプチャされたデジタル画像を会話記録に表示し(6020)、キャプチャされたデジタル画像の表現を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに送信し、当該1つ以上の電子デバイスは、メッセージセッションに対応する会話記録内に、当該キャプチャされたデジタル画像の表現を表示する。例えば、キャプチャされた画像3518-5は、図35G及び図35Iの会話記録3503に表示される。
一部の実施形態では、キャプチャされた画像は、ライブ画像の選択時に自動的にメッセージセッションに投稿される。例えば、キャプチャされたデジタル画像3518-5は、図35H及び図35Iの接触3524を含む入力に応じて、図35Iのメッセージセッションに自動的に投稿される。
一部の実施形態では、キャプチャされた画像がメッセージ入力エリアに表示され、更に、ユーザが、(例えば、タップジェスチャで送信アイコンをアクティブ化することによって)この画像をメッセージセッションに投稿する。例えば、キャプチャされたデジタル画像3518-5は、図35Dの接触3512を含む入力の検出に応じて、図35Eのメッセージ入力エリア3502に表示される。キャプチャされたデジタル画像3518-5は、次に、図35Fの投稿アフォーダンス3520上の接触3522を含む入力の検出に応じて、図35Gのメッセージセッションに投稿される。
一部の実施形態では、メッセージユーザインタフェース内にデジタル描画キャンバスを表示することは、第1の入力が検出された時点でメッセージユーザインタフェースがキーボードの表示を含んでいたという判定に従って、キーボードの表示をデジタル描画キャンバスの表示に置き換えることと、第1の入力が検出された時点でメッセージユーザインタフェースがキーボードの表示を含んでいなかったという判定に従って、会話記録をディスプレイの第1のエリアに表示して、ディスプレイの第2のエリアに複数のデジタルタッチアクションを表示することと、を含んでいる(6022)。
例えば、図38ABでは、図38AAの会話記録3503のサイズに関して、デジタル描画キャンバス3858を含むデジタルタッチトレイ3854の表示に合わせるように、会話記録3503のサイズが縮小される。
別の実施例では、図38AGのデジタルキーボード3501の表示は、図38AHのデジタル描画キャンバス3858を含むデジタルタッチトレイ3854の表示に置き換えられる。
一部の実施形態では、キーボードの表示に取って代わることは、キーボード上にデジタル描画キャンバスを表示することを含む。一部の実施形態では、キーボードの表示に取って代わることは、キーボードを表示することを停止し、キーボードが表示されていた場所にデジタル描画キャンバスを(例えば、図38AG及び図38AHに示されるように)表示することを含む。
一部の実施形態では、第2の入力が検出された時点で会話記録が最大化されていた場合、会話記録の表示は、(例えば、図38AA及び図38ABに示すように)デジタル描画キャンバスの表示に部分的に置き換えられる。
一部の実施形態では、(例えば、対話型)アプリケーションの1つ以上の起動アイコンをメッセージユーザインタフェース内に表示することは、第1の入力が検出された時点でメッセージユーザインタフェースがキーボードの表示を含んでいたという判定に従って、キーボードの表示を(例えば、対話型)アプリケーションの1つ以上の起動アイコンの表示に置き換えることと、第1の入力が検出された時点でメッセージユーザインタフェースがキーボードの表示を含んでいなかったという判定に従って、会話記録をディスプレイの第1のエリアに表示し、ディスプレイの第2のエリアに(例えば、対話型)アプリケーションの1つ以上の起動アイコンを表示することと、を含んでいる(6024)。
例えば、図38AKでは、図38AJの会話記録3503のサイズに関して、対話型予約アプリケーション起動アイコン3708を含むアプリケーションスワイプトレイ3892の表示に対応するように、会話記録3503のサイズが縮小される。
別の実施例では、図38ARのデジタルキーボード3501の表示は、図38ASのアプリケーション起動アイコン3601、3603、3605、3607、3609、3611、3613、3615を含むアプリケーション選択トレイ3654の表示に置き換えられる。
一部の実施形態では、キーボードの表示に取って代わることは、キーボード上に1つ以上の起動アイコンを表示することを含む。一部の実施形態では、キーボードの表示に取って代わることは、キーボードを表示することを停止し、キーボードが表示されていた場所に1つ以上の起動アイコンを(例えば、図38AR及び図38ASに示されるように)表示することを含む。
一部の実施形態では、1つ以上の起動アイコンは、起動アイコンのスクロール可能なリスト内の単一の起動アイコン(例えば、図37AQのアプリケーションスワイプトレイ3892内の対話型予約アプリケーション起動アイコン3708)である。
一部の実施形態では、1つ以上の起動アイコンは、例えば、ミニスプリングボードに表示される複数の起動アイコン(例えば、図38ANのアプリケーション選択トレイ3654に表示されるアプリケーション起動アイコン3601、3603、3605、3607、3609、3611、3613、及び3615)である。
一部の実施形態では、第2の入力が検出された時点で会話記録が最大化されていた場合、会話記録の表示は、(例えば、図38AJ及び図38AKに示されるように)1つ以上の起動アイコンの表示に部分的に置き換えられる。
一部の実施形態では、(例えば、対話型)アプリケーションの1つ以上の起動アイコンを表示している間に、デバイス(6026)は、(例えば、対話型)アプリケーションの1つ以上の起動アイコン内の起動アイコンをアクティブ化する入力(例えば、図37Fの接触3710、図37ATの接触3776、及び図37BZの接触3729のうちの1つを含む入力)を検出する。
一部の実施形態では、(例えば、対話型)アプリケーションの1つ以上の起動アイコン内の起動アイコンをアクティブ化する入力を検出した後、デバイスは、メッセージ入力エリアとは異なる、(例えば、対話型)アプリケーションのアクティブ化された起動アイコンに対応するアプリケーションの第1の入力エリアを表示し、第1の対話型アプリケーションの入力エリアは、1つ以上の入力アフォーダンス(例えば、ラジオボタン、テキスト入力フィールド、チェックボックス、プルダウンリスト、及び/又はフォームフィールド)を含む。例えば、図37Gの対話型予約アプリケーションユーザインタフェース3712、図37AVの対話型三目並べアプリケーション入力エリア3778、図37AWの対話型三目並べアプリケーションユーザインタフェース3784、又は図37CAの対話型ピザ注文アプリケーション入力エリア3731である。
一部の実施形態では、第1の入力エリアは、メッセージユーザインタフェースの一部の上に表示されるか、又はその表示に取って代わるものである。(例えば、図37Gの対話型予約アプリケーションユーザインタフェース3712)。
一部の実施形態では、第1の入力エリア(例えば、図37AVの対話型三目並べアプリケーション入力エリア3778、又は図37CAの対話型ピザ注文アプリケーション入力エリア3731)は、(例えば、対話型)アプリケーションの1つ以上の起動アイコンの表示に取って代わる。
一部の実施形態では、第1の入力エリアは、メッセージユーザインタフェース全体の上に表示されるか、又はその表示に取って代わる(例えば、図37Gの対話型予約アプリケーションユーザインタフェース3712、又は図37AWの対話型三目並べアプリケーションユーザインタフェース3784)。
一部の実施形態では、(例えば、対話型)アプリケーションの第1の入力エリアは、(例えば、対話型)アプリケーションのセッションをどのように操作するか(例えば、X又はOとして三目並べをプレイする)に関するオプションを含むメニューである。例えば、図37AVの対話型三目並べアプリケーション入力エリア3778である。
一部の実施形態では、(例えば、対話型)アプリケーションの第1の入力エリアは、(例えば、対話型)アプリケーションのユーザインタフェースである。
一部の実施形態では、デバイスは、アクティブ化された起動アイコンに対応する(例えば、対話型)アプリケーションに対応する会話記録内に第1(例えば、対話型)アプリケーションオブジェクトを表示する。例えば、図37Fの起動アイコン3708から起動された対話型予約アプリケーションに対応する、図37Iの対話型予約アプリケーションオブジェクト3728である。別の実施例は、図37ATの起動アイコン3774から起動された対話型三目並べアプリケーションに対応する図37AWの対話型三目並べアプリケーションオブジェクト3786である。別の実施例は、図37BZの起動アイコン3613から起動された対話型ピザ注文アプリケーションに対応する図37CAの対話型ピザ注文アプリケーションオブジェクト3735である。
一部の実施形態では、(例えば、対話型)アプリケーションの第1の入力エリアが表示されている間に、会話記録の少なくとも一部の表示が保持されている場合、対話型アプリケーションオブジェクトは、会話記録にじかに表示される(例えば、図37AWの対話型三目並べアプリケーションオブジェクト3786、及び図37CAの対話型ピザ注文アプリケーションオブジェクト3735)。
一部の実施形態では、(例えば、対話型)アプリケーションの第1の入力エリアの表示が会話記録の表示に取って代わる場合、第1の入力エリアの表示が終了した後に対話型アプリケーションオブジェクトが表示される(例えば、図37Iの対話型予約アプリケーションオブジェクト3728)。
一部の実施形態では、アクティブ化された起動アイコンに対応する(例えば、対話型)アプリケーションに対応する第2の(例えば、対話型)アプリケーションオブジェクトの表現を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに送信し、当該1つ以上の電子デバイスは、メッセージセッションに対応する会話記録に第2の(例えば、対話型)アプリケーションオブジェクトの表現を表示する。
例えば、デバイス100-2は、会話記録370に対応するメッセージセッション内で対応する対話型予約アプリケーションのセッションが開始されたという情報をデバイス100-1から受信したことに応じて、対話型予約アプリケーションオブジェクト3728を図37Kに表示する。
別の実施例では、デバイス100-2は、会話記録3700に対応するメッセージセッション内で対応する対話型三目並べアプリケーションのセッションが開始されたという情報をデバイス100-1から受信したことに応じて、対話型三目並べアプリケーションオブジェクト3705を図37BFに表示する。
別の実施例では、デバイス100-1は、対応するピザ注文アプリケーションのセッションが会話記録3700に対応するメッセージセッション内で開始されたという情報をデバイス100-2から受信したことに応じて、対話型ピザ注文アプリケーションオブジェクト3735を図37CRに表示する。
一部の実施形態では、第2の(例えば、対話型)アプリケーションオブジェクトは、例えば標準メッセージアプリケーションの第1の(例えば、対話型)アプリケーションオブジェクトと同じである。一部の実施形態では、第2の(例えば、対話型)アプリケーションオブジェクトは、例えば、他のユーザが使用するためにダウンロードする必要がある第三者の第1の(例えば、対話型)アプリケーションオブジェクトとは異なる。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの機能の(例えば、全部よりは少ない)サブセットを実行するように構成されている。例えば、一部の実施形態では、メッセージアプリケーション内で動作する対話型予約アプリケーションは、レストランの予約を可能にするように構成されているが、ユーザがレストランに対してコメントできるようには構成されていない。これに対して、メッセージアプリケーションの外部で動作可能な対応する予約アプリケーションは、レストランを予約して、レストランに対してコメントすることを可能にするように構成されている。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションによって表示されるコンテンツの(例えば、全部よりは少ない)一部を表示する。例えば、一部の実施形態では、メッセージアプリケーション内で動作する対話型予約アプリケーションは、レストランの予約を可能にするように構成されているが、ユーザがレストランに対してコメントできるようには構成されていない。これに対して、メッセージアプリケーションの外部で動作可能な対応する予約アプリケーションは、レストランを予約して、レストランに対してコメントすることを可能にするように構成されている。
一部の実施形態では、対話型アプリケーションは、予め定義された入力の検出時に、メッセージアプリケーションとは別個に動作する対応するアプリケーションをデバイスに起動させる。例えば、図37Pの対話型予約アプリケーションアイコン3728上の第1の入力(例えば、タップ、押圧、深押し、長押し又はマルチフィンガジェスチャ)に応じて、デバイスはメッセージアプリケーション内で対話型予約アプリケーションを起動する。図37Pの対話型予約アプリケーションアイコン3728上の第2の(例えば、異なる)入力(例えば、タップ、押圧、深押し、長押し又はマルチフィンガジェスチャ)に応じて、デバイスは、メッセージアプリケーションの外部で予約アプリケーションを起動する。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションとは別々に動作する。例えば、図37Pのアイコン3728のアクティブ化に応じて起動される対話型予約アプリケーションは、メッセージアプリケーションの外部で動作する対応する予約アプリケーションが動作していないときに動作可能である。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションと連携して動作する。例えば、図37Pのアイコン3728のアクティブ化に応じて起動される対話型予約アプリケーションは、メッセージアプリケーションの外部で動作する対応する予約アプリケーションが動作していないときには動作することができない。
一部の実施形態では、対話型アプリケーションは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの一時記憶用メモリの専用部分とは異なる一時記憶用メモリの専用部分を有する。例えば、一部の実施形態では、図37Pのアイコン3728のアクティブ化に応じて起動され、かつメッセージアプリケーション内で動作する対話型予約アプリケーションを使用して行われた予約の記録は、メッセージアプリケーションの外部で動作する対応する予約アプリケーションを使用して行われた予約の記録とは異なるメモリ部分に記憶される。
一部の実施形態では、メッセージアプリケーションとは別個に動作する対応するアプリケーションは、対話型アプリケーションの一時的な記憶用メモリの専用部分にアクセスするように構成されている。例えば、一部の実施形態では、メッセージアプリケーションの外部で動作する対応する予約アプリケーションは、図37Pのアイコン3728のアクティブ化に応じて起動され、かつメッセージアプリケーション内で動作する対話型予約アプリケーションを使用して行われた予約の記録にアクセスすることができる。
一部の実施形態では、対話型アプリケーションアイコン/オブジェクトは、メッセージアプリケーションとは別個に動作する対応するアプリケーションの識別子を表示する。例えば、図37Kにおいて、対話型予約アプリケーションアイコン/オブジェクト3730は、メッセージアプリケーションとは別個に動作する予約アプリケーションに対応する同心円のシンボルを表示する。
一部の実施形態では、デバイス(6028)は、メッセージ入力エリアを表示している間に、メッセージ入力エリアをアクティブ化する第2の入力(図38ANの接触3872、図38AUの接触3878、図35Lの接触3528のうちの1つを含む入力)を検出する。
一部の実施形態では、メッセージ入力エリアをアクティブ化する入力を検出したことに応じて、第2の入力が検出された時点で、メッセージユーザインタフェースが、キーボードの表示を含み、3つのアクティブ化可能なアフォーダンスの表示を含んでいなかったという判定に従って、デバイスはメッセージ入力エリア内にプロンプトを表示する。
一部の実施形態では、メッセージ入力エリアをアクティブ化する入力を検出したことに応じて、第2の入力が検出された時点で、メッセージユーザインタフェースが、キーボード及び3つのアクティブ化可能なアフォーダンスの表示を含んでいたという判定に従って、デバイスは、3つのアクティブ化可能なアフォーダンスの表示を停止し、アプリケーション拡張アフォーダンスを表示し、メッセージ入力エリアの表示を拡張し、メッセージ入力エリア内にプロンプトを表示する。
一部の実施形態では、メッセージ入力エリアをアクティブ化する入力を検出したことに応じて、第2の入力が検出された時点で、メッセージユーザインタフェースが、キーボードの表示を含まないで、3つのアクティブ化可能なアフォーダンスの表示を含んでいたという判定に従って、デバイスは、3つのアクティブ化可能なアフォーダンスの表示を停止し、アプリケーション拡張アフォーダンスを表示し、メッセージ入力エリアの表示を拡張し、メッセージ入力エリア内にプロンプトを表示し、キーボードを表示する。
一部の実施形態では、メッセージ入力エリアをアクティブ化する入力を検出したことに応じて、第2の入力が検出された時点で、メッセージユーザインタフェースが、キーボードの表示を含まず、3つのアクティブ化可能なアフォーダンスの表示を含んでいたという判定に従って、デバイスは、メッセージ入力エリア内にプロンプトを表示し、キーボードを表示する。
図60A~図60Dにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、5800、6200、6400、6600、6800、及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図60A~図60Dに関して、上述した方法6000にも、類似した方法で適用可能であることに留意されたい。例えば、方法6000に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、5800、6200、6400、6600、6800、及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図61は、説明されるさまざまな実施形態の原理に従って構成された電子デバイス6100の機能ブロック図を示す。本デバイスの機能ブロックは、説明されるさまざまな実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図61で説明される機能ブロックが、説明されるさまざまな実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択的にサポートする。
図61に示すように、電子デバイス6100は、ディスプレイユニット6102と、タッチ感知面ユニット6104と、デジタルカメラユニット6106と、ディスプレイユニット6102とタッチ感知面ユニット6104とデジタルカメラユニット6106とに連結された処理ユニット6110と、を備えている。一部の実施形態では、処理ユニット6110は、表示可能化ユニット6112と、検出ユニット6114と、置換ユニット6116と、送信ユニット6118と、キャプチャユニット6120と、及び拡張ユニット6122とを含んでいる。
処理ユニット6110は、(例えば、表示可能化ユニット6112により)ディスプレイユニット6102上のメッセージユーザインタフェースの表示を可能にするように構成されており、メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアと、デジタル画像アフォーダンスと、デジタルタッチアフォーダンスと、アプリケーションアフォーダンスと、を含む。メッセージユーザインタフェースを表示している間に、処理ユニット6110は、タッチ感知面上の第1の入力を(例えば、検出ユニット6114を用いて)検出するように構成されている。第1の入力の検出に応じて、フォーカスセレクタがデジタル画像アフォーダンスに対応するメッセージユーザインタフェース内の場所にある間に、第1の入力が行われたという判定に従って、処理ユニット6110は、メッセージユーザインタフェース内に複数のデジタル画像を(例えば、表示可能化ユニット6112を用いて)表示可能にし、フォーカスセレクタがデジタルキャンバスアフォーダンスに対応するメッセージユーザインタフェース内の場所にある間に、第1の入力が行われたという判定に従って、メッセージユーザインタフェース内でデジタル描画キャンバスの表示を(例えば、表示可能化ユニット6112を用いて)可能にし、フォーカスセレクタがアプリケーションアフォーダンスに対応するメッセージユーザインタフェース内の場所にある間に、第1の入力が行われたという判定に従って、メッセージユーザインタフェース内でアプリケーションの1つ以上の起動アイコンの表示を(例えば、表示可能化ユニット6112を用いて)可能にする、ように構成されている。
一部の実施形態では、メッセージユーザインタフェース内に複数のデジタル画像を表示することは、第1の入力が検出された時点でメッセージユーザインタフェースがキーボードの表示を含んでいたという判定に従って、キーボードの表示を複数のデジタル画像の表示に(例えば、置換ユニット6116を用いて)置き換えることであって、当該複数のデジタル画像は、デジタルカメラユニット6106からのライブプレビュー画像を含む、ことと、第1の入力が検出された時点でメッセージユーザインタフェースがキーボードの表示を含んでいなかったという判定に従って、会話記録をディスプレイの第1のエリアに(例えば、表示可能化ユニット6112を用いて)表示して、複数のデジタル画像をディスプレイの第2のエリアに表示することであって、当該複数のデジタル画像は、デジタルカメラユニット6106からのライブプレビュー画像を含む、ことと、を含んでいる。
一部の実施形態では、複数のデジタル画像を表示している間に、処理ユニット6110は、複数のデジタル画像内でデジタル画像を選択する入力を(例えば、検出ユニット6114を用いて)検出し、複数のデジタル画像内でデジタル画像を選択する入力を検出した後、選択されたデジタル画像を会話記録に(例えば、表示可能化ユニット6112を用いて)表示可能にし、選択されたデジタル画像の表現を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット6118を用いて)送信し、当該1つ以上の電子デバイスは、選択されたデジタル画像の表現をメッセージセッションに対応する会話記録に表示する、ように更に構成されている。
一部の実施形態では、処理ユニット6110は更に、複数のデジタル画像内に表示されたライブ画像を選択する入力を(例えば、検出ユニット6114を用いて)検出し、ライブ画像を選択するその入力の検出に応じて、会話記録の表示を保持する間に、デジタル画像をデジタルカメラユニット6106によって(例えば、キャプチャユニット6120を用いて)キャプチャする、ように更に構成されている。
一部の実施形態では、処理ユニット6110は、デジタル画像をキャプチャした後、デジタルカメラユニット6106によってキャプチャされたデジタル画像を会話記録に(例えば、表示可能化ユニット6112を用いて)表示可能にし、キャプチャされたデジタル画像の表現を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット6118を用いて)送信し、当該1つ以上の電子デバイスは、メッセージセッションに対応する会話記録内に、キャプチャされたデジタル画像の表現を表示する、ように構成されている。
一部の実施形態では、メッセージユーザインタフェース内にデジタル描画キャンバスを表示することは、第1の入力が検出された時点で、メッセージユーザインタフェースがキーボードの表示を含んでいたという判定に従って、キーボードの表示をデジタル描画キャンバスの表示に(例えば、置換ユニット6116を用いて)置き換えることと、第1の入力が検出された時点でメッセージユーザインタフェースがキーボードの表示を含んでいなかったという判定に従って、会話記録をディスプレイの第1のエリアに(例えば、表示可能化ユニット6112を用いて)表示し、ディスプレイの第2のエリアに複数のデジタルタッチアクションを表示することと、を含んでいる。
一部の実施形態では、アプリケーションの1つ以上の起動アイコンをメッセージユーザインタフェース内に表示することは、第1の入力が検出された時点でメッセージユーザインタフェースがキーボードの表示を含んでいたという判定に従って、キーボードの表示をアプリケーションの1つ以上の起動アイコンの表示に(例えば、置換ユニット6116を用いて)置き換えることと、第1の入力が検出された時点でメッセージユーザインタフェースがキーボードの表示を含んでいなかったという判定に従って、会話記録をディスプレイの第1のエリアに(例えば、表示可能化ユニット6112を用いて)表示し、ディスプレイの第2のエリアにアプリケーションの1つ以上の起動アイコンを表示することと、を含んでいる。
一部の実施形態では、アプリケーションの1つ以上の起動アイコンを表示している間に、処理ユニット6110は、アプリケーションの1つ以上の起動アイコン内で起動アイコンをアクティブ化する入力を(例えば、検出ユニット6114を用いて)検出するように、更に構成されており、アプリケーションの1つ以上の起動アイコン内で起動アイコンをアクティブ化する入力を検出した後、処理ユニット6110は、アプリケーションのアクティブ化された起動アイコンに対応するアプリケーションの(メッセージ入力エリアとは異なる)第1の入力エリアを(例えば、表示可能化ユニット6112を用いて)表示可能にし、第1の対話型アプリケーションの入力エリアは1つ以上の入力アフォーダンスを含み、アクティブ化された起動アイコンに対応するアプリケーションに対応する会話記録内の第1のアプリケーションオブジェクトの表示を(例えば、表示可能化ユニット6112を用いて)可能にし、アクティブ化された起動アイコンに対応するアプリケーションに対応する第2のアプリケーションオブジェクトの表現を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット6118を用いて)送信し、当該1つ以上の電子デバイスは、第2のアプリケーションオブジェクトの表現をメッセージセッションに対応する会話記録に表示する、ように構成されている。
一部の実施形態では、メッセージ入力エリアを表示している間に、処理ユニット6110は、メッセージ入力エリアをアクティブ化する第2の入力を(例えば、検出ユニット6114を用いて)検出し、メッセージ入力エリアをアクティブ化する当該入力を検出したことに応じて、第2の入力が検出された時点で、メッセージユーザインタフェースが、キーボードの表示を含み、3つのアクティブ化可能なアフォーダンスの表示を含んでいなかったという判定に従って、メッセージ入力エリア内でプロンプトを(例えば、表示可能化ユニット6112を用いて)表示可能にし、第2の入力が検出された時点で、メッセージユーザインタフェースがキーボードと3つの起動可能なアフォーダンスとの表示を含んでいたという判定に従って、3つのアクティブ化可能なアフォーダンスを表示することを(例えば、表示可能化ユニット6112を用いて)停止し、アプリケーション拡張アフォーダンスの表示を可能にし(例えば、表示可能化ユニット6112を用いて)、メッセージ入力エリアの表示を(例えば、拡張ユニット6122を用いて)拡張し、メッセージ入力エリア内でプロンプトを(例えば、表示可能化ユニット6112を用いて)表示可能にし、第2の入力が検出された時点で、メッセージユーザインタフェースが、キーボードの表示を含まず、3つのアクティブ化可能なアフォーダンスの表示を含んでいたという判定に従って、3つのアクティブ化可能なアフォーダンスを表示することを(例えば、表示可能化ユニットを用いて)停止し、アプリケーション拡張アフォーダンスの表示を(例えば、表示可能化ユニット6112を用いて)可能にし、メッセージ入力エリアの表示を(例えば、拡張ユニット6122を用いて)拡張し、メッセージ入力エリア内でのプロンプトの表示を(例えば、表示可能化ユニット6112を用いて)可能にし、キーボードの表示(例えば、表示可能化ユニット6112を用いて)を可能にし、第2の入力が検出された時点で、メッセージユーザインタフェースが、キーボードの表示を含まず、3つのアクティブ化可能なアフォーダンスの表示を含んでいなかったという判定に従って、メッセージ入力エリア内にプロンプトを(例えば、表示可能化ユニット6112を用いて)表示可能にし、キーボードの表示(例えば、表示可能化ユニット6112を用いて)を可能にする、ように更に構成されている。
一部の実施形態では、メッセージユーザインタフェースはまた、アクティブ化時に電子デバイスに音声録音を可能にするように構成されたマイクロフォンアフォーダンスも含む。
一部の実施形態では、メッセージユーザインタフェースはまた、メッセージセッションに含まれる第1の他のユーザに対応する少なくとも1人のアバターを含み、アクティブ化されたときにメッセージユーザインタフェース上に重ねられた少なくとも1人のアバターに関連付けられたアクティブ化可能なメニュー項目を含むメニューを電子デバイスが表示することを可能にするように構成されている。
一部の実施形態では、少なくとも1人のアバターに関連付けられたアクティブ化可能なメニュー項目を含むメニューは、アクティブ化されると第1の他のユーザとのデジタルタッチアクションを開始するメニュー項目と、アクティブ化されると第1の他のユーザのみとメッセージを開始するメニュー項目と、アクティブ化されると第1の他のユーザと電子メールを開始するメニュー項目と、アクティブ化されると第1の他のユーザと通話を開始するメニュー項目と、アクティブ化されると第1の他のユーザとテレビ会議を開始するメニュー項目と、及び/又はアクティブ化されると第1の他のユーザと支払アクションを開始するメニュー項目とを含む。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって、任意選択的に実施される。
図60A~図60Dを参照して上述した動作は、図1A、図1B又は図61に示される構成要素によって、任意選択的に実施される。例えば、表示動作6002及び検出動作6010は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
ステッカの追加と操作
図62A~図62Cは、一部の実施形態に係る、メッセージ記録にステッカを追加する方法6200を示すフロー図である。方法6200は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法6200におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下で説明するように、方法6200は、メッセージ記録にステッカを追加する直感的な方法を提供する。この方法は、メッセージ記録にステッカを追加するときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによってより効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、ユーザがメッセージ記録にステッカをより迅速かつ効率的に追加することができれば、電力が節約され、バッテリ充電の間隔が増大することになる。
デバイスは、ディスプレイ上にメッセージアプリケーションのメッセージユーザインタフェースを表示し(6202)、このメッセージユーザインタフェースは、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、複数の電子ステッカ(例えば、ディスプレイの第2のエリアに表示されるステッカパック)と、メッセージ入力エリアとを含んでいる。例えば、図39Cにおいて、デバイス100-1は、会話記録3700、電子ステッカ3906、3908、及び3910を有するステッカパック3892、及びメッセージ入力エリア3502を含むメッセージユーザインタフェース3500を表示する。
メッセージユーザインタフェースを表示している間に、デバイスは、フォーカスセレクタがメッセージユーザインタフェース内の複数の電子ステッカの中の第1の電子ステッカに対応する第1の場所にある間に開始する(例えば、タッチ感知面上の第1の接触による)第1のドラッグジェスチャを検出し(6204)、第1のドラッグジェスチャは、フォーカスセレクタを第1の方向に移動させる(例えば、第1の電子ステッカで始まるタッチ感知ディスプレイ上の接触によるドラッグジェスチャを検出して、第1の方向に移動するか、あるいは、カーソル又は他のポインタがディスプレイ上の第1の電子ステッカにある間に開始するタッチ感知面上の接触によるドラッグジェスチャを検出して、ポインタをディスプレイ上の第1の方向に移動させる)。例えば、デバイス100-1は、図39Hの電子雪だるまステッカ3906上の位置3916-aから図39Iの位置3916-bまでの、接触3916の移動3918を含むドラッグジェスチャを検出する。別の実施例では、デバイス100-1は、図39Kの電子そりステッカ3910上の位置3920-aから図39Lの位置3920-bまでの、接触3920の移動3922を含むドラッグジェスチャを検出する。別の実施例では、デバイス100-1は、図39Nの電子雪片ステッカ3908上の位置3924-aから図39Oの位置3924-bまでの、接触3924の移動3926を含むドラッグジェスチャを検出する。
デバイスは、第1のドラッグジェスチャの移動に従って、第1の方向に第1の電子ステッカを移動する(6206)。例えば、電子雪だるまステッカは、移動3918に従って、図39Hの場所3906-aから図39Iの位置3906-bに移動する。別の実施例では、電子そりステッカ3910は、移動3922に従って、図39Kの位置3910-aから図39Lの位置3910-bに移動する。別の実施例では、電子雪片ステッカ3908は、移動3926に従って、図39Nの位置3908-aから図39Oの位置3908-cに移動する。
一部の実施形態では、複数の電子ステッカは、デジタル画像(例えば、TV又は映画のフレーム、デジタルコミックのイラスト、デジタルビデオのフレーム、又は他のデジタル画像)内に含まれる複数のオブジェクトであり、この場合(6208)、第1の電子ステッカは、第1のドラッグジェスチャの開始時に第1の場所に表示されたオブジェクトに対応し(例えば、デジタル画像内の任意のオブジェクトをタップするとそのオブジェクトのデジタルステッカが作成される)、第1の電子ステッカを移動することは、デジタル画像から第1の電子ステッカを剥離するアニメーションを表示することを含む(例えば、ユーザが第1の電子ステッカをデジタル画像から剥離しているように見える)。
デバイスは、フォーカスセレクタがメッセージユーザインタフェースの第2の場所にある間に(例えば、タッチ感知ディスプレイ上の接触が第2の場所にある間に、又はカーソル又は他のポインタが第2の場所にある間に)第1のドラッグジェスチャの終了を検出する(6210)。例えば、デバイス100-1は、接触3916が図39Iの位置3916-bにあるときドラッグジェスチャの終了を検出する(例えば、図39Jに示すような接触3916のリフトオフ)。別の実施例では、デバイス100-1は、接触3920が図39Lの位置3920-bにあるとき、ドラッグジェスチャの終了を検出する(例えば、図39Mに示すような接触3920のリフトオフ)。別の実施例では、デバイス100-1は、接触3924が図39Oの位置3924-bにあるとき、ドラッグジェスチャの終了を検出する(例えば、図39Pに示すような接触3924のリフトオフ)。
第1のドラッグジェスチャの終了を検出したこと(例えば、ドラッグジェスチャにおける接触のリフトオフを検出したこと)に応じて、デバイスは、第2の場所が会話記録内にある(例えば、ステッカがトレイから会話記録にドラッグされた)という判定に従って、電子ステッカを第2の場所に基づいた場所の会話記録内に配置する(6212)。例えば、図39Jでは、ドラッグジェスチャが記録内で(例えば、位置3916-bで)終了したため、電子雪だるまステッカ3906は会話記録3700に配置される。別の実施例では、図39Pにおいて、ドラッグジェスチャが記録内で(例えば、位置3916-bで)終了したため、電子雪片ステッカ3908は会話記録3700に配置される。
第1のドラッグジェスチャの終了を検出したこと(例えば、ドラッグジェスチャにおける接触のリフトオフを検出したこと)に応じて、第2の場所が会話記録内にない(例えば、ステッカが会話記録にドラッグされなかった)という判定に従って、デバイスは、電子ステッカをディスプレイ上の第2の場所に表示することを停止する(6212)。例えば、ステッカが会話記録に完全にはドラッグされていない場合、ジェスチャが終了するとステッカはステッカパックに戻る。例えば、図39Mでは、デバイス100-1は、接触3920が会話記録3700の外側(例えば、位置3920-b)にある間に、接触3920のリフトオフの検出(例えば、ドラッグジェスチャの終了)に応じて、位置3910-bでの電子そりステッカ3910の表示を停止する。
一部の実施形態では、電子デバイスは、ユーザが記録内のユーザ選択場所にステッカを配置することを可能にする入力と、記録内のデフォルト場所にステッカを配置する入力とを区別している。例えば、ドラッグジェスチャは、記録内のユーザ選択場所にステッカを配置する(例えば、雪だるまステッカ3906は、図39H~図39Jの位置3906-bにドラッグされ、配置される)のに対して、静止したジェスチャ(タップ、軽押し、又は深押しなど)は、ステッカを(例えば、周りのメッセージ吹き出しを有するか又は有しない)ユーザメッセージ用に指定されたデフォルトの次の場所で記録内に配置する。例えば、雪片ステッカ3908は、図39Dの接触3912を含む、ステッカ上のタップジェスチャを検出した後、図39Gで、会話記録内の次の時間的位置に対応する、記録3700内の位置3908-aに配置される。
一部の実施形態では、デバイスは、ディスプレイ上にメッセージアプリケーションのメッセージユーザインタフェースを表示し、このメッセージユーザインタフェースは、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、複数の電子ステッカ(例えば、ディスプレイの第2のエリアに表示されたステッカパック)と、メッセージ入力エリアと、を含んでいる。メッセージユーザインタフェースを表示している間に、デバイスは、第1の電子ステッカの表示に対応する場所で第1のユーザ入力を検出する。第1のユーザ入力を検出したことに応じて、第1のユーザ入力が、第1の電子ステッカの表示に対応する場所で開始して、会話記録の表示に対応する場所で終了するドラッグジェスチャを含むという判定に従って、電子ステッカを会話記録に配置する(例えば、ステッカを会話記録にドラッグする)。例えば、雪だるまステッカ3906は、図39H~図39Jの会話記録3700にドラッグされる。第1のユーザ入力がタップジェスチャ基準(例えば、実質的に同じ場所で、予め定義された強度閾値に到達しない特性強度を有するユーザ接触の開始及び終了の検出)を満たすという判定に従って、(例えば、ユーザが次のメッセージに対応する場所で記録にステッカを投稿することを可能にする)メッセージ入力エリアに電子ステッカを表示する。例えば、雪片ステッカ3908は図39D~図39Fでタップされて、メッセージ入力エリア3502に配置される。
一部の実施形態では、第2の場所に基づく場所は第2の場所である(6214)。例えば、ステッカは、(例えば、ドラッグジェスチャに対応する接触のユーザリフトオフにより、又は、予め定義された期間の比較的安定した位置を保持することによるドラッグジェスチャのタイムアウトにより)ドラッグジェスチャが終了した場所で、記録に配置される。例えば、図39Jにおいて、電子雪だるまステッカ3906は記録3700の位置3906-bに配置されるが、そこは、デバイスが接触3916を含むドラッグジェスチャの終了(例えば、リフトオフ)を検出したときに、電子雪だるまステッカ3906が表示されていた場所である。
一部の実施形態では、会話記録は、メッセージセッションに投稿される1つ以上のオブジェクト(例えば、メッセージ吹き出し、対話型アプリケーションのアイコン及び/又はマルチメディアコンテンツ)の表示を含み、第2の場所に基づく場所は、メッセージセッションに投稿された1つ以上のオブジェクトの位置によって画定される複数の位置の中で最も近い位置である。(6216)。例えば、デバイス100-1が、会話記録の位置3924-bで、接触3924を含むドラッグジェスチャの終了を検出したとき、電子雪片ステッカ3908は、図39Oの位置3908-cに表示される。これに応じて、図39Pにおいて、雪片ステッカ3908は、メッセージオブジェクト(例えば、メッセージ領域3749)に最も近い箇所に対応する位置3908-dに配置される(例えば、表示される)。
一部の実施形態では、当該複数の位置は、メッセージセッションに投稿される1つ以上のオブジェクトの外側の境界によって画定される位置(1つ又は複数のオブジェクトの輪郭を画定するすべての位置、輪郭上の所定数の位置(例えば、各オブジェクトの上部、下部、右側及び左側の境界上の水平及び垂直の中間点)、外側の境界に沿って規則的に離間した位置(例えば、各オブジェクト上の、すべての又はY位置を提供するように間隔を置いたXピクセル))を含む。
一部の実施形態では、当該複数の位置は、メッセージセッションに投稿される1つ以上のオブジェクトの表面積によって画定される位置を含む(オブジェクトの境界内(境界を含む場合も含まない場合も)の各位置、各オブジェクト内の所定数の位置(例えば、各オブジェクト内の四分区間中点)、各オブジェクト内で規則的に離間した位置(例えば、各オブジェクト内の、すべての又はZ位置を提供するように間隔を置いた(X、Y)ピクセル))。
一部の実施形態では、当該複数の位置は、2つの隣接するオブジェクト間の関係(例えば、2つのオブジェクト間の中間点によって画定される位置)によって画定される1つ以上の位置を含む。
一部の実施形態では、第1のドラッグジェスチャの終了を検出したことに応じて、第2の場所が会話記録内であるという判定に従って、デバイス(6218)は、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の{例えば、少なくとも第2の}電子デバイスに電子ステッカを表す情報を送信し、当該1つ以上の電子デバイスは、対応する会話記録内の対応する場所に当該電子ステッカの対応する表現を表示する。
一部の実施形態では、電子デバイスのユーザから送信されたメッセージと、他のユーザから受信したメッセージが会話記録の両反対側に表示される場合、上記の対応する場所とは、ステッカが送信ユーザの電子デバイスに表示される位置の鏡像の位置(例えば、位置の鏡像、又は位置とステッカの鏡像)である。
一部の実施形態では、フォーカスセレクタが複数の電子ステッカにおける第2の電子ステッカに対応する第3の位置にある間に、(例えば、タッチ感知ディスプレイ上の接触が第2の電子ステッカにある間に、あるいは、カーソル又は他のポインタが第2の電子ステッカにある間に、)デバイス(6220)はユーザ入力を検出する。例えば、入力は、図39Dの接触3912及び図39Zの接触3932のうちの1つを含む。
フォーカスセレクタが第3の位置にある間に、ユーザ入力を検出したことに応じて、ユーザ入力が1つ以上の(例えば、ステッカ投稿基準とは異なる)ステッカ選択基準を満たすという判定に従って、デバイスは、メッセージ入力エリアに第2の電子ステッカを表示する(例えば、雪片ステッカ3908は、図39Fのメッセージ入力エリア3502に表示される。
一部の実施形態では、ステッカ選択基準は、入力内の接触の特性強度が第1の強度閾値を下回ったままである場合に満たされるように構成された基準を含む。
一部の実施形態では、ステッカ選択基準は、入力内の接触の特性強度が第1の強度閾値を満たす場合に満たされる基準を含む(例えば、ステッカはメッセージ入力エリアに表示されるが、更に強く押すことで記録の中に押し込まれる)。
一部の実施形態では、ステッカは、続いて、メッセージ入力エリア内で、コンテンツを投稿する要求に対応する第2のユーザ入力(ディスプレイ上の送信アイコンに対応する場所におけるタップジェスチャなど)により、メッセージセッションに投稿することができる。例えば、図39Fにおける送信アフォーダンス3520上の接触3914を含むタップジェスチャに応じて、図39Gにおいて、雪片ステッカ3908は会話記録3700に表示される。
フォーカスセレクタが第3の位置にある間にユーザ入力を検出したことに応じて、ユーザ入力が1つ以上のステッカ投稿基準を満たすという判定に従って、次のメッセージ挿入ポイントに対応する場所で会話記録にステッカを表示する。例えば、雪だるまステッカ3906は、接触3932を含む深押しジェスチャの検出に応じて、図39AAのメッセージセッションに直接投稿される(例えば、記録3700に表示される)。
一部の実施形態では、ステッカ投稿基準は、入力内の接触の特性強度が第2の強度閾値を超える場合に満たされる基準を含んでいる。
一部の実施形態では、次のメッセージ吹き出しが、例えば、図39Gの位置3908-b又は図39AAの位置3906-cに配置されるであろう位置で、ステッカをメッセージセッションに投稿する。
一部の実施形態では、記録エリア表示基準が満たされるために、1つ以上のステッカ投稿基準は、タッチ感知面上の第1の接触の特性強度が対応する強度閾値を満たすことを要求し、第1の接触の特性強度が第2の強度閾値と第3の強度閾値との間であるとき、1つ以上のステッカ選択基準は、選択基準が満たされるために、タッチ感知面上の接触の特性強度が対応する強度閾値を満たすことを要求しない。
一部の実施形態では、デバイスは、フォーカスセレクタが複数の電子ステッカにおいて第3の電子ステッカに対応する第4の位置にある間に(例えば、タッチ感知ディスプレイ上の接触が第3の電子ステッカにある間に、あるいは、カーソル又は他のポインタが第3の電子ステッカにある間に)、ユーザ入力を検出し(6222)、第3の電子ステッカはステッカアニメーションに関連付けられる。例えば、図39Q~図39Xにおいて、雪だるまステッカ3906は、雪だるまの箒の上下の移動を含むアニメーションと関連付けられ、アニメーション状態3930-a、3930-b、及び3930-cのサイクル動作を行う。デバイス100-1は、ステッカパック3904内の雪だるまステッカ3906上の接触3928を含む入力を検出する。
一部の実施形態では、ステッカがメッセージセッションに投稿されると、ステッカアニメーションがループで表示される。一部の実施形態では、ステッカアニメーションは、メッセージセッションに投稿された後に予め定義された回数で表示される。一部の実施形態では、ステッカアニメーションは、対応する会話記録内のユーザによるアクティブ化時に表示される。一部の実施形態では、ステッカアニメーションはステッカパック内に自動的に表示される。
フォーカスセレクタが第4の位置にある間にユーザ入力を検出したことに応じて、ユーザ入力が1つ以上のアニメーションプレビュー基準(例えば、深押し基準)を満たすという判定に従って、デバイスは、第3の電子ステッカに関連付けられたステッカアニメーションをプレビューする(例えば、ユーザがステッカパック内の猫のステッカを押すと、猫のステッカが鳴く)。例えば、デバイス100-1は、図39-V-39Xのステッカパック3904に表示された雪だるまステッカのアニメーションに関するプレビューを表示する。
一部の実施形態では、アニメーションプレビュー基準は、入力内の接触の特性強度が強度閾値を満足するときに満たされる基準を含む。一部の実施形態では、プレスアンドホールドジェスチャは、アニメーションプレビュー基準を満足する。一部の実施形態では、深押しジェスチャは、アニメーションプレビュー基準を満足する。一部の実施形態では、軽押しはアニメーションプレビューを満足しない。一部の実施形態では、軽押しジェスチャにより、電子ステッカがメッセージ入力エリアに表示され、第3の電子ステッカに関連付けられたステッカアニメーションをプレビューする(例えば、ユーザがステッカパックの猫のステッカを押すと猫のステッカが鳴く)。
一部の実施形態では、複数の電子ステッカを表示する前に、デバイス(6224)は、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、アプリケーションアフォーダンス(例えば、図39Aのユーザインタフェース3500)とを含むメッセージユーザインタフェースを表示する。
メッセージユーザインタフェースを表示している間に、デバイスはアプリケーションアフォーダンスをアクティブ化する入力を検出する。例えば、入力は、図39Bのアプリケーションアフォーダンス3508上の接触3902を含む(例えば、アプリケーションアフォーダンスに対応する場所でのタップジェスチャの検出)。
アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、デバイスは、ディスプレイの第1のエリアに会話記録の少なくとも一部の表示を保持する(例えば、図39Cは、図39Cに表示される会話記録3700の一部を含む)。デバイスは、複数の電子ステッカをディスプレイの第2のエリアに表示する(例えば、図39Cのステッカパック3904)。
一部の実施形態では、アプリケーションアフォーダンスをアクティブ化する前に、メッセージユーザインタフェースが電子キーボードの表示を含む場合、複数の電子ステッカの表示がキーボードの表示に取って代わる(例えば、ステッカパック3904の表示がデジタルキーボード3501の表示に取って代わる)。
一部の実施形態では、アプリケーションアフォーダンスをアクティブ化する前に、メッセージユーザインタフェースが会話記録の全画面表示を含む場合、複数の電子ステッカの表示は、メッセージ記録の表示の一部に取って代わる。例えば、図39Bでは、会話記録3700が全画面モードで表示されている。図39Bの接触3902を含む入力によるステッカパック3892のアクティブ化に応じて、図39Cのステッカパックの表示に合わせるために会話記録3700の表示が縮小される。
一部の実施形態では、複数の電子ステッカを表示する前に、デバイス(6226)は、電子デバイスのユーザと(例えば、電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、アプリケーションアフォーダンスと、を含むメッセージユーザインタフェースを表示する。例えば、図39ABのメッセージユーザインタフェース3500である。
メッセージユーザインタフェースを表示している間に、デバイスはアプリケーションアフォーダンスをアクティブ化する入力を検出する。例えば、図39ABにおいて、接触3934を含む入力は、アプリケーションアフォーダンス3508をアクティブ化する。
アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、デバイスは、ディスプレイの第1のエリアに会話記録の少なくとも一部の表示を保持し(例えば、デバイス100-1は、図39ACの会話記録3700の表示を保持する)、第1の対話型アプリケーションアイコン(例えば、第1の対話型アプリケーションのアイコン)を表示するが、これはディスプレイの第2のエリアにおける(例えば、スクロール可能な対話型アプリケーションパネル内の)複数の対話型アプリケーションアイコンのうちの1つである。例えば、図39ACのアプリケーションスライドトレイ3892に表示される対話型予約アプリケーション起動アイコン3708である。
一部の実施形態では、アプリケーションアフォーダンスをアクティブ化する前に、メッセージユーザインタフェースが電子キーボードの表示を含む場合、スクロール可能な対話型アプリケーションパネルの表示がキーボードの表示に取って代わる(例えば、アプリケーションスライドトレイ3892はデジタルキーボード3501の表示に取って代わることができる)。
一部の実施形態では、アプリケーションアフォーダンスをアクティブ化する前に、メッセージユーザインタフェースが、会話記録の全画面表示を含む場合、スクロール可能な対話型アプリケーションパネルの表示がメッセージ記録の表示の一部に取って代わる。例えば、図39ACでは、アプリケーションスライドトレイ3892は、図39ABの全画面モードで表示された記録3700の一部に取って代わる。
第1の対話型アプリケーションアイコンをディスプレイの第2のエリアに表示している間に、ディスプレイの第2のエリアに対応する場所に第1の接触の水平移動を含む第1のスワイプジェスチャを検出する。例えば、デバイス100-1は、図39ADの位置3936-aから図39AEの位置3936-bまでの接触3936の移動3938を含むスワイプジェスチャを検出する。
第1のスワイプジェスチャが1つ以上の対話型アプリケーションアイコン切換基準を満足するとの判定に従って、デバイスは、ディスプレイの第2のエリアで、第1の対話型アプリケーションアイコンの表示を、複数の電子ステッカの表示に置き換える。例えば、図39AFのステッカパック3904は、接触3936の移動3938に従って、図39ADの対話型予約アプリケーション起動アイコン3708の表示に取って代わる。
一部の実施形態では、対話型アプリケーションアイコン切換基準は、第1のスワイプジェスチャの水平移動の長さが予め定義された移動閾値を満足するという基準を含む。一部の実施形態では、所定の移動閾値は、接触の移動の速度によって変化する。
一部の実施形態では、複数の電子ステッカを表示する前に、デバイス(6228)は、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、アプリケーションアフォーダンス(例えば、図39AUのメッセージユーザインタフェース3500)と、を含むメッセージユーザインタフェースを表示する。
メッセージユーザインタフェースを表示している間に、デバイスは、アプリケーションアフォーダンスをアクティブ化する入力を検出する(例えば、アプリケーションアフォーダンスに対応する場所でタップジェスチャを検出する)。例えば、図39AUでは、接触3952を含む入力がアプリケーションアフォーダンス3508をアクティブ化する。
アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、デバイスは、会話記録の少なくとも一部の表示をディスプレイの第1のエリアに保持し(例えば、デバイス100-1は、図39AVの会話記録3700の表示を保持する)、複数のアプリケーション起動アイコン(例えば、1つ以上の対話型アプリケーションの起動アイコン、例えば、図39AVのアプリケーション選択トレイ3654を含む)を含むディスプレイの第2のエリアに、ステッカパックのアプリケーション起動アイコン(例えば、図39AVのアプリケーション選択トレイ3654内のステッカパック起動アイコン3609)を表示する。
一部の実施形態では、アプリケーションアフォーダンスのアクティブ化を検出する前に、メッセージユーザインタフェースが電子キーボードの表示を含む場合、複数のアプリケーション起動アイコンの表示がキーボードの表示に取って代わる。例えば、図36Yのアプリケーション選択トレイ3654の表示は、図36Xのデジタルキーボード3501に取って代わる。
一部の実施形態では、アプリケーションアフォーダンスのアクティブ化を検出する前に、メッセージユーザインタフェースが、会話記録の全画面表示を含む場合、複数のアプリケーション起動アイコンの表示が、メッセージ記録の表示の一部に取って代わる。例えば、図39AVにおけるアプリケーション選択トレイ3654は、図39AUの全画面モードで表示された記録3700の一部を置き換えたものである。
複数のアプリケーション起動アイコンを表示している間に、デバイスは、ステッカパックのアプリケーション起動アイコンをアクティブ化する入力を検出する。例えば、デバイス100-1は、図39AVのステッカパック起動アイコン3609上の接触3954を含む入力を検出する。
ステッカパックのアプリケーション起動アイコンをアクティブ化する入力を検出したこと(例えば、ステッカパックの起動アイコンに対応する場所でタップジェスチャを検出すること)に応じて、デバイスは、ディスプレイの第2のエリアにおいて、複数のアプリケーション起動アイコンの表示を複数の電子ステッカの表示に置き換える。例えば、図39AVの接触3954を含む入力の検出に応じて、デバイス100-1は、図39AVのアプリケーション選択トレイ3654の表示を図39AWのステッカパック3904の表示に置き換える。
図62A~図62Cにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、5800、6000、6400、6600、6800、及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図62A~図62Cに関して、上述した方法6200にも、類似した方法で適用可能であることに留意されたい。例えば、方法6200に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、5800、6000、6400、6600、6800、及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図63は、説明されるさまざまな実施形態の原理に従って構成された電子デバイス6300の機能ブロック図を示す。本デバイスの機能ブロックは、説明されるさまざまな実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図63で説明される機能ブロックが、説明されるさまざまな実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択的にサポートする。
図63に示すように、電子デバイス6300は、ユーザインタフェースを表示するように構成されたディスプレイユニット6302と、接触を検出するように構成されたタッチ感知面ユニット6304と、ディスプレイユニット6302及びタッチ感知面ユニット6304に連結された処理ユニット6306とを含む。処理ユニット6306は、可能化ユニット6308、検出ユニット6310、移動ユニット6312、配置ユニット6314、停止ユニット6316、プレビューユニット6318、保持ユニット6320、及び置換ユニット6322を含む。処理ユニット6306は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイユニット6302に表示することを(例えば、可能化ユニット6308を用いて)可能にするように構成され、このメッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、複数の電子ステッカと、メッセージ入力エリアとを含んでいる。処理ユニット6306は、メッセージユーザインタフェースを表示している間に、フォーカスセレクタが、複数の電子ステッカの中の第1の電子ステッカに対応するメッセージユーザインタフェース内の第1の場所にある間に開始する第1のドラッグジェスチャを(例えば、検出ユニット6310を用いて)検出するように構成され、第1のドラッグジェスチャは、フォーカスセレクタを第1の方向に移動させる。処理ユニット6306は、第1のドラッグジェスチャの移動に従って、第1の電子ステッカを(例えば、移動ユニット6312を用いて)第1の方向に移動させるように構成されている。処理ユニット6306は、フォーカスセレクタがメッセージユーザインタフェースの第2の場所にある間に第1のドラッグジェスチャの終了を(例えば、検出ユニット6310を用いて)検出するように構成されている。第1のドラッグジェスチャの終了を検出したことに応じて、第2の場所が会話記録内にあるという判定に従って、処理ユニット6306は、電子ステッカを第2の場所に基づく会話記録内の場所に(例えば、配置ユニット6314を用いて)配置するように構成され、第2の場所は会話記録内ではないという判定に従って、処理ユニット6306は、ディスプレイユニット6302上の第2の場所に電子ステッカを表示することを(例えば、停止ユニット6316を用いて)停止するように構成されている。
一部の実施形態では、第1のドラッグジェスチャの終了を検出したことに応じて、第2の場所が会話記録内であるという判定に従って、処理ユニット6306は、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに電子ステッカを表す情報を(例えば、送信ユニット6317を用いて)送信するように構成され、当該1つ以上の電子デバイスは、対応する会話記録内の対応する場所に当該電子ステッカの対応する表現を表示する。
一部の実施形態では、第2の場所に基づく場所は第2の場所である。
一部の実施形態では、会話記録はメッセージセッションに投稿された1つ以上のオブジェクトの表示を含み、第2の場所に基づく場所は、メッセージセッションに投稿された1つ以上のオブジェクトの位置によって画定される複数の位置の中で最も近い位置である。
一部の実施形態では、処理ユニット6306は、フォーカスセレクタが複数の電子ステッカ内の第2の電子ステッカに対応する第3の位置にある間に、ユーザ入力を(例えば、検出ユニット6310を用いて)検出するように更に構成されている。フォーカスセレクタが第3の位置にある間にユーザ入力を検出したことに応じて、ユーザ入力が1つ以上のステッカ選択基準を満足するという判定に従って、第2の電子ステッカをメッセージ入力エリアに(例えば、可能化ユニット6308を用いて)表示することを可能にし、ユーザ入力が1つ以上のステッカ投稿基準を満足するという判定に従って、次のメッセージ挿入ポイントに対応する会話記録の場所への当該ステッカの(例えば、可能化ユニット6308を用いて)表示を可能にする。
一部の実施形態では、処理ユニット6306は、フォーカスセレクタが複数の電子ステッカ内の第3の電子ステッカに対応する第4の位置にある間に、ユーザ入力を(例えば、検出ユニット6310を用いて)検出するように構成され、第3の電子ステッカはステッカアニメーションに関連付けられる。フォーカスセレクタが第4の位置にある間にユーザ入力を検出したことに応じて、ユーザ入力が1つ以上のアニメーションプレビュー基準を満足するという判定に従って、第3の電子ステッカに関連付けられたステッカアニメーションを(例えば、プレビューユニット6318を用いて)プレビューする。
一部の実施形態では、処理ユニット6306は、複数の電子ステッカを表示する前に、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録とアプリケーションアフォーダンスとを含むメッセージユーザインタフェースの表示を(例えば、可能化ユニット6308を用いて)可能にするように、更に構成されている。メッセージユーザインタフェースを表示している間に、処理ユニット6306は、アプリケーションアフォーダンスをアクティブ化する入力を(例えば、検出ユニット6310を用いて)検出するように構成されている。アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、処理ユニット6306は、ディスプレイの第1のエリア内に会話記録の少なくとも一部の表示を(例えば、保持ユニット6320を用いて)保持し、ディスプレイの第2のエリアに複数の電子ステッカを(例えば、可能化ユニット6308を用いて)表示可能にするように構成される。
一部の実施形態では、処理ユニット6306は、複数の電子ステッカを表示する前に、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録とアプリケーションアフォーダンスとを含むメッセージユーザインタフェースの表示を(例えば、可能化ユニット6308を用いて)可能にするように、更に構成されている。メッセージユーザインタフェースを表示している間に、処理ユニット6306は、アプリケーションアフォーダンスをアクティブ化する入力を(例えば、検出ユニット6310を用いて)検出するように構成されている。アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、処理ユニット6306は、ディスプレイの第1のエリア内に会話記録の少なくとも一部の表示を(例えば、保持ユニット6320を用いて)保持し、ディスプレイの第2のエリアに、複数の対話型アプリケーションアイコンのうちの1つである第1の対話型アプリケーションアイコンを(例えば、可能化ユニット6308を用いて)表示可能にするように構成される。第1の対話型アプリケーションアイコンをディスプレイの第2のエリアに表示する間に、処理ユニット6306は、ディスプレイの第2のエリアに対応する場所における第1の接触の水平移動を含む第1のスワイプジェスチャを(例えば、検出ユニット6310を用いて)検出するように構成されている。第1のスワイプジェスチャが1つ以上の対話型アプリケーションアイコン切換基準を満足するとの判定に従って、処理ユニット6306は、ディスプレイの第2のエリアで、第1の対話型アプリケーションアイコンの表示を複数の電子ステッカの表示に(例えば、置換ユニット6322を用いて)置き換えるように構成されている。
一部の実施形態では、処理ユニット6306は、複数の電子ステッカを表示する前に、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録とアプリケーションアフォーダンスとを含むメッセージユーザインタフェースの表示を(例えば、可能化ユニット6308を用いて)可能にするように、更に構成されている。メッセージユーザインタフェースを表示している間に、処理ユニット6306は、アプリケーションアフォーダンスをアクティブ化する入力を(例えば、検出ユニット6310を用いて)検出するように構成されている。アプリケーションアフォーダンスをアクティブ化する入力を検出したことに応じて、処理ユニット6306は、ディスプレイの第1のエリア内に会話記録の少なくとも一部の表示を(例えば、保持ユニット6320を用いて)保持し、複数のアプリケーション起動アイコンを含むディスプレイの第2のエリアに、ステッカパックのアプリケーション起動アイコンを表示可能にする(例えば、可能化ユニット6308を用いて)ように構成されている。複数のアプリケーション起動アイコンを表示している間に、処理ユニット6306は、ステッカパックのアプリケーション起動アイコンをアクティブ化する入力を(例えば、検出ユニット6310を用いて)検出するように構成されている。ステッカパックのアプリケーション起動アイコンをアクティブ化する入力を検出したことに応じて、処理ユニット6306は、複数のアプリケーション起動アイコンの表示を(例えば、置換ユニット6322を用いて)ディスプレイの第2のエリアへの複数の電子ステッカの表示に置き換えるように構成されている。
一部の実施形態では、複数の電子ステッカは、デジタル画像内に含まれる複数のオブジェクトであり、第1の電子ステッカは、第1のドラッグジェスチャの開始時に第1の場所に表示されるオブジェクトに対応し、第1の電子ステッカを移動させることは、デジタル画像から第1の電子ステッカを剥離するアニメーションを表示することを含んでいる。
上述の情報処理方法での動作は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって、任意選択的に実施される。
図62A~図62Cを参照して上述した動作は、図1A、図1B又は図63に示される構成要素によって、任意選択的に実施される。例えば、検出動作6204及び移動動作6206は、任意選択的に、イベントソート部170、イベント認識器180、及びイベント処理部190によって実装される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図64A~図64Cは、一部の実施形態に係る、メッセージアプリケーションにおいて電子ステッカの表示を修正する方法6400を示すフロー図である。方法6400は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法6400におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下で説明するように、方法6400は、メッセージアプリケーションにおいて電子ステッカの表示を修正する直感的な方法を提供する。この方法は、メッセージアプリケーションにおいて電子ステッカの表示を修正するときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによって、より効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、ユーザがメッセージアプリケーションで電子ステッカの表示をより迅速かつ効率的に修正することができることを可能にすることにより、電力が節約され、バッテリ充電の間隔が増大することになる。
デバイスは、ディスプレイ上にメッセージアプリケーションのメッセージユーザインタフェースを表示し(6402)、このメッセージユーザインタフェースは、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、複数の電子ステッカ(例えば、ディスプレイの第2のエリアに表示されるステッカパック)と、メッセージ入力エリアとを含んでいる。例えば、図39AFにおいて、デバイス100-1は、会話記録3700、電子ステッカ3906、3908、及び3910を有する電子ステッカパック3892、並びにメッセージ入力エリア3502を含むメッセージユーザインタフェース3500を表示する。
メッセージユーザインタフェース(例えば、ユーザインタフェース3500)を表示している間に、デバイスは、フォーカスセレクタが複数の電子ステッカの中の第1の電子ステッカに対応する、メッセージユーザインタフェース内の第1の場所にある間に、(例えば、ドラッグジェスチャ又はタップジェスチャなどのタッチ感知面上の第1の接触による)第1のユーザ入力を検出する(6404)(例えば、第1の電子ステッカで始まるタッチ感知ディスプレイ上の接触によるドラッグジェスチャを検出して、第1の方向に移動するか、あるいは、カーソル又は他のポインタがディスプレイ上の第1の電子ステッカにある間に開始するタッチ感知面上の接触によるドラッグジェスチャを検出して、ポインタをディスプレイ上の第1の方向に移動させる)。一部の実施形態では、第1の電子ステッカは、最初は会話記録内にはない(例えば、第1の電子ステッカはディスプレイの第2のエリアに表示されたステッカパック内にある)。
例えば、デバイス100-1は、図39AGのステッカパック3904に表示された電子雪だるまステッカ3906上の位置3940-aから、図39AHの位置3940-bを通って、図39AIの位置3940-cまでの接触3940の移動3942を含むドラッグジェスチャと、図39AG~図39AH、図39AH~図39AIのそれぞれの間での、接触3940の特性強度の増加と、図39AIと図39AJとの間の接触3940の特性強度の低下と、図39AKの向き(例えば、位置)3940-cから図39ALの向き(例えば、位置)3940-dへの接触3940の回転3944を含む回転ジェスチャと、を含む入力を検出する。
第1のユーザ入力の検出に応じて、デバイス(6406)は、第1の電子ステッカを会話記録に配置して表示する。例えば、デバイス100-1は、図39AMの位置(例えば、場所及び向き)3906-fに電子ステッカ3906を表示する。
第1の電子ステッカが会話記録に表示されている間に、デバイス(6408)は、会話記録内の第1の電子ステッカに対応するメッセージユーザインタフェース内の第2の場所にフォーカスセレクタがある間に、第2のユーザ入力を検出する(例えば、記録中の第1の電子ステッカの場所で開始するタッチ感知ディスプレイ上の接触による、ドラッグジェスチャ、ピンチ解除ジェスチャの一部分、又は回転ジェスチャを検出し、あるいは、カーソル又は他のポインタが記録中の第1の電子ステッカの場所にある間に開始するタッチ感知面上の接触による、ドラッグジェスチャ、ピンチ解除ジェスチャの一部、又は回転ジェスチャを検出する)。
例えば、デバイス100-1は、図39ANの位置3946-aから、図39AOの位置3946-bへの、会話記録3700内の接触3946の移動3948と、図39AOと図39APとの間の接触3946の特性強度の増加と、図39AQの向き(例えば、位置)3946-bから図39Rの向き(例えば、位置)3946-cへの接触3946の回転3950と、を含む入力を検出する。
一部の実施形態では、第1及び第2のユーザ入力は、単一の連続入力の第1及び第2の部分、例えばドラッグジェスチャに続く、同じ接触でなされたピンチ又は回転ジェスチャである。
第2のユーザ入力の検出に応じて、デバイス(6408)は、会話記録内の第1の電子ステッカの位置、サイズ、及び/又は回転を変更する。(例えば、第1の電子ステッカの背後で会話記録の一定の表示を保持しながら)。
例えば、デバイス100-1は、図39ANの位置3906-fから図39AOの位置3906-gに電子雪だるまステッカ3906を移動させる。別の実施例では、デバイス100-1は、図39AOと図39APとの間で記録3700で表示される電子雪だるまステッカ3906のサイズを増加させる。別の実施例では、デバイス100-1は、図39AQの向き(例えば、位置)3906-gから図39ARの向き(例えば、位置)3906-hに電子雪だるまステッカ3906を回転させる。
一部の実施形態では、第1の接触の第2の接触への移動を含むピンチジェスチャの検出に応じて、第1の電子ステッカのサイズが縮小される(6410)が、このピンチジェスチャは、フォーカスセレクタが第1の電子ステッカに対応するメッセージユーザインタフェース内の場所にある間に、開始されたものである(例えば、電子ステッカ上にある間でのピンチ動作は、会話記録の表示サイズを変更することなく、ステッカの表示サイズを縮小させる)。
一部の実施形態では、第1の接触の第2の接触から離れる移動を含むピンチ解除ジェスチャの検出に応じて、第1の電子ステッカのサイズが増大される(6412)が、このピンチ解除ジェスチャは、フォーカスセレクタが第1の電子ステッカに対応するメッセージユーザインタフェース内の場所にある間に、開始されたものである(例えば、電子ステッカ上にある間でのピンチ解除動作は、会話記録の表示サイズを変更することなく、ステッカの表示サイズを増大させる)。
一部の実施形態では、第1の電子ステッカのサイズは、フォーカスセレクタが第1の電子ステッカに対応するメッセージユーザインタフェース内の場所にあった間に行われた接触の特性強度(例えば、その変化)に従って増加する(6414)。例えば、電子雪だるまステッカ3906のサイズは、図39AG~図39AHの間、図39AH~図39AIの間、及び図39AO~図39APの間でそれぞれ増加する。
一部の実施形態では、第1の電子ステッカのサイズは、フォーカスセレクタが第1の電子ステッカに対応するメッセージユーザインタフェース内の場所にあった間に行われた接触の特性強度(例えば、その変化)に従って縮小する。例えば、電子雪だるまステッカ3906のサイズは、図39AIと図39AJとの間で縮小する。
一部の実施形態では、フォーカスセレクタが第1の電子ステッカに対応するメッセージユーザインタフェース内の場所にある間に開始された回転ジェスチャの検出に応じて、第1の電子ステッカの向きが変更される(6416)。例えば、電子雪だるまステッカ3906の向き(例えば、位置)は、図39AKの向き3906-eから図39ALの向き3906-fに回転される。別の実施例では、電子雪だるまステッカ3906の向き(例えば、位置)は、図39AQの向き3906-gから図39ARの向き3906-hに回転される。
一部の実施形態では、回転ジェスチャは、単一のユーザ接触の回転を含む。一部の実施形態では、回転ジェスチャは、第2の接触に対する第1の接触の回転を含む。
一部の実施形態では、第1のユーザ入力を検出した後、デバイスは、第1の電子ステッカを表す情報を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の(例えば、第2の)電子デバイスに送信し(6418)、当該1つ以上の電子デバイスは、対応する(例えば、メッセージセッションに対応する)会話記録内の対応する場所(例えば、対応する場所、サイズ、及び回転)に第1の電子ステッカの対応する表現を表示する。
一部の実施形態では、第1の電子ステッカを表す情報が、第1のユーザ入力の検出に応じて(例えば、図39AMの接触3940のリフトオフの検出時に)送信され、後続の、ステッカの移動、サイズ変更、及び/又は回転によって、デバイスは(例えば、図39ASの接触3946のリフトオフの検出時に)、第1の電子ステッカを表す後続の情報(例えば、場所、サイズ、及び/又は向き、を含む位置)を送信することになる。
一部の実施形態では、第1の電子ステッカを表す情報は、ユーザが会話記録内でステッカを(例えば、第2のユーザ入力を用いて)最終的に配置し、サイズを設定し、かつ/又は回転させるまでは送信されない。例えば、情報は、図39ASの接触3946のリフトオフの検出時に送信されるが、図39AMの接触3940のリフトオフの検出時には送信されない。
一部の実施形態では、ユーザが電子ステッカを配置し、サイズを設定し、かつ/又は回転させると、記録内でステッカに対するさらなる変更を行うことができない(例えば、図39ANの第2の接触3946を含む第2の入力を検出しても、デバイス100-1は、会話記録3700内の電子雪だるまステッカ3906を移動、サイズ変更、又は回転させることができない)。
一部の実施形態では、ユーザが電子ステッカを配置し、サイズを設定し、かつ/又は回転させると、記録内でステッカに対するさらなる変更は、第1の入力の終了時に開始する所定の時間内(例えば、さらなる変更の開始)でしか行うことができず、これによって、ステッカが会話記録に配置されることになる。例えば、第2の入力が予め定義された時間内に最初に検出された場合には、図39ANの第2の接触3946を含む第2の入力を検出すると、デバイス100-1は、会話記録3700内で電子雪だるまステッカ3906を移動、サイズ変更、又は回転させることしかできない。
一部の実施形態では、第1の電子ステッカを表す情報を1つ以上の電子デバイスに送信した後、デバイス(6420)は、会話記録内の第1の電子ステッカに対応するメッセージユーザインタフェース内の第3の場所にフォーカスセレクタがある間に、第3のユーザ入力を検出し、第3のユーザ入力の検出に応じて、会話記録内の第1の電子ステッカの位置を第2の時間の間変化させ、第1の電子ステッカの位置が会話記録において変更されたという情報をメッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに送信し、当該1つ以上の電子デバイスは、対応する会話記録内の第1の電子ステッカの位置に対して(例えば、第1のユーザの会話記録で行われた変更に一致又はミラーリングするように)対応する変更を行う。
一部の実施形態では、メッセージセッションにステッカを投稿したユーザだけが、ステッカの位置、サイズ、又は回転を変更することができる。一部の実施形態では、メッセージセッションに含まれる任意のユーザが、ステッカの位置、サイズ、及び/又は回転を変更することができる。一部の実施形態では、ステッカがメッセージセッションに投稿されると、ユーザはステッカの位置、サイズ及び/又は回転を変更することができない。
一部の実施形態では、第1の電子ステッカを表す情報を1つ以上の電子デバイスに送信した後、デバイス(6422)は、会話記録内の第1の電子ステッカに対応するメッセージユーザインタフェース内の第3の場所にフォーカスセレクタがある間に、第3のユーザ入力を検出し、第3のユーザ入力の検出に応じて、会話記録内の第1の電子ステッカの回転(例えば、向き)を第2の時間の間変化させ、第1の電子ステッカの回転(例えば、向き)が会話記録において変更されたという情報をメッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに送信し、当該1つ以上の電子デバイスは、対応する会話記録内の第1の電子ステッカの回転(例えば、向き)に対して(例えば、第1のユーザの会話記録で行われた変更に一致又はミラーリングするように)対応する変更を行う。
一部の実施形態では、メッセージセッションにステッカを投稿したユーザだけが、ステッカの位置、サイズ、又は回転を変更することができる。一部の実施形態では、メッセージセッションに含まれる任意のユーザが、ステッカの位置、サイズ、及び/又は回転を変更することができる。一部の実施形態では、ステッカがメッセージセッションに投稿されると、ユーザはステッカの位置、サイズ及び/又は回転を変更することができない。
一部の実施形態では、第1の電子ステッカを表す情報を1つ以上の電子デバイスに送信した後、デバイス(6424)は、会話記録内の第1の電子ステッカに対応するメッセージユーザインタフェース内の第3の場所にフォーカスセレクタがある間に、第3のユーザ入力を検出し、第3のユーザ入力の検出に応じて、会話記録内の第1の電子ステッカのサイズを第2の時間の間変化させ、第1の電子ステッカのサイズが会話記録において変更されたという情報をメッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに送信し、当該1つ以上の電子デバイスは、対応する会話記録内の第1の電子ステッカのサイズに対して(例えば、第1のユーザの会話記録で行われた変更に一致又はミラーリングするように)対応する変更を行う。
一部の実施形態では、メッセージセッションにステッカを投稿したユーザだけが、ステッカの位置、サイズ、又は回転を変更することができる。一部の実施形態では、メッセージセッションに含まれる任意のユーザが、ステッカの位置、サイズ、及び/又は回転を変更することができる。一部の実施形態では、ステッカがメッセージセッションに投稿されると、ユーザはステッカの位置、サイズ及び/又は回転を変更することができない。
一部の実施形態では、第1の電子ステッカを表す情報を1つ以上の電子デバイスに送信した後、デバイスは、メッセージセッションに含まれる別のユーザに対応する電子デバイスから、第1の電子ステッカの対応する表現の位置、サイズ、及び/又は向きが、対応する会話記録において変更されたという情報を受信し、これに応じて、会話記録内の第1の電子ステッカの位置、サイズ、及び/又は向きを変更する。例えば、デバイス100-1は、午前9時56分に装置100-2から情報を受信し、これに応じて、電子雪だるまステッカ3906の位置、サイズ、及び向きを、図39ASの場所3906-hから図39ATの場所3906-iに変更する。
一部の実施形態では、第1のユーザ入力の検出に応じて、デバイスは、第1の電子ステッカの位置を変更する(6426)(例えば、ステッカパックにまだ表示されている間、及び/又は会話記録内へドラッグされている間に、ステッカのサイズ、位置、及び向きを変更することができる)。例えば、図39AGの位置3906-aから、図39AHの位置3906-dを通って、図39AIの位置3906-eまでの電子雪だるまステッカ3906の移動である。
一部の実施形態では、第1のユーザ入力の検出に応じて、デバイスは、第1の電子ステッカのサイズを変更する(6428)(例えば、ステッカパックにまだ表示されている間、及び/又は会話記録内へドラッグされている間に、ステッカのサイズ、位置、及び向きを変更することができる)。例えば、電子雪だるまステッカ3906のサイズは、図39AG~図39AHの間、及び図39AH~図39AIの間でそれぞれ増加する。別の実施例では、電子雪だるまステッカ3906のサイズは、図39AIと図39AJとの間で減少する。
一部の実施形態では、第1のユーザ入力の検出に応じて、デバイスは、第1の電子ステッカの回転を変更する(6430)(例えば、ステッカパックにまだ表示されている間、及び/又は会話記録内へドラッグされている間に、ステッカのサイズ、位置、及び向きを変更することができる)。例えば、電子雪だるまステッカ3906は、図39AKの向き(例えば、位置)3906-eから図39ALの向き(例えば、位置)3906-fに回転される。
図64A~図64Cにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、5800、6000、6200、6600、6800、及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図64A~図64Cに関して、上述した方法6400にも、類似した方法で適用可能であることに留意されたい。例えば、方法6400に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、5800、6000、6200、6600、6800、及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図65は、説明されるさまざまな実施形態の原理に従って構成された電子デバイス6500の機能ブロック図を示す。本デバイスの機能ブロックは、説明されるさまざまな実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図65で説明される機能ブロックが、説明されるさまざまな実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択的にサポートする。
図65に示すように、電子デバイス6500は、ユーザインタフェースを表示するように構成されたディスプレイユニット6502と、接触を検出するように構成されたタッチ感知面ユニット6504と、ディスプレイユニット6502及びタッチ感知面ユニット6504に連結された処理ユニット6506とを含む。処理ユニット6506は、可能化ユニット6508と、検出ユニット6510と、配置ユニット6512と、変更ユニット6514と、送信ユニット6516と、送信ユニット6518とを含む。
処理ユニット6506は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイユニット6502に表示することを(例えば、可能化ユニット6508を用いて)可能にするように構成され、このメッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、複数の電子ステッカと、メッセージ入力エリアとを含んでいる。処理ユニット6506は、メッセージユーザインタフェースを表示している間に、フォーカスセレクタが、複数の電子ステッカの中の第1の電子ステッカに対応するメッセージユーザインタフェース内の第1の場所にある間に第1のユーザ入力を(例えば、検出ユニット6510を用いて)検出するように、構成されている。第1のユーザ入力を検出したことに応じて、処理ユニット6506は、第1の電子ステッカを会話記録に(例えば、配置ユニット6512を用いて)配置して、その表示を(例えば、可能化ユニット6508を用いて)可能にするように構成されている。第1の電子ステッカが会話記録に表示されている間に、処理ユニット6506は、フォーカスセレクタが、会話記録の中の第1の電子ステッカに対応するメッセージユーザインタフェース内の第2の場所にある間に第2のユーザ入力を(例えば、検出ユニット6510を用いて)検出するように構成されている。第2のユーザ入力を検出したことに応じて、処理ユニット6506は、会話記録内の第1の電子ステッカの位置、サイズ、及び/又は回転を(例えば、変更ユニット6514を用いて)変更するように構成されている。
一部の実施形態では、第1のユーザ入力を検出した後、処理ユニット6506は、第1の電子ステッカを表す情報を、メッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット6516を用いて)送信するように構成され、当該1つ以上の電子デバイスは、対応する会話記録内の対応する場所に第1の電子ステッカの対応する表現を表示する。
一部の実施形態では、第1の電子ステッカを表す情報を1つ以上の電子デバイスに送信した後、処理ユニット6506は、会話記録内の第1の電子ステッカに対応するメッセージユーザインタフェース内の第3の場所にフォーカスセレクタがある間に、第3のユーザ入力を(例えば、検出ユニット6510を用いて)検出するように更に構成されている。第3のユーザ入力の検出に応じて、処理ユニット6506は、会話記録内の第1の電子ステッカの位置を第2の時間の間(例えば、変更ユニット6514を用いて)変更し、第1の電子ステッカの位置が会話記録において変更されたという情報をメッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット6518を用いて)送信するように構成され、当該1つ以上の電子デバイスは、対応する会話記録内の第1の電子ステッカの位置に対して、対応する変更を行う。
一部の実施形態では、処理ユニット6506は、第1の電子ステッカを表す情報を1つ以上の電子デバイスに送信した後、会話記録内の第1の電子ステッカに対応するメッセージユーザインタフェース内の第3の場所にフォーカスセレクタがある間に、第3のユーザ入力を(例えば、検出ユニット6510を用いて)検出し、第3のユーザ入力の検出に応じて、会話記録内の第1の電子ステッカの回転を第2の時間の間(例えば、変更ユニット6514を用いて)変更し、第1の電子ステッカの回転が会話記録において変更されたという情報をメッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット6518を用いて)送信するように構成され、当該1つ以上の電子デバイスは、対応する会話記録内の第1の電子ステッカの回転に対して、対応する変更を行う。
一部の実施形態では、処理ユニット6506は、第1の電子ステッカを表す情報を1つ以上の電子デバイスに送信した後、会話記録内の第1の電子ステッカに対応するメッセージユーザインタフェース内の第3の場所にフォーカスセレクタがある間に、第3のユーザ入力を(例えば、検出ユニット6510を用いて)検出し、第3のユーザ入力の検出に応じて、会話記録内の第1の電子ステッカのサイズを第2の時間の間(例えば、変更ユニット6514を用いて)変更し、第1の電子ステッカのサイズが会話記録において変更されたという情報をメッセージセッションに含まれる少なくとも1人の他のユーザに対応する1つ以上の電子デバイスに(例えば、送信ユニット6518を用いて)送信するように構成され、当該1つ以上の電子デバイスは、対応する会話記録内の第1の電子ステッカのサイズに対して、対応する変更を行う。
一部の実施形態では、処理ユニット6506は、第1のユーザ入力の検出に応じて、第1の電子ステッカの位置を(例えば、変更ユニット6514を用いて)変更するように更に構成されている。
一部の実施形態では、処理ユニット6506は、第1のユーザ入力の検出に応じて、第1の電子ステッカのサイズを(例えば、変更ユニット6514を用いて)変更するように更に構成されている。
一部の実施形態では、処理ユニット6506は、第1のユーザ入力の検出に応じて、第1の電子ステッカの回転を(例えば、変更ユニット6514を用いて)変更するように更に構成されている。
一部の実施形態では、第1の接触の第2の接触への移動を含むピンチジェスチャの検出に応じて、第1の電子ステッカのサイズが縮小されるが、このピンチジェスチャは、フォーカスセレクタが第1の電子ステッカに対応するメッセージユーザインタフェース内の場所にある間に、開始されたものである。
一部の実施形態では、第1の接触の第2の接触から離れる移動を含むピンチ解除ジェスチャの検出に応じて、第1の電子ステッカのサイズが増加するが、このピンチ解除ジェスチャは、フォーカスセレクタが第1の電子ステッカに対応するメッセージユーザインタフェース内の場所にある間に、開始されたものである。
一部の実施形態では、第1の電子ステッカのサイズは、フォーカスセレクタが第1の電子ステッカに対応するメッセージユーザインタフェース内の場所にあった間に行われた接触の特性強度に従って増加する。
一部の実施形態では、フォーカスセレクタが第1の電子ステッカに対応するメッセージユーザインタフェース内の場所にある間に開始された回転ジェスチャの検出に応じて、第1の電子ステッカの向きが変更される。
図64A~図64Cを参照して上述した動作は、図1A、図1B又は図65に示される構成要素によって、任意選択的に実施される。例えば、検出動作6404及び6408は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
支払の実施
図66は、一部の実施形態に係る、メッセージアプリケーションから支払を行う方法6600を示すフロー図である。方法6600は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法6600におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下に説明するように、方法6600は、メッセージアプリケーションから支払を行う直観的な方法を提供する。この方法は、メッセージアプリケーションから支払を行うときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによってより効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、ユーザがメッセージアプリケーションからの支払をより迅速かつ効率的に行うことができれば、電力が節約され、バッテリ充電の間隔が増大することになる。
デバイスは、ディスプレイ上にメッセージアプリケーションのメッセージユーザインタフェースを表示し(6602)、このメッセージユーザインタフェースは、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、メッセージ入力エリアと、を含み、メッセージセッションに含まれる他のユーザの各々は、(例えば、ディスプレイの第2のエリアに表示される)対応するアバターを有している。例えば、図40Fのメッセージユーザインタフェース3500は、会話記録3503と、メッセージ入力エリア3502とを含む。会話記録3503は、ポータブル多機能デバイス100-1のユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含んでいる。メッセージ記録に含まれる他の各ユーザは、図40Fで、アバターのスタック4002に表示されるアバター(例えば、「Mary Todd」のアバター4008)によって表される。
メッセージユーザインタフェースを表示している間に、デバイスは、フォーカスセレクタが、メッセージセッションに含まれる第1の他のユーザのアバターに対応するメッセージユーザインタフェース内の第1の場所にある間に、第1のユーザ入力(例えば、タッチ感知面上の接触によるタップ、軽押し、又は深押しのジェスチャ)を検出する(6604)(例えば、第1の他のユーザのアバターの場所におけるタッチ感知ディスプレイ上の接触によるジェスチャを検出するか、あるいは、カーソル又は他のポインタが第1の他のユーザのアバターの場所にある間にタッチ感知面上の接触によるジェスチャを検出する)。例えば、デバイス100-1は、図40GのMary Toddのアバター4008上の接触4010を含む入力を検出する。
第1のユーザ入力の検出に応じて、デバイスは、メッセージユーザインタフェース上に重ね合わされた第1の他のユーザに関連付けられたアクティブ化可能なメニュー項目を包含するメニューを表示し(6006)、表示されたメニューは、第1の他のユーザとの支払アクションを開始するためのアクティブ化可能なメニュー項目(例えば、第1の他のユーザに支払を行うか、あるいは、そのユーザから支払を要求するためのメニュー項目)を含む。例えば、予め定義された強度閾値を満たす接触4010の特性強度の増加を含む入力の検出に応じて、デバイスは、図40Hのメッセージセッションに含まれる別のユーザ(例えば、Mary Todd)への支払を行うためのアクティブ化可能なアクション3884-6を含むアクションメニュー3882を表示する。
第1の他のユーザに関連付けられたアクティブ化可能なメニュー項目を含むメニューを(例えば、図40Jのメニュー3882)表示する間に、デバイスは、フォーカスセレクタが、第1の他のユーザとの支払アクションを開始するためのアクティブ化可能なメニュー項目(例えば、図40Jの支払のためのアクティブ化可能なメニューアクション3884-6)に対応するメッセージユーザインタフェース内の第2の場所にある間に、(例えば、図40Jの接触4012を含む入力などのタッチ感知面上の接触による)第2のユーザ入力を検出する(6008)。例えば、デバイスは、第1の他のユーザとの支払ションを開始するためのアクティブ化可能なメニュー項目の場所でタッチ感知ディスプレイ上の接触によるジェスチャを検出するか、あるいは、カーソル又は他のポインタが、第1の他のユーザとの支払アクションを開始するためのアクティブ化可能なメニュー項目の場所にある間に、タッチ感知面上の接触によるジェスチャを検出する。
第2のユーザ入力の検出に応じて、デバイスは、第1の他のユーザへの支払を送信すること及び/又はそのユーザからの支払を要求することを開始するように構成されたユーザインタフェースを表示する(6610)。例えば、図40Jのアクティブ化可能な支払アクション3884-6上の接触4012を含む入力の検出に応じて、デバイス100-1は、図40Kの支払ユーザインタフェース4014を表示する。
図66における動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、5800、6000、6200、6400、6800、及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図66に関して、上述した方法6600にも、類似した方法で適用可能であることに留意されたい。例えば、方法6600に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、5800、6000、6200、6400、6800、及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図67は、説明されるさまざまな実施形態の原理に従って構成された電子デバイス6700の機能ブロック図を示す。本デバイスの機能ブロックは、説明されるさまざまな実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図67で説明される機能ブロックが、説明されるさまざまな実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択的にサポートする。
図67に示すように、電子デバイス6700は、ユーザインタフェースを表示するように構成されたディスプレイユニット6702と、接触を検出するように構成されたタッチ感知面ユニット6704と、ディスプレイユニット6702及びタッチ感知面ユニット6704に連結された処理ユニット6706とを含む。処理ユニット6706は、可能化ユニット6708と検出ユニット6710とを含む。
処理ユニット6706は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイユニット6702に表示することを(例えば、可能化ユニット6708を用いて)可能にするように構成され、このメッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアとを含み、メッセージセッションに含まれる他のユーザの各々は、対応するアバターを有する。処理ユニット6706は、メッセージユーザインタフェースを表示している間に、フォーカスセレクタが、メッセージセッションに含まれる第1の他のユーザのアバターに対応するメッセージユーザインタフェース内の第1の場所にある間に、第1のユーザ入力を(例えば、検出ユニット6710を用いて)検出するように、構成されている。第1のユーザ入力の検出に応じて、デバイスは、メッセージユーザインタフェース上に重ね合わされた第1の他のユーザに関連付けられたアクティブ化可能なメニュー項目を含むメニューを(例えば、可能化ユニット6708を用いて)表示可能にし、表示されたメニューは、第1の他のユーザとの支払アクションを開始するためのアクティブ化可能なメニュー項目を含む。第1の他のユーザに関連付けられたアクティブ化可能なメニュー項目を包含するメニューを表示する間に、フォーカスセレクタが、第1の他のユーザとの支払アクションを開始するためのアクティブ化可能なメニュー項目に対応するメッセージユーザインタフェース内の第2の場所にある間に、第2のユーザ入力を(例えば、検出ユニット6710を用いて)検出する。第2のユーザ入力の検出に応じて、第1の他のユーザへの支払を送信すること及び/又はそのユーザからの支払を要求することを開始するように構成されたユーザインタフェースを(例えば、可能化ユニット6708を用いて)表示可能にする。
図66を参照して上述した動作は、図1A、図1B又は図67に示される構成要素によって、任意選択的に実施される。例えば、検出動作6604及び6608は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
グループメッセージセッションにおけるアバターとの対話
図68A~図68Bは、一部の実施形態に係る、グループメッセージセッションに含まれる単一のユーザと対話する方法6800を示すフロー図である。方法6800は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法6800におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下に説明するように、方法6800は、グループメッセージセッションに含まれる単一のユーザと対話する直観的な方法を提供する。この方法は、グループメッセージセッションに含まれる単一のユーザと対話するときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによって、より効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、グループメッセージセッションに含まれる単一のユーザと、より迅速かつ効率的に対話することができれば、電力が節約され、バッテリ充電の間隔が増大することになる。
デバイスは、ディスプレイ上のメッセージアプリケーションのメッセージユーザインタフェースを表示し(6802)、メッセージユーザインタフェースは、電子デバイスのユーザと(例えば、他の各電子デバイスの)複数の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、メッセージ入力エリアと、複数のアバターと、を含み、当該複数のアバターの中のそれぞれの各アバターは、メッセージセッションに含まれる複数の他のユーザの中の他の各ユーザに対応し、複数のアバターは、(例えば重なり合う)アバターのスタックとして表示され、アバターのスタックの最上部には、複数のアバターの中の第1のアバターが表示される。例えば、図40Sのメッセージユーザインタフェース3500は、会話記録3503及びメッセージ入力エリア3502を含む。会話記録3503は、ポータブル多機能デバイス100-1のユーザとメッセージセッションに含まれる他のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含んでいる。メッセージ記録に含まれる他の各ユーザは、図40Sで、アバターのスタック4002の最上部に表示されるアバター(例えば、「Abe」のアバター3510)によって表される。
メッセージユーザインタフェースを表示している間に、デバイスは、フォーカスセレクタが第1のアバターに対応するメッセージユーザインタフェース内の第1の場所にある間に、タッチ感知面上の第1の接触による入力を検出する(例えば、第1のアバターの場所におけるタッチ感知ディスプレイ上の接触によるジェスチャを検出するか、あるいは、カーソル又は他のポインタが第1のアバターの場所にある間にタッチ感知面上の接触によるジェスチャを検出する)。例えば、デバイス100-1は、図40Sの(例えば、アバターのスタック4002の最上部に表示される)Abeのアバター上の接触4030を含む入力を検出する。別の実施例では、デバイス100-1は、図40UのMary Toddのアバター4008上の接触4038を含む入力を検出する。
第1の接触による入力を検出したことに応じて、入力がメニューアクティブ化基準(この基準が満たされるためには、タッチ感知面上の接触の特性強度が対応する強度閾値を満たすことが要求される)を満たしているという判定に従って、デバイスは、メッセージユーザインタフェースに重ね合わされた第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニューを表示する(6806)。例えば、図40Uと図40Vとの間の所定の強度閾値(例えば、IT又はIT)を満たすMary Toddのアバター4008上の接触4038の特性強度の増加を検出したことに応じて、デバイス100-1は、図40VのMary Toddと直接対話する(例えば、Mary Toddとだけ対話する)ためのアクション3884を含むアクションメニュー3882を表示する。
第1の接触による入力を検出したことに応じて、入力がアバター展開基準(この基準は、選択基準が満たされるために、タッチスクリーン上の接触の特性強度が対応する強度閾値を満たすことを要求しない)を満たしているという判定に従って、デバイスは、複数のアバターをアレイ(例えば、実質的に又は全く重ならないアレイ)に表示する(6906)。例えば、図40SのAbeのアバター3510上の接触4030を含む入力を検出したことに応じて、接触4030の特性強度が所定の強度閾値(例えば、IT又はIT)を満たさない場合、デバイス100-1は、アバターのアレイを、図40Tのアバタースタック4002(例えば、Abeのアバター3510、Mary Toddのアバター4008、Chuckのアバター4032、Issacのアバター4034、及びEdwinのアバター4036)に表示する。
一部の実施形態では、第1の接触の特性(例えば、最大)強度が予め定義された強度閾値を満たしている(例えば、第1の強度閾値と第2の強度閾値との間)という判定に従って、デバイスは、アバターのスタックの最上部における第1のアバターに関する表示を、アバターのスタックの最上部における複数のアバターの中の第2のアバターに関する表示に置き換える。例えば、図40Dと図40Eとの間で所定の強度閾値(例えば、IT又はIT)を満たす、Abeのアバター3510上における接触4006の特性強度の増加を検出したことに応じて、デバイス100-1は、図40E~図40Fで、アバターのスタック4002の最上部にMary Toddのアバター4008を表示するように、バターのスタック4002のサイクル動作を行う(例えば、切り換えるか又はシャッフルする)(例えば、Mary Toddのアバター4008は、アバターのスタック4002の最上部におけるAbeのアバター3510に取って代わる)。
一部の実施形態では、第1の接触の特性(例えば最大値)強度が所定の強度閾値を満たさなかった(例えば、第2の強度閾値と第3の強度閾値との間にあった)という判定に従って、デバイスは、メッセージユーザインタフェース上に重ねられた第1のアバターに関連付けられたアクティブ化可能なメニュー項目を含むメニューを表示する。例えば、図40BのAbeのアバター3510上の接触4004を含む入力を検出したことに応じて、接触4004の特性強度が所定の強度閾値(例えば、IT又はIT)を満たさない場合、デバイス100-1は、図40Cにおいて、Abeと直接対話する(例えば、Abeとだけ対話する)ためのアクション3884を含むアクションメニュー3882を表示する。
一部の実施形態では、第2の強度閾値は第1の強度閾値を超え、第3の強度閾値は第2の強度閾値を超える(例えば、タップすると、アバター内を循環し、軽押し又は深押しすると、スタックの最上部にあるアバターのクイックアクションメニューを呼び出す)。
一部の実施形態では、第2の強度閾値は第1の強度閾値を下回り、第3の強度閾値は第2の強度閾値を下回る(例えば、軽押し又は深押しすると、アバター内を循環し、タップすると、スタックの最上部にアバターのクイックアクションメニューを呼び出す)。
一部の実施形態では、アバター展開基準は、タッチ感知面上のタップジェスチャの検出時に満たされる(6810)。例えば、図40Sで、Abeのアバター3510上の接触4030を含むタップジェスチャの検出に応じて、図40Sに表示されたアバタースタック4002内で、アバター3510、4008、4032、4034、及び4036は、図40Tの展開アレイ(例えば、実質的に又は全く重ならないアレイ)として表示される。
一部の実施形態では、第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニュー(例えば、図40Vのアクションメニュー3882)は、アクティブにされると、他のユーザとデジタル図面を共有するキャンバスを開始するメニュー項目(例えば、図40Vのデジタルタッチアクション3884-5)を含んでいる(6812)。
一部の実施形態では、第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニュー(例えば、図40Vのアクションメニュー3882)は、アクティブ化されると、第1の他のユーザのみとメッセージを開始するメニュー項目(例えば、図40Vのメッセージアクション3884-3)を含む(6814)。
例えば、一部の実施形態では、メッセージメニュー項目(例えば、アクティブ化可能なアクション3884-3)を選択すると、電子デバイスは、電子デバイスのユーザと第1の他のユーザとの間の個人的なメッセージユーザインタフェースを表示する。例えば、メッセージユーザインタフェース3500が、デバイス100-1のユーザ(例えば、「Andrew」)と複数の他のユーザ(各々が図38AYのアバターのスタック4002内のアバターによって表される)との間のメッセージセッションに対応する会話記録3503を表示している間に、図38AYのアクティブ化可能なメッセージアクション3884-3上の接触3886を含む入力の検出に応じて、デバイス100-1は、図38AYの会話記録3503の表示を、図38AZのAbeとAndrewとの間のメッセージセッションに対応する会話記録3700に置き換える。
一部の実施形態では、第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニュー(例えば、図40Vのアクションメニュー3882)は、アクティブ化されると、第1の他のユーザと電子メールを開始するメニュー項目(例えば、図40Vのメールアクション3884-4)を含んでいる(6816)。
一部の実施形態では、第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニュー(例えば、図40Vのアクションメニュー3882)は、アクティブ化されると、第1の他のユーザと通話を開始するメニュー項目(例えば、図40Vの通話アクション3884-1)を含んでいる(6818)。
一部の実施形態では、第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニュー(例えば、図40Vのアクションメニュー3882)は、アクティブ化されると、第1の他のユーザとテレビ会議を開始するメニュー項目(例えば、図40Vのテレビ電話アクション3884-2)を含んでいる(6820)。
一部の実施形態では、第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニュー(例えば、図40Vのンメニュー3882)は、アクティブ化されると、第1の他のユーザとの支払アクションを開始するメニュー項目(例えば、図40Vの支払アクション3884-6)を含んでいる(6822)。
図68A及び図68Bにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、5800、6000、6200、6400、6600、及び7000)に関して本明細書に記載された他のプロセスの詳細はまた、図68A及び図68Bに関して、上述した方法6800にも、類似した方法で適用可能であることに留意されたい。例えば、方法6800に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、5800、6000、6200、6400、6600、及び7000)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図69は、説明されるさまざまな実施形態の原理に従って構成された電子デバイス6900の機能ブロック図を示す。本デバイスの機能ブロックは、説明されるさまざまな実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図69で説明される機能ブロックが、説明されるさまざまな実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択的にサポートする。
図69に示すように、電子デバイス6900は、ユーザインタフェースを表示するように構成されたディスプレイユニット6902と、接触を検出するように構成されたタッチ感知面ユニット6904と、ディスプレイユニット6902及びタッチ感知面ユニット6904に連結された処理ユニット6906とを含む。処理ユニット6906は、可能化ユニット6908と検出ユニット6910とを含む。
処理ユニット6906は、ディスプレイユニット6902上にメッセージアプリケーションのメッセージユーザインタフェースを(例えば、可能化ユニット6908を用いて)表示可能にするように構成され、メッセージユーザインタフェースは、電子デバイスのユーザと(例えば、他の各電子デバイスの)複数の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアと、複数のアバターと、を含み、当該複数のアバターの中のそれぞれの各アバターは、メッセージセッションに含まれる複数の他のユーザの中の他の各ユーザに対応し、複数のアバターは、アバターのスタックとして表示され、アバターのスタックの最上部には、複数のアバターの中の第1のアバターが表示されている。メッセージユーザインタフェースを表示している間に、処理ユニット6906は、フォーカスセレクタが第1のアバターに対応するメッセージユーザインタフェース内の第1の場所にある間に、タッチ感知面ユニット6904上の第1の接触による入力を(例えば、検出ユニット6910を用いて)検出するように構成されている。第1の接触による入力を検出したことに応じて、入力がメニューアクティブ化基準(メニューアクティブ化基準は、この基準が満たされるためには、タッチ感知面ユニット6904上の接触の特性強度が対応する強度閾値を満たすことを要求する)を満たしているという判定に従って、処理ユニット6906は、メッセージユーザインタフェース上に重ねられた第1のアバターに関連付けられたアクティブ化可能なメニュー項目を含むメニューを(例えば、可能化ユニット6908を用いて)表示可能にするように構成されている。入力がアバター展開基準(この基準は、選択基準が満たされるために、タッチスクリーン上の接触の特性強度が対応する強度閾値を満たすことを要求しない)を満たしているという判定に従って、処理ユニット6906は、アレイ内に複数のアバターを(例えば、可能化ユニット6908を用いて)表示可能にするように構成されている。
一部の実施形態では、アバター展開基準は、タッチ感知面ユニット上のタップジェスチャの検出時に満たされる。
一部の実施形態では、第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニューは、アクティブ化されると、他のユーザとデジタル図面を共有するキャンバスを開始するメニュー項目を含む。
一部の実施形態では、第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニューは、アクティブ化されると、第1の他のユーザのみとのメッセージを開始するメニュー項目を含む。
一部の実施形態では、第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニューは、アクティブ化されると、第1の他のユーザとの電子メールを開始するメニュー項目を含む。
一部の実施形態では、第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニューは、アクティブ化されると、第1の他のユーザとの通話を開始するメニュー項目を含む。
一部の実施形態では、第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニューは、アクティブ化されると、第1の他のユーザとテレビ会議を開始するメニュー項目を含む。
一部の実施形態では、第1のアバターに関連付けられたアクティブ化可能なメニュー項目を包含するメニューは、アクティブ化されると、第1の他のユーザと支払アクションを開始するメニュー項目を含む。
図68A及び図68Bを参照して上述した動作は、図1A、図1B又は図69に示される構成要素によって、任意選択的に実施される。例えば、検出動作6804及び表示動作6806は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実装される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
メッセージセッションにおける推奨の実施
図70A及び図70Bは、一部の実施形態に係る、メッセージセッションにおいて追加情報を表示する方法7000を示すフロー図である。方法7000は、ディスプレイと、タッチ感知面と、タッチ感知面との接触の強度を検出する1つ以上のセンサとを備える電子デバイス(例えば、図3のデバイス300、又は図1Aのポータブル多機能デバイス100)において実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法7000におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
以下で説明するように、方法7000は、メッセージセッションにおいて追加の情報を表示する直感的な方法を提供する。この方法は、メッセージセッションにおいて追加の情報を表示するときに、ユーザからの入力の数、大きさ、及び/又は種類を減少させ、それによって、より効率的なヒューマンマシンインタフェースを作成する。バッテリ駆動の電子デバイスでは、ユーザがメッセージセッションで追加の情報をより迅速かつ効率的に表示することができれば、電力が節約され、バッテリ充電の間隔が増大することになる。
デバイスは、ディスプレイ上にメッセージアプリケーションのメッセージユーザインタフェースを表示し(7002)、このメッセージユーザインタフェースは、電子デバイスのユーザと(例えば、別の電子デバイスの)少なくとも1人の他のユーザとの間のメッセージセッションの(例えば、ディスプレイの第1のエリアに表示される)会話記録と、メッセージ入力エリアと、を含む。例えば、図41A及び図41Cのメッセージユーザインタフェース3500は、会話記録3503及びメッセージ入力エリア3502を含む。
メッセージユーザインタフェースを表示している間に、デバイスは、メッセージセッションに含まれる別のユーザに対応する(例えば、第2の)電子デバイスからメッセージセッション内の第1のメッセージを受信する(7004)。例えば、デバイス100-1は、図41AのMary Toddからメッセージ4102を受信する。
第1のメッセージの受信に応じて、デバイス(7006)は、ディスプレイ上の会話記録内の第1のメッセージ領域(例えば、吹き出し)内に第1のメッセージを表示する(例えば、メッセージ4102は、図41Aの記録3503内のメッセージ領域内に表示される。)。
第1のメッセージを受信したことに応じて、デバイス(7006)は、インターネット上で入手可能な追加のコンテンツ(例えば、検出されたビジネス/レストラン、音楽、映画、テレビ番組、現在の出来事、公の人物、政治家、有名人、大学、選手、スポーツイベント、又はスポーツリーグ/チーム)に関連する単語又はフレーズを、第1のメッセージ内で検出する。例えば、デバイス100-1は、図41Aの映画のタイトルとして「Meteorite Catcher」というフレーズ4101を認識する。一部の実施形態では、デバイスは、デバイスのメモリに記憶された、かつ/又は、遠隔に記憶された、データ検出器を使用する。一部の実施形態では、デバイスは、受信したメッセージ内の単語/フレーズを、メモリ若しくはデバイス内に記憶された、及び/又は遠隔に記憶された単語/フレーズの予め定義されたリストと比較する。
インターネット上で入手可能な追加のコンテンツに関連する単語又はフレーズを検出したことに応じて、デバイス(7006)は、第1のメッセージ領域に近接して(例えば、吹き出しを、」例えば、メッセージのすぐ上又は下に)、その単語又はフレーズに関連する追加のコンテンツが入手可能であるという選択可能なインジケーション(例えば、「ローカル番組の時間を見る」、「今予約する」などの、追加のコンテンツに関連する選択可能なテキスト)を表示する。例えば、映画のタイトルとして「Meteorite Catcher」というフレーズ4101を認識したことに応じて、デバイス100-1は、図41Aのメッセージ4102の下に選択可能なインジケーション4104(「映画情報を見る」)を表示する。
一部の実施形態では、利用可能な追加のコンテンツに関連付けられた単語又はフレーズは、映画に関連し(7008)(例えば、映画のタイトル、映画の特徴的な若しくはコンテキスト特定可能なキャラクター名、又は「show me the money」などの映画の有名な台詞)、追加のコンテンツには、映画についてのバイオグラフィカルデータ(俳優/女優の名前、上映時間、映画がリリースされた年、又は映画を制作及び/若しくは配信したスタジオ)と、映画のローカル上映に関する情報(例えば、開演時間、劇場情報、又はチケット購入リンク)と、映画の評価情報(例えば、批評又はユーザ提供の評価、個人の又は編集されたもの)と、及び/又は映画に関するマルチメディアコンテンツ(例えば、映画のクリップ、ストリーミングの上映、又はオーディオクリップ)とが含まれる。
一部の実施形態では、利用可能な追加のコンテンツに関連付けられた単語又はフレーズは、テレビ番組と関連し(7010)(例えば、番組名、番組の特徴的な又はコンテキスト特定可能なキャラクター名、あるいは「don't have a cow,man」などの特定可能なキャッチフレーズ)、追加コンテンツには、番組に関するバイオグラフィカルデータ(例えば、俳優/女優の名前、シリーズの長さ、ネットワーク上の情報、チャンネル、及び/若しくは番組が放送される時間、又は番組を制作したネットワーク)と、ショーに関する評価情報(例えば、評論家又はユーザ提供の評価、個人の又は編集されたもの)と、及び/又は番組に関するマルチメディアコンテンツ(例えば、番組のクリップ、ストリーミング上映、又はオーディオクリップ)とが含まれる。
一部の実施形態では、利用可能な追加のコンテンツに関連付けられた単語又はフレーズは、歌又はアルバム(例えば、歌又はアルバムのタイトル、アーティストの名前、「bye,bye,Miss American Pie」などの歌又はアルバムの特定可能な歌詞)と関連し(7012)、追加コンテンツには、歌又はアルバムに関するバイオグラフィカルデータ(例えば、歌若しくはアルバムの、アーティスト、作曲者、又は制作者の名前、歌又はアルバムの長さ、アルバムの曲、歌又はアルバムがリリースされた年、あるいは歌若しくはアルバムを制作及び/又は配信したスタジオ)と、歌又はアルバムに関する評価情報(例えば、評論家又はユーザ提供の評価、個人の又は編集されたもの)と、及び/又は、歌若しくはアルバムに関するマルチメディアコンテンツ(例えば、オーディオクリップ又はストリーミング演奏)とが含まれる。
一部の実施形態では、利用可能な追加のコンテンツに関連付けられた単語又はフレーズは、ビジネス(例えば、レストラン、店舗、サロン、又はゴルフ場などの特定の種類のビジネス、ビジネス名、特徴的な又はコンテキスト特定可能な従業員/所有者の名前、又は「pizza,pizza」などの特定可能なスローガン)と関連し(7014)、追加コンテンツには、ビジネスに関するバイオグラフィカルデータ(例えば、住所、地元の市街地図、電話番号、電子メールアドレス、又は営業時間)と、ビジネスに関する評価情報(例えば、評論家又はユーザ提供の評価、個人の又は編集されたもの)と、及び/又は、ビジネスに関する双方向性コンテンツ(例えば、ウェブサイト、対話型注文プラットフォーム、又はビジネスに関連する対話型アプリケーション)とが含まれる。一部の実施形態では、ビジネスは、特定のビジネス、例えば特定のレストランである。一部の実施形態では、ビジネスは、ビジネスの種類、例えばレストランである。
一部の実施形態では、デバイス(7016)は、選択可能なインジケーションをアクティブ化する入力を検出し(例えば、選択可能なインジケーション上のタップジェスチャを検出する)、選択可能なインジケーションをアクティブ化する入力を検出したことに応じて、会話記録内に追加のコンテンツを表示する(例えば、インターネットからの追加のコンテンツを有するメッセージ吹き出しの下にドロップダウンウィンドウを表示する)。例えば、図41Bの選択可能なインジケーション4104上の接触4106を含む入力を検出したことに応じて、デバイス100-1は、インターネット上で入手可能な「Meteorite Catcher」の映画についての追加情報(例えば、映画ポスター4110及び紹介情報4112)を含むエリア4108を表示する(例えば、デバイス100-1は、検出されたフレーズに関する選択されたインターネット検索結果を表示する)。
一部の実施形態では、追加のコンテンツは、検出された単語又はフレーズに関連するウェブコンテンツへのリンク(例えば、映画ウェブサイトへのリンク又は会話記録内で閲覧及び/又は投稿され得るデジタルビデオへのリンク)を含む。
一部の実施形態では、アクティブ化可能なインジケーションは、受信したメッセージの表示内の認識された単語又はフレーズの様式化された表示(例えば、認識された単語又はフレーズの強調表示又は着色)である。
一部の実施形態では、デバイスは、第1のメッセージにおいて、インターネット上で入手可能な追加コンテンツ(例えば、検出されたビジネス/レストラン、音楽、映画、テレビ番組、現在のイベント、公的人物、政治家、有名人、大学、運動選手、スポーツイベント、又はスポーツリーグ/チーム、に関する情報)に関連付けられた単語又はフレーズを検出する。例えば、デバイス100-1は、図41Dで、俳優の名前として受信メッセージ4114内のフレーズ「Astron Omer」4103を認識する。一部の実施形態では、デバイスは、デバイスのメモリに記憶された、かつ/又は、遠隔に記憶された、データ検出器を使用する。一部の実施形態では、デバイスは、受信したメッセージ内の単語/フレーズを、メモリ若しくはデバイス内に記憶された、及び/又は遠隔に記憶された単語及び/若しくはフレーズの予め定義されたリストと比較する。
一部の実施形態では、インターネット上で入手可能な追加のコンテンツに関連付けられた単語又はフレーズを検出したことに応じて、デバイスはメッセージ領域内の当該単語又はフレーズを様式化し、メッセージ領域内の当該単語又はフレーズのアクティブ化を可能にする。例えば、俳優の名前として「Astron Omer」4103のフレーズを認識したことに応じて、デバイス100-1は、図41Dのメッセージ4114内の「Astron Omer」の強調表示4116を表示する。
一部の実施形態では、デバイスは、メッセージ領域内の様式化された単語又はフレーズをアクティブ化する入力を検出し(例えば、ハイライトされた単語又はフレーズ上のタップジェスチャを検出する)、これに応じて、メッセージユーザインタフェースの表示を、複数の(例えば、分類された)検索結果を含む、検出された単語又は句のインターネット検索に関するインターネット(及び/又はメモリ)検索ユーザインタフェースの表示に置き換える。例えば、図41Eの様式化されたフレーズ「Astron Omer」上の接触4118を含む入力を検出したことに応じて、デバイス100-1は、メッセージユーザインタフェースの表示を検出されたフレーズ「Astron Omer」4103のインターネット検索に関する図41Fのインターネット検索ユーザインタフェース3661の表示に置き換える。インターネット検索ユーザインタフェース3661は、フレーズ「Astron Omer」4103(例えば、ニュース記事3664、3678、3680及び映画予告編3670、3682及び3684)に関連する複数の分類された検索結果を含む。
一部の実施形態では、デバイスは、インターネット(及び/又はメモリ)検索ユーザインタフェース内の複数の検索結果における第1の検索結果上の入力を検出し、これに応じて、インターネット(及び/又はメモリ)検索ユーザインタフェースの表示を、メッセージユーザインタフェースに置き換え、第1の検索結果の表現をメッセージユーザインタフェースの会話記録に表示し、第1の検索結果の表現を、メッセージセッションの他のユーザに関連付けられた1つ以上の電子デバイスに送信する(例えば、検索結果をメッセージセッションに投稿する)。
例えば、デバイス100-1は、図41Gの検索結果3670上の接触4120を含む入力を検出し、これに応じて、インターネット検索インタフェース3661を、検索結果3670の表現を表示する会話記録3503を含むメッセージユーザインタフェース3500に置き換える。
図70A及び図70Bにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、5800、6000、6200、6400、6600、及び6800)に関して本明細書に記載された他のプロセスの詳細はまた、図70A及び図70Bに関して、上述した方法7000にも、類似した方法で適用可能であることに留意されたい。例えば、方法7000に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書に記載の他の方法(例えば、方法600、800、1000、1200、1400、1600、1800、2100、2400、2600、2800、3100、3300、4200、4400、4600、4800、5000、5200、5400、5600、5800、6000、6200、6400、6600、及び6800)に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
一部の実施形態によれば、図71は、説明されるさまざまな実施形態の原理に従って構成された電子デバイス7100の機能ブロック図を示す。本デバイスの機能ブロックは、説明されるさまざまな実施形態の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図71で説明される機能ブロックが、説明されるさまざまな実施形態の原理を実施するように、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択的にサポートする。
図71に示すように、電子デバイス7100は、ユーザインタフェースを表示するように構成されたディスプレイユニット7102と、接触を検出するように構成されたタッチ感知面ユニット7104と、ディスプレイユニット7102とタッチ感知面ユニット7104とに連結された処理ユニット7106と、を備え、処理ユニット7106は、検出ユニット7108と、受信ユニット7110と、検出ユニット7112とを含む。
処理ユニット7106は、メッセージアプリケーションのメッセージユーザインタフェースをディスプレイユニット7102に表示することを(例えば、可能化ユニット7108を用いて)可能にするように構成され、このメッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録と、メッセージ入力エリアとを含んでいる。メッセージユーザインタフェースを表示している間に、処理ユニット7106は、メッセージセッションに含まれる別のユーザに対応する電子デバイスからメッセージセッション内の第1のメッセージを(例えば、受信ユニット7110を用いて)受信するように構成されている。第1のメッセージの受信に応じて、処理ユニット7106は、ディスプレイユニット7102上の会話記録の第1のメッセージ領域内に第1のメッセージを(例えば、可能化ユニット7108を用いて)表示可能にするように構成されている。処理ユニット7106は、第1のメッセージにおいて、インターネット上で入手可能な追加のコンテンツに関連付けられた単語又はフレーズを検出する(例えば、検出ユニット7112を用いて)ように構成されている。インターネット上で入手可能な追加のコンテンツに関連付けられた単語又はフレーズを検出したことに応じて、処理ユニット7106は、第1のメッセージ領域に近接して(例えば、可能化ユニット7108を用いて)当該単語又はフレーズに関連付けられた追加のコンテンツが入手可能であるという選択可能なインジケーションを表示可能にするように構成されている。
一部の実施形態では、処理ユニット7106は、選択可能なインジケーションをアクティブ化する入力を(例えば、検出ユニット7112を用いて)検出し、選択可能なインジケーションをアクティブ化する入力を検出したことに応じて、会話記録内に別のコンテンツの表示を(例えば、可能化ユニット7108を用いて)可能にするように更に構成されている。
一部の実施形態では、入手可能な追加のコンテンツに関連付けられた単語又はフレーズは映画に関連し、この追加のコンテンツには、映画に関するバイオグラフィカルデータ、映画のローカル上映に関する情報、映画に関する評価情報、及び/又は映画に関するマルチメディアコンテンツが含まれる。
一部の実施形態では、入手可能な追加のコンテンツに関連付けられた単語又はフレーズは、テレビ番組に関連し、この追加のコンテンツには、番組に関するバイオグラフィカルデータ、番組に関する評価情報、及び/又は番組に関するマルチメディアコンテンツが含まれる。
一部の実施形態では、入手可能な追加のコンテンツに関連付けられた単語又はフレーズは、歌又はアルバムに関連し、この追加のコンテンツには、歌若しくはアルバムに関するバイオグラフィカルデータ、歌若しくはアルバムに関する評価情報、及び/又は歌若しくはアルバムに関するマルチメディアコンテンツが含まれる。
一部の実施形態では、入手可能な追加のコンテンツに関連付けられた単語又はフレーズはビジネスに関連し、この追加のコンテンツには、ビジネスに関するバイオグラフィカルデータ、ビジネスに関する評価情報、及び/又はビジネスに関する双方向性コンテンツが含まれる。
図70A及び図70Bを参照して上述した動作は、図1A、図1B又は図71に示される構成要素によって、任意選択的に実施される。例えば、検出動作7016は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
メッセージにおけるアプリケーション間のナビゲーション
図72A~図72Rは、一部の実施形態に係る、メッセージユーザインタフェースに表示されるアプリケーションユーザインタフェースを使用するアプリケーション間のナビゲーションに関する例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図73A~図73Dのプロセスを含む、以下に記載するプロセスを例示するために使用される。説明の便宜のために、一部の実施形態は、タッチ感知ディスプレイシステム112を有するデバイスに対して実行される動作を参照して説明する。かかる実施形態では、フォーカスセレクタは、任意選択的に、各指又はスタイラス接触、指又はスタイラス接触に対応する代表点(例えば、各接触の面心又は各接触に関連付けられた点)、あるいは、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の面心である。しかし、類似の動作は、任意選択的に、図面に示されたユーザインタフェースをフォーカスセレクタと共にディスプレイ450に表示する間に、タッチ感知面451上の接触を検出したことに応じて、ディスプレイ450と別体のタッチ感知面451とを有するデバイス上で実行される。
図72A~図72FMは、メッセージアプリケーションに関する例示的なユーザインタフェース7200を示す。図72Aにおいて、ユーザインタフェース7200は、会話記録7202、メッセージ入力エリア7204、アクティブ化可能なデジタル画像アフォーダンス7206、アプリケーションアフォーダンス7208、及びアプリケーションエリア7210を含む。会話記録7202は、ポータブル多機能デバイス100のユーザとメッセージセッションに含まれる別のユーザとを含む、対応するメッセージセッションの参加者からのメッセージを含んでいる。メッセージ記録に含まれる他のユーザは、アバター(例えば、「Abe」のアバター7210)によって表される。メッセージ7212は、Abeとして識別されるユーザによって操作されるリモートデバイスからデバイス100によって受信されるメッセージであり、メッセージ7214は、Abeによって操作されるリモートデバイスに、デバイス100によって送信されるメッセージである。図72Aにおいて、アプリケーションエリア7210はキーボード7212を表示する。
図72Bでは、フォーカスセレクタ7220によって示されるように、アプリケーションアフォーダンス7208に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出72155される。この入力に応じて、図72Bのアプリケーションエリア7210に示されるキーボード7212は、図72Cに示されるように、アプリケーション入力エリア7222及びアプリケーション選択エリア7224に置き換えられる。アプリケーションアフォーダンス7208の外観は、アプリケーションモードがアクティブであることを示すように、図72Bから図72Cに変更されている。アプリケーション選択エリア7224は、アプリケーション設定アフォーダンス7226と、(三目並べアプリケーションの選択用)アプリケーション選択アフォーダンス7228と、(現在表示されている音楽アプリケーション用)7230と、(ステッカアプリケーションの選択用)7232とを含む。アプリケーション設定アフォーダンス7226はまた、本明細書ではアプリケーション選択アフォーダンスとも呼ばれる。アプリケーション入力エリア7222は、(例えば、リモートデバイスに送信する音楽トラック情報の選択用)アプリケーションオブジェクト7234、7236、7238、及び7240を含む。
図72D~図72Gでは、フォーカスセレクタ7242によって示されるように、タッチスクリーン112上の接触による入力(例えば、スクロール入力)が検出される。フォーカスセレクタ7242が矢印7244によって示される経路に沿って、(図72Dに示されるような)アプリケーション選択エリア7224上の第1の場所から、(図72Eに示されるような)アプリケーション選択エリア7224上の第2の場所に移動するにつれて、アプリケーション選択オブジェクト7228、7230、7232のサイズが増加し、アプリケーション設定アフォーダンス7226はもはや図72Eに表示されなくなる。図72E及び図72Fに示すように、フォーカスセレクタ7242がアプリケーション選択エリア7224を横切って移動し続けると、アプリケーション選択アフォーダンス7228はもはや表示されず、アプリケーション選択アフォーダンス7246が顕示化する。フォーカスセレクタ7242によって示される接触がタッチスクリーン112からリフトオフすると、図72F及び図72Gに示すように、アプリケーション選択アフォーダンスのサイズが減少し、追加のアプリケーション選択アフォーダンス7248が図72Gに顕示化する。
図72Hでは、フォーカスセレクタ7250によって示されるように、アプリケーション選択アフォーダンス7246に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて、図72Hのアプリケーション入力エリア7222に表示された音楽アプリケーションのアプリケーションオブジェクト7234~7240は、図72Iに示すように、(例えば、遠隔デバイスに送信する予約情報を選択するための)アプリケーションオブジェクト7252及び7254に置き換えられる。
図72J~図72Lは、フォーカスセレクタ7256によって示されるように、タッチスクリーン112上の接触による入力(例えば、上方へのドラッグ入力)を示す。フォーカスセレクタ7256は、シェブロン7260に対応する第1の場所から矢印7258によって示される経路に沿って移動する。この入力はシェブロン7260を上方にドラッグし、アプリケーション入力エリア7222が図72Lの会話記録7202をカバーするように、図72J~図72Kに示すように、アプリケーション入力エリア7222に会話記録7202上で拡張させる。図72M及び図72Nは、フォーカスセレクタ7262によって示されるように、タッチスクリーン112上の接触による入力(例えば、上方へのスワイプ入力)を示す。この入力はシェブロン7260を下方にドラッグし、アプリケーション入力エリア7222の長さを元のサイズに減少させる。
図72Oでは、フォーカスセレクタ7264によって示されるように、アプリケーションアフォーダンス7208に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて、図72Oのアプリケーションエリア7210に示されるアプリケーション入力エリア7222及びアプリケーション選択エリア7224は、図72Pに示されるようにキーボード7212に置き換えられる。
図72Qでは、フォーカスセレクタ7266によって示されるように、アプリケーションアフォーダンス7208に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて、図72Qのアプリケーションエリア7210に示されるキーボード7212は、アプリケーション入力エリア7222及びアプリケーション選択エリア7224に置き換えられる。図72Oでは、アプリケーション選択アフォーダンス7230、7232、7246、及び7248が、アプリケーション選択エリア7224に表示されている。図72O及び図72Pにおいてキーボード7212の表示に移行した後、図72Q及び図72Rに示すように、アプリケーション入力エリア7222及びアプリケーション選択エリア7224の表示に移行すると、最初に表示されたアプリケーション選択アフォーダンス7226、7228、7230のセットが図72Rのアプリケーション選択エリア7224に再表示される。
メッセージにおけるアプリケーション管理インタフェース
図72S~図72AOは、一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図74A~図74Dのプロセスを含む、以下に記載するプロセスを例示するために使用される。説明の便宜のために、一部の実施形態は、タッチ感知ディスプレイシステム112を有するデバイスに対して実行される動作を参照して説明する。かかる実施形態では、フォーカスセレクタは、任意選択的に、各指又はスタイラス接触、指又はスタイラス接触に対応する代表点(例えば、各接触の面心又は各接触に関連付けられた点)、あるいは、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の面心である。しかし、類似の動作は、任意選択的に、図面に示されたユーザインタフェースをフォーカスセレクタと共にディスプレイ450に表示する間に、タッチ感知面451上の接触を検出したことに応じて、ディスプレイ450と別体のタッチ感知面451とを有するデバイス上で実行される。
図72Sでは、フォーカスセレクタ7268によって示されるように、アプリケーション設定アフォーダンス7226に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて、図72Tに示すように、メッセージアプリケーションインストール/削除インタフェース7270が表示される。メッセージアプリケーションインストール/削除インタフェース7270は、デバイス100にインストール済みアプリケーションのアプリケーション管理リストを含む。この管理リストは、アプリケーション選択アフォーダンス7228によって表される三目並べアプリケーションに対応するアプリケーション管理リスト7272と、アプリケーション選択アフォーダンス7230によって表される音楽アプリケーションに対応するアプリケーション管理リスト7274と、アプリケーション選択アフォーダンス7232によって表されるステッカアプリケーションに対応するアプリケーション管理リスト7276と、アプリケーション選択アフォーダンス7246によって表される予約アプリケーションに対応するアプリケーション管理リスト7278と、アプリケーション選択アフォーダンス7248によって表されるピザ構築アプリケーションに対応するアプリケーション管理リスト7280と、メッセージユーザインタフェース7200内の選択可能なアプリケーションに対応する追加のアプリケーション管理リスト7282及び7284と、を含んでいる。
図72Uでは、フォーカスセレクタ7288によって示されるように、アプリケーションリスト7272の削除アフォーダンス7273に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて(又は削除を確認するための別のタップ入力などの第2の入力に応じて)、図72Vに示すように、アプリケーションリスト7272に対応する三目並べアプリケーションのメッセージアプリケーション設定要素が削除される。一部の実施形態では、ウォッチ構成要素及び/又はコンテンツ共有構成要素など、アプリケーションリスト7272に対応する三目並べアプリケーションの他のアプリケーション設定要素もまた削除される。三目並べアプリケーション設定要素が削除されると、図72AOに示すように、三目並べアプリケーション選択アフォーダンス7228はもはやアプリケーション選択エリア7224に表示されなくなる。
図72Wで、フォーカスセレクタ7292によって示されるように、メッセージアプリケーションインストール/削除インタフェース7270の検索入力エリア7290に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて、図72Xに示すように、検索インタフェースエリア7294とキーボード7212がメッセージアプリケーションインストール/削除インタフェース7270に表示される。
図72Yでは、検索入力7296が検索入力エリア7290に入力され、フォーカスセレクタ72100によって示されるように、検索アフォーダンス7298に対応する場所で、タッチスクリーン112上の接触による入力が検出される。図72Zに示すように、この接触による入力に応じて、検索インタフェースエリア7294には、(小さな乗り換えアプリケーションに関する)検索結果72102と、(乗り換え地図アプリケーションに関する)72104が表示されている。
図72Zでは、フォーカスセレクタ72108によって示されるように、インストールアフォーダンス72106に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて(又はインストールを確認するための別のタップ入力などの第2の入力に応じて)、メッセージに関する小さな乗り換えアプリケーションがインストールされ、メッセージアプリケーションインストール/削除インタフェース7270が再表示され、図72AAに示すように、メッセージに関する小さな乗り換えアプリケーションについてのアプリケーション管理リスト72110が、メッセージアプリケーションインストール/削除インタフェース7270に表示される。
図72ABでは、フォーカスセレクタ72114によって示されるように、アプリケーション変更インタフェース72116を表示するためのアフォーダンス72112に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて、図72ACに示すように、アプリケーション変更インタフェース72116が表示される。アプリケーション変更インタフェース72116は、デバイス100にインストールされたメッセージアプリケーションのためのトグル制御子(例えば、トグル制御子72122)及び再配置制御子(例えば、再配置制御子72124)を表示する。
図72ADでは、フォーカスセレクタ72122によって示されるように、アプリケーション管理リスト7276のトグル制御子72118に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて、ステッカアプリケーション管理リスト7276に対応するメッセージのステッカアプリケーションは、表示された状態から(例えば、図72AEのトグル制御子72112の変更された外観によって示されるように)非表示状態に修正される。メッセージのステッカアプリケーションの状態が非表示状態であるとき、メッセージのためのステッカアプリケーションに対応するステッカアプリケーション選択アフォーダンス7232は、(例えば図72AOに示すように)アプリケーション選択エリア7224に表示されなくなる。
図72AFでは、フォーカスセレクタ72124によって示されるように、再配置入力(例えばドラッグ入力)がタッチスクリーン112上の接触によって検出される。再配置入力は、アプリケーション管理リスト72110を選択し(例えば、フォーカスセレクタ72124が、閾値持続時間を超えて増加した時間にわたって再配置制御子72120に対応する場所に近接して存続した後)、図72AF~図72AJに示すように、アプリケーション管理リスト72110を上方の新しい位置にドラッグする。図72AKでは、フォーカスセレクタ72124によって示された接触がタッチスクリーンからリフトオフする。タッチスクリーン112からの接触のリフトオフに応じて、再配置入力が再配置基準を満たした(例えば、フォーカスセレクタ72124の移動が閾値距離を超えて増加した)との判定に従って、アプリケーション管理リスト72110は、新しい位置に投下される。再配置入力の結果として、アプリケーション管理リスト72110に対応する小さな乗り換えアプリケーションのアプリケーション選択アフォーダンス72126が、音楽アプリケーションのアプリケーション選択アフォーダンス7230と予約アプリケーションのアプリケーション選択アフォーダンス72128との間のアプリケーション選択エリア7224に表示される(例えば、図72AOを参照)。
図72ALでは、フォーカスセレクタ72132によって示されるように、タッチスクリーン112上の接触による入力(例えば、タップ入力)は、アプリケーション変更インタフェース72116を終了するためのアフォーダンス72130に対応する場所で検出される。この入力に応じて、図72AMに示すように、アプリケーションインストール/削除インタフェース7270が再表示される。
図72ANでは、フォーカスセレクタ72136によって示されるように、タッチスクリーン112上の接触による入力(例えば、タップ入力)が、アプリケーションインストール/削除インタフェース7270を終了するためのアフォーダンス72134に対応する場所で検出される。この入力に応じて、図72AOに示すように、会話記録7202及びアプリケーションエリア7210がメッセージユーザインタフェース7200に再表示される。
メッセージ翻訳
図72AP~図72DIは、一部の実施形態に係る、メッセージアプリケーション内のメッセージコンテンツを翻訳するための例示的なユーザインタフェースを示す。これらの図におけるユーザインタフェースは、図75A~図75D及び図76A~図76Cのプロセスを含む、以下に記載するプロセスを例示するために使用される。説明の便宜のために、一部の実施形態は、タッチ感知ディスプレイシステム112を有するデバイスに対して実行される動作を参照して説明する。かかる実施形態では、フォーカスセレクタは、任意選択的に、各指又はスタイラス接触、指又はスタイラス接触に対応する代表点(例えば、各接触の面心又は各接触に関連付けられた点)、あるいは、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の面心である。しかし、類似の動作は、任意選択的に、図面に示されたユーザインタフェースをフォーカスセレクタと共にディスプレイ450に表示する間に、タッチ感知面451上の接触を検出したことに応じて、ディスプレイ450と別体のタッチ感知面451とを有するデバイス上で実行される。
図72APに示すメッセージユーザインタフェース7200の会話記録7202において、メッセージの吹き出し72138、72142、72144は、デバイス100の母国語設定と一致する言語のメッセージテキストを有し、メッセージの吹き出し72140は、外国語のテキスト72146を含む、デバイス100によって受信されたメッセージを表示する。
図72AQでは、フォーカスセレクタ72148によって示されるように、メッセージの吹き出し72140に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて、外国語テキスト72146は、図72ARに示すように、メッセージの吹き出し72140内の、外国語テキストの翻訳72150に置き換えられている。
図72ASでは、フォーカスセレクタ72152によって示されるように、メッセージの吹き出し72140に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて、翻訳72150は、図72ATに示すように、メッセージの吹き出し72140内で元の外国語テキスト72146に置き換えられている。
図72AUでは、フォーカスセレクタ72154によって示されるように、メッセージの吹き出し72140に対応する場所で、タッチスクリーン112上の接触による入力(例えば、押圧入力)が検出される。図72AVでは、この接触の特性強度が、強度レベルメータ72155によって示されるように深押しの強度閾値レベルITを超えて増加している。この入力に応じて、メニュー72156が表示される。メニュー72156は、72158で示されるような翻訳オプションを含む。図72AWでは、フォーカスセレクタ72154によって示される接触がタッチスクリーン112からリフトオフした後も、メニュー72156が表示されたままである。
図72AXでは、フォーカスセレクタ72160によって示されるように、翻訳のオプション72158に対応する場所で、タッチスクリーン112上の接触72155による入力(例えば、タップ入力)が検出される。この入力に応じて、外国語テキスト72146は、図72AYに示すように、メッセージの吹き出し72140内で、外国語テキストの翻訳72150に置き換えられている。図72AYでは、メニュー72156内の翻訳のオプション72158の状態が、図72AXに示す「翻訳」状態から「翻訳を元に戻す」状態にトグルしている。
図72AZでは、タッチスクリーン112上の接触による入力(例えば、タップ入力)が、フォーカスセレクタ72162によって示される場所(例えば、メッセージユーザインタフェース7200に表示されたアフォーダンス(例えば、メッセージ、プラッタ、及び/又はメニュー)のいずれにも対応しない場所)で検出される。この入力に応じて、図72BAに示すように、メニュー72156は表示されなくなる。
図72BBでは、フォーカスセレクタ72164によって示されるように、メッセージの吹き出し72140に対応する場所で、タッチスクリーン112上の接触による入力(例えば、押圧入力)が検出される。図72BCでは、この接触の特性強度が、強度レベルメータ72155によって示されるように深押しの強度閾値レベルITを超えて増加している。この入力に応じて、メニュー72156は、翻訳のオプション72158が「翻訳を元に戻す」状態で表示される。図72BDでは、フォーカスセレクタ72164によって示される接触がタッチスクリーン112からリフトオフした後も、メニュー72156が表示されたままである。
図72BEでは、フォーカスセレクタ72166によって示されるように、翻訳のオプション72158に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて、図72BFに示すように、翻訳72150は、メッセージの吹き出し72140内で外国語テキスト72146に置き換えられている。図72BFでは、メニュー72156の翻訳のオプション72158の状態が「翻訳」状態にトグルして戻っている。
図72BGでは、タッチスクリーン112上の接触による入力(例えば、タップ入力)が、フォーカスセレクタ72168によって示される場所(例えば、メッセージユーザインタフェース7200に表示されたアフォーダンス(例えば、メッセージ、プラッタ、及び/又はメニュー)のいずれにも対応しない場所)で検出される。この入力に応じて、図72BHに示すように、メニュー72156は表示されなくなる。
図72BJでは、フォーカスセレクタ72170によって示されるように、メッセージの吹き出し72142に対応する場所で、タッチスクリーン112上の接触による入力(例えば、押圧入力)が検出される。図72BJでは、この接触の特性強度が、強度レベルメータ72155によって示されるように深押しの強度閾値レベルITを超えて増加している。この入力に応じて、メニュー72156が表示される。メッセージの吹き出し72142のテキスト72172には外国語のテキストが含まれていないため、メニュー72156には翻訳のオプションが含まれていない。
図72BLでは、タッチスクリーン112上の接触による入力(例えば、タップ入力)が、フォーカスセレクタ72174によって示される場所(例えば、メッセージユーザインタフェース7200に表示されたアフォーダンス(例えば、メッセージ、プラッタ、及び/又はメニュー)のいずれにも対応しない場所)で検出される。この入力に応じて、図72BMに示すように、メニュー72156は表示されなくなる。
図72BJでは、フォーカスセレクタ72170によって示されるように、メッセージの吹き出し72142に対応する場所で、タッチスクリーン112上の接触による入力(例えば、押圧入力)が検出される。図72BJでは、この接触の特性強度が、強度レベルメータ72155によって示されるように深押しの強度閾値レベルITを超えて増加している。この入力に応じて、メニュー72156が表示される。メッセージの吹き出し72142のテキスト72172には外国語のテキストが含まれていないため、メニュー72156には翻訳のオプションが含まれていない。
図72BNでは、フォーカスセレクタ72176によって示されるように、メッセージの吹き出し72140に対応する場所で、タッチスクリーン112上の接触による入力(例えば、押圧入力)が検出される。図72BOでは、この接触の特性強度が、強度レベルメータ72155によって示されるように深押しの強度閾値レベルITを超えて増加している。この入力に応じて、確認応答プラッタ72178が表示される。確認応答プラッタ72178は、72180で示されるような翻訳のオプションを含む。図72BPでは、フォーカスセレクタ72176によって示される接触がタッチスクリーン112からリフトオフした後も、確認応答プラッタ72178は表示されたままである。
図72BQでは、フォーカスセレクタ72182によって示されるように、翻訳のオプション72180に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この入力に応じて、外国語テキスト72146は、図72BRに示すように、メッセージの吹き出し72140内で、外国語テキストの翻訳72150に置き換えられている。
図72BSでは、タッチスクリーン112上の接触による入力(例えば、タップ入力)が、フォーカスセレクタ72184によって示される場所(例えば、メッセージユーザインタフェース7200に表示されたアフォーダンス(例えば、メッセージ、プラッタ、及び/又はメニュー)のいずれにも対応しない場所)で検出される。この入力に応じて、図72BTに示すように、確認応答プラッタ72178は表示されなくなる。
図72BU-1~図72BU-4は、タップ入力に応じるメッセージ72140のテキストの翻訳を示す。72BU-2では、時間t=0において、フォーカスセレクタ72186によって示されるように、メッセージの吹き出し72140に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。この接触は、図72BU-3及び図72BU-4に示すように、時間ttap後にリフトオフする。このタップ入力に応じて、元の外国語テキスト72146は、図72BU-4に示すように、メッセージの吹き出し72140の翻訳72150と置き換えられる。
図72BV-1~図72BV-5は、長押し入力に応じて、翻訳のオプション72158を含むメニュー72156の表示を示す。図72BV-2では、時間t=0において、フォーカスセレクタ72188によって示されるように、メッセージの吹き出し72140に対応する場所で、タッチスクリーン112上の接触による入力(例えば、押圧入力)が検出される。この接触は、図72BV-4及び図72BV-5に示されるように、ttapより長い時間tlongの後に、タッチスクリーン112からリフトオフする。この接触が時間tlongの間タッチスクリーン112と接触したとき、図72BV-4に示すようにメニュー72156が表示される。
図72BW~図72BXは、ホバー入力に応じる外国語テキスト72146の翻訳を示す。図72BWでは、閾値ホバー距離を超える距離72194でタッチスクリーン112の表面上で入力オブジェクト72192(例えば、指又はスタイラス)が検出される。図72BXに示すように、72192とタッチスクリーン112との間の距離が閾値ホバー距離を下回って減少する(例えば、入力オブジェクト72192とタッチスクリーン112との間の距離72194が閾値ホバー距離よりも小さい)と、外国語テキスト72146は、メッセージの吹き出し72140内の外国語テキストの翻訳72150に置き換えられる。
図72BY~図72CNは、メニュー72156に表示された「全てを翻訳する」のオプション72196を示す。全てを翻訳するオプション72196が選択されると(例えば、接触72198を用いて)、会話記録内のすべての検出された外国語テキスト(例えば、メッセージの吹き出し72140及びメッセージの吹き出し72198内の外国語テキスト)が同時に翻訳される。
図72CO~図72CSは、外国語テキストの一部が強調表示された後に発生するメッセージの吹き出し72140内の外国語テキストの一部の翻訳を示す。図72COでは、フォーカスセレクタ72200によって示されるように、強調表示入力(例えば、ドラッグ入力)がタッチスクリーン112上の接触によって検出される。強調表示入力は、(例えば、強調表示されているテキストに平行な及び/又はテキストを横切る経路に沿って)図72COに示すような第1の場所から、図72CRに示すような第2の場所に接触が移動すると、強調表示された領域72202によって示されるように、メッセージの吹き出し72140内のテキストの一部を徐々に選択する。図72CSに示すように、タッチ感知面112からの接触のリフトオフに応じて、強調表示された領域72202に対応する外国語テキストは、翻訳されたテキスト72204に置き換えられる(一方、メッセージの吹き出し72140中の強調表示された領域72202外の外国語テキストは、未翻訳のままである)。
図72CT~図72CSは、外国語テキストの一部が強調表示されるにつれて、徐々に生じるメッセージの吹き出し72140内の外国語テキストの一部の翻訳を示す。図72CUでは、フォーカスセレクタ72206によって示されるように、強調表示入力(例えば、ドラッグ入力)がタッチスクリーン112上の接触によって検出される。強調表示入力は、(例えば、強調表示されているテキストに平行な及び/又はテキストを横切る経路に沿って)図72CVに示すような第1の場所から、図72CXに示すような第2の場所に接触が移動すると、強調表示された領域72208によって示されるように、メッセージの吹き出し72140内のテキストの一部を徐々に選択する。図72CV~図72CXに示すように、強調表示された領域72208が拡張すると、強調表示された領域内のテキストの翻訳されたバージョンが72210で表示される。図72CVでは、強調表示された領域72208は単一の単語を含み、72210で単一の単語の翻訳が表示される。図72CWでは、強調表示された領域72208は2つの単語を含み、72210で2つの単語の翻訳が表示される。図72CXでは、強調表示された領域72208は3つの単語を含み、72210で3つの単語の翻訳が表示される。
図72CY~図72DDは、軽押し入力に応じて翻訳されたテキストの一時的な表示を示す。図72CZでは、フォーカスセレクタ72190によって示されるように、メッセージの吹き出し72140に対応する場所で、タッチスクリーン112上の接触による入力(例えば、押圧入力)が検出される。図72DAでは、接触の特性強度が、強度レベルメータ72155によって示されるようにヒント強度閾値レベルITを超えて増加している。メッセージの吹き出し72140は、図72CY~図72DAに外国語テキスト72146を表示する。図72DBでは、この接触の特性強度が、強度レベルメータ72155によって示されるように、軽押し強度閾値レベルITを超えて増加している。接触の特性強度が軽押し強度閾値レベルITを超え続けている間に、外国語テキストの翻訳72150がメッセージの吹き出し72140に表示される。図72DCでは、接触の特性強度が軽押し強度閾値レベルITを下回ったとの判定に従って、外国語テキスト72146がメッセージの吹き出し72140に再表示される。
図72DD~図72DIは、深押し入力に応じて翻訳されたテキストの永続的な表示を示す。図72DEでは、フォーカスセレクタ72214によって示されるように、メッセージの吹き出し72140に対応する場所で、タッチスクリーン112上の接触による入力(例えば、押圧入力)が検出される。図72DFでは、接触の特性強度が、強度レベルメータ72155によって示されるようにヒント強度閾値レベルITを超えて増加している。メッセージの吹き出し72140は、図72DD~図72DFに外国語テキスト72146を表示する。図72DGでは、この接触の特性強度が、強度レベルメータ72155によって示されるように、軽押し強度閾値レベルITを超えて増加している。この接触の特性強度が軽押し強度閾値レベルITを超えて増加するという判定に従って、外国語テキストの翻訳72150がメッセージの吹き出し72140に表示される。図72DHでは、接触の特性強度が、強度レベルメータ72155によって示されるように、深押し強度閾値レベルITを超えて増加するという判定に従って、外国語テキストの翻訳72150が、(例えば、図72DIに示すように、フォーカスセレクタ72214によって示される接触がタッチスクリーン112からリフトオフした後に続いて)メッセージの吹き出し72140に永続的に表示される。更に、接触の特性強度が深押しの強度閾値レベルITDを超えて増加したという判定に従って、翻訳されたテキスト72150の外観を変更して(例えば、図72DGの翻訳されたテキスト72150の視覚的外観と比較して)、翻訳の永続的性質のインジケーションをユーザに提供する。
吹き出しの接続
図72DJ~図72EVは、一部の実施形態に係る、メッセージアプリケーション内のメッセージ吹き出しを接続するための例示的なユーザインタフェースを示す。説明の便宜のために、一部の実施形態は、タッチ感知ディスプレイシステム112を有するデバイスで実行される動作を参照して説明する。かかる実施形態では、フォーカスセレクタは、任意選択的に、各指又はスタイラス接触、指又はスタイラス接触に対応する代表点(例えば、各接触の面心又は各接触に関連付けられた点)、あるいは、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の面心である。しかし、類似の動作は、任意選択的に、図面に示されたユーザインタフェースをフォーカスセレクタと共にディスプレイ450に表示する間に、タッチ感知面451上の接触を検出したことに応じて、ディスプレイ450と別体のタッチ感知面451とを有するデバイス上で実行される。
図72DJにおいて、ユーザインタフェース7200は、メッセージセッションに含まれるポータブル多機能デバイス100-Aのユーザ(「Ray」)及びポータブル多機能デバイス100-Bのユーザ(「Riley」)を含む、対応するメッセージセッションの参加者からのメッセージを含む会話記録7202を備える。デバイス100-A上で、ユーザ「Ray」は、アバター72216によって表される。メッセージ72218は、Rayとして識別されるユーザによって操作される遠隔デバイス100-Bからデバイス100-Aによって受信されたメッセージであり、メッセージ72224は、デバイス100-Aによって、Rileyにより操作される遠隔デバイス100-Bに送信されたメッセージである。
図72DJ~図72EDは、(例えば、会話記録7202に表示されたメッセージの吹き出しを接続するための)メッセージコンテンツをグループ化するために使用される入力を示す。一部の実施形態では、グループ化選択入力は、メッセージユーザインタフェースに表示される少なくとも1つのメッセージ(会話記録内の1つ以上の受信メッセージ、及び/又は会話記録内の1つ以上の送信メッセージ)を有するメッセージユーザインタフェース内の第1のコンテンツ(会話記録における1つ以上の受信メッセージ、会話記録における1つ以上の送信メッセージ、及び/又はメッセージ入力エリアに入力された入力コンテンツ)をグループ化する。グループ化選択入力の検出に応じて、第1のコンテンツ及び少なくとも1つのメッセージを含むグループが作成される。
一部の実施形態では、メッセージの吹き出しを接続するための入力は、図72DN~図72DR及び図72DS~図72DUに示すように、グループ化モードでメッセージの吹き出しを入れるための入力を含んでいる。一部の実施形態では、メッセージの吹き出しを接続するための入力は、図72DO~図72DQ及び図72DV~図72DYに示すように、メッセージの吹き出しを移動させるための入力を含む。一部の実施形態では、メッセージの吹き出しを接続するための入力は、図72EA~図72EDに示すように、メッセージの吹き出し間の接続を描画するための入力を含んでいる。
一部の実施形態では、グループ化選択入力は、第1のコンテンツ(例えば、メッセージの吹き出し72218)に対応する場所で検出された入力であり、このグループ化選択入力は、メッセージユーザインタフェース7200内で、(例えば、図72DO~図72DQに示すように)第1のコンテンツを第1の場所から第2の場所に移動する。一部の実施形態では、グループ化選択入力は、1つ以上のグループ化基準を満たす距離だけメッセージをある方向(例えば、左から右へ、又は右から左へ)にドラッグする。図72DO~図72DYは、第1のメッセージの吹き出し72218及び第2のメッセージの吹き出し72224を(例えば、メッセージユーザインタフェース7200の中心に近接して)グループ化位置にドラッグすることを含むグループ化選択入力を示す。
図72DKでは、フォーカスセレクタ72220によって示されるように、メッセージの吹き出し72218に対応する場所で、タッチスクリーン112上の接触によるグループ化モード入力(例えば、押圧入力)が検出され、図72DMに示すように、接触の特性強度が強度レベルメータ72155によって示される深押し強度閾値レベルITを超えて増加するまで、図72DK~図72DMに示すように接触の特性強度は徐々に増加する。接触の特性強度が深押し強度閾値レベルITを超えて上昇したという判定に従って、メッセージの吹き出し72218はグループ化モードに移行する。一部の実施形態では、メッセージの吹き出し72218がグループ化モードに移行すると、メッセージの吹き出し72218は、会話記録7202から「切り離され」、メッセージの吹き出し72218が会話記録7202内で移動できるようになる。一部の実施形態では、メッセージの吹き出し72218がグループ化モードにあることを示すために、デバイスは、メッセージが記録から切り離されたというインジケーション(変更された背景、触覚フィードバック、変更された記録特性、及び/又は変更されたメッセージ吹き出し特性など)を提供する。例えば、メッセージ吹き出しの輪郭が変更され(例えば、図72DNに示されるように、より太い線で示される)、吹き出しサイズが増加され、及び/又はメッセージ吹き出し内のテキストの外観が変更されて、そのメッセージ吹き出し72218はグループ化モードにあるという視覚的なインジケーションを提供する。メッセージ吹き出し72218をグループ化モードに移行させる入力によって、メッセージ吹き出しがグループ化モードにあるときに、メッセージ吹き出し72218に対応する場所でのスワイプ入力がグループ化機能を有することができ、メッセージ吹き出しがグループ化モードにないときに、代替機能(例えば、1つ以上の表示されたメッセージ吹き出しを水平方向にドラッグして、1つ以上のメッセージの吹き出しに対応する時間を顕示化する)を有することができる。
一部の実施形態では、グループ化モード入力を使用してメッセージ吹き出しをグループ化モードに移行させることなく、本明細書で説明されるようなグループ化選択入力が行われる。
一部の実施形態では、グループ化選択入力を検出することには、第1のコンテンツに対応する場所での第1の入力(例えば、深押し入力)と、少なくとも1つのメッセージに対応する場所にある第2の入力(例えば、深押し入力)と、を検出することが含まれる。
図72DOでは、タッチスクリーン112上の接触によるグループ化選択入力(例えば、ドラッグ入力)が、フォーカスセレクタ72222によって示されるように、メッセージ吹き出し72218に対応する場所で検出される。この入力は、図72DO~図72DQに示すように、メッセージ吹き出し72218をグループ化位置(例えば、メッセージユーザインタフェース7200の中心に近接して)にドラッグする。図72DRでは、メッセージ吹き出し72218の移動がグループ化基準を満たした(例えば、メッセージ吹き出しがグループ化位置に移動した)後、フォーカスセレクタ72222によって示される接触がタッチスクリーン112からリフトオフする。一部の実施形態では、メッセージ吹き出し72218の移動がグループ化基準を満たした(例えば、メッセージ吹き出しがグループ化位置に移動した)という判定に従って、メッセージ吹き出し72218の視覚的外観が変更され、及び/又は触覚効果が生じて、メッセージ吹き出しがグループ化位置に移動したことをユーザに示す。
図72DSでは、フォーカスセレクタ72226によって示されるように、メッセージ吹き出し72224に対応する場所で、タッチスクリーン112上の接触によるグループ化モード入力(例えば、押圧入力)が検出され、図72DTに示すように、接触の特性強度が強度レベルメータ72155によって示される深押し強度閾値レベルITを超えて増加するまで、図72DS及び図72DTに示されるように、接触の特性強度は徐々に増加する。接触の特性強度が深押し強度閾値レベルITを超えて増加したという判定に従って、メッセージの吹き出し72224はグループ化モードに移行する。
図72DVでは、タッチスクリーン112上の接触によるグループ化選択入力(例えば、ドラッグ入力)が、フォーカスセレクタ72228によって示されるように、メッセージ吹き出し72224に対応する場所で検出される。このグループ化選択入力は、図72DV~図72DXに示すように、メッセージ吹き出し72224をグループ化位置(例えば、メッセージユーザインタフェース7200の中心に近接して)にドラッグする。図72DYにおいて、メッセージ吹き出し72218の移動がグループ化基準を満たした(例えば、メッセージ吹き出しがグループ化位置に移動した)後、フォーカスセレクタ72228によって示される接触がタッチスクリーンからリフトオフする。一部の実施形態では、メッセージ吹き出し72224の移動がグループ化位置に移動したという判定に従って、メッセージ吹き出し72224の視覚的外観が変更され、及び/又は、触覚効果が生じて、メッセージ吹き出しがグループ化位置に移動したことをユーザに示す。接触のリフトオフに応じて、グループ化インジケータ72230により示されるように、(例えば、2つ以上のメッセージ吹き出しがグループ化選択入力によってグループ化位置にドラッグされたという判定に従って)メッセージ吹き出し72218及び72224のグループが形成される。
一部の実施形態では、グループ化の指標は、第1のコンテンツ(例えば、メッセージの吹き出し72218)に対応する第1の場所と、少なくとも1つのメッセージ(例えば、メッセージの吹き出し72224)に対応する第2の場所に、表示される。例えば、グループ化の指標は、第1のコンテンツを少なくとも1つのメッセージと接続する線(例えば、グループ化インジケータ72230又は72236)と、領域指定子(例えば、第1のコンテンツ及び少なくとも1つのメッセージを囲むボックスなどの形状)と、及び/又は複数のマーカ(例えば、第1のコンテンツに対応する場所に表示される第1のマーカおよび少なくとも1つのメッセージに対応する場所に表示される第2のマーカ)とを含む。
図72EA~図72EDは、第1のメッセージ吹き出し72218から第2のメッセージ吹き出し72224へのスワイプ入力を含むグループ化選択入力を示す。図72EAでは、タッチスクリーン112上の接触によるグループ化選択入力(例えば、スワイプ入力)が、フォーカスセレクタ72232によって示されるように、メッセージ吹き出し72218に対応する場所で検出される。一部の実施形態では、グループ化選択入力は、メッセージ吹き出し72218がグループ化モードに移行した後に検出される。グループ化選択入力が受信されると、図72EB及び図72ECに示すように、グループ化選択入力の経路を示すために線72234が表示される。図72EDでは、フォーカスセレクタ72232によって示される接触がタッチ感知面112からリフトオフされ、線72234がグループ化インジケータ72236に置き換えられている。
図72EEは、ポータブル多機能デバイス100-Bに表示された(グループインジケータ72236によって示される)グループ内のメッセージ72218及び72224を示す。
一部の実施形態では、作成されたグループに追加する第2のコンテンツを示す第2の入力が検出される。例えば、図72EFにおいて、テキスト入力72238は、デバイス100-Bに表示されたメッセージ入力エリア72240に入力されている。タッチスクリーン112上の接触による入力(例えば、タップ入力)は、フォーカスセレクタ72244によって示されるように、送信アフォーダンス72242に対応する場所で検出される。図72EGでは、テキスト入力72238は、会話記録7202において、送信メッセージとしてメッセージ吹き出し72246に表示される。
図72EHでは、メッセージ吹き出し72246がグループ化モード状態で示されている。例えば、メッセージ吹き出し72246をグループ化モード状態に移行させるために、図72DK~図72DNに関して説明したグループ化モード入力が提供される。
図72EIでは、タッチスクリーン112上の接触によるグループ化選択入力(例えば、ドラッグ入力)が、フォーカスセレクタ72248によって示されるように、メッセージ吹き出し72246に対応する場所で検出される。グループ化選択入力は、図72EI~図72EKに示すように、メッセージ吹き出し72246を(例えば、メッセージユーザインタフェース7200の中心に近接して)グループ化位置の方へドラッグする。図72ELにおいて、メッセージ吹き出し72246の移動がグループ化基準を満たした(例えば、メッセージ吹き出しがグループ化位置に移動した)後、フォーカスセレクタ72248によって示される接触がタッチスクリーンからリフトオフする。接触のリフトオフに応じて、グループ化基準が満たされたという判定に従って、グループ化インジケータ72236によって示されるように、メッセージ吹き出し72246がメッセージ吹き出し72218及び72224を有するグループに追加される。
図72EMは、ポータブル多機能デバイス100-Aに表示された(グループインジケータ72236によって示される)グループ内のメッセージ72218、72224、及び72246を示す。テキスト入力72250は、デバイス100-A上に表示されたメッセージ入力エリア7204に入力されている。メッセージ入力エリア7204に入力されたテキストのサイズによって、グループインジケータ72236により示されるグループ内のメッセージ吹き出しは上方に移動する。グループの最上部のメッセージ吹き出し72218を表示し続けるために、最上部のメッセージの吹き出し72218が、グループではないメッセージ72258、72260、及び72262(グループでないメッセージと重なっているグループメッセージとの間の混同を避けるために、ディスプレイの灰色のエリアに表示される)に重なって表示される。
一部の実施形態では、第1のコンテンツは、メッセージ入力エリアに入力された入力コンテンツ(例えば、入力コンテンツを含むメッセージを送信する前に受信された入力)であり、(例えば、図72EM~図72ERに示すように)別のデバイスにメッセージを送信する送信入力の前に、グループ化選択入力が検出される。
図72ENでは、フォーカスセレクタ72256によって示されるように、送信アフォーダンス72254に対応する場所で、タッチスクリーン112上の接触によるグループ化選択入力(例えば、ドラッグ入力)が検出される。グループ化選択入力は、図72EN及び図72EOに示すように、メッセージ吹き出し72264をグループメンバの方へ(例えば、グループ内のメッセージ吹き出しと部分的に重なる場所へ)ドラッグする。図72EPでは、メッセージ吹き出し72264の移動がグループ化基準を満たした(例えば、メッセージ吹き出しがメッセージ吹き出し72246と部分的に重なる場所に移動した)後、フォーカスセレクタ72256によって示された接触が、タッチスクリーン112からリフトオフする。図72EQでは、フォーカスセレクタ72266によって示されるように、送信アフォーダンス72254に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。図72ERに示すように、この入力に応じて、グループ化インジケータ72236によって示されるように、メッセージ吹き出し72264がメッセージ吹き出し72218、72224及び72246を有するグループに追加される。
一部の実施形態では、フォーカスセレクタ72256によって示される接触のリフトオフに応じて、グループ化基準が満たされたという判定に従って、グループ化インジケータ72236によって示されるように、メッセージ吹き出し72264が、メッセージ吹き出し72218、72224及び72246を有するグループに追加される。
図72ESは、フォーカスセレクタ72268によって示される場所(例えば、メッセージユーザインタフェース7200に表示されたメッセージ吹き出し又はアフォーダンスのいずれにも対応しない場所)におけるタッチスクリーン112上の接触による入力(例えば、タップ入力)を示している。この入力に応じて、グループ化されたメッセージは、グループ化されていないメッセージと重ならなくなる(例えば、メッセージ吹き出し72218は、メッセージ吹き出し72218がメッセージ吹き出し72258と重ならなくなるように、表示されなくなる)。図72EUは、フォーカスセレクタ72270によって示されるように、グループインジケータ72236に対応する場所でタッチスクリーン112上の接触による入力(例えば、タップ入力)を示す。この入力に応じて、グループ化されたメッセージ吹き出しは、グループ化されていないメッセージに重なって表示され、図72EVで、グループ化されたメッセージ吹き出し72218、72224、72246及び72264が同時に表示される。
メッセージのフラグ立て
図72EW~図72FMは、一部の実施形態に係る、メッセージ吹き出しにフラグを立てるための例示的なユーザインタフェースを示す。例えば、会話記録7202内のメッセージ吹き出しを指定する入力に応じて、メッセージ吹き出しにフラグが立てられる(例えば、メッセージ吹き出しは、会話記録7202の最上部などのディスプレイ上の固定場所に表示される)。説明の便宜のために、一部の実施形態は、タッチ感知ディスプレイシステム112を有するデバイスに対して実行される動作を参照して説明する。かかる実施形態では、フォーカスセレクタは、任意選択的に、各指又はスタイラス接触、指又はスタイラス接触に対応する代表点(例えば、各接触の面心又は各接触に関連付けられた点)、あるいは、タッチ感知ディスプレイシステム112上で検出された2つ以上の接触の面心である。しかし、類似の動作は、任意選択的に、図面に示されたユーザインタフェースをフォーカスセレクタと共にディスプレイ450に表示する間に、タッチ感知面451上の接触を検出したことに応じて、ディスプレイ450と別体のタッチ感知面451とを有するデバイス上で実行される。
図72EWにおいて、ユーザインタフェース7200は、対応するメッセージセッションの参加者からのメッセージを含む会話記録7202を備えている。会話記録7202は、メッセージ吹き出し72218内に表示された受信メッセージを含む。
図72EXでは、フォーカスセレクタ72274によって示されるように、メッセージ吹き出し72272に対応する場所で、タッチスクリーン112上の接触によるフラグ立てモード入力(例えば、押圧入力)が検出され、図72EZに示すように、接触の特性強度が強度レベルメータ72155によって示される深押し強度閾値レベルITを超えて増加するまで、図72EX~図72EZに示すように、接触の特性強度は徐々に増加する。接触の特性強度が深押し強度閾値レベルITを超えて増加したという判定に従って、メッセージ吹き出し72272はフラグ立てモードに移行する。一部の実施形態では、メッセージ吹き出し72272がフラグ立てモードに移行すると、メッセージ吹き出し72272は、メッセージ吹き出し72272が会話記録7202内で移動できるように会話記録7202から「切り離される」。一部の実施形態では、メッセージの吹き出し72272がグループ化モードにあることを示すために、デバイスは、メッセージが記録から切り離されたというインジケーション(変更された背景、触覚フィードバック、変更された記録特性、及び/又は変更されたメッセージ吹き出し特性など)を提供する。例えば、メッセージ吹き出しの輪郭が変更され(例えば、図72FAに示されるように、より太い線で示される)、吹き出しサイズが増加され、及び/又はメッセージ吹き出し内のテキストの外観が変更されて、そのメッセージ吹き出し72272はフラグ立てモードにあるという視覚的なインジケーションを提供する。
一部の実施形態では、本明細書に記載されるフラグ立て選択入力は、フラグ立てモード入力を使用してメッセージ吹き出しをフラグ立てに遷移させることなく、生じる。
一部の実施形態では、会話記録7202内のメッセージ(例えば、メッセージ吹き出し72272内のメッセージ)を指定する入力(例えば、フラグ立てモード入力及び/又はフラグ立て選択入力)に応じて、メッセージは会話記録7202の最上部などのディスプレイ112上の固定された場所に表示される。一部の実施形態では、メッセージを指定する入力は、メッセージの吹き出し上のタップ入力であり、これに続いて、メニュー項目の選択、プレスアンドホールド入力(例えば、接触がタッチスクリーン112と接触したままである所定の持続時間の基準を満たす入力)、及び/又は押圧入力(例えば、軽押し強度閾値レベルIT、及び/又は、深押し強度閾値レベルITなどの、閾値強度レベルを超える接触の特性強度を有する入力)が行われる。一部の実施形態では、この入力は、ディスプレイ上の固定場所にメッセージをドラッグするドラッグ入力である。一部の実施形態では、入力が閾値距離を超えてメッセージを移動すると、メッセージは会話記録7202から「切り離される」。一部の実施形態では、入力を検出したことに応じて、メッセージは会話記録から切り離され、及び/又は、ディスプレイ上の固定場所に自動的に移動される(例えば、メッセージがディスプレイ上の元の場所からディスプレイ上の固定場所に移動するアニメーションが示される)。
図72FBでは、フラグ立て選択入力(例えば、ドラッグ入力)は、フォーカスセレクタ72276によって示されるように、タッチスクリーン112上の接触によって検出される。フラグ立て選択入力は、図72FC~図72FEに示すように、メッセージ吹き出し72272を会話記録7202の最上部にドラッグする。一部の実施形態では、メッセージ吹き出し72218のプレースホルダ72278が、会話記録7202に表示される。図72FFでは、フォーカスセレクタ72276によって示される接触は、タッチスクリーン112からリフトオフする。タッチスクリーン112からの接触のリフトオフに応じて、フラグ立て選択入力がフラグ立て基準(例えば、フォーカスセレクタ72276の移動が閾値距離を超えて増加した)を満たしたという判定に従って、メッセージ吹き出し72272は会話記録7202の最上部に投下される。
図72FFでは、メッセージ吹き出し72272は、会話記録7202の最上部のメッセージバナー72280に表示される。図72ALでは、フォーカスセレクタ72132によって示されるように、タッチスクリーン112上の接触による入力(例えば、タップ入力)は、アプリケーション変更インタフェース72116を終了するためのアフォーダンス72130に対応する場所で検出される。この入力に応じて、図72AMに示すように、アプリケーションインストール/削除インタフェース7270が再表示される。
一部の実施形態では、メッセージがフラグ立てされてからの経過時間を示すタイマー72282が表示される。
一部の実施形態では、フラグ立てメッセージに応答するメッセージが送信されると、フラグ付きメッセージはフラグが設定されず、記録内の前の場所に戻る。例えば、図72FGでは、テキスト入力72284がメッセージ入力エリア7204に入力されている。フォーカスセレクタ72286によって示されるように、送信アフォーダンス72290に対応する場所で、タッチスクリーン112上の接触による入力(例えば、タップ入力)が検出される。図72FHでは、テキスト入力72284は、会話記録7202において、送信メッセージとして、メッセージ吹き出し72292に表示される。
一部の実施形態では、フラグ立てメッセージをその前の位置に戻す(例えば、メッセージのフラグ立てを解除する)第2の入力(例えば、メッセージをドラッグして、メッセージにフラグを立てるためにメッセージがドラッグされた方向とは反対の方向にドラッグする)が受信される。例えば、図72FIでは、フラグ立て選択解除入力(例えば、ドラッグ入力)は、フォーカスセレクタ72294によって示されるように、タッチスクリーン112上の接触によって検出される。フラグ立て選択入力は、図72FI~図72FLに示すように、メッセージ吹き出し72272を(例えば、プレースホルダ72278によって示される)その元の場所の方へドラッグする。図72FMでは、フォーカスセレクタ72294によって示された接触がタッチスクリーン112からリフトオフする。タッチスクリーン112からの接触のリフトオフに応じて、フラグ立て選択入力がフラグ立て解除基準(例えば、フォーカスセレクタ72294の移動が閾値距離を超えて増加した)を満たしたという判定に従って、メッセージ吹き出し72272は、会話記録7202内の元の場所に投下される。
一部の実施形態では、(例えば、メッセージ72272がフラグ立て位置に表示されている間に、及び/又はフラグ立て選択解除入力の前に)フラグ立てモード入力が受信される。
図73A~図73Dは、一部の実施形態に係る、メッセージユーザインタフェースに表示されるアプリケーションユーザインタフェースを使用してアプリケーション間をナビゲートする方法7300を示すフロー図である。方法7300は、ディスプレイとタッチ感知面とを有する電子デバイス(例えば、図3のデバイス300、図1Aのポータブル多機能デバイス100)で実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法7300におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
デバイスは、ディスプレイ(例えば、タッチスクリーン112)上に、メッセージユーザインタフェース(図72Aの7200)を表示し(7302)、このメッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録7202と、メッセージ入力エリア7204と、アプリケーションエリア7210と、アプリケーションエリア表示アフォーダンスと、を含んでいる。一部の実施形態では、アプリケーションエリア7210は、会話記録7202及びメッセージ入力エリア7204とは別の、メッセージユーザインタフェース7200内の予め定義されたエリアであり、キーボード7212か、又は、メッセージアプリケーションのメッセージユーザインタフェース7200内で動作する1つ以上のアプリケーションに対応するアクティブ化可能なオブジェクト(例えば、図72Cのオブジェクト7234~7240)を表示するように構成されている。
メッセージユーザインタフェース7200を表示している間に、デバイスは、アプリケーションエリア表示アフォーダンス7208をアクティブ化する第1の入力(例えば、図72Bのフォーカスセレクタ7220によって示される場所での接触によるタップ入力)を検出する(7304)。
アプリケーションエリア表示アフォーダンス7208をアクティブ化する第1の入力を検出したことに応じて、第1の入力が検出された時点でアプリケーションエリアがキーボード7212を表示しているという判定に従って、デバイスは、アプリケーションエリア内のキーボード7212の表示を、複数のスクロール可能なアプリケーション選択アフォーダンス(例えば、7226~7232)を表示するアプリケーション選択エリア7224(図72C)と、第1のアプリケーションの1つ以上のアクティブ化可能オブジェクト(例えば、7234~7240)を表示するアプリケーション入力エリア7222と、の同時表示に置き換える(7306)。一部の実施形態では、複数のスクロール可能なアプリケーション選択アフォーダンスは、単一の水平な列に配置される。複数のスクロール可能なアプリケーション選択アフォーダンスは、現在選択されている第1のアプリケーション(例えば、アプリケーション入力エリア7222に表示されたアクティブ化可能なオブジェクト7234~7240を含む音楽アプリケーション)に対応する第1のアプリケーション選択アフォーダンス(例えば、7230)を含んでいる。各アプリケーション選択アフォーダンス(例えば、アプリケーション選択アフォーダンス7230)は、各々第1のサイズを有する。
アプリケーション選択エリア7224とアプリケーション入力エリア7222とを同時に表示している間に、デバイスは、ディスプレイ上でのアプリケーション選択エリア7224の第1方向における、フォーカスセレクタ7242の移動(図72D)に対応するタッチ感知面上の接触の移動を含む第2の入力(タッチスクリーン112上のアプリケーション選択エリア内の接触による水平ドラッグ又はスワイプジェスチャ)を検出する(7308)。
第2の入力を検出したことに応じて、デバイスは、第1の方向に複数のアプリケーション選択アフォーダンスをスクロール(7310)し(例えば、図72D~図72Gに示すように)、第2のアプリケーション選択アフォーダンス(例えば、図72Gのアプリケーション選択アフォーダンス7246)を表示する。一部の実施形態では、第2のアプリケーション選択アフォーダンスは、スクロールする前には表示されていなかったものである。
第2のアプリケーション選択アフォーダンス及び第1のアプリケーションの1つ以上のアクティブ化可能なオブジェクトをメッセージユーザインタフェースに表示している間に、デバイスは、第2のアプリケーション選択アフォーダンス(例えば、7426)をアクティブ化する第3の入力(例えば、図72Hのフォーカスセレクタ7250によって示される場所の接触によるタップ入力)を検出する(7312)。
第2のアプリケーション選択アフォーダンスをアクティブ化する第3の入力を検出したことに応じて、デバイス(7314)は、第1のアプリケーションの1つ以上のアクティブ化可能なオブジェクト(例えば、7234~7240)を表示することを停止し、第2のアプリケーション選択アフォーダンスに対応する第2のアプリケーションの1つ以上のアクティブ化可能なオブジェクトをアプリケーション入力エリアに表示する(例えば、図72Iに示すように、デバイスは予約アプリケーションのアクティブ化可能なオブジェクト7252及び7254を表示する)。
複数のスクロール可能なアプリケーション選択アフォーダンスを表示するアプリケーション選択エリアを表示することによって、ユーザは、追加のアプリケーション選択アフォーダンスへの迅速なアクセスを提供されると同時に、限られた数の最初に表示されたアプリケーション選択アフォーダンスを提示されるものである。限られた数の最初に表示されたアプリケーション選択アフォーダンスを提示することにより、ユーザは(例えば、予め選択されたアプリケーション及び/又は最も使用されたアプリケーションの短いリストの中から)アプリケーションを迅速に選択することができ、アプリケーションアフォーダンスの誤った選択の可能性を低減する。ユーザがデバイスをより迅速かつ効率的に使用することができれば、電力使用量が削減され、デバイスのバッテリ寿命が向上することになる。
一部の実施形態では、スクロールするアプリケーション選択アフォーダンスの少なくとも一部について、第1の方向に複数のアプリケーション選択アフォーダンスをスクロールしながら、デバイスは、各アプリケーション選択アフォーダンスのサイズを、各第1のサイズから、各第1のサイズよりも大きな各第2のサイズに増加させる(7316)。例えば、アプリケーション選択アフォーダンスのスクロールが行われる間に、アプリケーション選択アフォーダンス7230は、図72Cに示すような第1のサイズから、図72Eに示すような第2のサイズに増加する。一部の実施形態では、各アプリケーション選択アフォーダンスのサイズを増加させることには、アニメーション化された遷移を表示することが含まれる(例えば、各アプリケーション選択アフォーダンスのサイズを各第1のサイズから各第2のサイズに徐々に増加させる)。一部の実施形態では、すべての表示されるアプリケーション選択アフォーダンスは、スクロール中に一時的にサイズが増加する(例えば、図72Eに示すように、アプリケーション選択アフォーダンス7232、7230、及び7228は、図72Cの各サイズに対してサイズが増加したものである)。一部の実施形態では、アプリケーション選択エリア7224のサイズは、スクロール中に一時的に増加する。一部の実施形態では、1つ以上のアプリケーション選択アフォーダンスのサイズの増加の大きさは、スクロールが生じる速度に依存する(例えば、スクロール速度が大きくなれば、1つ以上のアプリケーション選択アフォーダンスのサイズの増加がより大きくなる(例えば比例的に大きくなる))。スクロール中のアプリケーション選択アフォーダンスのサイズを大きくすると、メッセージアプリケーション内で選択して使用したいアプリケーションに対応するアプリケーション選択アフォーダンスをユーザが見出し易くなる。
複数のスクロール可能なアプリケーション選択アフォーダンスをスクロールしながら、各アプリケーション選択アフォーダンスのサイズを大きくすると、各アプリケーション選択アフォーダンスの可視性が増大する。アプリケーション選択アフォーダンスの可視性を増大させることは、(例えば、アプリケーション選択アフォーダンスに対応するより大きな選択可能なエリアを提供することにより)所望のアプリケーション選択アフォーダンスをユーザが選択し易くなることによってデバイスの操作性を向上させ、(例えば、所望のアプリケーション選択アフォーダンスに対応するアイコンをユーザが見え易くすることによって)所望のアプリケーション選択アフォーダンス以外のアプリケーション選択アフォーダンスが誤って選択される可能性を低減することになる。
一部の実施形態では、複数のアプリケーション選択アフォーダンスを第1の方向にスクロールした後、デバイスは、各アプリケーション選択アフォーダンスのサイズを各第2のサイズから各第1のサイズに縮小する(7318)。例えば、アプリケーション選択アフォーダンスをスクロールした後、アプリケーション選択アフォーダンス7230は、図72Eに示すような第2のサイズから、図72Gに示すような最初のサイズに縮小する。一部の実施形態では、スクロールが停止するとき、又はスクロールが停止した後の所定の時間内に、各アプリケーション選択アフォーダンスのサイズが縮小する。一部の実施形態では、各アプリケーション選択アフォーダンスのサイズを縮小することの中には、アニメーション化された遷移を表示する(例えば、各アプリケーション選択アフォーダンスのサイズを各第2のサイズから各第1のサイズに徐々に縮小する)ことが含まれる。
複数のスクロール可能なアプリケーション選択アフォーダンスをスクロールした後、各アプリケーション選択アフォーダンスのサイズを縮小することにより、同時に、より多数のアプリケーション選択アフォーダンスを表示することが可能になる。同時に表示されるアプリケーション選択アフォーダンスの数を増大すれば、(例えば、入力をスクロールせずに選択できるアプリケーション選択アフォーダンスの数を増大することによって)ユーザとデバイスの相互作用をより効率的にすることができる。
一部の実施形態では、複数のアプリケーション選択アフォーダンスを第1の方向にスクロールしている間に、デバイスは、アプリケーション入力エリアに示されるアプリケーション選択アフォーダンスの数を、アプリケーション選択アフォーダンスの第1の数(例えば、図72Dに示される4つのアプリケーション選択アフォーダンス7226、7228、7230、及び7232)から、アプリケーション選択アフォーダンスの、第1の数より少ない第2の数(例えば、図72Eに示す3つのアプリケーション選択アフォーダンス7228、7230、及び7232)に減少させる(7320)。
複数のスクロール可能なアプリケーション選択アフォーダンスをスクロールしながら表示されるアプリケーション選択アフォーダンスの数を低減することにより、所望のアプリケーション選択アフォーダンス以外のアプリケーション選択アフォーダンスが誤って選択される可能性が、(例えば、アプリケーション選択アフォーダンスの中心間の距離を増大することにより)低減される。
一部の実施形態では、第1の方向に複数のアプリケーション選択アフォーダンスをスクロールした後、デバイスは、複数のアプリケーション選択アフォーダンスを第1の方向にスクロールする前に表示された複数のスクロール可能なアプリケーション選択アフォーダンスのうちの少なくとも1つのアプリケーション選択アフォーダンスの表示を停止する(7320)。例えば、スクロールする前に図72Cに示されたアプリケーション選択アフォーダンス7228は、スクロール後は、図72Gに示すように、もはやアプリケーション選択エリア7224に表示されなくなる。
スクロール後に少なくとも1つのアプリケーション選択アフォーダンスの表示を停止することにより、少なくとも1つのアプリケーション選択アフォーダンスの表示を停止することによって利用可能になる表示空間内で、追加のアプリケーション選択アフォーダンスがユーザに見えるようになる。これによって、(例えば、スクロールプロセスにより表示及び選択することができるアプリケーション選択アフォーダンスの数を増大することにより)デバイスの操作性が向上する。
一部の実施形態では、アプリケーション入力エリア7222が第1のサイズで表示されている間に、デバイス(7324)はアプリケーション入力エリアにアプリケーション入力エリア拡張アフォーダンス(例えばシェブロン7260)を表示し、アプリケーション入力エリア拡張アフォーダンス7260をアクティブ化する第4の入力を検出する。例えば、第4の入力の中には、アプリケーション入力エリア拡張アフォーダンス7260を(例えば、上方へ)ドラッグする(例えば、第1の方向とは異なる)第2の方向でのフォーカスセレクタ7256の移動に対応するタッチ感知面上の接触の移動が含まれる。一部の実施形態では、第4の入力は、アプリケーション入力エリア拡張アフォーダンス7260上のタップ入力である。第4の入力の検出に応じて、デバイスは、アプリケーション入力エリア7222のサイズを、(図72Jに示されるような)第1のサイズから、第1のサイズよりも大きい(例えば、図72K又は図72Lに示されるような)第2のサイズに、増加させる。一部の実施形態では、アプリケーション入力エリアのサイズが第2のサイズである間に、(例えば、少なくとも1つのメッセージを含む)メッセージセッションの会話記録7202は、(図72Kに示されるように)少なくとも部分的にメッセージユーザインタフェースに表示される。
アプリケーション入力エリア拡張アフォーダンスをアクティブ化する入力に応じて、アプリケーション入力エリアのサイズを増大することにより、アプリケーションのより多数のアクティブ化可能なオブジェクトをアプリケーション入力エリアに同時に表示することが可能になる。アプリケーション入力エリアに同時に表示されるアプリケーションのアクティブ化可能オブジェクトの数を増大すると、アプリケーションの望ましいアクティブ化可能なオブジェクトにナビゲートするために必要な入力数を低減することによって、ユーザとデバイスの相互作用がより効率的になる。
一部の実施形態では、アプリケーションエリア表示アフォーダンス7264(例えば、図72Oのフォーカスセレクタ7264によって示される場所の接触によるタップ入力)をアクティブ化する第1の入力を検出したことに応じて、第1の入力が検出された時点で、アプリケーションエリア7210がアプリケーション選択エリア7224及びアプリケーション入力エリア7222をアプリケーションエリア7210に表示しているとの判定に従って、図72O及び図72Pに示すように、デバイスは、アプリケーションエリアにおいて、アプリケーション選択エリア7224とアプリケーション入力エリア7222との表示を、キーボード7212の表示に置き換える(7326)。一部の実施形態では、アプリケーションエリア表示アフォーダンス7208(又はメッセージ入力エリア7204)上の入力(例えば、タップ入力)を検出したことに応じて、メッセージユーザインタフェースが、入力が検出された時点で、アプリケーション選択エリア7224及びアプリケーション入力エリア7222を表示しているという判定に従って、アプリケーション選択エリア7224及びアプリケーション入力エリア7222の表示がキーボード7212の表示に置き換えられる。
アプリケーションエリア表示アフォーダンス7208をアクティブ化する入力に応じて、アプリケーション選択エリア7224とアプリケーション入力エリア7222とのアプリケーションエリア7210への表示を、キーボード7212の表示に置き換えれば、要素を交互に表示することにより、これらの要素によって消費される表示エリアの大きさを低減することによって、デバイスの操作性が向上することになる。これらの要素によって消費される表示エリアの大きさを低減すれば、他のユーザインタフェースオブジェクトを表示するために利用可能な表示エリアを増加させることによって、デバイスの操作性が向上する。
一部の実施形態では、第2のアプリケーションの1つ以上のアクティブ化可能なオブジェクト(例えば、7252及び7254)をアプリケーション入力エリア7222に表示している間、デバイスはアプリケーションエリア表示アフォーダンス7208をアクティブ化する第5の入力(例えば、図72Oのフォーカスセレクタ7264によって示される場所の接触によるタップ入力)を検出する(7328)。アプリケーションエリア表示アフォーダンス7208をアクティブ化する第5の入力を検出したことに応じて、デバイスは、アプリケーション選択エリア7224及びアプリケーション入力エリア7222の同時表示を、(例えば、図72O及び図72Pで示されるように)キーボード7212の表示に置き換える。アプリケーションエリア内にキーボード7212を表示している間、デバイスは、アプリケーションエリア表示アフォーダンス7208をアクティブ化する第6の入力(例えば、図72Qのフォーカスセレクタ7266によって示される場所での接触によるタップ入力)を検出する。アプリケーションエリア表示アフォーダンスをアクティブ化する第6の入力を検出したことに応じて、デバイスはアプリケーションエリアへのキーボード7212の表示を停止し、アプリケーション選択エリア7224及びアプリケーション入力エリア7222を(例えば、図72Q及び図72Rに示すように)同時に表示し、アプリケーション選択エリア7224は、第1のアプリケーション選択アフォーダンス(例えば、7230)を含むアプリケーション選択アフォーダンス(例えば、7226、7228、7230、及び7232のセット)のうちの予め選択されたセットを同時に表示する。例えば、予め選択されたアプリケーション選択アフォーダンスのセットは、表示されるアプリケーション選択アフォーダンスのデフォルトセット又はユーザが選択したアプリケーション選択アフォーダンスのセットである。一部の実施形態では、アプリケーションエリア表示アフォーダンスをアクティブ化する入力によってアプリケーション選択エリアが表示されるたびに、予め選択されたアプリケーション選択アフォーダンスのセットが表示される。
アプリケーションエリア表示アフォーダンス7208をアクティブ化する入力に応じて、アプリケーション選択アフォーダンス(例えば、7226、7228、7230、及び7232のセット)の予め選択されたセットを表示することにより、ユーザは、予め選択されたアプリケーションのセット内のアプリケーション(例えば、頻繁に使用されるアプリケーション)に対応する所望のアクティブ化可能なオブジェクトに迅速にナビゲートすることができる。例えば、複数のアプリケーション選択アフォーダンスをスクロールした後、ユーザは、アプリケーションエリア表示アフォーダンスをアクティブ化する入力を提供することによって、(複数のアプリケーション選択アフォーダンスのスクロールを逆にすることを必要としないで)最も使用されているアプリケーション選択アフォーダンスのプリセットに戻ることが可能になる。このようにして、入力の数及び/又は入力を行わなければならない時間が低減される。
図73A~図73Dにおける動作について記載された特定の順序は単なる一例であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載される他の方法に関する本明細書に記載される他のプロセスの詳細はまた、上述の方法7300と類似の方法で適用可能であることに留意されたい。例えば、方法7300に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書に記載の他の方法に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
図73A~図73Dを参照して上述した動作は、図1A及び図1Bに示される構成要素によって、任意選択的に実施される。例えば、1つ以上の動作は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図74A~図74Dは、一部の実施形態に係る、メッセージアプリケーション内で使用されるアプリケーションを管理するための方法7400を示すフロー図である。方法7400は、ディスプレイとタッチ感知面とを有する電子デバイス(例えば、図3のデバイス300、図1Aのポータブル多機能デバイス100)で実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法7400におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
デバイスは、ディスプレイ(例えば、タッチスクリーン112)によって、メッセージアプリケーションのメッセージユーザインタフェース7200(図72C)を表示する(7402)。メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録7202と、メッセージ入力エリア7204と、アプリケーションエリア7210(例えば、会話記録及びメッセージ入力エリアとは別の、メッセージユーザインタフェース内の予め定義されたエリアであり、キーボードか、又は、メッセージアプリケーションのメッセージユーザインタフェース内に表示される1つ以上のアプリケーションに対応するアクティブ化可能なオブジェクトを表示するように構成されている)と、を含んでいる。アプリケーションエリア7210は、第1のアプリケーションの1つ以上のアクティブ化可能なオブジェクト(例えば、7234~7240)を表示するアプリケーション入力エリア7222と、アプリケーション選択エリア7224と、を含んでいる。アプリケーション選択エリア7224は、メッセージユーザインタフェース内で動作する複数のアプリケーション及び第1アプリケーション設定アフォーダンス(例えば、7226)に対応する複数のスクロール可能なアプリケーション選択アフォーダンス(例えば、7228~7232)を含む。一部の実施形態では、アプリケーション選択アフォーダンスは、単一の水平な列に配置される。
アプリケーション設定アフォーダンス7226をアプリケーション選択エリア7224内に表示している間、デバイスは、第1のアプリケーション設定アフォーダンス7226をアクティブ化する第1の入力(例えば、図72Sのフォーカスセレクタ7268によって示される場所での接触によるタップ入力)を検出する(7404)。
第1の入力の検出に応じて、デバイスは、メッセージアプリケーションのメッセージユーザインタフェース内で動作する複数のアプリケーションに対応した複数のインストール済みアプリケーションアフォーダンス(例えば、7273、7275、7277、7279、7281、7283、7285)と、第1のアプリケーション設定アフォーダンス7226とは異なる第2のアプリケーション設定アフォーダンス72112と、を含むメッセージアプリケーションの第1のアプリケーション管理インタフェース7270(図72T)を表示する(7406)。
第1のアプリケーション管理インタフェース7270を表示している間に、デバイスは、複数のインストール済みアプリケーションアフォーダンスのうちの第1のインストール済みアプリケーションアフォーダンス7273に対応する場所で、第2の入力(例えば、図72Uのフォーカスセレクタ7288によって示される場所の接触によるタップ入力)を検出し(7408)、第1のインストール済みアプリケーションアフォーダンス7273は、電子デバイス上で第1のインストール済みアプリケーション(例えば、三目並べアプリケーション)に対応する。
第2の入力を検出したことに応じて、デバイスは、モバイルデバイス上の第1のインストール済みアプリケーションの少なくとも1つの構成要素をアンインストールする(例えば、メッセージユーザインタフェース、ウォッチユーザインタフェース、及び/又はコンテンツ共有ユーザインタフェースなどの、1つ以上のユーザインタフェース内で動作する第1のインストール済みアプリケーションの構成要素がアンインストールされる)プロセスを開始する(7410)。一部の実施形態では、第1のインストール済みアプリケーションの構成要素がアンインストールされるとき、第1のインストール済みアプリケーションの少なくとも1つの構成要素はデバイスにインストールされたままである。例えば、デバイスのホーム画面からアクセス可能なアプリケーションの構成要素がインストールされたままになる。
第1のアプリケーション管理インタフェースを表示している間、デバイスは、第2のアプリケーション設定アフォーダンス72112に対応する場所で、第3の入力(例えば、図72ABのフォーカスセレクタ72212によって示される場所の接触によるタップ入力)を検出する(7412)。
第3の入力の検出に応じて、デバイスは、メッセージアプリケーションの第2のアプリケーション管理インタフェース72116(図72AC)を表示する(7414)。第2のアプリケーション管理インタフェース72116は、メッセージアプリケーションのメッセージユーザインタフェース内で動作する複数のアプリケーションに対応する複数のトグル(例えば、72117、72118、72119、72121、72123、72125、72127)を含んでいる。各トグル(例えば、72118)をアクティブ化すると、対応するアプリケーションは、(例えば、図72S、図72AD及び図72AE、及び図72AOに示すように)メッセージアプリケーションのメッセージユーザインタフェース内の非表示状態と顕示化状態との間でトグルする。
(例えば、図72U及び図72Vに示すように)インストール済みアプリケーションの少なくとも1つの構成要素をアンインストールするプロセスを開始するための入力を受信する第1のアプリケーション管理インタフェース7270を提供し、(例えば、図72AD及び図72AEに示すように)インストール済みアプリケーションの非表示状態と顕示化状態との間でトグルするための入力を受信する第2のアプリケーション管理インタフェース72116を提供することにより、ユーザは、インストール済みアプリケーションの非メッセージ構成要素を削除することなく、メッセージユーザインタフェースのアプリケーションを隠すことができる。表示された構成要素をユーザが使用する予定の構成要素に限定する機能をユーザに提供することは、(例えば、インタフェースのクラッタを低減することによって)ユーザとデバイスの相互作用をより効率的にし、それによって、メッセージユーザインタフェースに隠されている構成要素に対応するアプリケーションの非メッセージ構成要素へのアクセスを完全に削除することなく、選択に関するアプリケーション選択アフォーダンスをユーザがより効率的に見出すことができる。
一部の実施形態では、第1のアプリケーション設定アフォーダンス7226(図72R)は、複数のアプリケーションに対応する複数のアプリケーション選択アフォーダンス(例えば、7228、7230、及び7232)に対して固定位置に配置される(7416)。一部の実施形態では、第1のアプリケーション設定アフォーダンス7226は、常にアプリケーション選択アフォーダンスのリストの終わり(例えば、アプリケーション選択アフォーダンスの水平な列の右端)に位置する。
複数のアプリケーション選択アフォーダンスに対して固定された位置に第1のアプリケーション設定アフォーダンス7226を配置することにより、ユーザは、(例えば、ユーザは、複数のアプリケーション選択アフォーダンスの間で前後にスクロールする必要なく、アプリケーション設定アフォーダンスを見出すことができるので、)アプリケーション設定アフォーダンス7226を迅速かつ確実に見出すことができる。アプリケーション設定アフォーダンスを見出すための入力に必要な入力数と時間とを低減することにより、ユーザとデバイスの相互作用がより効率的になる。
一部の実施形態では、デバイスは、第1のアプリケーション管理インタフェース7270に、検索入力エリア7290(図72Y)を表示し(7418)、検索入力エリア(例えば、テキスト入力7296又は音声入力)に対する入力を受信し、検索入力エリア内の入力を使用して、メッセージユーザインタフェース内で動作可能な複数のアプリケーションについて、検索(例えば、メッセージユーザインタフェース7200で使用するためのインストールに利用可能なアプリケーションの検索、メッセージユーザインタフェース7200で使用するために以前にインストール済みアプリケーションの検索、(例えば、アプリケーション管理インタフェース72116のトグル(例えば、72117、72118、72119、72121、72123、72125、72127)によって示されるような)顕示化状態を有するインストール済みアプリケーションの検索)を実行する。例えば、図72Yに示すように受信された検索入力に応じて、アプリケーション72102及び72104が図72Zの検索結果として表示される。
第1のアプリケーション管理インタフェース7270に、メッセージユーザインタフェース7200内で動作可能なアプリケーションの検索を実行するための検索入力エリア7290を表示することにより、メッセージユーザインタフェース7200から離れる必要なしに、ユーザはかかるアプリケーションを検索することができる。結果として、必要とされる入力の数及びメッセージユーザインタフェース7200内で動作可能なアプリケーションを見出すために必要な入力数と時間が低減され、これによって、ユーザとデバイスの相互作用がより効率的になる。
一部の実施形態では、第2のアプリケーション管理インタフェースを表示している間に、デバイスは、第4の入力(例えば、図72ADのフォーカスセレクタ72122によって示される場所の接触によるタップ入力)を、複数のトグルのうちの第1のトグル(例えば、図72ADの72118)に対応する場所で検出する(7420)。第1のトグル72118は、メッセージアプリケーションのメッセージユーザインタフェース7200内で動作する複数のアプリケーションのうちの(例えば、第1のインストール済みアプリケーションとは異なる)ステッカアプリケーションなどの第2のアプリケーションに対応する。第4の入力の検出に応じて、第2のアプリケーションの現在の状態が(例えば、図72ADで第1のトグル72118の第1の状態によって示されるような)顕示化状態であるという判定に従って、デバイスは、第2のアプリケーションの状態を(例えば、図72AEで第1のトグル72118の第2の状態によって示されるように)顕示化状態から非表示状態へとトグルする。第2のアプリケーションの現在の状態が非表示状態であるという判定に従って、デバイスは第2のアプリケーションを非表示状態から顕示化状態にトグルする。第1のトグル72118を切り換えた後、デバイスは、複数のスクロール可能なアプリケーション選択アフォーダンスを含むアプリケーション選択エリア7224を再表示する((例えば、アフォーダンス72130における)入力に応じて、第2のアプリケーション管理インタフェース72116を終了し、(例えば、アフォーダンス72134における)入力に続いて、第1のアプリケーション管理インタフェース7270を終了する)。第2のアプリケーションが顕示化状態であるという判定に従って、デバイスは、再表示されたアプリケーション選択エリアに第2のアプリケーションに対応する第1のアプリケーション選択アフォーダンスを表示し、第2のアプリケーションが非表示状態であるという判定に従って、デバイスは、再表示されたアプリケーション選択エリアに第2のアプリケーションに対応する第1のアプリケーション選択アフォーダンスを表示することを見合わせる。例えば、第4の入力に応じて、図72Rに表示されたステッカアプリケーション選択アフォーダンス7232は、もはや図72AOに表示されない。
インストール済みアプリケーションの非表示状態と顕示化状態との間を切り換えるための入力を受信する第2のアプリケーション管理インタフェースを提供することにより、ユーザは、インストール済みアプリケーションを完全に削除することなく、メッセージユーザインタフェースにおいてアプリケーションを非表示にすることができる。これによって、ユーザとデバイスの相互作用がより効率的となり、デバイスの操作性が向上する(アプリケーションを非表示にすることでユーザのニーズが満たされる場合に、ユーザがデバイスのアンインストール及び/又は再インストールに必要な入力を提供する必要がないため、必要な入力数が減少する)。
一部の実施形態では、デバイスは、メッセージアプリケーションのメッセージユーザインタフェース7200内で動作する複数のアプリケーションに対応する複数の配置の指標(その例は図72AFの配置制御子72120及び72131)を第2のアプリケーション管理インタフェース72116に表示する(7422)。複数の配置指標は、メッセージインタフェース内で動作する第3のアプリケーション(例えば、アプリケーション管理リスト72110によって示されるような小さな乗り換えアプリケーション)に対応する第1の配置インジケータ72120(例えば、第3のアプリケーションは第2のアプリケーション(7314参照)と同じであるか又は異なる)、メッセージインタフェース7200内で動作する第4のアプリケーション(例えば、アプリケーション管理リスト7278によって示されるような予約アプリケーション)に対応する第2の配置インジケータ72131と、を含んでいる。第2のアプリケーション管理インタフェース72116を表示している間、デバイスは、第1の配置インジケータ72120に対応する第1の場所(例えば、図72AFのフォーカスセレクタ72124によって示される場所)からタッチ感知面上の接触の移動を含む第5の入力を検出する(例えば、接触の移動は、接触の移動に従って第1の配置インジケータが移動するように第1の配置インジケータをドラッグする)。第5の入力の検出に応じて、(例えば、図72AF及び図72AGに示すような)タッチ感知面上の接触の移動が再配置基準を満たすという判定に従って、デバイスは、第1の配置インジケータ72120の第2の配置インジケータ72131に対する順序を変更する(例えば、図72AF~図72AJに示すように順序が変更される)。一部の実施形態では、再配置基準には、接触の移動が閾値移動距離を超えて(例えば、上方向または下方向などの少なくとも1つの方向に)増加したときに満たされる距離基準が含まれる。
アプリケーションエリアとは異なる第2のアプリケーション管理インタフェース内の第2の配置インジケータに対する第1の配置インジケータの順序を変更することにより、ユーザとデバイスの相互作用がより効率的になる(例えば、アプリケーションエリアとは別の場所にアプリケーション選択アフォーダンスの再配置を行うことにより、アプリケーション選択アフォーダンスがアプリケーションエリアに表示されている間に、再配置モードの誤ったトリガーの可能性が減少する。
一部の実施形態では、第2の配置インジケータに対する第1の配置インジケータの順序を(例えば、7422及び図72AF-図72AJに関して説明したように)変更した後、デバイスは、(例えば、第2のアプリケーション管理インタフェース72116を終了するための(例えば、アフォーダンス72130における)入力に続く、第1のアプリケーション管理インタフェース7270を終了するための(例えば、アフォーダンス72134における)入力(例えば、アフォーダンス72134における)に応じて)複数のスクロール可能なアプリケーション選択アフォーダンスを含むアプリケーション選択エリア7224を再表示する(7424)。デバイスは、再表示されたアプリケーション選択エリア7224(図72AO)に、複数のスクロール可能なアプリケーション選択アフォーダンスのうちの第2のアプリケーション選択アフォーダンス72126であって、メッセージインタフェース7200内で動作する第3のアプリケーションに対応する、第2のアプリケーション選択アフォーダンス72126と、複数のスクロール可能なアプリケーション選択アフォーダンスのうちの第3のアプリケーション選択アフォーダンス72128であって、メッセージユーザインタフェース内で動作する第4のアプリケーションに対応する、第3のアプリケーション選択アフォーダンス72128とを表示する。第3のアプリケーション選択アフォーダンス72128に対する第2のアプリケーション選択アフォーダンス72126の順序は、第2の配置インジケータに対する第1の配置インジケータの順序に対応する。
第2の配置インジケータに対する第1の配置インジケータの順序を変更するための入力に応じて、アプリケーション選択アフォーダンスの順序を変更することによって(例えば、最も頻繁に使用されるアプリケーション選択アフォーダンスを、最初に表示されたアプリケーション選択アフォーダンスの予め選択されたセット内又はそれに近接して再配置することによって)、ユーザは、ユーザとデバイスの相互作用をより効率的にすることができる。
図74A~図74Dにおける動作について記載された特定の順序は単なる一例であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載される他の方法に関する本明細書に記載される他のプロセスの詳細はまた、上述の方法7400にも類似の方法で適用可能であることに留意されたい。例えば、方法7400に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書に記載の他の方法に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
図74A~図74Dを参照して上述した動作は、図1A及び図1Bに示される構成要素によって、任意選択的に実施される。例えば、1つ以上の動作は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図75A~図75Dは、一部の実施形態に係る、メッセージアプリケーション内のメッセージコンテンツを翻訳するための方法7500を示すフロー図である。方法7500は、ディスプレイとタッチ感知面とを有する電子デバイス(例えば、図3のデバイス300、図1Aのポータブル多機能デバイス100)で実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法7500におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
デバイスは、メッセージユーザインタフェース7200(図72AP)をディスプレイ(例えば、タッチスクリーン112)上に表示する(7502)。メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録7202を含んでいる。
デバイス(7504)は、メッセージセッション内の第1のメッセージ(例えば、メッセージ吹き出し72140内に表示されたメッセージ)をメッセージセッションに含まれる別のユーザに対応する電子デバイスから受信し、第1のメッセージは外国語テキスト72146(例えば、デバイスの1つ以上の言語設定によって示される1つ以上の母国語とは異なる言語のテキスト)を含む。
第1のメッセージの受信に応じて、デバイスは、第1のメッセージ72140を会話記録7202に表示する(7506)。
デバイスは、第1のメッセージ内の外国語テキスト72146に対応する第1の場所(例えば、図72AQのフォーカスセレクタ72148によって示される場所、又は図72AUのフォーカスセレクタ72154によって示される場所)で第1の入力を検出する(7508)。例えば、デバイスは、外国語のテキスト72146上の接触によるジェスチャを、外国語テキスト72146が表示されるメッセージ吹き出し72140内で、又は、外国語テキスト72146が表示されるメッセージ吹き出し72140に近接して、検出する。
外国語テキスト72146に対応する第1の場所で第1の入力を検出したことに応じて、第1の入力が翻訳基準を満たすという判定に従って、デバイスは外国語テキストの翻訳を表示する(7510)(図72AQ~図72ARに示すように、デバイスは、外国語テキスト72146の表示を翻訳されたテキスト72150に置き換える)。一部の実施形態では、第1のメッセージ内のすべての外国語テキストが翻訳される。一部の実施形態では、第1のメッセージ内の外国語テキストの一部が翻訳される。一部の実施形態では、外国語テキストは、会話記録に表示される母国語テキストの表示特性(例えば、外国語テキスト72146は太字なしで示され、翻訳テキスト72152は、図72AQ及び図72ARで示されるように、太字で示されている)とは異なる表示特性(例えば、フォントサイズ、フォント色、フォントスタイル、フォント効果(強調表示、アンダーライン、太字、大文字、及び/又はイタリック体など)、及び/又は背景色)を有する。一部の実施形態では、外国語テキスト72146は、翻訳された外国語テキスト72152に置き換えられる。一部の実施形態では、外国語テキストの翻訳72152は、外国語テキスト72146と並んで表示される。第1の入力がオプション表示基準を満たすという判定に従って、デバイスは、複数のアクティブ化可能な指標を表示し(例えば、複数のアクティブ化可能な指標は、1つ以上の確認応答オプションと、確認応答プラッタ72178(図72BQ)内の翻訳オプション72180とを含む)、及び/又は、複数のアクティブ化可能な指標は、アクティブ化されると外国語テキスト72146の翻訳の表示を引き起こすオプション72158を含むメニュー72156(図72BE)内の1つ以上のアクション項目を含む。一部の実施形態では、第1の入力が翻訳基準を満たさず、かつオプション表示基準を満たさないという判定に従って、電子デバイスは、第1のメッセージに外国語テキスト72146を(例えば、メッセージ吹き出し72140に)表示し続ける。このヒューリスティックによって、外国語テキストに対応する場所での入力は、(例えば、メニュー内で翻訳オプションを見つけてアクティブ化する必要なしに)メッセージテキストの翻訳バージョンを表示させるか、又は(例えば、追加のアクションへのアクセスを可能にするために)複数のアクティブ化可能な指標を表示させることができる。外国語テキストに対応する場所での入力に関するこのヒューリスティックによって、デバイスの操作性が向上し、(例えば、翻訳を直接提供すること、並びに他のオプションを提供することによって)ユーザとデバイスの相互作用がより効率的になり、これによって、ユーザがデバイスをより迅速かつ効率的に使用できるようになることで、デバイスの電力使用を低減し、デバイスのバッテリ寿命が改善される。
一部の実施形態では、電子デバイスは、タッチ感知面と、タッチ感知面との接触の強度を検出するように構成された1つ以上のセンサとを備え、外国語テキストに対応する第1の場所における入力を検出することは、タッチ感知面上の接触(例えば、図72APのフォーカスセレクタ72148によって示される場所での接触、又は図72AUのフォーカスセレクタ72154によって示される場所での接触)を検出することを含む(7512)。第1の入力が翻訳基準を満たすという判定には、オプション表示基準が満たされる前に接触がタッチ感知面からリフトオフした(例えば、図72AR~図72AQに示されるように、タップ入力が受信されると、翻訳強度基準が満たされる)という判定が含まれる。第1の入力がオプション表示基準を満たすという判定は、例えば、図72AU及び図72AVに示すように、タッチ感知面との接触の特性強度がオプション表示強度基準を満たす(例えば、接触の特性強度が第2の強度閾値(例えば軽押し強度閾値レベルIT又は深押し強度閾値IT)を超えて増加するとき、オプション表示強度基準が満たされる)という判定を含む。
用いられる外国語テキストに対応する場所での接触強度基準を用いることによって、(例えば、メニュー内で翻訳オプションを見つけてアクティブ化する必要なしに)メッセージテキストの翻訳バージョンを表示させるか、又は(例えば、追加のアクションへのアクセスを可能にするために)複数のアクティブ化可能な指標を表示させることによって、デバイスの操作性が向上し、(例えば、翻訳を直接提供すること、並びに他のオプションを提供することによって)ユーザとデバイスの相互作用がより効率的になる。
一部の実施形態では、電子デバイスは、タッチ感知面を含み、外国語テキストに対応する第1の場所での入力を検出することは、タッチ感知面上の接触(例えば、図72BU-2のフォーカスセレクタ72186により示される場所での接触、又は図72BV-2のフォーカスセレクタ72188により示される場所での接触)を検出することを含む(7514)。第1の入力が翻訳基準を満たすという判定は、翻訳持続時間基準が満たされる前に接触がタッチ感知面からリフトオフしたという判定を含む(例えば、図72BU-2~図72BU-4に示されるように、入力はタップ入力である)。第1の入力がオプション表示基準を満たすという判定には、タッチ感知面上の接触の持続時間がオプション表示持続時間基準を満たすという判定が含まれる(例えば、接触の持続時間が持続時間閾値(例えば、図72BV-2~図72BV-4に示されるような、長押し持続時間閾値など)を満たすとき、オプション表示持続時間基準は、満たされる)。
接触持続時間基準を用いることによって、(例えば、メニュー内で翻訳オプションを見つけてアクティブ化する必要なしに)メッセージテキストの翻訳バージョンを表示させるか、又は(例えば、追加のアクションへのアクセスを可能にするために)複数のアクティブ化可能な指標を表示させることによって、デバイスの操作性が向上し、(例えば、翻訳を直接提供すること、並びに他のオプションを提供することによって)ユーザとデバイスの相互作用がより効率的になる。
一部の実施形態では、電子デバイスはタッチ感知面112とタッチ感知面112の上の入力オブジェクト72192の接近を検出するために構成された1つ以上のセンサを含み、外国語テキストに対応する第1の場所において入力を検出することは、入力オブジェクト72192により入力(例えば、図72BWのフォーカスセレクタ72190により示された場所における入力)を検出することを含む(7516)。第1の入力が翻訳基準を満たすという判定は、入力オブジェクト72192による入力がホバー接近基準を満たすという判定を含む。例えば、入力オブジェクト72192がタッチ感知面112上のホバー接近範囲内にあり、入力オブジェクト72192がタッチ感知面と接触していない場合(例えば、入力オブジェクト72192とタッチスクリーン112との間の距離72194が、図72BXのように、閾値ホバー距離を下回って減少する場合)、ホバー接近基準は満たされる。一部の実施形態では、翻訳基準がホバー接近基準を含む場合、タッチ感知面との接触の持続時間が持続時間閾値(例えば、タップ閾値又は長押し持続時間閾値など)を超えると、オプション表示基準は満たされ、接触の特性強度は、閾値強度レベル(例えば、軽押し強度閾値IT又は深押し強度閾値IT)を超えて増加する。あるいは、タッチ感知面との接触がリフトオフした後、外国語テキストに対応する場所で接触し、次いでダブルタップ基準を満たす時間内に再びリフトオフする。
一部の実施形態では、第1の入力が翻訳基準を満たすという判定は、第1の入力に対応するフォーカスセレクタ(例えば、図72CPのフォーカスセレクタ72200)が、第1のメッセージにおいて、外国語テキスト72146に対応する第1の場所へと、外国語テキスト72146の別の部分に対応する第2の場所から移動したという判定を含む(7518)(例えば、フォーカスセレクタ72200は図72CPに示されるような第1の場所から図72CRに示されるような第2の場所へ移動する)。一部の実施形態では、第1の場所と第2の場所との間の外国語テキストが翻訳される(例えば、図72CSに示すように、第1のメッセージの外国語テキスト72146のすべてよりも少ないテキストが翻訳される)。一部の実施形態では、第1のメッセージ内のすべての外国語テキストが翻訳される。一部の実施形態では、第1の場所又はそれに近接した(例えば、第1のメッセージのすべての外国語テキストよりも少ない)外国語テキストの隣接するセクションのすべてが翻訳される。指(又は他の接触)が移動する場所でのテキストの翻訳は、ユーザが外国語のテキストを学習するのに役立つ。
一部の実施形態では、第1の入力が翻訳基準を満たすという判定に従って、外国語テキストの翻訳を表示することは、外国語テキストの第1の部分の翻訳を表示すること(7520)を含む(例えば、部分72210は、図72CVに示されるような外国語テキスト72146の部分72208に対応する単一の翻訳された単語を含む)。デバイスは、外国語テキスト72146の第1の部分72210の翻訳を表示している間に、第1の入力(例えば、ポインタ入力、タッチ感知面との接触、又はホバー接近基準を満たす入力オブジェクトによる入力)に対応するフォーカスセレクタ72206の、外国語テキストの別の部分に対応する(例えば、図72CXのフォーカスセレクタ72206によって示されるような)第2の場所への移動を検出する。第2の場所へのフォーカスセレクタの移動を検出したことに応じて、デバイスは、外国語テキストの第2の部分の翻訳を表示する(例えば、部分72210は、図72CXに示されるように、外国語テキスト72146の部分72208に対応する複数の翻訳された単語を含む)。一部の実施形態では、第2の部分は、第1の部分を含む(例えば、外国語テキストの翻訳は、入力が移動するにつれて徐々に顕示化する)。一部の実施形態では、第2の部分は、第1の部分とは異なる(例えば、翻訳された外国語テキストの一部が、入力が移動するにつれて一時的に顕示化する)。
フォーカスセレクタの移動に応じてメッセージ内の翻訳されたテキストを漸進的に顕示化することにより、外国語テキストの一部の翻訳を表示し、所望であれば、外国語テキストの一部を未翻訳のままにすることができる。このように翻訳を表示することによって、デバイスにより提供されるプライバシーを向上させる(例えば、外国語テキストの一部が未翻訳のバージョンを表示し続けることによって、外国語テキストがデバイスの近傍で他の人に読まれてはならない場合に、セキュリティを提供することになる)。
一部の実施形態では、デバイスは、メッセージセッション内で第2のメッセージ(例えば、メッセージ吹き出し72142内に表示されたメッセージ)を受信する(7522)。第2のメッセージが外国語テキストを含むという判定に従って、オプション表示基準が満たされているという判定に従って、デバイスは、複数のアクティブ化可能な指標内に、アクティブ化可能なインジケータを表示し、これによって、このインジケータがアクティブ化されたときに、第2のメッセージにおいて、(例えば、7510及び図72BEのオプション72158に関して説明したように)外国語テキストの翻訳を表示させる。第2のメッセージが外国語テキストを含まないという判定に従って、オプション表示基準が満たされているという判定に従って、デバイスは、当該アクティブ化可能なインジケータを表示することなく、(例えば、図72BJに示されるように)複数のアクティブ化可能な指標を表示する。一部の実施形態では、電子デバイスは、受信したメッセージが外国語テキストを含むかどうかを判定する。一部の実施形態では、電子デバイスから遠隔のデバイス(例えば、メッセージ機能をサポートするサーバ)は、受信したメッセージが外国語テキストを含むかどうかを判定する。
翻訳オプションが必要でないときには、複数のアクティブ化可能な指標の間のスペースを消費することなく、表示された複数のアクティブ化可能な指標(例えば、メニュー又は確認応答のプラッタ)内に翻訳された外国語のテキストを表示するためのアクティブ化可能なインジケータを自動的に含むことによって、翻訳に関する追加制御オプションを提供する。このヒューリスティックによって、デバイスの操作性は向上し、(例えば、複数のアクティブ化可能な指標により消費される表示スペースを縮小して、メッセージに外国語テキストが存在しないときに翻訳制御の意図しない選択を排除することによって)ユーザとデバイスの相互作用はより効率的になる。
一部の実施形態では、外国語テキストの翻訳72150を表示している間に(例えば、図72DBに示すように)、デバイスは、外国語テキストの翻訳が翻訳表示停止基準を満たすかどうかを判定する(7526)(例えば、第1の入力における接触の特性強度が、タッチ感知面からの接触のリフトオフの前に、(深押し強度閾値レベルITなどの)第2の強度閾値レベルを超えて増加することなく、(軽押し強度閾値レベルITなどの)第1の強度閾値レベルを下回って減少するかどうかを判定すること、翻訳された外国語テキストが表示されてから以降の時間がしきい値制限時間を超えるかどうかを判定すること、及び/又は、第1の入力の接触がタッチ感知面からリフトオフしたかどうかを判定すること)。外国語テキストの表示された翻訳が(例えば、図72DB及び図72DCに示されるような)翻訳表示停止基準を満たすという判定に従って、デバイスは、外国語テキストの翻訳の表示を停止し、対応する外国語テキストを再表示する。外国語テキストの表示された翻訳が翻訳表示停止基準を満たさないという判定に従って、デバイスは(例えば、図72DE~図72DIに示すように)外国語テキストの翻訳を表示し続ける。
一部の実施形態では、翻訳された外国語テキストが、特性強度基準及び/又は接触持続時間基準を満たす接触による入力に応じて表示され、接触がタッチ感知面からリフトオフするときに、翻訳された外国語テキストの表示が停止する。例えば、メッセージの翻訳が言語学習のために使用される場合、ユーザは、翻訳されたテキストと未翻訳のテキストとの間の関係の学習を促進するために、未翻訳のバージョンの外国語テキストを再表示することを望むことがある。
一部の実施形態では、1つ以上のアクティブ化可能な指標は、翻訳された外国語テキストを予め定義された持続時間の間表示するためのオプションを含む。一部の実施形態では、予め定義された持続時間の間翻訳された外国語テキストを表示するオプションが選択されたという判定に従って、翻訳された外国語テキストが表示されて、予め定義された持続時間の後、翻訳された外国語テキストは未翻訳の外国語テキストに戻る。
翻訳表示停止基準が満たされたときに、外国語テキストを自動的に再表示することにより、翻訳を表示する入力に続く更なるユーザ入力を必要とせずに、未翻訳の外国語テキストを再表示することができる。追加のユーザ入力を必要とせずに、未翻訳の外国語テキストを自動的に再表示することにより、デバイスを動作させるのに必要な入力数を低減することによって、ユーザとデバイスの相互作用はより効率的になる。
一部の実施形態では、外国語テキストの翻訳72146を表示している間に、デバイスは、外国語テキストの翻訳72150に対応する第3の場所(例えば、第1の場所と同じであるか、第2の場所と同じであるか、又は第1の場所及び第2の場所とは異なる場所)において、(例えば、図72ASに示されるように、フォーカスセレクタ72148により示される場所の接触による)第2の入力を検出する(7526)。翻訳された外国語テキスト72150に対応する第3の場所で第2の入力を検出したことに応じて、第2の入力が再表示基準を満たすという判定に従って、デバイスは外国語テキストの翻訳72150の表示を停止して、(例えば、図72AS及び図72ATに示すように)対応する外国語テキスト72146を再表示する。一部の実施形態では、外国語テキストの翻訳を表示するために使用される同一種類の入力は、元の未翻訳の外国語テキストを再表示するために使用される。一部の実施形態では、外国語テキストの翻訳を表示しても元には戻せない。
一部の実施形態では、外国語テキストの翻訳を表示している間に、外国語テキスト(例えば、第1の場所と同じであるか、第2の場所と同じであるか、第3の場所と同じであるか、又は第1、第2及び第3の場所とは異なる場所)の翻訳72150に対応する第4の場所(例えば、図72BCのフォーカスセレクタ72164により示された場所)において、デバイスは第3の入力を検出する(7528)。外国語テキストの翻訳72150に対応する第4の場所において第3の入力を検出したことに応じて、第3の入力がオプション表示基準を満たすという判定に従って、複数のアクティブ化可能な指標(例えば、メニュー72156において表示されるアクション項目)を表示し、この複数のアクティブ化可能な指標は、アクティブ化されると、元の未翻訳の外国語テキスト72146を再表示させる(例えば、図72BB~図72BFに示されるような)アクティブ化可能なインジケータ72158を含む。
ユーザ入力に応じて、外国語テキストを再表示するためのアクティブ化可能なインジケータを表示することにより、以前に実行された翻訳を元に戻すためのさらなる制御子を継続的に表示することなく、未翻訳の外国語テキストは、必要に応じて表示される制御子を用いて、再表示することができる。これにより、デバイスの操作性が向上し、(例えば、メッセージユーザインタフェースにメッセージコンテンツを表示するために利用可能なスペースを削減することなく、メッセージユーザインタフェースに追加の機能を提供することによって)ユーザとデバイスの相互作用がより効率的になる。
図75A~図75Dにおける動作について記載された特定の順序は単なる一例であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載される他の方法に関する本明細書に記載される他のプロセスの詳細はまた、上述の方法7500にも類似の方法で適用可能であることに留意されたい。例えば、方法7500に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書に記載の他の方法に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
図75A~図75Dを参照して上述した動作は、図1A及び図1Bに示される構成要素によって、任意選択的に実施される。例えば、1つ以上の動作は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
図76A~図76Cは、一部の実施形態に係る、メッセージアプリケーション内のメッセージコンテンツを翻訳するための方法7600を示すフロー図である。方法7600は、ディスプレイとタッチ感知面とを有する電子デバイス(例えば、図3のデバイス300、図1Aのポータブル多機能デバイス100)で実行される。一部の実施形態では、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面はディスプレイ上にあるか、又はディスプレイと一体化されている。一部の実施形態では、ディスプレイはタッチ感知面とは別体である。方法7600におけるいくつかの動作は、任意選択的に組み合わせられ、及び/又はいくつかの動作の順序は、任意選択的に変更される。
デバイスは、ディスプレイ(例えば、タッチスクリーン112)によって、ディスプレイ上のメッセージユーザインタフェース7200(図72AP)を表示する(7602)。メッセージユーザインタフェースは、電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージセッションの会話記録7202を含んでいる。
デバイス(7604)は、メッセージセッション内の第1のメッセージ(例えば、メッセージ吹き出し72140内に表示されたメッセージ)をメッセージセッションに含まれる別のユーザに対応する電子デバイスから受信し、第1のメッセージは外国語テキスト72146(例えば、デバイスの1つ以上の言語設定によって示される1つ以上の母国語とは異なる言語のテキスト)を含む。
第1のメッセージの受信に応じて、デバイスは、第1のメッセージ72140を会話記録7202に表示する(7606)。
デバイスは、第1のメッセージ内の外国語テキスト72146に対応する場所(例えば、図72APのフォーカスセレクタ72148によって示される場所、又は図72AUのフォーカスセレクタ72154によって示される場所)で第1の入力を検出する(7608)。例えば、デバイスは、外国語のテキスト72146上の接触によるジェスチャを、外国語テキスト72146が表示されるメッセージ吹き出し72140内で、又は、外国語テキスト72146が表示されるメッセージ吹き出し72140に近接して、検出する。
外国語テキスト72146に対応する場所で第1の入力を検出することに応じて、第1の入力が翻訳基準を満たすという判定に従って、デバイスは、外国語テキスト翻訳アクション(例えば、外国語テキストを翻訳するためのアクティブ化可能なオプション(例えば、メニュー72156のオプション72158又はプラッタ72178のオプション72180)を含むメニュー72156(図72BE)又はプラッタ72178(図72BQ)を表示すること、外国語テキスト72146を翻訳すること、及び/又は、外国語テキストの翻訳72150を表示すること)を実行する(7610)。第1の入力が翻訳基準を満たさないという判定に従って、デバイスは外国語テキスト翻訳アクションの実行を見合わせる。
受信メッセージ内の外国語テキストに対応する場所で受信したユーザ入力に応じて外国語テキストを翻訳及び/又は表示することにより、翻訳を得るための追加の制御子を表示することなく、翻訳されたテキストを表示することができる。翻訳のための追加の制御子を継続的に表示することなく外国語テキストを翻訳するためのアクティブ化可能なオプションを提供することによって、デバイスの操作性が向上し、(例えば、メッセージユーザインタフェースにメッセージコンテンツを表示するために利用可能なスペースを頻繁に削減することなく、メッセージユーザインタフェースに追加の機能を提供することによって)、ユーザとデバイスの相互作用がより効率的になり、これによってまた、ユーザがデバイスをより迅速かつ効率的に使用できるようになることで、デバイスの電力使用が低減し、バッテリ寿命が改善される。
一部の実施形態では、電子デバイスは、タッチ感知面112と、タッチ感知面112との接触の強度を検出するように構成された1つ以上のセンサとを含む(7612)。一部の実施形態では、外国語テキスト72146に対応する第1の場所(例えば、図72DCのフォーカスセレクタ72190によって示される場所)で第1の入力を検出することは、タッチ感知面上の接触を検出することを含む。第1の入力が一時的翻訳表示基準(例えば、第1の入力における接触の特性強度が、タッチ感知面からの接触のリフトオフの前に、(深押し強度閾値レベルITなどの)第2の強度閾値レベルを超えて増加することなく、(軽押し強度閾値レベルITなどの)第1の強度閾値レベルを下回って減少すると、満たされる基準)を満たすという判定に従って、外国語テキスト翻訳アクションを実行することは、一時的に外国語テキストの翻訳を(例えば、図72DA~図72DCに示されるように)表示することを含む。一部の実施形態では、一時的翻訳表示基準が満たされると、翻訳された外国語テキスト72150が(例えば、外国語テキスト再表示基準を満たす次の入力が受信されるまで、又は接触がリフトオフするまでの所定時間の間)一時的に表示され、その後、元の未翻訳の外国語テキスト72146が再表示される。
一部の実施形態では、第1の入力が固定翻訳表示基準を満たすという判定に従って、外国語テキスト翻訳アクションを実行することは、(例えば、図72DD~図72DIに示すように)外国語テキスト72146の表示を外国語テキストの翻訳72150に固定的に置き換えることを含んでいる(7614)。一部の実施形態では、翻訳された外国語テキストは固定的に(例えば、第1のメッセージがメッセージセッションで表示されるその後の時間の間)表示される。一部の実施形態では、接触強度基準を使用して、入力が一時的翻訳表示基準を満たして、翻訳を一時的に表示するか、又は、入力が固定翻訳表示基準を満たして、翻訳を固定的に表示するかどうかを判定する。例えば、翻訳は(例えば、図72CY~図72DDに示すように)軽押しに応じて、一時的に表示され、翻訳は(例えば、図72DD~図72DIに示すように)深押しに応じて、固定的に表示され、その逆も同じである。
接触強度基準を使用して、外国語テキストの翻訳を一時的に又は固定的に、メッセージに表示するかどうかを判定することにより、接触による単一入力を翻訳の一時的表示又は固定的表示のいずれかに使用することができる。接触による単一の入力に応じて複数の可能な動作ができるようにすれば、デバイスの操作性が向上し、ユーザとデバイスの相互作用がより効率的となり、これによってまた、ユーザがデバイスをより迅速かつ効率的に使用できるようになることで、デバイスの電力使用が低減し、バッテリ寿命が改善される。
一部の実施形態では、第1の入力が固定翻訳表示基準を満たすという判定は、(例えば、図72DD~図72DIに関して説明するように)タッチ感知面上の接触の特性強度が固定翻訳強度基準を満たすという判定を含む(7616)。一部の実施形態では、接触の特性強度が第2の強度閾値を超えて増加すると、深押し強度閾値ITなどの固定翻訳強度基準が満たされる。
一部の実施形態では、第1入力が固定翻訳表示基準を満たすという判定は、タッチ感知面上の接触の持続時間が固定翻訳持続時間基準を満たすという判定を含む(7618)。一部の実施形態では、接触の持続時間が、長押し持続時間閾値などの時間閾値を超えて増加するとき、固定翻訳持続時間基準が満たされる。
一部の実施形態では、外国語テキスト翻訳アクションを実行することは、外国語テキストの翻訳72150を表示することと、タッチ感知面からの接触のリフトオフが生じたかどうかを判定することと、タッチ感知面からの接触のリフトオフを検出したことに応じて、外国語テキストの翻訳72150の表示を停止する(一部の実施形態では、外国語テキスト72146を再表示する)ことと、を含んでいる(7620)。
タッチ感知面からの接触のリフトオフを検出したことに応じて、翻訳された外国語のテキストの表示を停止することによって、追加の表示された制御子を用いて、メッセージユーザインタフェースを乱雑にすることなく、追加の制御オプションを提供する。メッセージUIを乱雑にすることなく追加の制御オプションを提供することによって、デバイスの操作性が向上し、(例えば、メッセージユーザインタフェースにメッセージコンテンツを表示するために利用可能なスペースを削減することなく、メッセージユーザインタフェースに追加の機能を提供することによって)ユーザとデバイスの相互作用がより効率的になる。
一部の実施形態では、外国語テキスト翻訳アクションを実行することは、会話記録上で(例えば、表示された第1のメッセージに対応し、部分的に第1のメッセージに重なるか、又は第1のメッセージに近接したような場所における)複数のアクティブ化可能な指標(例えば、心臓、サムズアップ、サムズダウンなどのオプションを有する、受信されたメッセージに応答するための確認応答オプションメニュー)を含むプラッタ72178(図72BQ)を表示する(7622)ことを含み、複数のアクティブ化可能な指標には、アクティブ化されると外国語テキストの少なくとも一部の翻訳を表示させる翻訳インジケータ72180が含まれる。
ユーザ入力に応じて、外国語テキストの少なくとも一部を翻訳するためのアクティブ化可能なインジケータを表示することにより、翻訳を行うための追加の制御子を継続して表示することなく、必要に応じて表示される制御子を用いて、翻訳された外国語テキストを表示することができる。翻訳のための追加の制御子を継続的に表示することなく外国語テキストを翻訳するためのアクティブ化可能なオプションを提供することによって、デバイスの操作性が向上し、(例えば、メッセージユーザインタフェースにメッセージコンテンツを表示するために利用可能なスペースを頻繁に削減することなく、メッセージユーザインタフェースに追加の機能を提供することによって)、ユーザとデバイスの相互作用がより効率的になる。
一部の実施形態では、電子デバイスはタッチ感知面112と、(例えば、図72BW及び図72BXに示されるように)タッチ感知面112の上に入力オブジェクト72192が接近したことを検出するように構成された1つ以上のセンサとを含み(7624)、外国語テキスト72146に対応する第1の場所(例えば、フォーカスセレクタ72190により示した場所)において入力を検出することは、入力オブジェクト72192により入力を検出することを含み、第1の入力が翻訳基準を満たすという判定は、入力オブジェクトによる入力がホバー接近基準を満たす(例えば、図72BXに示されるように、72192とタッチスクリーン112との間の距離は、閾値ホバー距離を下回って減少する)という判定を含む。一部の実施形態では、入力オブジェクトがタッチ感知面上の閾値ホバー距離内にあり、かつタッチ感知面112と接触していないとき、ホバー接近基準が満たされる。
一部の実施形態では、第1の入力が翻訳基準を満たすという判定は、第1の入力に対応するフォーカスセレクタ(例えば、図72CPのフォーカスセレクタ72200)が、外国語テキスト72146に対応する第1の場所に、外国語テキスト72146の別の部分に対応する第2の場所から移動したという判定を含む(7626)(例えば、フォーカスセレクタ72200は図72CPに示されるような第1の場所から図72CRに示されるような第2の場所へ移動する)。一部の実施形態では、第1の場所と第2の場所との間の外国語テキストが翻訳される(例えば、第1のメッセージの外国語テキストのすべてよりも少ないテキストが翻訳される)。一部の実施形態では、第1のメッセージ内のすべての外国語テキストが翻訳される。一部の実施形態では、第1の場所又はそれに近接した(例えば、第1のメッセージのすべての外国語テキストよりも少ない)外国語テキストの隣接するセクションのすべてが翻訳される。指(又は他の接触)が移動する場所でのテキストの翻訳は、ユーザが外国語のテキストを学習するのに役立つ。
一部の実施形態では、第1の入力が翻訳基準を満たすという判定に従って、外国語テキストの翻訳を表示することは、外国語テキストの第1の部分の翻訳を表示すること(7628)を含む(例えば、部分72210は、図72CVに示されるような外国語テキスト72146の部分72208に対応する単一の翻訳された単語を含む)。デバイスは、外国語テキスト72146の第1の部分72210の翻訳を表示している間に、第1の入力(例えば、ポインタ入力、タッチ感知面との接触、又はホバー接近基準を満たす入力オブジェクトによる入力)に対応するフォーカスセレクタ72206の、外国語テキストの別の部分に対応する(例えば、図72CXのフォーカスセレクタ72206によって示されるような)第2の場所への移動を検出する(7628)。第2の場所へのフォーカスセレクタの移動を検出したことに応じて、デバイスは、外国語テキストの第2の部分の翻訳を表示する(例えば、部分72210は、図72CXに示されるように、外国語テキスト72146の部分72208に対応する複数の翻訳された単語を含む)。一部の実施形態では、第2の部分は、第1の部分を含む(例えば、外国語テキストの翻訳は、入力が移動するにつれて徐々に顕示化する)。一部の実施形態では、第2の部分は、第1の部分とは異なる(例えば、翻訳された外国語テキストが、入力が移動するにつれて一時的に顕示化する)。
フォーカスセレクタの移動に応じてメッセージ内の翻訳されたテキストを漸進的に顕示化することにより、外国語テキストの一部の翻訳を表示し、所望であれば、外国語テキストの一部を未翻訳のままにすることができる。このように翻訳を表示することによって、デバイスにより提供されるプライバシーを向上させる(例えば、外国語テキストの一部が未翻訳のバージョンを表示し続けることによって、外国語テキストがデバイスの近傍で他の人に読まれてはならない場合に、セキュリティを提供することになる)。
図76A~図76Cにおける動作について記載された特定の順序は単なる一例であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載の動作を並べ替えるさまざまな方法を認識するであろう。更に、本明細書に記載される他の方法に関する本明細書に記載される他のプロセスの詳細はまた、上述の方法7600にも、類似の方法で適用可能であることに留意されたい。例えば、方法7600に関連して上述した接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択的に、本明細書に記載の他の方法に関連して本明細書に記載の接触、ジェスチャ、ユーザインタフェースオブジェクト、強度閾値、フォーカスセレクタ、アニメーションのうちの1つ以上の特徴を有する。簡潔にするために、これらの詳細はここでは繰り返さない。
図76A~図76Dを参照して上述した動作は、図1A及び図1Bに示される構成要素によって、任意選択的に実施される。例えば、1つ以上の動作は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190によって実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136-1に配信する。アプリケーション136-1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と対照し、タッチ感知面上の第1の場所の第1の接触(又はデバイスの回転)がユーザインタフェース上のオブジェクトの選択又はある向きから別の向きへのデバイスの回転などの、予め定義されたイベント又はサブイベントに対応するかどうかを判定する。各予め定義されたイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に使用するか又は呼び出す。一部の実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A及び図1Bに示される構成要素に基づいてどのように実施されうるかは明らかであろう。
以上の説明は、説明を目的として、特定の実施形態を参照して説明されたものである。しかし、上記の例示的な説明は、網羅的であること、又は本発明を開示された厳密な形態に限定することを意図したものではない。上記の教示を考慮して、多くの修正及び変形が可能である。本発明の原理及びその実際的な応用を最良の形で説明し、それによって他の当業者が、想到される特定の用途に好適なさまざまな改良で本発明及びさまざまな実施形態を最良な形で使用することを可能とするために、これらの実施形態を選択し説明したものである。

Claims (10)

  1. ディスプレイ及び少なくとも1つの入力デバイスを有する電子デバイスにより実行されるメッセージングアプリケーションを管理する方法であって、
    前記メッセージングアプリケーションのメッセージングユーザインタフェースを前記ディスプレイ上に表示することであって、前記メッセージングユーザインタフェースは、前記電子デバイスのユーザと少なくとも1人の他のユーザとの間のメッセージングセッションの会話記録と、メッセージ入力エリアとを含み、前記会話記録は、複数のメッセージと、複数のメッセージ領域とを含み、各メッセージ領域は前記複数のメッセージのうちの個別のメッセージを含む、ことと、
    前記メッセージングユーザインタフェースを表示している間に、
    前記少なくとも1つの入力デバイス上で、前記会話記録における第1の個別のメッセージに対応する位置において第1の入力を検出することであって、前記第1の個別のメッセージは、前記複数のメッセージ領域のうちの第1の個別のメッセージ領域内に含まれる、ことと、
    前記第1の入力を検出したことに応じて、前記第1の個別のメッセージを選択し、前記第1の個別のメッセージが選択されたことを示すインジケーションを表示することと、
    前記少なくとも1つの入力デバイス上で、1以上のメッセージ作成入力を含む1つ以上の第2の入力を検出することと、
    前記1つ以上の第2の入力を検出したことに応じて、
    前記第1の個別のメッセージ領域とは別個の前記会話記録における第2のメッセージ領域内に、前記1以上のメッセージ作成入力に対応する第2のメッセージを表示することと、
    前記第1の個別のメッセージ領域と前記第2のメッセージ領域とを接続するグループ化標識を表示することと、
    前記第1の個別のメッセージ領域と前記第2のメッセージ領域とを接続するグループ化標識を表示している間に、第3の入力を検出することと、
    前記第3の入力を検出したことに応じて、前記第1の個別のメッセージ領域と、前記第2のメッセージ領域とを前記会話記録上にオーバレイ表示することとを含む方法。
  2. 前記第1の個別のメッセージは、前記会話記録において、前記会話記録の最後のメッセージよりも以前のメッセージである、請求項1に記載の方法。
  3. 前記グループ化標識は、前記第1の個別のメッセージ領域と前記第2のメッセージ領域とを接続するラインを含む、請求項1に記載の方法。
  4. 前記少なくとも1つの入力デバイス上で、1つ以上のメッセージ作成入力を含む前記1つ以上の第2の入力を検出している間に、前記第1の個別のメッセージ領域以外の前記複数のメッセージ領域内の少なくとも1つのメッセージ領域の表示の明るさを下げることと、を含む、請求項1に記載の方法。
  5. 前記1つ以上の第2の入力を検出したことに応じて、前記会話記録内の前記第1の個別のメッセージの視覚的外観を変更することを含む、請求項1から4のいずれか1項に記載の方法。
  6. 前記少なくとも1つの入力デバイスはタッチ感知面であり、前記第1の入力は前記タッチ感知面上の押圧入力である、請求項1から4のいずれか1項に記載の方法。
  7. 前記第1の個別のメッセージ領域または前記第2のメッセージ領域と対応しない位置で第4の入力を検出することと、
    前記第4の入力を検出したことに応じて、前記第1の個別のメッセージ領域及び第2のメッセージ領域の前記会話記録上へのオーバレイ表示を停止することと
    を更に含む請求項1から6のいずれか1項に記載の方法。
  8. 前記第1の個別のメッセージ領域と前記第2のメッセージ領域とを前記会話記録上にオーバレイ表示することは、前記第1の個別のメッセージ領域と前記第2のメッセージ領域との表示の明るさを下げることなく、前記第1の個別のメッセージ領域と前記第2のメッセージ領域以外のメッセージ領域の表示の明るさを一時的に下げることを含み、
    前記第1の個別のメッセージ領域及び前記第2のメッセージ領域の前記会話記録上へのオーバレイ表示を停止することは、前記第1の個別のメッセージ領域と前記第2のメッセージ領域以外のメッセージ領域の表示の明るさを下げることを停止することを含む、請求項に記載の方法。
  9. 電子デバイスであって、
    ディスプレイと、
    少なくとも1つの入力デバイスと、
    1以上のプロセッサと、
    メモリと、
    1以上のプログラムと
    を含み、前記1以上のプログラムは、前記メモリ内に格納され、前記1以上のプロセッサにより実行されるように構成されており、前記1以上のプログラムは請求項1からのいずれか1項に記載の方法を実行するための命令群を含む、電子デバイス。
  10. ディスプレイと少なくとも1つの入力デバイスとを有する電子デバイスにより実行されると、前記電子デバイスに請求項1からのいずれか1項に記載の方法を実行させる命令群を含むコンピュータプログラム。
JP2021173046A 2016-05-18 2021-10-22 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用 Active JP7263481B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023065202A JP2023099007A (ja) 2016-05-18 2023-04-12 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用

Applications Claiming Priority (38)

Application Number Priority Date Filing Date Title
US201662338502P 2016-05-18 2016-05-18
US62/338,502 2016-05-18
US201662339078P 2016-05-19 2016-05-19
US62/339,078 2016-05-19
US201662349116P 2016-06-12 2016-06-12
US201662349114P 2016-06-12 2016-06-12
US62/349,114 2016-06-12
US62/349,116 2016-06-12
DKPA201670641 2016-08-24
DKPA201670636 2016-08-24
DKPA201670636A DK180169B1 (en) 2016-05-18 2016-08-24 Devices, procedures, and graphical messaging user interfaces
DKPA201670642 2016-08-24
DKPA201670641A DK201670641A1 (en) 2016-05-18 2016-08-24 Devices, Methods, and Graphical User Interfaces for Messaging
DKPA201670642A DK179831B1 (en) 2016-05-18 2016-08-24 Devices, methods and graphical user interfaces for messaging
DKPA201670650 2016-08-26
DKPA201670655A DK179829B1 (en) 2016-05-18 2016-08-26 Devices, methods and graphical user interfaces for messaging
DKPA201670655 2016-08-26
DKPA201670649 2016-08-26
DKPA201670651A DK179747B1 (en) 2016-05-18 2016-08-26 Devices, methods and graphical user interfaces for messaging
DKPA201670650A DK179478B1 (en) 2016-05-18 2016-08-26 Devices, methods and graphical user interfaces for messaging
DKPA201670647 2016-08-26
DKPA201670648A DK179363B1 (en) 2016-05-18 2016-08-26 Devices, methods and graphical user interfaces for messaging
DKPA201670653 2016-08-26
DKPA201670649A DK179174B1 (en) 2016-05-18 2016-08-26 Devices, methods and graphical user interfaces for messaging
DKPA201670647A DK179830B1 (en) 2016-05-18 2016-08-26 Devices, methods and graphical user interfaces for messaging
DKPA201670654A DK179753B1 (en) 2016-05-18 2016-08-26 Devices, methods and graphical user interfaces for messaging
DKPA201670648 2016-08-26
DKPA201670652 2016-08-26
DKPA201670653A DK180170B1 (en) 2016-05-18 2016-08-26 Devices, procedures, and graphical messaging user interfaces
DKPA201670654 2016-08-26
DKPA201670651 2016-08-26
DKPA201670652A DK180979B1 (en) 2016-05-18 2016-08-26 Devices, methods and graphical user interfaces for messaging
US15/272,399 US9959037B2 (en) 2016-05-18 2016-09-21 Devices, methods, and graphical user interfaces for messaging
US15/272,399 2016-09-21
US201762506614P 2017-05-16 2017-05-16
US62/506,614 2017-05-16
JP2019218615A JP6710806B2 (ja) 2016-05-18 2019-12-03 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用
JP2020092417A JP6967113B2 (ja) 2016-05-18 2020-05-27 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2020092417A Division JP6967113B2 (ja) 2016-05-18 2020-05-27 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023065202A Division JP2023099007A (ja) 2016-05-18 2023-04-12 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用

Publications (2)

Publication Number Publication Date
JP2022036934A JP2022036934A (ja) 2022-03-08
JP7263481B2 true JP7263481B2 (ja) 2023-04-24

Family

ID=66670722

Family Applications (6)

Application Number Title Priority Date Filing Date
JP2018510791A Active JP6538966B2 (ja) 2016-05-18 2017-05-18 メッセージングのための装置、方法及びグラフィカル・ユーザ・インタフェース
JP2019106495A Active JP6851115B2 (ja) 2016-05-18 2019-06-06 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用
JP2019218615A Expired - Fee Related JP6710806B2 (ja) 2016-05-18 2019-12-03 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用
JP2020092417A Active JP6967113B2 (ja) 2016-05-18 2020-05-27 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用
JP2021173046A Active JP7263481B2 (ja) 2016-05-18 2021-10-22 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用
JP2023065202A Pending JP2023099007A (ja) 2016-05-18 2023-04-12 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用

Family Applications Before (4)

Application Number Title Priority Date Filing Date
JP2018510791A Active JP6538966B2 (ja) 2016-05-18 2017-05-18 メッセージングのための装置、方法及びグラフィカル・ユーザ・インタフェース
JP2019106495A Active JP6851115B2 (ja) 2016-05-18 2019-06-06 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用
JP2019218615A Expired - Fee Related JP6710806B2 (ja) 2016-05-18 2019-12-03 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用
JP2020092417A Active JP6967113B2 (ja) 2016-05-18 2020-05-27 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2023065202A Pending JP2023099007A (ja) 2016-05-18 2023-04-12 グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用

Country Status (7)

Country Link
US (4) US11221751B2 (ja)
EP (2) EP4311201A3 (ja)
JP (6) JP6538966B2 (ja)
KR (6) KR102338357B1 (ja)
CN (1) CN111176509B (ja)
AU (2) AU2021269318B2 (ja)
BR (1) BR112018073693A2 (ja)

Families Citing this family (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10645788B2 (en) 2014-03-27 2020-05-05 Nikon Corporation X-ray generation device, X-ray device, and method for manufacturing structure
US11320982B2 (en) 2016-05-18 2022-05-03 Apple Inc. Devices, methods, and graphical user interfaces for messaging
KR102338357B1 (ko) 2016-05-18 2021-12-13 애플 인크. 그래픽 메시징 사용자 인터페이스 내의 확인응답 옵션들의 적용
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
US10567321B2 (en) 2018-01-02 2020-02-18 Snap Inc. Generating interactive messages with asynchronous media content
US10523606B2 (en) * 2018-01-02 2019-12-31 Snap Inc. Generating interactive messages with asynchronous media content
WO2019187619A1 (ja) * 2018-03-29 2019-10-03 株式会社コナミデジタルエンタテインメント 情報処理装置およびそのプログラムを記録した記録媒体
US11063889B2 (en) 2018-06-08 2021-07-13 Snap Inc. Generating interactive messages with entity assets
CN109871165B (zh) * 2019-02-01 2022-03-01 天津字节跳动科技有限公司 表情回应的显示方法、装置、终端设备和服务器
CN113366483A (zh) * 2019-02-14 2021-09-07 索尼集团公司 信息处理装置、信息处理方法及信息处理程序
USD926797S1 (en) * 2019-02-15 2021-08-03 Canva Pty Ltd Display screen or portion thereof with a graphical user interface
USD926205S1 (en) * 2019-02-15 2021-07-27 Canva Pty Ltd Display screen or portion thereof with a graphical user interface
JP6986035B2 (ja) * 2019-02-19 2021-12-22 日本エンタープライズ株式会社 コミュニケーションシステム、コミュニケーションプログラム、およびコミュニケーション処理方法
US11012390B1 (en) 2019-03-28 2021-05-18 Snap Inc. Media content response in a messaging system
CN110290052B (zh) * 2019-05-31 2022-11-01 维沃移动通信有限公司 会话处理方法、装置、移动终端
CN110442279B (zh) * 2019-07-22 2021-05-28 维沃移动通信有限公司 一种消息发送方法及移动终端
US11252274B2 (en) * 2019-09-30 2022-02-15 Snap Inc. Messaging application sticker extensions
CN113325982A (zh) * 2019-11-12 2021-08-31 北京字节跳动网络技术有限公司 一种会话消息显示方法、装置、电子设备及存储介质
JP2023503568A (ja) * 2019-11-27 2023-01-31 パシラ クライオテック インコーポレイテッド 低温装置のための表示装置およびインターフェース
US11595739B2 (en) * 2019-11-29 2023-02-28 Gree, Inc. Video distribution system, information processing method, and computer program
US10963145B1 (en) 2019-12-30 2021-03-30 Snap Inc. Prioritizing display of user icons associated with content
US11316806B1 (en) * 2020-01-28 2022-04-26 Snap Inc. Bulk message deletion
US11265274B1 (en) 2020-02-28 2022-03-01 Snap Inc. Access and routing of interactive messages
CN113496533A (zh) * 2020-03-19 2021-10-12 北京字节跳动网络技术有限公司 贴纸处理方法及装置
US11455078B1 (en) 2020-03-31 2022-09-27 Snap Inc. Spatial navigation and creation interface
JP7442091B2 (ja) * 2020-04-30 2024-03-04 グリー株式会社 動画配信装置、動画配信方法及び動画配信プログラム
US11122165B1 (en) * 2020-05-29 2021-09-14 Verizon Patent And Licensing Inc. Systems and methods for customer service agent-guided chat session digital assistant
AU2020239811B2 (en) * 2020-06-09 2022-05-19 Apple Inc. User interfaces for messages
CN111831203B (zh) * 2020-07-03 2022-05-17 Oppo广东移动通信有限公司 信息处理方法、装置、存储介质及电子设备
CN114281439A (zh) * 2020-09-18 2022-04-05 华为技术有限公司 分屏方法、装置及电子设备
WO2022073022A1 (en) * 2020-09-30 2022-04-07 Snap Inc. Turn-based collaborative playlist
CN116235500A (zh) * 2020-09-30 2023-06-06 斯纳普公司 生成用于分享到外部应用的媒体内容项
KR102222770B1 (ko) * 2020-11-04 2021-03-04 신고은 메시지 전송 장치 및 그 방법
JP6883140B1 (ja) * 2020-12-18 2021-06-09 グリー株式会社 情報処理システム、情報処理方法およびコンピュータプログラム
US11782577B2 (en) 2020-12-22 2023-10-10 Snap Inc. Media content player on an eyewear device
US11797162B2 (en) 2020-12-22 2023-10-24 Snap Inc. 3D painting on an eyewear device
US20220207805A1 (en) * 2020-12-30 2022-06-30 Snap Inc. Adding time-based captions to captured video within a messaging system
US11861800B2 (en) 2020-12-30 2024-01-02 Snap Inc. Presenting available augmented reality content items in association with multi-video clip capture
US11924540B2 (en) 2020-12-30 2024-03-05 Snap Inc. Trimming video in association with multi-video clip capture
EP4315267A1 (en) * 2021-03-31 2024-02-07 Snap Inc. Customizable avatar generation system
WO2022250642A1 (ru) * 2021-05-25 2022-12-01 Игорь Олегович КОРЯКА Способ и система для совместного просмотра веб-страницы
US11601387B2 (en) 2021-06-08 2023-03-07 Microsoft Technology Licensing, Llc Generating composite images by combining subsequent data
KR102628773B1 (ko) * 2021-06-21 2024-01-23 주식회사 카카오 이모티콘 추천 방법 및 이모티콘 추천을 제공하는 사용자 단말
US11941227B2 (en) 2021-06-30 2024-03-26 Snap Inc. Hybrid search system for customizable media
CN113553418B (zh) * 2021-07-27 2023-06-02 天津大学 一种基于多模态学习的视觉对话生成方法及装置
CN115857762A (zh) * 2021-09-24 2023-03-28 北京字节跳动网络技术有限公司 一种答复问题方法、装置、设备、介质及程序产品
USD1017618S1 (en) * 2021-10-13 2024-03-12 Zoom Video Communications, Inc. Display screen or portion thereof with graphical user interface
USD1001646S1 (en) 2021-11-01 2023-10-17 Sadiq Maknojia Bottle
USD989629S1 (en) 2021-11-01 2023-06-20 Sadiq Maknojia Bottle
US11635871B1 (en) 2021-11-11 2023-04-25 Microsoft Technology Licensing, Llc Command based personalized composite icons
US11568131B1 (en) 2021-11-11 2023-01-31 Microsoft Technology Licensing, Llc Command based personalized composite templates
US11914923B1 (en) * 2021-12-10 2024-02-27 Amazon Technologies, Inc. Computer system-based pausing and resuming of natural language conversations
US11556225B1 (en) * 2021-12-29 2023-01-17 Atlassian Pty Ltd. Displaying queue information in a graphical user interface of an issue tracking system
WO2023140720A1 (ko) * 2022-01-24 2023-07-27 마인드로직 주식회사 인공 지능 대화 서비스 시스템
US20230370408A1 (en) * 2022-05-16 2023-11-16 Meta Platforms, Inc. Generating and surfacing messaging thread specific and content-based effects

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140047358A1 (en) 2012-08-08 2014-02-13 Samsung Electronics Co., Ltd. Method for providing message function and electronic device thereof
JP2014044723A (ja) 2012-08-27 2014-03-13 Samsung Electronics Co Ltd メッセージ運用方法及びこれを支援する端末機
US20140143684A1 (en) 2012-11-21 2014-05-22 Samsung Electronics Co., Ltd. Message-based conversation operation method and mobile terminal supporting the same

Family Cites Families (284)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1997019429A1 (en) 1995-11-20 1997-05-29 Motorola Inc. Displaying graphic messages in a radio receiver
US6054990A (en) 1996-07-05 2000-04-25 Tran; Bao Q. Computer system with handwriting annotation
US5903728A (en) 1997-05-05 1999-05-11 Microsoft Corporation Plug-in control including an independent plug-in process
US7760187B2 (en) 2004-07-30 2010-07-20 Apple Inc. Visual expander
JP2000090020A (ja) * 1998-09-14 2000-03-31 Sharp Corp 情報処理装置及び返信メール作成プログラムを記録したコンピュータ読み取り可能な記録媒体
US6539421B1 (en) 1999-09-24 2003-03-25 America Online, Inc. Messaging application user interface
US7089504B1 (en) 2000-05-02 2006-08-08 Walt Froloff System and method for embedment of emotive content in modern text processing, publishing and communication
CA2310945C (en) 2000-06-05 2009-02-03 Corel Corporation System and method for magnifying and editing images
EP1172132A3 (en) 2000-06-19 2004-01-02 Sony Computer Entertainment Inc. Entertainment system, recording medium
US7159008B1 (en) * 2000-06-30 2007-01-02 Immersion Corporation Chat interface with haptic feedback functionality
US6869018B2 (en) 2000-07-31 2005-03-22 Reallegal, Llc Transcript management software and methods therefor
US7130885B2 (en) 2000-09-05 2006-10-31 Zaplet, Inc. Methods and apparatus providing electronic messages that are linked and aggregated
GB0113537D0 (en) 2001-06-05 2001-07-25 Superscape Plc Improvements in message display
US7853863B2 (en) 2001-12-12 2010-12-14 Sony Corporation Method for expressing emotion in a text message
JP2004234614A (ja) * 2002-06-19 2004-08-19 Sky Broad International:Kk 携帯端末による電子メッセージの送受信システム及びそのシステムに用いられる携帯端末
US8028023B2 (en) 2002-09-17 2011-09-27 At&T Intellecutal Property I, L.P. Extending functionality of instant messaging (IM) systems
US20040066407A1 (en) * 2002-10-08 2004-04-08 Microsoft Corporation Intelligent windows movement and resizing
US7702315B2 (en) 2002-10-15 2010-04-20 Varia Holdings Llc Unified communication thread for wireless mobile communication devices
US20040179039A1 (en) 2003-03-03 2004-09-16 Blattner Patrick D. Using avatars to communicate
JP2006520053A (ja) 2003-03-03 2006-08-31 アメリカ オンライン インコーポレイテッド 通信するためにアバターを使用する方法
US7340503B2 (en) 2003-03-21 2008-03-04 Vocel, Inc. Interactive messaging system
US7669134B1 (en) 2003-05-02 2010-02-23 Apple Inc. Method and apparatus for displaying information during an instant messaging session
US7549924B2 (en) 2003-05-09 2009-06-23 Microsoft Corporation Instant messaging embedded games
US7103681B2 (en) 2003-06-19 2006-09-05 Nokia Corporation System for rendering multimedia messages by providing, in a multimedia message, URL for downloadable software to receiving terminal
US7343561B1 (en) 2003-12-19 2008-03-11 Apple Inc. Method and apparatus for message display
US8171084B2 (en) 2004-01-20 2012-05-01 Microsoft Corporation Custom emoticons
US20050198124A1 (en) 2004-03-03 2005-09-08 Mccarthy Shawn J. System and method for embedded instant messaging collaboration
US7487441B2 (en) 2004-03-11 2009-02-03 Yahoo!Inc. Method and system of enhanced messaging
US7571213B2 (en) 2004-03-26 2009-08-04 Microsoft Corporation Interactive electronic bubble messaging
US7856469B2 (en) 2004-04-15 2010-12-21 International Business Machines Corporation Searchable instant messaging chat repositories using topic and identifier metadata
US7353466B2 (en) 2004-05-28 2008-04-01 Microsoft Corporation System and method for generating message notification objects on dynamically scaled timeline
US20060036703A1 (en) * 2004-08-13 2006-02-16 Microsoft Corporation System and method for integrating instant messaging in a multimedia environment
US20060041848A1 (en) * 2004-08-23 2006-02-23 Luigi Lira Overlaid display of messages in the user interface of instant messaging and other digital communication services
US20060041629A1 (en) * 2004-08-23 2006-02-23 Luigi Lira Magnification of incoming and outgoing messages in the user interface of instant messaging and other digital communication services
US7619616B2 (en) 2004-12-21 2009-11-17 Microsoft Corporation Pressure sensitive controls
US7483899B2 (en) 2005-01-11 2009-01-27 International Business Machines Corporation Conversation persistence in real-time collaboration system
US8464176B2 (en) 2005-01-19 2013-06-11 Microsoft Corporation Dynamic stacking and expansion of visual items
US7590699B2 (en) 2005-06-23 2009-09-15 Microsoft Corporation Instant messaging with built-in search
WO2007035637A2 (en) 2005-09-19 2007-03-29 Industrial Color, Inc. Digital file management
ITMI20051812A1 (it) 2005-09-29 2007-03-30 Pasqua Roberto Della Servizio di messaggistica istantanea con categorizzazione delle icone emozionali
US8116791B2 (en) 2005-10-31 2012-02-14 Fontip Ltd. Sending and receiving text messages using a variety of fonts
US20070207782A1 (en) 2006-03-06 2007-09-06 Tran Bao Q Multimedia telephone
US8510109B2 (en) 2007-08-22 2013-08-13 Canyon Ip Holdings Llc Continuous speech transcription performance indication
US20080091692A1 (en) 2006-06-09 2008-04-17 Christopher Keith Information collection in multi-participant online communities
US9304675B2 (en) 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
US7861175B2 (en) 2006-09-29 2010-12-28 Research In Motion Limited IM contact list entry as a game in progress designate
US10416838B2 (en) 2006-12-11 2019-09-17 Oath Inc. Graphical messages
US8689132B2 (en) 2007-01-07 2014-04-01 Apple Inc. Portable electronic device, method, and graphical user interface for displaying electronic documents and lists
US20080201434A1 (en) 2007-02-16 2008-08-21 Microsoft Corporation Context-Sensitive Searches and Functionality for Instant Messaging Applications
US8943018B2 (en) 2007-03-23 2015-01-27 At&T Mobility Ii Llc Advanced contact management in communications networks
JP2008305174A (ja) 2007-06-07 2008-12-18 Sony Corp 情報処理装置、情報処理方法、プログラム
US8667418B2 (en) 2007-06-08 2014-03-04 Apple Inc. Object stack
US8751572B1 (en) 2007-06-20 2014-06-10 Google Inc. Multi-user chat search and access to chat archive
US8239461B2 (en) 2007-06-28 2012-08-07 Chacha Search, Inc. Method and system for accessing search services via messaging services
GB0712880D0 (en) 2007-07-03 2007-08-08 Skype Ltd Instant messaging communication system and method
CN101146056A (zh) 2007-09-24 2008-03-19 腾讯科技(深圳)有限公司 一种表情图标的显示方法及系统
US9122751B2 (en) 2007-12-07 2015-09-01 International Business Machines Corporation Method of tagging instant messaging (IM) conversations for easy information sharing
KR100909954B1 (ko) * 2007-12-17 2009-07-30 한국전자통신연구원 사용자기기를 이용한 감성 메시지 작성 및 표현 방법과이를 위한 사용자기기
US8621502B2 (en) 2007-12-21 2013-12-31 Microsoft Corporation Obtaining user reactions to video
US7428702B1 (en) 2008-01-27 2008-09-23 International Business Machines Corporation Method and system for dynamic message correction
KR101513024B1 (ko) 2008-04-22 2015-04-17 엘지전자 주식회사 단말기 및 이것의 이미지 인식 방법
US20090300540A1 (en) 2008-05-29 2009-12-03 Russell Matthew J System, method and computer program product for animal imaging
KR101404367B1 (ko) 2008-07-15 2014-06-20 임머숀 코퍼레이션 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법
TWI374382B (en) 2008-09-01 2012-10-11 Htc Corp Icon operation method and icon operation module
US20110179385A1 (en) 2008-09-24 2011-07-21 Wencheng Li Content classification utilizing a reduced description palette to simplify content analysis
US8584031B2 (en) * 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
US8464167B2 (en) 2008-12-01 2013-06-11 Palo Alto Research Center Incorporated System and method for synchronized authoring and access of chat and graphics
US8762885B2 (en) 2008-12-15 2014-06-24 Verizon Patent And Licensing Inc. Three dimensional icon stacks
US8799820B2 (en) 2008-12-23 2014-08-05 At&T Mobility Ii Llc Dynamically scaled messaging content
JP4683126B2 (ja) 2008-12-26 2011-05-11 ブラザー工業株式会社 入力装置
US8166408B2 (en) * 2009-01-05 2012-04-24 International Business Machines Corporation Management of virtual discussion threads in a synchronous conferencing system
TWI419350B (zh) 2009-02-06 2013-12-11 Ind Tech Res Inst 太陽能電池模組修復裝置與修復方法
US20100223345A1 (en) 2009-03-02 2010-09-02 Microsoft Corporation Communications application having conversation and meeting environments
US9852761B2 (en) 2009-03-16 2017-12-26 Apple Inc. Device, method, and graphical user interface for editing an audio or video attachment in an electronic message
US9159074B2 (en) 2009-03-23 2015-10-13 Yahoo! Inc. Tool for embedding comments for objects in an article
US8938677B2 (en) 2009-03-30 2015-01-20 Avaya Inc. System and method for mode-neutral communications with a widget-based communications metaphor
US9349120B2 (en) 2009-04-08 2016-05-24 Blackberry Limited System and method for silencing notifications for a message thread
KR20100113266A (ko) 2009-04-13 2010-10-21 삼성전자주식회사 휴대용 단말기에서 3차원 영상 메시지 제작 방법 및 장치
US9665563B2 (en) * 2009-05-28 2017-05-30 Samsung Electronics Co., Ltd. Animation system and methods for generating animation based on text-based data and user information
US8621585B2 (en) 2009-06-16 2013-12-31 Z2Live, Inc. Invitation service for multi-device application sessions
KR101590766B1 (ko) * 2009-06-26 2016-02-02 삼성전자주식회사 메시지를 그룹화하고 디스플레이하는 장치 및 방법
KR101686913B1 (ko) 2009-08-13 2016-12-16 삼성전자주식회사 전자기기에서 이벤트 서비스 제공 방법 및 장치
US8358281B2 (en) 2009-12-15 2013-01-22 Apple Inc. Device, method, and graphical user interface for management and manipulation of user interface elements
WO2011085248A1 (en) 2010-01-07 2011-07-14 Swakker, Llc Methods and apparatus for modifying a multimedia object within an instant messaging session at a mobile communication device
KR101319264B1 (ko) 2010-01-22 2013-10-18 전자부품연구원 멀티 터치 압력에 기반한 ui 제공방법 및 이를 적용한 전자기기
US8583149B2 (en) 2010-04-07 2013-11-12 Apple Inc. Registering email addresses for online communication sessions
KR101740433B1 (ko) 2010-06-01 2017-05-26 엘지전자 주식회사 이동 단말기 및 이것의 메시지 표시 방법
US9003306B2 (en) 2010-05-04 2015-04-07 Qwest Communications International Inc. Doodle-in-chat-context
CN101867636B (zh) 2010-06-02 2015-02-04 华为终端有限公司 用户指令执行方法及终端设备
CN101931621A (zh) 2010-06-07 2010-12-29 上海那里网络科技有限公司 一种借助虚拟形象进行情感交流的装置和方法
US8375320B2 (en) 2010-06-22 2013-02-12 Microsoft Corporation Context-based task generation
US8810565B2 (en) 2010-08-27 2014-08-19 Broadcom Corporation Method and system for utilizing depth information as an enhancement layer
US8620850B2 (en) 2010-09-07 2013-12-31 Blackberry Limited Dynamically manipulating an emoticon or avatar
KR101781129B1 (ko) 2010-09-20 2017-09-22 삼성전자주식회사 어플리케이션을 다운로드받아 설치하는 단말장치 및 그 방법
KR101701151B1 (ko) 2010-09-20 2017-02-02 삼성전자주식회사 휴대 단말기를 이용한 통합 메시지 송수신 방법 및 장치
US9531803B2 (en) 2010-11-01 2016-12-27 Google Inc. Content sharing interface for sharing content in social networks
US20120110477A1 (en) 2010-11-02 2012-05-03 Mimesis Republic Systems and methods for enabling virtual social interactions
KR101788046B1 (ko) 2010-11-03 2017-10-19 엘지전자 주식회사 이동 단말기 및 그 제어방법
JP2012113677A (ja) * 2010-11-05 2012-06-14 Aitia Corp 情報処理装置および情報処理プログラム
KR20120081368A (ko) 2011-01-11 2012-07-19 주식회사 엔씨소프트 모바일 플랫폼에서의 채팅을 통한 게임 초대 방법
KR20120107836A (ko) 2011-03-22 2012-10-04 주식회사 아카북 사용자 단말에서 스티커 이미지 서비스 제공 방법 및 장치
KR101226560B1 (ko) 2011-03-29 2013-01-25 (주)티아이스퀘어 커뮤니케이션 서비스 수행 도중 멀티미디어 콘텐츠 공유 서비스 제공 방법 및 시스템
US8989786B2 (en) 2011-04-21 2015-03-24 Walking Thumbs, Llc System and method for graphical expression during text messaging communications
CN102170442A (zh) 2011-04-25 2011-08-31 苏州阔地网络科技有限公司 基于社区平台的电子白板安全同步方法及系统
US8793624B2 (en) 2011-05-18 2014-07-29 Google Inc. Control of a device using gestures
US9272217B1 (en) 2011-06-01 2016-03-01 Zynga Inc. System and method for providing notifications to players of games
WO2012174703A1 (en) 2011-06-20 2012-12-27 Microsoft Corporation Hover translation of search result captions
WO2012178121A1 (en) 2011-06-24 2012-12-27 Google Inc. Group conversation between a plurality of participants
US9411506B1 (en) 2011-06-28 2016-08-09 Google Inc. Providing additional functionality for a group messaging application
US9262522B2 (en) 2011-06-30 2016-02-16 Rednote LLC Method and system for communicating between a sender and a recipient via a personalized message including an audio clip extracted from a pre-existing recording
US8881051B2 (en) 2011-07-05 2014-11-04 Primesense Ltd Zoom-based gesture user interface
KR101801188B1 (ko) 2011-07-05 2017-11-24 엘지전자 주식회사 휴대 전자기기 및 이의 제어방법
IL214855A0 (en) 2011-08-28 2011-10-31 Arnon Joseph A method and device for carrying out a computerized group session
KR101850821B1 (ko) 2011-09-15 2018-04-20 엘지전자 주식회사 이동 단말기 및 이동 단말기의 메시지 표시 방법
US8819154B2 (en) 2011-10-14 2014-08-26 Blackberry Limited User interface methods and apparatus for use in communicating text and photo messages
BR112014010649B1 (pt) 2011-11-03 2022-01-11 Glowbl Interface de comunicação, método de comunicação, e memória
KR101521332B1 (ko) 2011-11-08 2015-05-20 주식회사 다음카카오 인스턴트 메시징 서비스 및 인스턴트 메시징 서비스로부터 확장된 복수의 서비스들을 제공하는 방법
US10129321B2 (en) 2011-12-09 2018-11-13 Blackberry Limited System and method for sharing electronic news items
US9782680B2 (en) 2011-12-09 2017-10-10 Futurewei Technologies, Inc. Persistent customized social media environment
US9639861B2 (en) 2011-12-12 2017-05-02 Textsoft, Inc Messaging with greeting card and gift option
US8366546B1 (en) 2012-01-23 2013-02-05 Zynga Inc. Gamelets
KR101383529B1 (ko) 2012-02-29 2014-04-08 주식회사 팬택 어플리케이션 공유를 위한 이동단말장치 및 이동단말장치에서의 어플리케이션 공유 방법
US20130254710A1 (en) 2012-03-22 2013-09-26 Microsoft Corporation Stacks for content organization
US9685160B2 (en) 2012-04-16 2017-06-20 Htc Corporation Method for offering suggestion during conversation, electronic device using the same, and non-transitory storage medium
US20130297493A1 (en) * 2012-05-02 2013-11-07 Facebook, Inc. Method for enabling gift prepay
KR101488153B1 (ko) * 2012-05-08 2015-02-05 강동원 단말 장치에서 사용자 프로필을 화면에 표시하는 방법
CN105260049B (zh) 2012-05-09 2018-10-23 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
JP6002836B2 (ja) 2012-05-09 2016-10-05 アップル インコーポレイテッド ジェスチャに応答して表示状態間を遷移するためのデバイス、方法、及びグラフィカルユーザインタフェース
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169853A1 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
CN102664832A (zh) 2012-05-21 2012-09-12 李艳平 对消息进行批注和追加修改的方法和装置
KR101917689B1 (ko) 2012-05-22 2018-11-13 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US20140082520A1 (en) 2012-05-24 2014-03-20 Monir Mamoun Method and System for Gesture- and Animation-Enhanced Instant Messaging
US20130329114A1 (en) 2012-06-08 2013-12-12 Samsung Electronics Co., Ltd. Image magnifier for pin-point control
KR101685226B1 (ko) 2012-06-12 2016-12-20 라인 가부시키가이샤 메신저 플랫폼의 인간 관계를 기반으로 하는 소셜 그래프를 활용한 메신저 연계 서비스 시스템 및 방법
US20140143355A1 (en) 2012-06-14 2014-05-22 Bert Berdis Method and System for Video Texting
US8957915B1 (en) 2012-06-14 2015-02-17 Cinemagram Inc. Method, apparatus and system for dynamic images
KR20140000931A (ko) * 2012-06-26 2014-01-06 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US20140006343A1 (en) * 2012-06-29 2014-01-02 OrgSpan, Inc. Methods and Systems for Generating a List of Recent Contacts
US9911222B2 (en) 2012-07-06 2018-03-06 Tangome, Inc. Animation in threaded conversations
EP2872981A4 (en) 2012-07-13 2016-10-19 Samsung Electronics Co Ltd METHOD FOR SENDING AND RECEIVING DATA BETWEEN A MEMO LAYER AND APPLICATION AND ELECTRONIC DEVICE THEREFOR
US9378393B2 (en) 2012-08-02 2016-06-28 Facebook, Inc. Systems and methods for multiple photo fee stories
US9443271B2 (en) * 2012-08-15 2016-09-13 Imvu, Inc. System and method for increasing clarity and expressiveness in network communications
US20140058939A1 (en) 2012-08-24 2014-02-27 Ebay Inc. Method and apparatus for processing payment transactions from a chat application integrated with a payment application that leverages social features from the chat application
WO2014038790A1 (ko) 2012-09-10 2014-03-13 주식회사 원더피플 채팅서비스와 응용서비스를 연결하는 방법 및 시스템
KR20140035160A (ko) 2012-09-13 2014-03-21 김규문 모바일 메시지 애플리케이션의 이미지 이모티콘 검색 방법
KR102013443B1 (ko) 2012-09-25 2019-08-22 삼성전자주식회사 이미지를 전송하기 위한 방법 및 그 전자 장치
EP2713323A1 (en) 2012-09-27 2014-04-02 BlackBerry Limited Apparatus and method pertaining to automatically-suggested emoticons
KR101390228B1 (ko) * 2012-10-22 2014-05-07 (주)카카오 채팅 영역에 이미지를 표시하는 디바이스 및 방법, 그리고 채팅 데이터를 관리하는 서버
US9773229B2 (en) 2012-11-01 2017-09-26 Google Inc. Systems and methods for providing contact group member suggestions
US9948589B2 (en) 2012-11-14 2018-04-17 invi Labs, Inc. System for and method of organizing contacts for chat sessions on an electronic device
CN102970213A (zh) 2012-11-30 2013-03-13 上海量明科技发展有限公司 即时通信交互界面切换显示的方法和客户端
KR102014778B1 (ko) * 2012-12-14 2019-08-27 엘지전자 주식회사 텍스트 메시징 서비스를 제공하는 디지털 디바이스 및 그 제어 방법
US20140189532A1 (en) * 2012-12-28 2014-07-03 Verizon Patent And Licensing Inc. Editing text-based communications
WO2014103046A1 (ja) * 2012-12-28 2014-07-03 楽天Edy株式会社 電子マネーサーバ、電子マネー送金方法、プログラム及び記録媒体
GB201300006D0 (en) * 2013-01-01 2013-02-13 Tomtom Dev Germany Gmbh Vehicle management system
GB201300031D0 (en) * 2013-01-02 2013-02-13 Canonical Ltd Ubuntu UX innovations
KR102045382B1 (ko) 2013-02-13 2019-11-15 삼성전자주식회사 휴대 단말기에서 문자를 편집하는 장치 및 방법
US20140237057A1 (en) 2013-02-21 2014-08-21 Genesys Telecommunications Laboratories, Inc. System and method for processing private messages in a contact center
KR102074940B1 (ko) * 2013-03-07 2020-03-02 삼성전자주식회사 메시지 송수신 방법 및 장치
PL2779580T3 (pl) 2013-03-12 2016-04-29 Deutsche Telekom Ag Sposób oraz urządzenie do instalowania aplikacji na mobilnych urządzeniach końcowych
US10373212B2 (en) 2013-03-14 2019-08-06 Facebook, Inc. Methods for linking images in social feeds to branded content
US8918339B2 (en) 2013-03-15 2014-12-23 Facebook, Inc. Associating an indication of user emotional reaction with content items presented by a social networking system
US10126927B1 (en) 2013-03-15 2018-11-13 Study Social, Inc. Collaborative, social online education and whiteboard techniques
FR3003715A1 (fr) 2013-03-25 2014-09-26 France Telecom Procede d'echange de messages multimedias
KR20140120192A (ko) 2013-04-02 2014-10-13 삼성전자주식회사 데이터 처리 방법 및 그 전자 장치
US20140344726A1 (en) 2013-05-14 2014-11-20 Tencent Technology (Shenzhen) Company Limited Information processing method of im application device and system, im application device, terminal, and storage medium
US9451161B2 (en) 2013-05-20 2016-09-20 Stc.Unm System and methods for video image processing
KR102027899B1 (ko) 2013-05-21 2019-10-02 삼성전자 주식회사 메신저를 이용한 정보 제공 방법 및 장치
KR20140143971A (ko) 2013-06-10 2014-12-18 삼성전자주식회사 홈 화면 공유 장치 및 방법
WO2014201147A1 (en) 2013-06-12 2014-12-18 Feghali John C System and method for action-based input text messaging communication
US10523454B2 (en) 2013-06-13 2019-12-31 Evernote Corporation Initializing chat sessions by pointing to content
US20150006655A1 (en) * 2013-06-28 2015-01-01 Daniel Fradin Intra-conversation Text Message Threading
KR102147900B1 (ko) 2013-07-19 2020-08-25 삼성전자 주식회사 메시지를 제공하는 방법 및 이를 지원하는 사용자 기기
JP5809207B2 (ja) 2013-07-30 2015-11-10 グリー株式会社 メッセージ通信プログラム、メッセージ通信方法及びメッセージ通信システム
KR102047703B1 (ko) 2013-08-09 2019-11-22 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
US9553832B2 (en) 2013-08-13 2017-01-24 Facebook, Inc. Techniques to interact with an application via messaging
US9804760B2 (en) 2013-08-22 2017-10-31 Apple Inc. Scrollable in-line camera for capturing and sharing content
CN104426747B (zh) 2013-09-05 2019-06-25 腾讯科技(深圳)有限公司 即时通信方法、终端和系统
US10320730B2 (en) 2013-09-10 2019-06-11 Xiaomi Inc. Method and device for displaying message
KR102057944B1 (ko) 2013-09-17 2019-12-23 삼성전자주식회사 단말 장치 및 그의 공유 방법
CN104462128B (zh) 2013-09-22 2018-04-13 腾讯科技(深圳)有限公司 多媒体文件处理的方法、装置和终端设备
US20150089389A1 (en) 2013-09-24 2015-03-26 Sap Ag Multiple mode messaging
US10057731B2 (en) 2013-10-01 2018-08-21 Ambient Consulting, LLC Image and message integration system and method
KR102138515B1 (ko) 2013-10-01 2020-07-28 엘지전자 주식회사 이동단말기 및 그 제어방법
WO2015050966A1 (en) 2013-10-01 2015-04-09 Filmstrip, Inc. Image and message integration system and method
US10033676B2 (en) 2013-10-31 2018-07-24 International Business Machines Corporation System and method for annotating a transcript of an ongoing group chat session
KR102161764B1 (ko) 2013-10-31 2020-10-05 삼성전자주식회사 카툰 이미지를 이용한 메신저 대화창 표시 방법 및 컴퓨터 판독 가능한 기록 매체
US20150135125A1 (en) 2013-11-12 2015-05-14 Apple Inc. Bubble loupes
KR20150061336A (ko) 2013-11-27 2015-06-04 엘지전자 주식회사 이동단말기 및 그 제어방법
CN104699378B (zh) 2013-12-04 2019-08-06 腾讯科技(深圳)有限公司 多人聊天中信息浏览方法和系统
US20150160832A1 (en) 2013-12-06 2015-06-11 Facebook, Inc. Dismissing Interactive Elements in a User Interface
US20150172246A1 (en) * 2013-12-13 2015-06-18 Piragash Velummylum Stickers for electronic messaging cards
CN104714981B (zh) 2013-12-17 2020-01-10 腾讯科技(深圳)有限公司 语音消息搜索方法、装置及系统
US9246857B2 (en) * 2013-12-23 2016-01-26 Ctext Technology Llc Method and system for correlating conversations in a messaging environment
US20150188861A1 (en) 2013-12-26 2015-07-02 Aaren Esplin Mechanism for facilitating dynamic generation and transmission of canned responses on computing devices
US10050926B2 (en) 2014-02-05 2018-08-14 Facebook, Inc. Ideograms based on sentiment analysis
US10013601B2 (en) 2014-02-05 2018-07-03 Facebook, Inc. Ideograms for captured expressions
US20160014059A1 (en) 2015-09-30 2016-01-14 Yogesh Chunilal Rathod Presenting one or more types of interface(s) or media to calling and/or called user while acceptance of call
CN104935491B (zh) * 2014-03-17 2018-08-07 腾讯科技(深圳)有限公司 一种发送表情图像的方法及装置
JP2015185173A (ja) 2014-03-24 2015-10-22 株式会社 ハイヂィープ タッチ圧力及びタッチ面積による動作対象の臨時操作方法及び端末機
US10140001B2 (en) 2014-03-24 2018-11-27 Facebook, Inc. Configurable electronic communication element
JP6484079B2 (ja) 2014-03-24 2019-03-13 株式会社 ハイディープHiDeep Inc. 感性伝達方法及びそのための端末機
US10482163B2 (en) 2014-04-23 2019-11-19 Klickafy, Llc Clickable emoji
WO2015162072A2 (en) 2014-04-24 2015-10-29 Barclays Bank Plc Instant messaging systems and methods
BR112016024806A2 (pt) 2014-04-24 2018-06-19 Idis Tech Ip Ltd aplicativo de mensagem privada e métodos associados.
WO2015164823A1 (en) 2014-04-25 2015-10-29 Fisher Timothy Isaac Messaging with drawn graphic input
US10845982B2 (en) 2014-04-28 2020-11-24 Facebook, Inc. Providing intelligent transcriptions of sound messages in a messaging application
US9367215B2 (en) 2014-04-30 2016-06-14 AthenTek Incorporated Mobile devices and related methods for configuring a remote device
KR102105961B1 (ko) 2014-05-13 2020-05-28 엘지전자 주식회사 이동단말기 및 그 제어방법
US10516629B2 (en) 2014-05-15 2019-12-24 Narvii Inc. Systems and methods implementing user interface objects
WO2015183456A1 (en) 2014-05-29 2015-12-03 Apple Inc. Consistent extension points to allow an extension to extend functionality of an application to another application
US9563488B2 (en) 2014-05-29 2017-02-07 Apple Inc. Sharing extension points to allow an application to share content via a sharing extension
WO2015183699A1 (en) 2014-05-30 2015-12-03 Apple Inc. Predictive messaging method
WO2015183756A1 (en) 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for capture and transmittal of media and location content
US9887949B2 (en) * 2014-05-31 2018-02-06 Apple Inc. Displaying interactive notifications on touch sensitive devices
US20150350141A1 (en) 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for capture and transmittal of media and location content
WO2015186534A1 (ja) * 2014-06-06 2015-12-10 ソニー株式会社 情報処理装置および方法、並びにプログラム
US20160110907A1 (en) 2014-06-25 2016-04-21 Danke Games Inc. Animation Across Multiple Handheld Computing Devices
JP6413391B2 (ja) 2014-06-27 2018-10-31 富士通株式会社 変換装置、変換プログラム、及び変換方法
US9930167B2 (en) 2014-07-07 2018-03-27 Verizon Patent And Licensing Inc. Messaging application with in-application search functionality
JP6559933B2 (ja) * 2014-07-08 2019-08-14 楽天銀行株式会社 送金制御システム、送金制御方法、及びプログラム
CA3166669A1 (en) 2014-07-10 2016-01-14 Fasetto, Llc Systems and methods for message editing
US9779532B2 (en) 2014-07-31 2017-10-03 Emonster, Inc. Customizable animations for text messages
US20160034977A1 (en) 2014-08-01 2016-02-04 Yahoo! Inc. System and method for embedded search within messaging applications
US10218652B2 (en) 2014-08-08 2019-02-26 Mastercard International Incorporated Systems and methods for integrating a chat function into an e-reader application
US9432314B2 (en) 2014-08-15 2016-08-30 Microsoft Technology Licensing, Llc Quick navigation of message conversation history
US9477375B1 (en) 2014-08-18 2016-10-25 Google Inc. Techniques for insertion of content into chat communication
US9705832B2 (en) * 2014-08-27 2017-07-11 Lenovo (Singapore) Pte. Ltd. Context-aware aggregation of text-based messages
DE202015006141U1 (de) 2014-09-02 2015-12-14 Apple Inc. Elektronische Touch-Kommunikation
US10212111B2 (en) 2014-09-12 2019-02-19 Google Llc System and interface that facilitate selecting videos to share in a messaging application
US20160077793A1 (en) 2014-09-15 2016-03-17 Microsoft Corporation Gesture shortcuts for invocation of voice input
CN106201161B (zh) 2014-09-23 2021-09-03 北京三星通信技术研究有限公司 电子设备的显示方法及系统
US10194015B2 (en) 2014-09-25 2019-01-29 Glu Mobile Inc. Systems and methods for facilitating conversations
US10965633B2 (en) 2014-09-29 2021-03-30 Microsoft Technoiogy Licensing, LLC Session history horizon control
US10361986B2 (en) 2014-09-29 2019-07-23 Disney Enterprises, Inc. Gameplay in a chat thread
TWI617981B (zh) 2014-10-08 2018-03-11 極刻科技(香港)控股有限公司 一種使用線上內容以輸入訊息至應用程式的方法
US20160110714A1 (en) 2014-10-21 2016-04-21 Kim Ramsoe Norland Encapsulated Digital Remittance Solution Within Messaging Application
US20160117299A1 (en) 2014-10-24 2016-04-28 Apple Inc. Device, method, and graphical user interface for visible and interactive corrected content
US10783513B2 (en) * 2014-10-27 2020-09-22 Facebook, Inc. Facilitating sending and receiving of payments using message-based contextual prompts
US20160117665A1 (en) 2014-10-27 2016-04-28 Facebook, Inc. Facilitating initiating payments without a payment credential
KR20160050599A (ko) 2014-10-30 2016-05-11 윤희진 음악이 결합된 이모티콘 서비스 제공방법
US10924444B2 (en) 2014-12-02 2021-02-16 Facebook, Inc. Device, method, and graphical user interface for managing customer relationships using a lightweight messaging platform
CN104601812A (zh) 2015-01-05 2015-05-06 小米科技有限责任公司 短信内容展示方法及短信展示确定方法、装置及系统
KR102247251B1 (ko) 2015-01-13 2021-05-03 엘지전자 주식회사 이동 단말기 및 이의 제어방법
KR20160087640A (ko) * 2015-01-14 2016-07-22 엘지전자 주식회사 이동단말기 및 그 제어방법
CN105991394A (zh) 2015-01-28 2016-10-05 阿里巴巴集团控股有限公司 群聊方法及装置
KR102275180B1 (ko) 2015-02-26 2021-07-08 에스케이플래닛 주식회사 메신저 서비스에서의 그룹 아이콘 구성 방법 및 이를 위한 장치
KR101620050B1 (ko) * 2015-03-03 2016-05-12 주식회사 카카오 인스턴트 메시지 서비스를 통한 시나리오 이모티콘 표시 방법 및 이를 위한 사용자 단말
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10877714B2 (en) * 2015-03-10 2020-12-29 Zoho Corporation Private Limited Methods and apparatus for enhancing electronic presentations
KR102319464B1 (ko) 2015-03-16 2021-10-29 삼성디스플레이 주식회사 터치 장치 및 이를 포함하는 표시 장치
US9715534B2 (en) 2015-03-23 2017-07-25 Dropbox, Inc. Shared folder backed integrated workspaces
US20160279523A1 (en) 2015-03-25 2016-09-29 GAMEin30 Ltd. System and method for interactive gaming
US20160283984A1 (en) 2015-03-26 2016-09-29 Tangome, Inc. Chat advertisements
US10812429B2 (en) 2015-04-03 2020-10-20 Glu Mobile Inc. Systems and methods for message communication
US20160301641A1 (en) 2015-04-13 2016-10-13 Smoke Messaging, LLC Secure messaging system utilizing a limited viewing window
KR102317847B1 (ko) 2015-04-28 2021-10-27 삼성전자주식회사 메시지 처리 방법 및 이를 지원하는 전자 장치
CN115412385A (zh) 2015-05-06 2022-11-29 斯纳普公司 用于短暂群组聊天的系统和方法
US20160334972A1 (en) 2015-05-13 2016-11-17 Yahoo!, Inc. Content overlay for social network posts
KR101567555B1 (ko) 2015-05-18 2015-11-20 이미지랩409(주) 이미지가 이용되는 소셜 네트워크 서비스 시스템 및 방법
KR20160139132A (ko) 2015-05-26 2016-12-07 삼성전자주식회사 전자 장치 및 전자 장치에서의 상황 기반의 정보 처리 방법
CN106339947A (zh) 2015-07-07 2017-01-18 阿里巴巴集团控股有限公司 基于聊天群进行业务操作、获取群成员信息的方法及装置
CN105183276A (zh) 2015-08-19 2015-12-23 小米科技有限责任公司 在聊天界面实现游戏的方法、装置及终端设备
US20170054662A1 (en) 2015-08-21 2017-02-23 Disney Enterprises, Inc. Systems and methods for facilitating gameplay within messaging feeds
CN105119812B (zh) 2015-08-26 2018-05-18 小米科技有限责任公司 在聊天界面更改表情符号的方法、装置及终端设备
KR20170025413A (ko) 2015-08-28 2017-03-08 엘지전자 주식회사 이동 단말기 및 그 제어 방법
CN107924256B (zh) 2015-09-09 2021-03-26 苹果公司 表情符号和预设回复
CN105407033A (zh) 2015-09-18 2016-03-16 云活科技有限公司 一种聊天消息归集显示方法及装置
US20170083210A1 (en) 2015-09-20 2017-03-23 Cisco Technology, Inc. Collaboration room switching
US10203843B2 (en) 2015-09-21 2019-02-12 Microsoft Technology Licensing, Llc Facilitating selection of attribute values for graphical elements
US9898172B2 (en) * 2015-09-25 2018-02-20 Dropbox, Inc. Content item activity feed for presenting events associated with content items
US20170090718A1 (en) 2015-09-25 2017-03-30 International Business Machines Corporation Linking selected messages in electronic message threads
CN105407273B (zh) 2015-10-30 2019-05-07 小米科技有限责任公司 图像的拍摄方法、装置及终端
US10540431B2 (en) 2015-11-23 2020-01-21 Microsoft Technology Licensing, Llc Emoji reactions for file content and associated activities
CN105487770B (zh) * 2015-11-24 2019-09-20 腾讯科技(深圳)有限公司 图片发送方法及装置
US9755740B2 (en) 2015-12-30 2017-09-05 Surefire Llc Receivers for optical narrowcasting
US9939962B2 (en) 2016-02-11 2018-04-10 Hyperkey, Inc. Enhanced keyboard including multiple application execution
US20170308289A1 (en) 2016-04-20 2017-10-26 Google Inc. Iconographic symbol search within a graphical keyboard
US10263933B2 (en) 2016-05-17 2019-04-16 Google Llc Incorporating selectable application links into message exchange threads
US11320982B2 (en) 2016-05-18 2022-05-03 Apple Inc. Devices, methods, and graphical user interfaces for messaging
KR102338357B1 (ko) 2016-05-18 2021-12-13 애플 인크. 그래픽 메시징 사용자 인터페이스 내의 확인응답 옵션들의 적용
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
US10999237B2 (en) 2017-04-10 2021-05-04 Facebook, Inc. Systems and methods for sharing content

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140047358A1 (en) 2012-08-08 2014-02-13 Samsung Electronics Co., Ltd. Method for providing message function and electronic device thereof
JP2014035770A (ja) 2012-08-08 2014-02-24 Samsung Electronics Co Ltd 電子装置でメッセージを編集するための方法及びその電子装置
JP2014044723A (ja) 2012-08-27 2014-03-13 Samsung Electronics Co Ltd メッセージ運用方法及びこれを支援する端末機
US20140143684A1 (en) 2012-11-21 2014-05-22 Samsung Electronics Co., Ltd. Message-based conversation operation method and mobile terminal supporting the same

Also Published As

Publication number Publication date
JP2020077425A (ja) 2020-05-21
JP6710806B2 (ja) 2020-07-01
JP2019514083A (ja) 2019-05-30
JP6967113B2 (ja) 2021-12-01
KR102338357B1 (ko) 2021-12-13
KR20210153750A (ko) 2021-12-17
JP2023099007A (ja) 2023-07-11
EP4113268A1 (en) 2023-01-04
KR20240023200A (ko) 2024-02-20
KR102511443B1 (ko) 2023-03-16
US20240152268A1 (en) 2024-05-09
US20200034033A1 (en) 2020-01-30
KR20230042137A (ko) 2023-03-27
US11221751B2 (en) 2022-01-11
EP4311201A2 (en) 2024-01-24
JP2020191094A (ja) 2020-11-26
KR20200087281A (ko) 2020-07-20
US20220150195A1 (en) 2022-05-12
KR102338357B9 (ko) 2022-03-11
KR20190139343A (ko) 2019-12-17
KR20190082998A (ko) 2019-07-10
KR102636000B1 (ko) 2024-02-08
AU2021269318B2 (en) 2023-01-12
US20230259271A1 (en) 2023-08-17
KR102091368B1 (ko) 2020-03-19
CN111176509B (zh) 2022-01-25
AU2021269318A1 (en) 2021-12-09
US11625165B2 (en) 2023-04-11
JP2020009424A (ja) 2020-01-16
US11966579B2 (en) 2024-04-23
EP4113268B1 (en) 2024-04-17
BR112018073693A2 (pt) 2019-02-26
AU2023201827A1 (en) 2023-04-27
CN111176509A (zh) 2020-05-19
EP4311201A3 (en) 2024-03-20
US20210096736A9 (en) 2021-04-01
JP6851115B2 (ja) 2021-04-14
JP6538966B2 (ja) 2019-09-11
JP2022036934A (ja) 2022-03-08
KR102172901B1 (ko) 2020-11-02

Similar Documents

Publication Publication Date Title
JP7263481B2 (ja) グラフィカルメッセージユーザインタフェースにおける確認応答オプションの使用
AU2020202396B2 (en) Devices, methods, and graphical user interfaces for messaging
JP2019514083A6 (ja) メッセージングのための装置、方法及びグラフィカル・ユーザ・インタフェース
DK179753B1 (en) Devices, methods and graphical user interfaces for messaging

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211118

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211118

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221019

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221128

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230222

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230313

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230412

R150 Certificate of patent or registration of utility model

Ref document number: 7263481

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150