KR20160118336A - 멀티미디어를 캡처하고 전자 메시지로 전송하기 - Google Patents

멀티미디어를 캡처하고 전자 메시지로 전송하기

Info

Publication number
KR20160118336A
KR20160118336A KR1020167024610A KR20167024610A KR20160118336A KR 20160118336 A KR20160118336 A KR 20160118336A KR 1020167024610 A KR1020167024610 A KR 1020167024610A KR 20167024610 A KR20167024610 A KR 20167024610A KR 20160118336 A KR20160118336 A KR 20160118336A
Authority
KR
South Korea
Prior art keywords
user interface
graphical user
message
camera viewfinder
user
Prior art date
Application number
KR1020167024610A
Other languages
English (en)
Other versions
KR101734312B1 (ko
Inventor
벤자민 에스 랑홀츠
루시 총윤 장
Original Assignee
페이스북, 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 페이스북, 인크. filed Critical 페이스북, 인크.
Publication of KR20160118336A publication Critical patent/KR20160118336A/ko
Application granted granted Critical
Publication of KR101734312B1 publication Critical patent/KR101734312B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/02—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail using automatic reactions or user delegation, e.g. automatic replies or chatbot-generated messages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/06—Message adaptation to terminal or network requirements
    • H04L51/066—Format adaptation, e.g. format conversion or compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H04L51/16—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21—Monitoring or handling of messages
    • H04L51/216—Handling conversation history, e.g. grouping of messages in sessions or threads
    • H04L51/32—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/42—Mailbox-related aspects, e.g. synchronisation of mailboxes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/52—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail for supporting social networking services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N5/23216—
    • H04N5/23293—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephone Function (AREA)
  • Telephonic Communication Services (AREA)
  • Input From Keyboards Or The Like (AREA)

Abstract

본 명세서에 서술된 하나 이상의 실시예는 멀티미디어 컨텐츠 아이템을 캡처하고 전자 메시지로서 송신하는 방법 및 시스템을 포함한다. 보다 구체적으로, 본 명세서에 서술된 시스템과 방법은 사용자에게 통신 세션으로부터 떠나지 않고 쉽고 효율적으로 통신 세션에 포함시키기 위한 멀티미디어 컨텐츠 아이템을 캡처하는 기능을 제공한다. 추가적으로, 본 명세서에 서술된 시스템 및 방법은 멀티미디어 컨텐츠 아이템이 추가적인 사용자 상호작용 없이 하나 이상의 상대 사용자에게 멀티미디어 컨텐츠 아이템의 캡처 직후 송신될 수 있게 한다. 다시 말해, 시스템 및 방법은 단일 사용자 상호작용에 응답하여 멀티미디어 컨텐츠 아이템을 캡처하고 자동으로 송신할 수 있다.

Description

멀티미디어를 캡처하고 전자 메시지로 전송하기{CAPTURING AND SENDING MULTIMEDIA AS ELECTRONIC MESSAGES}
하나 이상의 실시예는 일반적으로 전자 메시지 시스템 및 방법에 관한 것이다. 보다 자세하게, 하나 이상의 실시예는 전자 메시지 시스템의 증가하는 기능을 위한 시스템 및 방법에 관한 것이다.
컴퓨팅 장치(예컨대, 컴퓨터, 태블릿 및 스마트폰)는 사람들이 서로 연결되고 통신하는 다양한 방법을 제공한다. 예를 들어, 다양한 전자 메시지 시스템은 전자 메시지를 송수신하는 다양한 방법을 제공한다. 예를 들어, 컴퓨팅 장치는 사용자가 텍스트 메시지, 인스턴트 메시지, 소셜 네트워크 포스팅 및 다른 형식의 전자 통신을 사용하여 다른 사용자와 통신할 수 있게 할 수 있다. 나아가, 전자 통신은 텍스트, 이미지, 비디오, 오디오 및/또는 다른 멀티미디어를 포함하는 다양한 컨텐츠를 포함할 수 있다. 일반적으로, 전자 메시지는 사람들이 서로 연결되고 통신하는 인기 있는 방법이 되었다.
전자 통신에 멀티미디어를 포함하는 것은 전자 통신 세션에 유머, 문맥 및 정보를 추가하는 특히 인기 있는 방법이 되었다. 예를 들어, 사용자는 상대 사용자에게 그 위치를 가리키는 디지털 사진을 전송할 수 있다. 유사하게, 사용자는 조크를 포함하는 전자 메시지에 응답으로 웃는 비디오를 전송할 수 있다. 그러므로, 멀티미디어를 포함하는 것은 텍스트 전자 메시지만으로는 일반적으로 힘든 전자 통신 세션에 표현의 층을 추가하는 쉬운 방법이다.
전자 통신에 멀티미디어를 포함시키는 종래의 프로세스는 일반적으로 문제가 있었다. 예를 들어, 사용자는 일반적으로 전자 통신 세션에 포함시키기 위한 디지털 사진이나 비디오를 캡처하기 위하여 전자 통신 인터페이스에서 떨어진다. 하지만, 전자 통신 인터페이스에서 떨어지는 것은 사용자가 메시지를 놓치거나 멀티미디어 컨텐츠 아이템 추가가 시간이 걸리고 사용자가 짜증나게 만들 수 있다.
나아가, 멀티미디어 컨텐츠 아이템을 캡처하고 전자 통신에 멀티미디어 컨텐츠 아이템을 추가하는 것은 일반적으로 복수의 사용자 상호작용을 포함하는 프로세스이다. 예를 들어, 일반적으로 사용자는 전자 통신 인터페이스에서 카메라 뷰파인더 인터페이스로 전이하기 위하여 사용자 인터페이스와 상호작용한다. 일반적으로 더 많은 사용자 상호작용이 멀티미디어 컨텐츠 아이템(예컨대, 사진 또는 비디오) 캡처, 전자 통신 인터페이스로 복귀 및 최종적으로 멀티미디어 컨텐츠 아이템을 상대 사용자에게 전자 통신의 일부로서 전송하기에 요구된다. 복수의 사용자 상호작용은 일반적으로 멀티미디어를 캡처하고 캡처된 멀티미디어를 전자 통신에 포함시키는데 추가 단계가 요구되고 전자 통신을 구성하는 프로세스에 번거롭다.
그러므로, 메시지 애플리케이션에서 멀티미디어를 캡처하고 전송하는 현재 방법에 몇몇 단점이 있다.
하나 이상의 실시예는 전자 메시지 시스템에 향상된 특징을 제공하는 방법 및 시스템의 분야에 이득 및/또는 하나 이상의 상술한 또는 다른 문제의 해결책을 제공한다. 예를 들어, 본 명세서에 서술되는 방법 및 시스템은 사용자에게 전자 통신 세션에 멀티미디어 컨텐츠 아이템을 추가시키는 더 좋은 기능을 제공한다. 나아가, 하나 이상의 실시예는 쉽고 직관적으로 전자 메시지 시스템의 단일 사용자 인터페이스를 통하는 상술한 또는 다른 이득을 제공할 수 있다.
상술한 내용에 덧붙여, 하나 이상의 실시예의 시스템 및 방법은 사용자가 전자 메시지 시스템에서 떠나지 않고 전자 멀티미디어를 캡처할 수 있게 한다. 예를 들어, 하나 이상의 실시예에서, 전자 메시지 시스템의 사용자 인터페이스는 상대 사용자간에 전송된 전자 메시지를 가지는 통신 스레드와 사용자가 전자 멀티미디어(예컨대, 사진이나 비디오)를 프레이밍하고 캡처할 수 있게 하는 카메라 뷰파인더 모두를 디스플레이한다. 그러므로, 사용자는 통신 스레드를 떠나지 않고 전자 멀티미디어를 캡처할 수 있다.
나아가, 하나 이상의 실시예의 시스템 및 방법은 과잉의 사용자 상호작용을 요구하지 않고 사용자가 전자 멀티미디어를 캡처할 수 있게 한다. 예를 들어, 하나 이상의 실시예에서, 사용자는 전자 멀티미디어를 캡처하면 자동으로 전자 멀티미디어(예컨대, 사진이나 비디오)를 전송할 수 있다. 그러므로, 하나 이상의 실시예는 자발적이고, 신속하고, 즉흥적이거나 편집된 통신을 조성할 수 있다.
본 발명의 한 실시예에서, 방법은: 컴퓨팅 장치의 터치스크린 디스플레이에, 사용자와 하나 이상의 상대 사용자 간에 교환된 복수의 전자 메시지를 포함하는 통신 스레드를 포함하는 메시지 그래픽 사용자 인터페이스를 제공하는 단계; 컴퓨팅 장치의 적어도 하나의 프로세서에 의하여, 카메라 뷰파인더 입력 컨트롤의 선택을 감지하는 단계; 카메라 뷰파인더 입력 컨트롤의 선택의 감지에 응답하여 메시지 그래픽 사용자 인터페이스 내에 카메라 뷰파인더를 제공하는 단계; 컴퓨팅 장치의 적어도 하나의 프로세서에 의하여, 카메라 뷰파인더와의 제1 사용자 상호작용을 감지하는 단계; 및 제1 사용자 상호작용의 감지에 응답하여, 컴퓨팅 장치의 카메라에 의하여, 멀티미디어 컨텐츠 아이템을 캡처하고, 컴퓨팅 장치에 의하여, 캡처된 멀티미디어 컨텐츠 아이템을 전자 메시지로서 송신하는 단계를 포함한다.
카메라 뷰파인더와의 제1 사용자 상호작용을 감지하는 단계는 카메라 뷰파인더와의 탭 터치 제스처를 감지하는 단계를 포함할 수 있다.
멀티미디어 컨텐츠를 캡처하는 단계는 탭 터치 제스처의 감지에 응답하여 디지털 사진을 캡처하는 단계를 포함할 수 있다.
본 발명에 따른 일실시예에서, 방법은 캡처된 디지털 사진을 통신 스레드에 추가하는 단계를 더 포함할 수 있다.
본 발명에 따른 일실시예에서, 방법은 카메라 뷰파인더와의 제2 사용자 상호작용을 감지하는 단계를 더 포함할 수 있다.
카메라 뷰파인더와의 제2 사용자 상호작용을 감지하는 단계는 카메라 뷰파인더와의 프레스-앤드-홀드 터치 제스처를 감지하는 단계를 포함할 수 있다.
멀티미디어 컨텐츠 아이템을 캡처하는 단계는 프레스-앤드-홀드 터치 제스처의 감지에 응답하여 디지털 비디오를 캡처하는 단계를 포함할 수 있다.
캡처된 디지털 비디오의 길이는 프레스-앤드-홀드 터치 제스처가 감지된 길이와 동일할 수 있다.
본 발명에 따른 일실시예에서, 방법은 프레스-앤드-홀드 터치 제스처의 릴리즈의 감지에 응답하여, 통신 스레드에 캡처된 디지털 비디오를 재생할 수 있는 재생 컨트롤을 추가하는 단계를 더 포함할 수 있다.
또한 청구될 수 있는 본 발명에 따른 추가 실시예에서, 방법은: 컴퓨팅 장치의 터치스크린 디스플레이에, 메시지 그래픽 사용자 인터페이스의 제1 부분에 통신 스레드를 가지는 메시지 그래픽 사용자 인터페이스를 제공하는 단계; 컴퓨팅 장치의 적어도 하나의 프로세서에 의하여, 카메라 뷰파인더 입력 컨트롤의 선택을 감지하는 단계; 및 카메라 뷰파인더 입력 컨트롤의 선택에 응답하여, 컴퓨팅 장치의 카메라를 활성화하고 메시지 그래픽 사용자 인터페이스의 제2 부분 내에 카메라 뷰파인더를 제공하는 단계를 포함하고, 통신 스레드는 사용자와 하나 이상의 상대 사용자 간에 교환된 복수의 전자 메시지를 포함한다.
본 발명에 따른 일실시예에서, 방법은: 메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 탭 터치 제스처를 감지하는 단계; 및 메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 탭 터치 제스처의 감지에 응답하여, 카메라 뷰파인더를 통하여 디지털 사진을 캡처하는 단계를 더 포함할 수 있다.
본 발명에 따른 일실시예에서, 방법은: 탭 터치 제스처에 응답하여 캡처된 디지털 사진을 송신하는 단계; 및 탭 터치 제스처에 응답하여 메시지 그래픽 사용자 인터페이스의 제1 부분의 통신 스레드에 캡처된 디지털 사진을 추가하는 단계를 더 포함할 수 있다.
본 발명에 따른 일실시예에서, 방법은: 메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 프레스-앤드-홀드 터치 제스처를 감지하는 단계; 및 메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 프레스-앤드-홀드 터치 제스처를 감지한 기간 동안, 카메라 뷰파인더를 통하여 디지털 비디오를 캡처하는 단계를 더 포함할 수 있다.
본 발명에 따른 일실시예에서, 방법은 프레스-앤드-홀드 터치 제스처의 릴리즈의 감지에 응답하여, 디지털 비디오를 송신하는 단계를 더 포함할 수 있다.
본 발명에 따른 일실시예에서, 방법은 프레스-앤드-홀드 터치 제스처의 릴리즈의 감지에 응답하여, 메시지 그래픽 사용자 인터페이스의 제1 부분 내의 통신 스레드에 캡처된 디지털 비디오를 재생할 수 있는 재생 컨트롤을 추가하는 단계를 더 포함할 수 있다.
본 발명에 따른 일실시예에서, 방법은: 재생 컨트롤과의 탭 터치 제스처를 감지하는 단계; 및 재생 컨트롤과의 탭 터치 제스처의 감지에 응답하여, 메시지 그래픽 사용자 인터페이스의 제1 부분 내의 통신 스레드에서 캡처된 디지털 비디오를 재생하는 단계를 더 포함할 수 있다.
본 발명에 따른 일실시예에서, 방법은: 메시지 입력 컨트롤의 팔레트로부터 메시지 입력 컨트롤의 선택을 감지하는 단계; 및 선택의 감지에 응답하여, 메시지 그래픽 사용자 인터페이스의 제2 부분으로부터 카메라 뷰파인더를 제거하는 단계를 더 포함할 수 있다.
또한 청구될 수 있는 본 발명에 따른 일실시예에서, 비-일시적 컴퓨터 판독가능한 저장매체는 저장된 컴퓨터-실행가능한 명령어를 가지고, 명령어는 프로세서에 의해 실행 시 컴퓨터 시스템으로 하여금: 메시지 그래픽 사용자 인터페이스의 제1 부분에 통신 스레드를 가지는 메시지 그래픽 사용자 인터페이스를 제공하고; 카메라 뷰파인더 입력 컨트롤의 선택을 감지하고; 및 메시지 그래픽 사용자 인터페이스의 제2 부분에 카메라 뷰파인더를 제공하도록 야기하고, 통신 스레드는 사용자와 하나 이상의 상대 사용자 간에 교환된 복수의 전자 메시지를 포함한다.
본 발명에 따른 일실시예에서, 시스템은 실행 시 컴퓨터 시스템으로 하여금: 메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 탭 터치 제스처를 감지하고; 메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 탭 터치 제스처의 감지에 응답하여, 카메라 뷰파인더를 통하여 디지털 사진을 캡처하고; 캡처된 디지털 사진을 송신하고; 및 메시지 그래픽 사용자 인터페이스의 제1 부분의 통신 스레드에 캡처된 디지털 사진을 추가하도록 야기하는 컴퓨터-실행가능한 명령어를 더 포함할 수 있다.
본 발명에 따른 일실시예에서, 시스템은 실행 시 컴퓨터 시스템으로 하여금: 메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 프레스-앤드-홀드 터치 제스처를 감지하고; 메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 프레스-앤드-홀드 터치 제스처를 감지한 기간 동안, 카메라 뷰파인더를 통하여 디지털 비디오를 캡처하고; 디지털 비디오를 송신하고; 및 메시지 그래픽 사용자 인터페이스의 제1 부분 내의 통신 스레드에 캡처된 디지털 비디오를 재생할 수 있는 재생 컨트롤을 추가하도록 야기하는 컴퓨터-실행가능한 명령어를 더 포함할 수 있다.
본 발명에 따른 추가 실시예에서, 하나 이상의 컴퓨터 판독가능한 비-일시적 저장매체는 실행 시 본 발명 또는 임의의 상술한 실시예에 따른 방법을 수행하도록 작동가능한 소프트웨어를 포함한다.
본 발명에 따른 추가 실시예에서, 시스템은: 하나 이상의 프로세서; 및 프로세서에 연결되고 프로세서에 의해 실행가능한 명령어를 포함하는 적어도 하나의 메모리를 포함하고, 프로세서는 명령어를 실행할 때 본 발명 또는 임의의 상술한 실시예에 따른 방법을 수행하도록 작동가능하다.
본 발명의 추가적인 특징과 장점은 후술되는 설명에 포함될 것이고, 부분적으로 설명으로부터 명백하거나 그러한 예시적 실시예의 실행에 의하여 학습될 수 있다. 이러한 실시예의 특징 및 장점은 첨부된 청구항에서 특히 지적되는 기구 및 조합의 수단에 의하여 실현되고 획득될 수 있다. 이들 및 다른 특징은 후술되는 설명 및 첨부된 청구항으로부터 더 완전하게 분명해질 것이고, 또는 아래에 제시되는 예시적인 실시예의 실행에 의해 인식될 수 있다.
본 발명에 따른 실시예는 특히 방법, 저장 매체 및 시스템에 대한 첨부된 청구항에 개시되어 있는데, 한 청구항 카테고리, 예컨대 방법에 언급된 임의의 특징은 다른 청구항 카테고리, 예컨대 시스템에도 청구될 수 있다. 첨부된 청구항의 인용 또는 참조는 형식상의 이유를 위해 선택되었을 뿐이다. 하지만 임의의 이전 청구항의 고의의 참조(특히 다중 인용)로 인한 임의의 구성요소 또한 청구될 수 있고, 청구항 및 그 특징의 임의의 조합이 개시되고 첨부된 청구항에서 선택된 인용과 관계 없이 청구될 수 있다.
따라서, 본 명세서에 서술되거나 도시된 임의의 실시예와 특징은 개별 청구항 및/또는 본 명세서에 서술되거나 도시된 임의의 실시예나 특징 또는 첨부된 청구항의 임의의 특징의 임의의 조합에 청구될 수 있다. 청구될 수 있는 구성요소는 첨부된 청구항에 나타난 특징의 조합뿐만 아니라 청구항의 특징의 임의의 다른 조합을 포함하는데, 청구항에 언급된 각 특징은 청구항의 임의의 다른 특징이나 다른 특징의 조합과 결합될 수 있다.
본 발명의 내용 중에 포함되어 있다.
상술한 및 다른 장점과 특징을 얻을 수 있는 방식으로 서술하기 위하여, 간단히 상술한 하나 이상의 실시예의 측면의 보다 상세한 서술이 첨부되는 도면에 도시된 특정 실시예에 관하여 제공될 것이다. 도면은 치수에 맞게 도시된 것이 아니고, 도면을 통한 설명의 목적을 위하여 유사한 구조의 요소 또는 기능이 일반적으로 유사한 도면 번호에 의해 표시될 수 있음을 유의하여야 한다. 이들 도면은 본 발명의 일반적인 실시예만을 도시하고 따라서 그 범위를 제한하는 것으로 고려되지 않으며, 본 발명은 동반된 도면을 사용하여 추가적인 구체성 및 상세와 함께 서술되고 설명될 것임을 이해하여야 한다:
도 1은 하나 이상의 실시예에 따른 전자 메시지 시스템의 도해를 도시한다.
도 2는 하나 이상의 실시예에 따른 도 1의 시스템을 구현하기 위한 환경의 블록도를 도시한다.
도 3a-3e는 하나 이상의 실시예에 따른 멀티미디어 컨텐츠 아이템을 캡처하고 전송하기 위한 사용자 인터페이스를 도시한다.
도 4a-4g는 하나 이상의 실시예에 따른 멀티미디어 컨텐츠 아이템을 캡처하고 전송하기 위한 사용자 인터페이스를 도시한다.
도 5는 하나 이상의 실시예에 따른 전자 메시지로서 멀티미디어 컨텐츠 아이템을 캡처하고 전송하는 방법의 일련의 행위의 흐름도를 도시한다.
도 6은 하나 이상의 실시예에 따른 전자 메시지로서 멀티미디어 컨텐츠 아이템을 캡처하고 전송하는 방법의 일련의 행위의 흐름도를 도시한다.
도 7은 하나 이상의 실시예에 따른 컴퓨팅 장치의 예시의 블록도를 도시한다.
도 8은 하나 이상의 실시예에 따른 소셜 네트워킹 시스템의 네트워크 환경의 예시를 도시한다.
하나 이상의 실시예는 전자 메시지로서 멀티미디어 컨텐츠 아이템을 전송할 때 사용자에게 효율적이고 효과적인 사용자 경험을 제공하는 전자 메시지 시스템을 포함한다. 보다 자세히는, 본 명세서에 서술되는 하나 이상의 실시예는 사용자가 쉽고 직관적으로 전자 메시지로서 전송할 멀티미디어 컨텐츠 아이템을 생성할 수 있게 한다. 특히, 본 명세서에 서술되는 전자 메시지 시스템은 사용자가 빠르고 쉽게 전자 사진이나 전자 비디오를 메시지로서 생성하고 전송할 수 있게 할 수 있다.
나아가, 전자 메시지 시스템은 사용자가 통신 스레드를 떠나지 않고 전자 사진이나 전자 비디오를 생성할 수 있게 할 수 있다. 예를 들어, 하나 이상의 실시예는 통신 스레드뿐만 아니라 카메라 뷰파인더를 포함하는 사용자 인터페이스를 제공한다. 그러므로, 하나 이상의 실시예는 사용자가 메시지를 수신하고 읽으며 동시에 멀티미디어를 캡처할 수 있게 한다.
나아가, 하나 이상의 실시예의 시스템과 방법은 사용자가 과잉의 사용자 상호작용을 요구하지 않고 전자 멀티미디어를 캡처할 수 있게 한다. 예를 들어, 전자 메시지 시스템은 상이한 타입의 사용자 입력에 응답하여 카메라 뷰파인더를 통하여 상이한 타입의 멀티미디어를 캡처할 수 있다. 추가적으로, 전자 메시지 시스템은 감지된 탭 터치 제스처에 응답하여 카메라 뷰파인더를 통하여 디지털 사진을 캡처할 수 있다. 추가적으로, 전자 메시지 시스템은 감지된 프레스-앤드-홀드 터치 제스처에 응답하여 카메라 뷰파인더를 통하여 디지털 비디오를 캡처할 수 있다.
하나 이상의 실시예는 멀티미디어 캡처에 사용된 사용자 상호작용의 완료 직후 자동으로 캡처된 멀티미디어를 통신 스레드에 추가한다. 예를 들어, 전자 메시지 시스템은 디지털 사진 캡처에 사용된 감지된 탭 터치 제스처에 이어서 바로 캡처된 디지털 사진을 통신 스레드에 추가할 수 있다. 추가적으로, 전자 메시지 시스템은 디지털 비디오 캡처에 사용된 프레스-앤드-홀드 터치 제스처의 감지된 릴리즈 직후 통신 스레드에 캡처된 디지털 비디오를 추가할 수 있다. 따라서, 하나 이상의 실시예는 자발적이고, 신속하고, 즉흥적이거나 편집된 통신을 조성할 수 있다.
도 1은 전자 메시지 시스템(100)의 실시예의 예시를 도시한다. 도시된 바와 같이, 전자 메시지 시스템(100)은 사용자 인터페이스 매니저(102)(또는 간단히 UI 매니저), 사용자 입력 감지기(104), 멀티미디어 매니저(106), 통신 매니저(108) 및 데이터 저장소(110)를 포함하나, 이에 제한되지 않는다. 전자 메시지 시스템(100)의 구성요소(102-110) 각각은 임의의 적절한 통신 기술을 사용하여 서로 통신할 수 있다. 본 명세서가 도 1에 구성요소(102-110)를 개별적으로 도시하지만, 임의의 구성요소(102-110)는 단일 기능이나 모듈과 같이 더 적은 구성요소로 결합되거나, 하나 이상의 실시예에 제공되는 바와 같이 더 많은 구성요소로 나누어질 수 있다. 나아가, 구성요소(102-110)는 도 7과 관련하여 후술하는 바와 같이 하나 이상의 컴퓨팅 장치에 위치하거나 구현될 수 있다. 대안적으로, 전자 메시지 시스템(100)의 부분은 컴퓨팅 장치에 위치하는 한편, 도 8과 관련하여 후술하는 바와 같이 전자 메시지 시스템(100)의 다른 부분은 소셜 네트워킹 시스템에 위치하거나, 일부를 이룰 수 있다.
구성요소(102-110)는 소프트웨어, 하드웨어 또는 양자를 포함할 수 있다. 예를 들어, 구성요소(102-110)는 컴퓨터 판독가능한 저장 매체에 저장되고 하나 이상의 컴퓨팅 장치의 프로세서에 의해 실행가능한 하나 이상의 명령어를 포함할 수 있다. 하나 이상의 프로세서에 의해 실행될 때, 전자 메시지 시스템(100)의 컴퓨터 실행가능한 명령어는 컴퓨팅 장치가 본 명세서에 서술되는 방법을 수행하도록 할 수 있다. 대안적으로, 구성요소(102-110)는 특수 목적 프로세싱 장치와 같은 하드웨어를 포함하여 특정 기능을 수행할 수 있다. 추가적으로 또는 대안적으로, 구성요소(102-110)는 컴퓨터 실행가능한 명령어와 하드웨어의 조합을 포함할 수 있다.
상술한 바와 같이, 그리고 도 1에 도시된 바와 같이, 전자 메시지 시스템(100)은 사용자 인터페이스 매니저(102)를 포함할 수 있다. 사용자 인터페이스 매니저(102)는 사용자가 디스플레이 요소를 보고 상호작용할 수 있게 하는 그래픽 사용자 인터페이스(또는 간단히 "사용자 인터페이스")를 제공하고, 관리하고, 업데이트하고 및/또는 제어한다. 예를 들어, 사용자 인터페이스 매니저(102)는 하나 이상의 디스플레이 요소를 다양한 레이아웃으로 포함하는 다양한 사용자 인터페이스를 식별하거나, 디스플레이하거나, 업데이트하거나 다르게 제공할 수 있다.
보다 구체적으로, 사용자 인터페이스 매니저(102)는 그래픽 사용자 인터페이스 내에 다양한 디스플레이 요소를 디스플레이할 수 있다. 예를 들어, 사용자 인터페이스 매니저(102)는 컴퓨팅 장치의 디스플레이 상에 그래픽 사용자 인터페이스를 디스플레이할 수 있다. 예를 들어, 디스플레이 요소는 버튼, 텍스트 박스, 메뉴, 썸네일, 스크롤 바, 하이퍼링크 등을 포함할 수 있으나 이에 제한되지 않는다. 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 다양한 레이아웃 중 임의의 하나에 디스플레이 요소를 디스플레이하고 포맷할 수 있다.
나아가, 사용자 인터페이스 매니저(102)는 사용자 상호작용에 응답하여 디스플레이 요소를 업데이트, 제거, 리사이즈 또는 재위치할 수도 있다. 예를 들어, 보다 자세히 후술되는 바와 갈이, 전자 메시지 시스템(100)은 다양한 방법으로 사용자 입력을 감지할 수 있다. 예를 들어, 하나 이상의 실시예에서, 감지된 사용자 입력은 사용자 인터페이스 매니저(102)가 감지된 입력에 기반하여 그래픽 사용자 인터페이스를 업데이트하게 할 수 있다. 유사하게, 하나 이상의 실시예에서, 감지된 사용자 입력은 사용자 인터페이스 매니저(102)가 하나 이상의 디스플레이 요소를 리사이즈하거나, 그래픽 사용자 인터페이스 내에서 하나 이상의 디스플레이 요소를 재위치시키거나, 다르게 그래픽 사용자 인터페이스 내에서 하나 이상의 디스플레이 요소를 변경하거나 삭제하게 할 수 있다.
추가적으로, 사용자 인터페이스 매니저(102)는 사용자 상호작용에 기반하여 선택적으로 사용자 인터페이스의 특정 영역을 업데이트할 수 있다. 예를 들어, 하나 이상의 실시예에서, 감지된 사용자 입력은 사용자 인터페이스 매니저(102)가 그래픽 사용자 인터페이스의 오직 하나의 영역 내에서 업데이트하거나 변경하게 할 수 있다. 하나 이상의 실시예에서, 감지된 사용자 상호작용에 대하여, 사용자 인터페이스 매니저(102)는 사용자 인터페이스 내의 다른 영역은 업데이트 없이 계속 디스플레이하며 한 타입의 디스플레이를 제2 타입의 디스플레이로 사용자 인터페이스의 한 영역 내에서 업데이트할 수 있다.
유사한 방식으로, 사용자 인터페이스 매니저(102)는 사용자 상호작용에 응답하여 사용자 인터페이스를 재배치할 수 있다. 예를 들어, 하나 이상의 실시예에서, 감지된 사용자 입력은 사용자 인터페이스 매니저(102)가 그래픽 사용자 인터페이스를 두 개 이상의 영역으로 나누게 할 수 있다. 하나 이상의 실시예에서, 감지된 사용자 상호작용에 대하여, 사용자 인터페이스 매니저(102)는 제1 컬렉션의 디스플레이 요소를 가지는 한 영역만을 디스플레이하는 것에서 제1 영역에 제1 컬렉션의 디스플레이 요소와 제2 영역에 제2 컬렉션의 디스플레이 요소를 가지는 두 영역을 디스플레이하는 것으로 재배치할 수 있다. 이와 같이, 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 감지된 사용자 상호작용에 응답하여 그래픽 사용자 인터페이스 내의 영역을 통합하거나 제거할 수도 있다.
상술한 바와 같이, 그리고 도 1에 도시된 바와 같이, 전자 메시지 시스템(100)은 사용자 입력 감지기(104)를 더 포함할 수 있다. 사용자 입력 감지기(104)는 임의의 적절한 방식으로 사용자 입력을 감지하고, 수신하고, 및/또는 가능하게 한다. 일부 예시에서, 사용자 입력 감지기(104)는 하나 이상의 사용자 상호작용을 감지한다. 본 명세서에 서술되는 바와 같이, "사용자 상호작용"은 하나 이상의 입력 장치의 방법으로 또는 하나 이상의 터치 제스처를 통하여 사용자에 의해 수신된 단일 입력, 입력의 조합을 의미한다. 사용자 상호작용은 다양한 지속 기간을 가질 수 있고 상술한 사용자 인터페이스 매니저(102)에 의해 관리되는 그래픽 사용자 인터페이스 상의 아무데서나 일어날 수 있다.
예를 들어, 사용자 입력 감지기(104)는 키보드, 마우스, 터치 스크린 디스플레이 또는 임의의 다른 입력 기기로부터 사용자 상호작용을 감지할 수 있다. 터치 스크린 디스플레이가 이용된 경우, 사용자 입력 감지기(104)는 터치 스크린의 방법으로 사용자에 의해 제공된 사용자 상호작용(예컨대, 탭 제스처, 스와이프 제스처, 핀치 제스처 등)을 형성하는 하나 이상의 터치 제스처를 감지할 수 있다. 하나 이상의 실시예에서, 사용자 입력 감지기(104)는 터치 스크린 디스플레이 상에 표시되는 그래픽 사용자 인터페이스의 일부로서 디스플레이되는 하나 이상의 디스플레이 요소에 관한 및/또는 향한 터치 제스처를 감지할 수 있다. 사용자 입력 감지기(104)는 사용자 인터페이스 매니저(102)로 하나 이상의 디스플레이 요소에 관한 및/또는 향한 임의의 감지된 터치 제스처를 보고할 수 있다.
사용자 입력 감지기(104)는 추가적으로 또는 대안적으로, 사용자 상호작용을 나타내는 데이터를 수신할 수 있다. 예를 들어, 사용자 입력 감지기(104)는 사용자로부터 하나 이상의 사용자 설정 가능한 파라미터, 사용자로부터 하나 이상의 사용자 명령, 및/또는 임의의 적절한 사용자 입력을 수신할 수 있다. 예를 들어, 사용자 입력 감지기(104)는 음성 명령을 수신하거나 다른 방법으로 사용자 입력을 감지하거나, 검출하거나 수신할 수 있다.
상술한 바와 같이, 그리고 도 1에 도시된 바와 같이, 전자 메시지 시스템(100)은 멀티미디어 매니저(106)를 더 포함할 수 있다. 멀티미디어 매니저(106)는 통신 세션에 포함시키기 위하여 멀티미디어 입력을 캡처하고, 패키징하고, 저장한다. 예를 들어, 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 컴퓨팅 장치의 하나 이상의 카메라와 인터페이스할 수 있다. 예를 들어, 감지된 입력에 응답하여, 멀티미디어 매니저(106)는 하나 이상의 카메라를 통하여 멀티미디어를 캡처하고 첨부되는 멀티미디어 컨텐츠 아이템을 생성할 수 있다.
예를 들어, 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 적어도 하나의 컴퓨팅 장치와 인터페이스하고 사용자 인터페이스 매니저(102)에 카메라 뷰파인더를 제공할 수 있다. 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 제공된 카메라 뷰파인더를 통신 스레드를 포함하는 사용자 인터페이스의 일부로서 디스플레이할 수 있다. 그러므로, 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 동시에 카메라 뷰파인더와 통신 스레드를 디스플레이할 수 있다.
추가적으로, 멀티미디어 매니저(106)는 감지된 사용자 입력에 응답하여 카메라 뷰파인더를 통해 멀티미디어를 캡처할 수 있다. 예를 들어, 멀티미디어 매니저(106)는 감지된 탭 터치 제스처에 응답하여 이미지를 캡처하고, 이미지를 포함하는 디지털 사진 멀티미디어 컨텐츠 아이템을 생성할 수 있다. 또한, 멀티미디어 매니저(106)는 감지된 프레스-앤드-홀드 터치 제스처에 응답하여 비디오를 캡처하고, 디지털 비디오 멀티미디어 컨텐츠 아이템을 생성할 수 있다. 하나 이상의 대안적 실시예에서, 멀티미디어 매니저(106)는 다른 타입의 감지된 입력에 응답하여 다른 타입의 멀티미디어를 생성할 수 있다. 예를 들어, 멀티미디어 매니저(106)는 더블 탭 터치 제스처에 응답하여 버스트 모드로 다수의 고속 이미지를 캡처하거나, 두 손가락 프레스-앤드-홀드 터치 제스처에 응답하여 오디오만을 캡처할 수 있는 등이다.
멀티미디어 매니저(106)는 또한 캡처된 멀티미디어 컨텐츠 아이템을 통신 스레드에 추가할 수 있다. 예를 들어, 하나 이상의 실시예에서, 멀티미디어 캡처에 사용된 감지된 사용자 상호작용 완료에 대하여, 멀티미디어 매니저(106)는 멀티미디어 컨텐츠 아이템을 통신 스레드에 추가할 수 있다. 예를 들어, 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 디지털 사진을 캡처하는데 사용된 감지된 탭 터치 제스처의 완료 직후 추가적인 사용자 행위 없이 디지털 사진을 통신 스레드에 추가할 수 있다. 유사하게, 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 디지털 비디오를 캡처하는데 사용된 감지된 프레스-앤드-홀드 터치 제스처의 완료 직후 디지털 비디오를 통신 스레드에 추가할 수 있다. 그러므로, 동일한(그리고 하나 이상의 실시예에서 단일의) 사용자 상호작용에 응답하여, 멀티미디어 매니저(106)는 멀티미디어 컨텐츠 아이템을 캡처하고, 멀티미디어 아이템을 전자 메시지로 전송하고, 멀티미디어 컨텐츠 아이템을 통신 스레드에 추가할 수 있다.
하나 이상의 실시예에서, 멀티미디어 매니저(106)는 통신 스레드에 추가되면 디스플레이를 위하여 멀티미디어 컨텐츠 아이템을 패키징할 수 있다. 예를 들어, 멀티미디어 매니저(106)는 디지털 비디오 멀티미디어 컨텐츠 아이템을 디지털 비디오 멀티미디어를 재생할 수 있는 재생 컨트롤로 패키징할 수 있다. 멀티미디어 매니저(106)는 그 후 패키징된 디지털 비디오 멀티미디어 컨텐츠 아이템을 가지는 재생 컨트롤을 통신 스레드에 추가할 수 있다. 그러므로, 멀티미디어 매니저(106)는 디지털 비디오가 제3자 멀티미디어 플레이어가 아닌 통신 스레드에서 직접 재생될 수 있게 할 수 있다.
추가적으로, 멀티미디어 매니저(106)는 멀티미디어 컨텐츠 아이템을 통신 스레드에 추가하기 전에 멀티미디어 컨텐츠 아이템을 취소하거나 삭제할 수 있다. 예를 들어, 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 감지된 사용자 상호작용에 응답하여 디지털 사진이나 디지털 비디오의 캡처를 취소할 수 있다. 예를 들어, 멀티미디어 매니저(106)는 감지된 스와이프에 응답하여 디지털 비디오의 캡처를 취소할 수 있다. 이 경우, 멀티미디어 매니저(106)는 이미 캡처된 디지털 비디오나 이미지의 임의의 일부를 버리고 메시지를 전송하거나 통신 스레드에 아무것도 추가하지 않는다.
나아가, 멀티미디어 매니저(106)는 카메라 뷰파인더를 통하여 캡처된 멀티미디어 컨텐츠 아이템을 저장할 수 있다. 예를 들어, 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 멀티미디어 컨텐츠 아이템을 통신 스레드에 전송하고 추가한 후 캡처된 컨텐츠 아이템을 컴퓨팅 장치의 파일 저장소에 저장할 수 있다. 그러므로, 캡처된 멀티미디어 컨텐츠 아이템은 나중에 전자 메시지 시스템에 의하여, 또는 다른 제3자 시스템에 의하여 접근될 수 있다. 하나 이상의 대안적 실시예에서, 멀티미디어 매니저(106)은 멀티미디어 컨텐츠 아이템을 통신 스레드에 전송하고 추가한 후 캡처된 멀티미디어 컨텐츠 아이템을 즉시 버릴 수 있다. 추가적으로, 멀티미디어 매니저(106)는 캡처된 멀티미디어 컨텐츠 아이템을 저장하거나 버릴지 여부를 지정하는 사용자 설정을 수신할 수 있다.
멀티미디어 매니저(106)는 또한 캡처된 멀티미디어 컨텐츠 아이템에 효과를 추가하는 옵션을 제공할 수 있다. 예를 들어, 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 캡처된 멀티미디어 컨텐츠 아이템에 추가될 수 있는 다양한 효과를 제공할 수 있는데, 색상 효과(예컨대, 흑백, 세피아, 컬러 등), 오버레이 효과(예컨대, 테두리 추가, 자막 추가 등), 샤프니스와 콘트라스트 효과, 얼굴 인식과 태그 효과 또는 멀티미디어 컨텐츠 아이템에 적합한 임의의 다른 효과와 같은 것이나 이에 제한되지 않는다. 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 멀티미디어 컨텐츠 아이템 캡처, 멀티미디어 컨텐츠 아이템을 메시지로 전송 및 캡처된 멀티미디어 컨텐츠 아이템을 통신 스레드에 추가하기 전에 효과를 추가하는데 관한 구성을 승인할 수 있다.
상술한 바와 같이, 그리고 도 1에 도시된 바와 같이, 전자 메시지 시스템(100)은 통신 매니저(108)를 더 포함할 수 있다. 통신 매니저(108)는 전자 메시지 시스템(100), 또는 전자 메시지 시스템(100)이 구현되는 컴퓨팅 장치와 데이터를 송수신할 수 있게 할 수 있다. 특히, 통신 매니저(108)는 후술하는 바와 같이 컴퓨팅 장치의 하나 이상의 통신 인터페이스가 데이터, 특히 전자 통신에 관한 데이터를 송신하거나 수신하도록 지시하거나 활성화할 수 있다. 나아가, 통신 매니저(108)는 도 7과 관련하여 더 자세히 후술하는 바와 같이 전자 메시지 시스템(100)으로부터 송신되거나 수신될 컨텐츠 아이템을 하나 이상의 통신 채널을 통하고 적절한 통신 프로토콜을 사용하여 송신될 수 있는 임의의 필요한 형태로 패키징하거나 포맷한다.
나아가, 통신 매니저(108)는 멀티미디어 매니저(106)에 의해 제공된 캡처된 멀티미디어를 하나 이상의 상대 사용자에게 자동으로 송신할 수 있다. 예를 들어, 하나 이상의 실시예에서, 사용자 상호작용의 감지된 완료에 응답하여 추가 사용자 상호작용 없이, 통신 매니저(108)는 캡처된 멀티미디어 컨텐츠 아이템을 통신 시스템의 하나 이상의 상대 사용자에게 전송할 수 있다. 이 방법으로, 전자 메시지 시스템(100)은 자발적인 실시간 통신을 조성할 수 있다. 이것은 멀티미디어 컨텐츠 아이템을 송신하기 전에 사용자 개시 전송 이벤트를 필요로 하는 시스템과 대비된다. 대안적 실시예에서, 통신 매니저(108)는 사용자가 전송 옵션을 선택하면 메시지를 전송할 수 있다.
상술한 바와 같이, 전자 메시지 시스템(100)은 도 1에 도시된 바와 같이 데이터 저장소(110)를 포함할 수 있다. 데이터 저장소(110)는 멀티미디어 컨텐츠 아이템과 연관된 데이터를 나타내는 멀티미디어 데이터(112)를 관리할 수 있다. 예를 들어, 멀티미디어 데이터(112)는: 캡처된 멀티미디어 컨텐츠 아이템, 멀티미디어 효과 옵션과 설정 및 멀티미디어 저장 옵션과 설정을 포함할 수 있으나 이에 제한되지 않는다.
도 2는 전자 메시지 시스템(100)의 하나 이상의 실시예가 구현될 수 있는 시스템(200)의 예시를 도시하는 도해이다. 도 2에 도시된 바와 같이, 시스템(200)은 컴퓨팅 장치(202, 204), 네트워크(206) 및 통신 서버(208)를 포함할 수 있다. 컴퓨팅 장치(202, 204), 네트워크(206) 및 통신 서버(208)는 도 2에 도시된 바와 같이 통신으로 연결된다. 도 2가 컴퓨팅 장치(202, 204), 네트워크(206) 및 통신 서버(208)의 특정 배치를 도시하지만, 다양한 추가 배열이 가능하다. 예를 들어, 컴퓨팅 장치(202, 204)는 통신 서버(208)와 직접 통신하거나, 네트워크(206)를 바이패스하거나, 대안적으로 서로 직접 통신할 수 있다.
컴퓨팅 장치(202, 204), 네트워크(206) 및 통신 서버(208)는 데이터 및/또는 통신 신호 전송에 적합한 임의의 통신 플랫폼과 기술을 사용하여 통신할 수 있다. 예를 들어, 컴퓨팅 장치(202, 204), 네트워크(206) 및 통신 서버(208)는 예컨대 도 7과 관련하여 자세히 후술될 원격 데이터 통신을 지원하는 임의의 통신 기술, 장치, 매체 및 프로토콜을 통하여 통신할 수 있다. 추가적으로, 특정 실시예에서, 컴퓨팅 장치(202, 204) 및 통신 서버(208)는 네트워크(206)을 통하여 통신할 수 있는데, 도 8과 관련하여 보다 자세히 후술되는 하나 이상의 소셜 네트워크를 포함할 수 있다.
통신 서버(208)는 전자 통신 데이터를 생성, 저장, 수신 및 전송할 수 있다. 예를 들어, 통신 서버(208)는 컴퓨팅 장치(202)로부터 전자 통신을 수신하고 수신한 전자 통신을 컴퓨팅 장치(204)로 전송할 수 있다. 특히, 통신 서버(208)는 시스템(200)의 하나 이상의 사용자 간에 전자 메시지를 전송할 수 있다. 통신 서버(208)는 텍스트 메시지, 인스턴트 메시지, 소셜 네트워킹 메시지, 소셜 네트워킹 게시물, 이메일 및 임의의 다른 형식의 전자 통신을 포함하나 이에 제한되지 않는, 넓은 범위의 전자 통신 타입을 수신할 수 있다. 통신 서버(208)에 관한 추가 상세 사항은 도 7과 관련하여 후술될 것이다.
네트워크(206)는 네트워크 또는 네트워크의 컬렉션(예컨대 인터넷, 기업 인트라넷, 가상 사설망(VPN), 근거리 통신망(LAN), 무선 근거리 통신망(WLAN), 셀룰러 네트워크, 광역 통신망(WAN), 도시권 통신망(MAN) 또는 이러한 네트워크의 둘 이상의 조합)을 나타낼 수 있다. 그러므로, 네트워크(206)는 컴퓨팅 장치(202)가 통신 서버(208) 및/또는 컴퓨팅 장치(204)에 접근하거나 그 반대가 되는 임의의 적절한 네트워크일 수 있다. 네트워크(206)는 도 7 및 8에 관하여 보다 자세히 후술될 것이다.
시스템(200)의 시스템 및 네트워크 요소에 더하여, 도 2는 컴퓨팅 장치(202)와 연관될 수 있는 사용자(210) 및 컴퓨팅 장치(204)와 연관될 수 있는 사용자(212)를 도시한다. 도 2가 두 사용자(210, 212)만을 도시하지만, 시스템(200)은 많은 수의 사용자를 포함할 수 있고, 각 사용자는 하나 이상의 컴퓨팅 장치를 통하여 시스템(200)과 상호작용한다. 예를 들어, 사용자(210)는 전자 메시지(예컨대, 인스턴트 메시지)를 구성하고 전송하기 위하여 컴퓨팅 장치(202)와 상호작용할 수 있다. 사용자(210)는 컴퓨팅 장치(202) 상에서, 사용자 인터페이스 매니저(102)에 의해 관리되는 사용자 인터페이스에 의하여 컴퓨팅 장치(202)와 상호작용할 수 있다. 예를 들어, 사용자(210)는 사용자 인터페이스를 이용하여 컴퓨팅 장치(202)가 전자 통신을 구성하고 시스템(200)의 복수의 사용자 중 하나 이상에게 전송하도록 할 수 있다.
하나 이상의 실시예에서, 컴포넌트(102-110)는 도 1과 관련하여 상술한 바와 같이, 하나 이상의 컴퓨팅 장치(202, 204) 및 통신 서버(208)로 구현될 수 있다. 예를 들어, 컴퓨팅 장치(202, 204) 및 통신 서버(208)는 전자 메시지 시스템(100)의 통신 매니저(108)를 통하여 네트워크(206)에 걸쳐 통신할 수 있다. 하나 이상의 실시예에서, 컴퓨팅 장치(202, 204)는 사용자 입력 감지기(104)를 통하여 사용자 입력을 수신할 수 있다. 유사하게, 하나 이상의 실시예에서, 컴퓨팅 장치(202, 204)는 사용자 인터페이스 매니저(102)를 통하여 그래픽 사용자 인터페이스를 제공할 수 있다. 나아가, 하나 이상의 실시예에서, 각 컴퓨팅 장치(202, 204)는 전자 메시지 시스템(100)의 인스턴스를 포함할 수 있다.
보다 자세히 후술되는 바와 같이, 전자 메시지 시스템(100)의 컴포넌트(100-110) 각각은 도 1 및 2와 관련하여 서술되는 바와 같이, 전자 메시지 시스템(100)의 다른 구성요소와 함께 및/또는 조합하여 하나 이상의 그래픽 사용자 인터페이스를 제공할 수 있다. 특히, 컴포넌트(102-110)는 사용자가 다양한 목적으로 디스플레이 요소의 컬렉션과 상호작용할 수 있게 한다. 특히, 도 3a-4g와 이에 따른 설명은 사용자 인터페이스의 다양한 예시적 실시예와 상술한 일반적 원칙에 따른 특징을 설명한다.
일부 예시에서, 컴퓨팅 장치(예컨대, 도 2의 컴퓨팅 장치(202, 204))는 전자 메시지 시스템(100)의 일부 또는 전부를 구현할 수 있다. 예를 들어, 도 3a는 전자 메시지 시스템(100)의 하나 이상의 컴포넌트(102-110)를 구현할 수 있는 컴퓨팅 장치(300)를 도시한다. 도 3a에 도시된 바와 같이, 컴퓨팅 장치(300)는 모바일 폰 장치(예컨대, 스마트폰)과 같이 손에 들고 쓰는 장치이다. 본 명세서에서 사용되는 바와 같이, 용어 "손에 들고 쓰는 장치"는 사용자의 한손으로 들고/구동하는 크기로 구성된 장치를 말한다. 하지만, 추가적인 또는 대안적인 예시로, 태블릿 장치, 손에 들고 쓰는 장치, 더 큰 무선 장치, 랩탑이나 데스크탑 컴퓨터, 개인용 정보 단말기 및/또는 임의의 다른 적절한 컴퓨팅 장치와 같은, 하지만 이에 제한되지 않는 임의의 다른 적절한 컴퓨팅 장치가 본 명세서에 서술되는 하나 이상의 프로세스 및/또는 동작을 수행할 수 있다.
컴퓨팅 장치(300)는 도 7의 컴퓨팅 장치(700)에 관하여 후술되는 임의의 특징 및 컴포넌트를 포함할 수 있다. 도 3a에 도시된 바와 갈이, 컴퓨팅 장치(300)는 사용자 입력이 수신 및/또는 감지될 수 있는 사용자 인터페이스를 디스플레이 또는 제공할 수 있는 터치스크린 디스플레이(302)를 포함한다. 본 명세서에서 사용되는 바와 같이, "터치스크린 디스플레이"는 터치스크린 장치의 디스플레이를 말한다. 하나 이상의 실시예에서, 터치스크린 장치는 사용자(210, 212)가 터치 제스처를 수행할 수 있는 적어도 하나의 표면을 가지는 컴퓨팅 장치(202, 204)(예컨대, 랩탑, 태블릿 컴퓨터, 개인용 정보 단말기, 미디어 플레이어, 모바일 폰)일 수 있다. 추가적으로 또는 대안적으로, 컴퓨팅 장치(300)는 터치패드나 도 7과 관련하여 후술되는 것과 같은 임의의 다른 적절한 입력 장치를 포함할 수 있다.
도 3a는 그래픽 사용자 인터페이스의 한 실시예, 특히 메시지 그래픽 사용자 인터페이스(304)를 디스플레이하는 컴퓨팅 장치(300)의 터치스크린 디스플레이(302)를 도시한다. 예를 들어, 사용자 인터페이스 매니저(102)는 다양한 디스플레이 영역과 디스플레이 요소를 메시지 그래픽 사용자 인터페이스(304)의 일부로서 제공한다. 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 통신 스레드(306)뿐만 아니라 메시지 입력 컨트롤 팔레트 또는 툴바(310)를 제공한다.
상술한 바와 같이, 전자 메시지 시스템(100)의 통신 매니저(108)는 데이터 송수신을 가능하게 할 수 있다. 하나 이상의 실시예에서, 통신 매니저(108)는 컴퓨팅 장치(202, 204)간의 전자 통신 송수신을 가능하게 한다. 또한 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 통신 매니저(108)를 통해 송수신하는 전자 통신을 디스플레이한다. 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 메시지 그래픽 사용자 인터페이스(304) 내의 통신 스레드(306)의 통신 매니저(108)를 통하여 송수신된 전자 통신을 디스플레이할 수 있다.
예를 들어, 도 3a에 도시된 바와 같이, 사용자 인터페이스 매니저(102)는 컴퓨팅 장치(300)의 사용자의 계정으로부터 송신된 전자 메시지(308a)를 포함하는 통신 스레드(306)를 제공한다. 유사하게, 통신 스레드(306)는 컴퓨팅 장치(300)의 사용자의 계정으로부터 수신된 전자 메시지(308b)를 포함할 수 있다. 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 새 메시지가 통신 스레드(306)의 바닥에 추가되어 오래된 메시지가 통신 스레드(306)의 꼭대기에 디스플레이되도록 통신 스레드(306)를 정렬할 수 있다. 대안적인 실시예에서, 사용자 인터페이스 매니저(102)는 사용자에게 전자 메시지(308a, 308b) 간의 시간적 또는 다른 관계를 표시할 수 있는 임의의 방식으로 전자 메시지(308a, 308b)를 정렬할 수 있다.
사용자 인터페이스 매니저(102)는 사용자가 통신 스레드(306) 내의 전자 통신 간의 구별을 돕는 다양한 전자 통신 특징을 제공한다. 예를 들어, 도 3a에 도시된 바와 같이, 사용자 인터페이스 매니저(102)는 컴퓨팅 장치(300)의 사용자의 계정으로부터 송신된 전자 메시지(308a)가 메시지 그래픽 사용자 인터페이스(304)의 한 쪽(예컨대, 오른쪽)을 가리키는 것을 디스플레이한다. 한편, 사용자 인터페이스 매니저(102)는 통신 매니저(108)로부터 수신한 전자 메시지(308b)가 메시지 그래픽 사용자 인터페이스(304)의 다른 쪽(예컨대, 왼쪽)을 가리키는 것을 디스플레이한다. 하나 이상의 실시예에서, 전자 메시지(308a, 308b)의 위치와 방향은 메시지 그래픽 사용자 인터페이스(304) 내에 디스플레이되는 다양한 전자 통신의 기원의 컴퓨팅 장치(300)의 사용자에게 명확한 표시를 제공한다.
사용자가 전자 통신을 구별하는데 도움을 주는 사용자 인터페이스 매니저(102)에 의해 제공되는 다른 특징은 전자 통신의 색일 수 있다. 예를 들어, 도 3a에 도시된 바와 같이, 사용자 인터페이스 매니저(102)는 전송된 전자 메시지(308a)를 제1 색으로 디스플레이하고 수신된 전자 메시지(308b)를 제2 색으로 디스플레이한다. 하나 이상의 실시예에서, 제1 및 제2 색은 각각 반전된 서체 색상을 가지는 검정색과 흰색일 수 있다. 대안적인 실시예에서, 사용자 인터페이스 매니저(102)는 전자 메시지(308a, 308b)를 흰 바탕과 상이한 색의 외곽선으로 디스플레이할 수 있다.
또 다른 대안적 실시예에서, 사용자 인터페이스 매니저(102)는 전자 메시지(308a, 308b)를 상이한 패턴의 배경, 상이한 폰트, 상이한 크기 또는 송신된 전자 메시지(308a)를 수신된 전자 메시지(308b)와 구별할 수 있는 임의의 다른 방식으로 디스플레이할 수 있다. 예를 들어, 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 송신된 전자 메시지(308a)를 파란 배경에 흰색 서체로 디스플레이할 수 있다. 유사하게, 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 수신된 전자 메시지(308b)를 회식 배경에 검정 서체로 디스플레이할 수 있다.
상술한 바와 같이, 사용자 인터페이스 매니저(102)는 또한 메시지 입력 컨트롤 팔레트 또는 툴바(310)를 제공할 수 있다. 도 3a에 도시된 바와 같이 사용자 인터페이스 매니저(102)는 메시지 입력 컨트롤 팔레트 또는 툴바(310)를 메시지 그래픽 사용자 인터페이스(304)의 일부로 디스플레이할 수 있다. 하나 이상의 실시예에서, 메시지 입력 컨트롤 팔레트 또는 툴바(310)는 사용자에게 다양한 메시지 입력 옵션 또는 다른 옵션을 제공하는 다양한 선택가능한 메시지 입력 컨트롤을 포함한다. 예를 들어, 도 3a에서, 메시지 입력 컨트롤 팔레트 또는 툴바(310)는 텍스트 입력 컨트롤(312a), 카메라 뷰파인더 입력 컨트롤(312b), 멀티미디어 입력 컨트롤(312c), 심볼 입력 컨트롤(312d) 및 사운드 입력 컨트롤(312e)을 포함한다. 하나 이상의 대안적 실시예에서, 메시지 입력 컨트롤 팔레트 또는 툴바(310)는 다른 순서로 입력 컨트롤(312a-312e)를 제공하거나, 도 3a에 디스플레이되지 않은 다른 입력 컨트롤을 제공하거나, 도 3a에 도시된 하나 이상의 입력 컨트롤(312a-312e)를 생략할 수 있다.
더 자세히 후술되는 바와 같이, 사용자는 상이한 타입의 전자 통신을 구성하고 전송하기 위하여 임의의 입력 컨트롤(312a-312e)와 상호작용할 수 있다. 예를 들어, 만약 사용자가 텍스트 입력 컨트롤(312a)와 상호작용한다면, 사용자 인터페이스 매니저(102)는 사용자가 텍스트 메시지를 구성하기 위하여 이용할 수 있는 메시지 그래픽 사용자 인터페이스(304)의 일부에 터치스크린 디스플레이 키보드를 제공할 수 있다. 유사하게, 만약 사용자가 멀티미디어 입력 컨트롤(312c)와 상호작용한다면, 사용자 인터페이스 매니저(102)는 메시지 그래픽 사용자 인터페이스(304)의 일부 내에 멀티미디어 컨텐츠 아이템 디스플레이 영역(예컨대, 디지털 사진, 디지털 비디오 등을 디스플레이하기 위한)을 제공할 수 있다. 나아가, 만약 사용자가 사운드 입력 컨트롤(312e)와 상호작용한다면, 사용자 인터페이스 매니저(102)는 사용자가 목소리나 다른 사운드 메시지를 녹음할 수 있는 사운드 녹음 컨트롤을 제공할 수 있다. 유사하게, 보다 자세히 후술되는 바와 같이, 만약 사용자가 카메라 뷰파인더 입력 컨트롤(312b)와 상호작용한다면, 사용자 인터페이스 매니저(102)는 메시지 그래픽 사용자 인터페이스(304)의 일부 내에 사용자가 디지털 사진 또는 디지털 비디오를 캡처, 송신하고 통신 스레드(306)에 추가하기 위해 이용할 수 있는 디지털 카메라 인터페이스를 제공할 수 있다.
사용자는 전자 메시지 시스템(100)을 통하여 메시지를 구성하고 하나 이상의 상대 사용자에게 송신하기 위하여 임의의 메시지 입력 컨트롤(312a-e)과 상호작용할 수 있다. 예를 들어, 도 3b에서, 사용자의 손가락(314)이 카메라 뷰파인더 입력 컨트롤(312b)와 상호작용하는 것이 도시되어 있다. 하나 이상의 실시예에서, 사용자 입력 감지기(104)는 사용자의 손가락(314)의 카메라 뷰파인더 입력 컨트롤(312b)와의 상호작용(예컨대, 탭 터치 제스처)를 감지할 수 있다. 사용자 인터페이스 매니저(102)는 입력 컨트롤 표시자(318)를 디스플레이하여 어떤 입력 컨트롤(312a-e)이 현재 활성화 중인지 표시할 수 있다. 추가적으로, 도 3b에 도시된 바와 같이, 사용자 입력 감지기(104)가 카메라 뷰파인더 입력 컨트롤(312b) 상의 탭 터치 제스처를 감지하면, 사용자 인터페이스 매니저(102)는 카메라 뷰파인더(316)를 디스플레이할 수 있다. 다시 말해, 감지된 사용자 상호작용에 응답하여 전자 메시지 시스템(100)은 컴퓨팅 장치(300)의 카메라를 활성화하고 카메라 뷰파인더(316) 내에 컴퓨팅 장치(300)의 카메라로부터의 데이터(이미지/비디오) 스트림을 디스플레이할 수 있다.
특히, 도 3b에 도시된 바와 같이, 사용자 인터페이스 매니저(102)는 메시지 그래픽 사용자 인터페이스(304)의 제1 부분(예컨대, 윗부분)에 통신 스레드(306)를 제공할 수 있다. 사용자 인터페이스 매니저(102)는 메시지 그래픽 사용자 인터페이스(304)의 제2 부분(예컨대, 아랫부분)에 카메라 뷰파인더(316)를 제공할 수 있다. 그러므로, 사용자 인터페이스 매니저(102)는 사용자가 통신 스레드(306)와 임의의 새 메시지를 보며, 멀티미디어를 보고 캡처할 수 있게 할 수 있다. 대안적인 실시예에서 사용자 인터페이스 매니저(102)는 통신 스레드(306)와 카메라 뷰파인더(316)를 수평적으로 또는 수직적 배열이 아닌 다른 배열로 배치할 수 있다.
하나 이상의 실시예에서, 멀티미디어 매니저(106)는 컴퓨팅 장치(300)의 하나 이상의 카메라와 인터페이스할 수 있고 컴퓨팅 장치(300)의 하나 이상의 카메라에 기반하여 카메라 뷰파인더(316)를 제공할 수 있다. 예를 들어, 하나 이상의 실시예에서, 컴퓨팅 장치(300)는 사용자로부터 멀어지는 방향을 향하는 후면 카메라를 포함할 수 있다. 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 후면 카메라와 인터페이스하고 후면 카메라에 의해 캡처된 이미지를 카메라 뷰파인더(316) 내에 제공할 수 있다. 하나 이상의 실시예에서, 컴퓨팅 장치(300)는 후면 카메라뿐만 아니라 전면 카메라(예컨대, 사용자를 향하는 카메라)를 포함할 수 있다. 다른 실시예에서, 멀티미디어 매니저(106)는 후면 카메라나 전면 카메라와 인터페이스하고 후면 카메라나 전면 카메라에 의해 보여지는 동일한 이미지를 카메라 뷰파인더(316) 내에 제공할 수 있다.
예를 들어, 도 3b에 도시된 바와 같이, 멀티미디어 매니저(106)는 컴퓨팅 장치(300)의 전면 카메라와 인터페이스할 수 있다. 따라서, 카메라 뷰파인더(316)는 전면 카메라에 의해 보여지는 동일한 이미지(예컨대, 사용자의 이미지)를 포함한다. 하나 이상의 실시예에서, 멀티미디어 매니저(106)가 카메라 뷰파인더(316)에 의해 디스플레이되는 이미지가 카메라에 의해 보여지는 이미지와 일치하도록 멀티미디어 매니저(106)는 계속하여 카메라 뷰파인더(316)를 업데이트한다. 특히, 멀티미디어 매니저(106)는 입력 컨트롤 표시자(318)에 의해 표시되는 바와 같이 카메라 뷰파인더 입력 컨트롤(312b)가 활성화 중인 한 계속하여 카메라 뷰파인더(316)를 업데이트한다.
멀티미디어 매니저(106)는 사용자 상호작용에 응답하여 카메라 뷰파인더(316)를 통하여 멀티미디어 컨텐츠 아이템을 캡처할 수 있다. 예를 들어, 도 3c에 도시된 바와 같이, 사용자 인터페이스 매니저(102)는 카메라 뷰파인더 상에서 감지된 사용자 상호작용에 응답하여 카메라 뷰파인더(316)를 통하여 멀티미디어 컨텐츠 아이템을 캡처할 수 있다. 하나 이상의 실시예에서, 사용자 입력 감지기(104)는 사용자의 손가락(314)의 카메라 뷰파인더(316)와의 터치 제스처를 감지할 수 있다. 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 사용자의 손가락(314)의 카메라 뷰파인더(316)와의 감지된 탭 터치 제스처에 응답하여 디지털 사진을 캡처할 수 있다. 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 다른 타입의 사용자 상호작용, 예컨대 음성 명령, 컴퓨팅 장치(300)의 방향 변화(예컨대, 세로 방향에서 가로 방향으로)이나 이 목적에 적합한 다른 타입의 사용자 상호작용에 응답하여 디지털 사진을 캡처할 수 있다.
하나 이상의 실시예에서, 통신 매니저(108)는 즉시 캡처된 멀티미디어 컨텐츠를 하나 이상의 상대 사용자에게 전송할 수 있다. 예를 들어, 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 멀티미디어 컨텐츠 아이템의 캡처 후 즉시 멀티미디어 컨텐츠 아이템을 통신 매니저(108)에게 제공할 수 있다. 따라서, 통신 매니저(108)는 카메라 뷰파인더(316)와의 탭 터치 제스처 상호작용 감지 이후 즉시 하나 이상의 상대 사용자에게 캡처된 멀티미디어 컨텐츠 아이템을 전송할 수 있다.
나아가, 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 캡처된 멀티미디어 컨텐츠 아이템을 통신 스레드(306)에 즉시 추가할 수 있다. 예를 들어, 도 3d에 도시된 바와 같이, 사용자 인터페이스 매니저(102)는 도 3c에 관하여 서술된 감지된 사용자 상호작용에 응답하여 통신 스레드(306)에 캡처된 멀티미디어 컨텐츠 아이템(320)을 추가할 수 있다. 캡처된 멀티미디어 컨텐츠 아이템(320)은 카메라 뷰파인더(316)와의 감지된 탭 터치 제스처 상호작용에 응답하여 멀티미디어 매니저(106)에 의해 캡처된 디지털 사진일 수 있다.
따라서, 전자 메시지 시스템(100)은 사용자가 잉여 사용자 상호작용을 요구하지 않고 전자 멀티미디어를 캡처하고 전송하게 할 수 있다. 예를 들어, 멀티미디어(320)가 캡처되면 전자 메시지 시스템은 자동으로 캡처된 멀티미디어(320)를 통신 서버(208)를 통해 하나 이상의 상대 사용자에게 전송할 수 있다. 나아가, 전자 메시지 시스템(100)은 멀티미디어(320)가 캡처되면 캡처된 멀티미디어(320)를 통신 스레드(306)에 추가할 수 있다. 다시 말해, 전자 메시지 시스템(100)은 단일 사용자 상호작용(예컨대, 탭 제스처)에 응답하여 멀티미디어 아이템(320)을 캡처하고 전송하고, 통신 스레드(306)에 추가할 수 있다. 따라서, 하나 이상의 실시예는 자발적이고, 신속한, 즉흥적이거나 편집된 통신을 조성할 수 있다.
도 3d에 도시된 바와 같이, 하나 이상의 상대 사용자에게 전송될 때와 통신 스레드(306)에 추가될 때, 멀티미디어 컨텐츠 아이템(320)은 통신 스레드(306) 내에 디스플레이되도록 설정된 크기를 가질 수 있다. 특히, 멀티미디어 컨텐츠 아이템(320)은 수직 방향과 수평 방향 양쪽으로 통신 스레드(306) 전체보다 작게 차지할 수 있다. 통신 스레드(306)의 총 수직 영역 전체를 차지하지 않음으로써, 통신 스레드(306)는 도 3d에 도시된 바와 같이 멀티미디어 컨텐츠 아이템(320)과 하나 이상의 메시지 양자를 디스플레이할 수 있다. 유사하게, 통신 스레드(306)의 총 수평 영역 전체를 차지하지 않음으로써, 멀티미디어 컨텐츠 아이템(320)는 통신 스레드(306)의 한 쪽이 위치하여 멀티미디어 컨텐츠 아이템(320)이 송신 또는 수신된 것인지 여부를 표시할 수 있다.
하나 이상의 실시예에서, 멀티미디어 매니저(106)는 멀티미디어 컨텐츠 아이템(320)이 캡처된 후 카메라 뷰파인더(316)를 계속 업데이트할 수 있다. 예를 들어, 도 3d에 도시된 바와 같이, 멀티미디어 매니저(106)는 카메라 뷰파인더(316)를 업데이트하여 캡처된 멀티미디어 컨텐츠 아이템(320)의 이미지와 다른 이미지를 포함할 수 있다. 그러므로, 사용자는 없거나 적은 딜레이로 전자 메시지 시스템(100)으로부터 멀티미디어 컨텐츠 아이템을 계속 캡처 및 송신할 수 있다.
상술한 바와 같이, 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 캡처된 멀티미디어 컨텐츠 아이템(320)에 특정 디스플레이 효과를 추가하도록 미리 설정될 수 있다. 예를 들어, 하나 이상의 실시예에서, 사용자는 멀티미디어 매니저(106)를 미리 설정하여 캡처된 멀티미디어 컨텐츠 아이템(320)을 흑백으로 제공할 수 있다. 추가적으로 또는 대안적으로, 멀티미디어 매니저(106)는 캡처된 멀티미디어 컨텐츠 아이템에 증가된 샤프니스와 명확도, 테두리, 특정 색상 스킴 또는 멀티미디어 컨텐츠 아이템에 적합한 임의의 다른 디스플레이 효과와 같은 다른 디스플레이 효과를 제공할 수 있다. 실시예와 상관없이, 사용자는 멀티미디어 컨텐츠 아이템의 캡처와 캡처된 멀티미디어 컨텐츠 아이템의 하나 이상의 상대 사용자와의 송신 간에 사용자 상호작용이 요구되지 않도록 멀티미디어 매니저(106)를 미리 설정하여 캡처된 멀티미디어 컨텐츠 아이템에 하나 이상의 디스플레이 효과를 추가할 수 있다.
도 3d는 멀티미디어 컨텐츠 아이템(320)을 송신하는 사용자의 장치(300) 상의 통신 스레드(306)에 추가되는 멀티미디어 컨텐츠 아이템(320)을 도시한다. 수신자의 컴퓨팅 장치(204)가 멀티미디어 컨텐츠 아이템(320)을 수신할 때, 수신자 컴퓨팅 장치(204) 상의 전자 메시지 시스템(100)의 인스턴스는 멀티미디어 컨텐츠 아이템(320)을 통신 스레드(306)에 추가할 수 있다. 특히, 수신자 컴퓨팅 장치(204) 상의 전자 메시지 시스템(100)은 멀티미디어 컨텐츠 아이템(320)을 비록 통신 스레드(306)의 좌측이기는 하나 도 3d에 도시된 것과 유사한 방식으로 통신 스레드(306)에 추가할 수 있다. 멀티미디어 컨텐츠 아이템(320)을 통신 스레드(306)의 좌측에 배치하는 것은 멀티미디어 컨텐츠 아이템(320)이 수신된 메시지라는 것을 표시할 수 있다.
감지된 사용자 상호작용에 응답하여, 사용자 인터페이스 매니저(102)는 카메라 뷰파인더(316)를 다른 컨트롤로 대체할 수 있다. 예를 들어, 도 3e에 도시된 바와 같이, 사용자 입력 감지기(104)는 메시지 입력 컨트롤 팔레트 또는 툴바(310) 내의 텍스트 입력 컨트롤(312a)와 상호작용하는 사용자의 손의 사용자의 손가락(314)의 사용자 상호작용을 감지할 수 있다. 하나 이상의 실시예에서, 텍스트 입력 컨트롤(312a)의 선택 감지에 응답하여(입력 컨트롤 표시자(318)로 표시되는 바와 같이), 사용자 인터페이스 매니저(102)는 카메라 뷰파인더(316)를 터치스크린 디스플레이 키보드(322)로 대체할 수 있다. 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 임의의 텍스트 입력 컨트롤(312a-312b)의 선택의 감지에 응답하여 카메라 뷰파인더(316)를 다른 타입의 컨트롤로 대체할 수 있다.
도 3a-3e는 멀티미디어 컨텐츠가 디지털 사진일 때 멀티미디어 컨텐츠 아이템을 캡처하고 송신하는 프로세스를 도시한다. 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 디지털 비디오인 멀티미디어 컨텐츠도 캡처하고 전송할 수 있다. 예를 들어, 도 4a-4g에 도시된 바와 같이, 멀티미디어 매니저(106)는 디지털 비디오를 캡처할 수 있고, 디지털 비디오를 통신 매니저(108)와 사용자 인터페이스 매니저(102) 양자에 제공할 수 있다.
상술한 바와 같이, 카메라 뷰파인더 입력 컨트롤(312b) 선택 감지에 응답하여, 사용자 인터페이스 매니저(102)는 메시지 그래픽 사용자 인터페이스(304)를 업데이트하여 멀티미디어 매니저(106)에 의해 제공되는 카메라 뷰파인더(316)를 포함할 수 있다. 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 메시지 그래픽 사용자 인터페이스(304)가 여전히 사용자 인터페이스(304)의 한 부분에 통신 스레드(306)를 포함하도록 메시지 그래픽 사용자 인터페이스(304)를 업데이트하여 카메라 뷰파인더(316)를 포함할 수 있다. 상술한 바와 같이, 바람직한 실시예에서, 멀티미디어 매니저(106)는 계속하여 카메라 뷰파인더(316)를 업데이트하여 컴퓨팅 장치(300)의 카메라에 의해 보여진/캡처된 가장 최근 이미지를 포함할 수 있다.
사용자 상호작용의 감지에 응답하여, 멀티미디어 매니저(106)는 카메라 뷰파인더(316)를 통해 멀티미디어 컨텐츠 아이템을 캡처할 수 있는데, 캡처된 멀티미디어 아이템은 디지털 비디오이다. 예를 들어, 사용자 입력 감지기(104)는 카메라 뷰파인더(316)와 상호작용하는 사용자의 손가락(314)의 사용자 상호작용, 예컨대 프레스-앤드-홀드 터치 제스처를 감지할 수 있다. 하나 이상의 대안적인 실시예에서, 감지된 사용자 상호작용은 음성 명령, 특정 시간 동안 컴퓨팅 장치(300)를 가만히 들고 있기 또는 이 목적에 적합한 임의의 다른 타입의 사용자 상호작용일 수 있다.
프레스-앤드-홀드 사용자 상호작용의 감지에 응답하여, 멀티미디어 매니저(106)는 카메라 뷰파인더(316)를 통해 디지털 비디오를 녹화할 수 있다. 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 컴퓨팅 장치(300)에 녹화된 디지털 비디오를 저장할 수도 있다. 멀티미디어 매니저(106)는 프레스-앤드-홀드 사용자 상호작용이 감지된 기간 동안 카메라 뷰파인더(316)를 통해 디지털 비디오를 계속 캡처하고 녹화할 수 있다.
하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 멀티미디어 컨텐츠 아이템 디지털 비디오의 캡처에 관한 하나 이상의 지시를 디스플레이할 수 있다. 예를 들어, 도 4b에 도시된 바와 같이, 사용자 인터페이스 매니저(102)는 "Swipe up to cancel video."라는 지시(324)를 디스플레이할 수 있다. 그러므로, 지시(324)는 사용자가 어떻게 디지털 비디오의 캡처를 취소할 수 있는지 알려준다. 하나 이상의 대안적인 실시예에서, 지시(324)는 사용자에게 다른 타입의 정보를 줄 수 있다. 예를 들어, 한 대안적인 실시예에서, 멀티미디어 매니저(106)는 컴퓨팅 장치(300)가 쓸만한 디지털 비디오를 캡처하기에 충분히 멈춰있지 않다고 결정할 수 있다. 따라서, 그 대안적인 실시예에서, 사용자 인터페이스 매니저(102)는 "Please hold still."이라는 지시(324)를 낼 수 있다.
추가적으로, 사용자 인터페이스 매니저(102)는 디지털 비디오를 캡처하는 동안 임의의 주어진 시점에서 캡처된 디지털 비디오가 얼마나 긴지에 대한 표시자를 디스플레이할 수 있다. 도 4b에 도시된 바와 같이, 사용자 인터페이스 매니저(102)는 녹화 시간 표시자(326)를 디스플레이할 수 있다. 하나 이상의 실시예에서, 녹화 시간 표시자(326)는 지금까지 멀티미디어 매니저(106)에 의해 녹화된 디지털 비디오의 길이를 표시하는, 메시지 그래픽 사용자 인터페이스(304)의 일측에서 연장하는 바일 수 있다. 따라서, 하나 이상의 실시예에서, 녹화 시간 표시자(326)는 녹화 길이를 실시간으로 표시한다.
하나 이상의 실시예에서, 멀티미디어 매니저(106)는 특정 길이(예컨대, 60초 이하)의 녹화를 허용하도록 설정될 수 있다. 이러한 실시예에서, 녹화 시간 표시자(326)는 멀티미디어 매니저(106)가 녹화를 멈추기 전에 얼마나 더 녹화되는지의 표시를 제공할 수도 있다(예컨대, 바가 메시지 그래픽 사용자 인터페이스(304)의 반대측에 도달하면 멀티미디어 매니저(106)는 녹화를 중지하여야 한다). 하나 이상의 실시예에서, 녹화가 시간 제한에 도달하면, 사용자 인터페이스 매니저(102)는 지시(324)를 "5 seconds remaining!"과 같은 경고로 업데이트할 수 있다.
사용자는 통신 매니저(108)가 디지털 비디오를 하나 이상의 상대 사용자에게 송신하기 전에 디지털 비디오의 캡처와 녹화를 취소하기 원할 수 있다. 예를 들어, 도 4b에 도시된 바와 같이, 멀티미디어 매니저(106)는 화살표(328) 방향을 따르는 사용자 상호작용의 감지에 응답하여 디지털 비디오의 캡처와 녹화를 취소할 수 있다. 예를 들어, 상술한 바와 같이, 멀티미디어 매니저(106)는 프레스-앤드-홀드 터치 제스처의 감지에 응답하여 카메라 뷰파인더(316)를 통해 디지털 비디오를 캡처하고 녹화할 수 있다. 하나 이상의 실시예에서, 사용자 입력 감지기(104)는 스와이프 제스처의 릴리즈를 감지하여, 사용자의 손가락(314)가 더 이상 카메라 뷰파인더(316)와 상호작용하지 않는 것과 같이 프레스-앤드-홀드 터치 제스처 도중 사용자의 손의 손가락(314)의 윗방향 스와이프 제스처를 감지할 수 있다. 사용자 상호작용의 감지에 응답하여, 멀티미디어 매니저(106)는 디지털 비디오의 캡처와 녹화를 취소할 수 있다. 이와 같이, 전자 메시지 시스템(100)은 이런 실시예에서 자동으로 임의의 캡처된 비디오를 송신하거나 임의의 캡처된 비디오를 통신 스레드(306)에 추가하지 않을 수 있다.
추가적으로, 상술한 사용자 상호작용의 감지에 응답하여, 멀티미디어 매니저(106)는 이미 녹화 및/또는 저장된 디지털 비디오의 임의의 부분을 버릴 수도 있다. 따라서, 하나 이상의 실시예에서, 디지털 비디오의 녹화 도중 스와이프 더치 제스처의 감지에 응답하여, 멀티미디어 매니저(106)는 디지털 비디오를 삭제할 수 있다. 하나 이상의 대안적인 실시예에서, 멀티미디어 매니저(106)는 스와이프 제스처의 감지 이전에 녹화된 디지털 비디오의 부분을 통신 매니저(108) 및/또는 사용자 인터페이스 매니저(102)에 제공하지 않고 디지털 비디오의 부분을 저장 또는 보존할 수 있다.
멀티미디어 매니저(106)가 상술한 바와 같이 디지털 비디오의 캡처 및 녹화를 취소하면, 사용자 인터페이스 매니저(102)는 메시지 그래픽 사용자 인터페이스(304)를 업데이트할 수 있다. 예를 들어, 도 4c에 도시된 바와 같이, 사용자 인터페이스 매니저(102)는 메시지 그래픽 사용자 인터페이스(304)가 다시 지시(324)가 아닌 메시지 입력 컨트롤 팔레트 또는 툴바(310)를 포함하도록 업데이트할 수 있다. 추가적으로, 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 메시지 그래픽 사용자 인터페이스(304)와 멀티미디어 매니저(106)에 의해 제공되는 카메라 뷰파인더(316)를 계속 디스플레이할 수 있다. 상술하고 도 4c에 도시된 바와 같이, 입력 컨트롤 표시자(318)는 카메라 뷰파인더 입력 컨트롤(312b)이 활성화중임을 계속 표시할 수 있다.
멀티미디어 매니저(106)는 사용자 상호작용 감지에 응답하여 카메라 뷰파인더(316)를 통해 디지털 비디오를 캡처하고 녹화할 수 있다. 예를 들어, 도 4d에 도시된 바와 같이, 사용자 입력 감지기(104)는 사용자의 손의 손가락(314)의 카메라 뷰파인더(316)와의 프레스-앤드-홀드 터치 제스처를 감지할 수 있다. 프레스-앤드-홀드 터치 제스처의 감지에 응답하여, 멀티미디어 매니저(106)는 카메라 뷰파인더(316)를 통해 디지털 비디오로 이루어진 멀티미디어 컨텐츠를 캡처하고 녹화할 수 있다. 또한 상술한 바와 같이, 녹화 시간 표시자(326)가 녹화 길이를 표시할 수 있다.
하나 이상의 실시예에서, 통신 매니저(108)는 캡처된 멀티미디어 컨텐츠 아이템(예컨대, 녹화된 디지털 비디오)를 하나 이상의 상대 사용자에게 프레스-앤드-홀드 터치 제스처의 릴리즈를 감지할 때 송신할 수 있다. 예를 들어, 상술한 바와 같이, 녹화된 디지털 비디오의 길이는 카메라 뷰파인더(316)와의 손가락(314)의 프레스-앤드-홀드 터치 제스처의 감지 기간과 동일할 수 있다. 특정 실시예에서, 프레스-앤드-홀드 터치 제스처의 릴리즈를 감지할 때, 멀티미디어 매니저(106)는 캡처 및 녹화된 디지털 비디오를 통신 매니저(108)로 제공할 수 있다. 하나 이상의 대안적인 실시예에서, 멀티미디어 매니저(106)는 다른 타입의 사용자 상호작용, 예컨대 음성 명령, 컴퓨팅 장치(300)를 흔들기 또는 이 목적에 적합한 임의의 다른 타입의 사용자 상호작용에 응답하여 디지털 비디오를 통신 매니저(108)로 제공할 수 있다. 그 후 통신 매니저(108)는 녹화된 비디오를 메시지로서 송신할 수 있다.
추가적으로, 하나 이상의 실시예에서, 프레스-앤드-홀드 터치 제스처의 릴리즈의 감지에 응답하여, 멀티미디어 매니저(106)는 멀티미디어 컨텐츠 아이템(예컨대, 녹화된 디지털 비디오)을 사용자 인터페이스 매니저(102)에 제공할 수 있다. 추가적으로 또는 대안적으로, 멀티미디어 컨텐츠 아이템(330)을 사용자 인터페이스 매니저(102)에 제공하기 전에, 멀티미디어 매니저(106)는 먼저 멀티미디어 컨텐츠를 패키징할 수 있다.
하나 이상의 실시예에서, 통신 스레드(306)에 추가될 때, 멀티미디어 컨텐츠 아이템(330)는 재생 컨트롤(329)을 포함할 수 있다. 재생 컨트롤(329)는 사용자 상호작용의 감지에 응답하여 메시지 그래픽 사용자 인터페이스(304)의 통신 스레드(306) 내에서 디지털 비디오를 재생하는 상호작용성 컨트롤을 포함할 수 있다. 예를 들어, 도 4e에 도시된 바와 같이, 사용자 입력 감지기(104)는 사용자의 손의 손가락(314)의 재생 컨트롤(329)와의 탭 터치 제스처를 감지할 수 있다. 하나 이상의 실시예에서, 재생 컨트롤(329) 상의 탭 터치 제스처의 감지에 응답하여, 사용자 인터페이스 매니저(102)는 녹음된 멀티미디어 컨텐츠 아이템(330)이 통신 스레드(306) 내에서 재생되도록 할 수 있다. 하나 이상의 대안적인 실시예에서, 사용자 인터페이스 매니저(102)는 다른 타입의 사용자 상호작용, 예컨대 음성 명령, 더블 탭 또는 이 목적에 적합한 임의의 다른 타입의 사용자 입력에 응답하여 디지털 비디오를 재생할 수 있다. 추가 실시예에서, 사용자 인터페이스 매니저(102)는 자동적으로 디지털 비디오를 통신 스레드(306) 내에서 재생할 수 있다. 이러한 실시예에서, 디지털 비디오(330)는 재생 컨트롤(329)를 포함하지 않을 수 있다.
도 4f에 도시된 바와 같이, 그리고 상술한 바와 갈이, 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 녹음된 디지털 비디오(330)가 재생되며 다른 디스플레이 요소를 계속 디스플레이할 수 있다. 예를 들어, 도 4f에 도시된 바와 같이, 사용자 인터페이스 매니저(102)는 메시지 입력 컨트롤 팔레트 또는 툴바(310)뿐만 아니라 카메라 뷰파인더(316)를 계속 디스플레이할 수 있다.
하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 얼마나 많은 디지털 비디오가 재생되었고 얼마나 많은 디지털 비디오 재생되지 않고 남아있는지 표시하기 위하여 녹화된 디지털 비디오(330)와 연관된 재생 표시자를 제공할 수 있다. 예를 들어, 도 4f에 도시된 바와 같이, 사용자 인터페이스 매니저(102)는 재생 표시자(332)를 디스플레이할 수 있다. 도시된 바와 같이, 사용자 인터페이스 매니저(102)는 디지털 비디오(330)의 대략 1/3을 재생하였다.
디지털 사진과 관련하여 상술한 바와 같이, 멀티미디어 매니저(106)는 캡처된 디지털 비디오에 효과를 추가하는 옵션을 제공할 수도 있다. 예를 들어, 하나 이상의 실시예에서, 멀티미디어 매니저(106)는 캡처된 디지털 비디오에 추가될 수 있는 다양한 효과를 제공할 수 있는데, 색상 효과(예컨대, 디지털 비디오의 색을 대체), 오버레이 효과(예컨대, 디지털 비디오에 테두리 추가), 소리 효과(예컨대, 디지털 비디오에 배경음악 트랙을 추가) 또는 임의의 다른 적절한 효과와 같은 것이나 이에 제한되지 않는다. 상술한 바와 같이, 멀티미디어 매니저(106)는 하나 이상의 효과로 미리 설정되어 디지털 비디오의 캡처와 하나 이상의 상대 사용자로의 디지털 비디오 송신 사이에 사용자 상호작용이 필요하지 않을 수 있다.
사용자 상호작용의 감지에 응답하여, 사용자 인터페이스 매니저(102)는 카메라 뷰파인더(316)를 다른 컨트롤로 대체할 수 있다. 예를 들어, 도 4g에 도시된 바와 같이, 사용자 입력 감지기(104)는 사용자의 손의 손가락(314)의 메시지 입력 컨트롤 팔레트 또는 툴바(310) 내의 텍스트 입력 컨트롤(312a)과의 사용자 상호작용을 감지할 수 있다. 하나 이상의 실시예에서, 텍스트 입력 컨트롤(312a)의 선택(입력 컨트롤 표시자(318)로 표시된 바와 같이)의 감지에 응답하여, 사용자 인터페이스 매니저(102)는 카메라 뷰파인더(316)를 터치스크린 디스플레이 키보드(322)로 대체할 수 있다. 하나 이상의 실시예에서, 사용자 인터페이스 매니저(102)는 임의의 텍스트 입력 컨트롤(312a-312b)의 선택의 감지에 응답하여 카메라 뷰파인더(316)를 다른 타입의 컨트롤로 대체할 수 있다.
도 1-4g, 대응하는 텍스트 및 예시는 통신 세션에서 멀티미디어 컨텐츠 아이템을 캡처하고 포함하기 위한 복수의 상이한 시스템과 장치를 제공한다. 상술한 내용에 추가적으로, 본 발명의 실시예는 특정 결과를 달성하기 위한 방법의 행위와 단계를 포함하는 흐름도에 관하여 서술될 수도 있다. 예를 들어, 도 5 및 6은 본 발명의 하나 이상의 실시예에 따른 방법의 예시의 흐름도를 도시한다. 도 5 및 6에 관하여 서술된 방법은 적거나 많은 단계/행위로 수행될 수 있거나 단계/행위는 상이한 순서로 수행될 수 있다. 나아가, 본 명세서에 서술된 단계/행위는 반복되거나 서로 병행하여 또는 동일하거나 유사한 단계/행위의 다른 인스턴스와 병행하여 수행될 수 있다.
도 5는 멀티미디어를 캡처하고 전자 메시지로 송신하는 방법(500)의 한 예시의 흐름도를 도시한다. 방법(500)은 메시지 그래픽 사용자 인터페이스를 제공하는 행위(502)를 포함한다. 특히, 행위(502)는 통신 스레드(306)를 포함하는 메시지 그래픽 사용자 인터페이스(304)를 제공하는 것을 포함할 수 있다. 하나 이상의 실시예에서, 통신 스레드(306)는 사용자와 하나 이상의 상대 사용자 간에 교환된 복수의 전자 메시지(308a, 308b)를 포함할 수 있다.
방법(500)은 카메라 뷰파인더 입력 컨트롤의 선택을 감지하는 행위(504)를 더 포함한다. 특히, 행위(504)는 카메라 뷰파인더 입력 컨트롤(312b)와 상호작용하는 탭 터치 제스처를 감지하는 것을 포함할 수 있다. 하나 이상의 실시예에서, 카메라 뷰파인더 입력 컨트롤(312b)의 선택의 감지는 메시지 입력 컨트롤 팔레트 또는 툴바(310)로부터 카메라 뷰파인더 입력 컨트롤(312b)의 선택의 감지를 포함할 수 있다.
나아가, 방법(500)은 카메라 뷰파인더를 제공하는 행위(506)를 포함한다. 특히, 행위(504)는 메시지 그래픽 사용자 인터페이스(304)의 부분 내에 카메라 뷰파인더(316)를 제공하는 것을 포함할 수 있다. 하나 이상의 실시예에서, 메시지 그래픽 사용자 인터페이스(304)는 제1 부분에 통신 스레드(306)와 제2 부분에 카메라 뷰파인더(316)를 포함할 수 있다.
방법(500)은 카메라 뷰파인더와의 상호작용을 감지하는 행위(508)도 포함한다. 특히, 행위(508)는 카메라 뷰파인더(316)와의 제1 사용자 상호작용을 감지하는 것을 포함할 수 있다. 예를 들어, 하나 이상의 실시예에서, 카메라 뷰파인더(316)와의 제1 사용자 상호작용을 감지하는 것은 카메라 뷰파인더(316)와의 탭 터치 제스처를 감지하는 것을 포함할 수 있다. 방법(500)은 카메라 뷰파인더(316)와의 제2 사용자 상호작용을 감지하는 것을 더 포함할 수 있다. 예를 들어, 하나 이상의 실시예에서, 카메라 뷰파인더(316)와의 제2 사용자 상호작용을 감지하는 것은 카메라 뷰파인더(316)와의 프레스-앤드-홀드 터치 제스처를 감지하는 것을 포함할 수 있다.
추가적으로, 방법(500)은 멀티미디어 컨텐츠 아이템을 캡처하는 행위(510)를 포함할 수 있다. 특히, 행위(510)는 제1 사용자 상호작용의 감지에 응답하여, 멀티미디어 컨텐츠 아이템(320)을 캡처하고 캡처한 멀티미디어 컨텐츠 아이템(320)을 전자 메시지(308a, 308b)로 송신하는 것을 포함할 수 있다. 예를 들어, 하나 이상의 실시예에서, 멀티미디어 컨텐츠 아이템(320)을 캡처하는 것은 탭 터치 제스처의 감지에 응답하여 디지털 사진을 캡처하는 것을 포함할 수 있다. 나아가, 하나 이상의 실시예에서, 멀티미디어 컨텐츠 아이템(320)을 캡처하는 것은 프레스-앤드-홀드 터치 제스처의 감지에 응답하여 디지털 비디오를 캡처하는 것을 포함할 수 있다. 하나 이상의 실시예에서, 캡처된 디지털 비디오의 길이는 감지된 프레스-앤드-홀드 터치 제스처의 길이와 같을 수 있다.
방법(500)은 멀티미디어 컨텐츠 아이템(320)을 통신 스레드(306)로 추가하는 것을 더 포함할 수 있다. 예를 들어, 하나 이상의 실시예에서, 방법(500)은 통신 스레드(306)에 캡처된 디지털 사진을 추가하는 것을 포함할 수 있다. 추가적으로, 하나 이상의 실시예에서, 방법(500)은 프레스-앤드-홀드 터치 제스처의 릴리즈의 감지에 응답하여, 통신 스레드(306)에 캡처된 디지털 비디오의 재생 컨트롤(329)을 추가하는 것을 포함할 수 있다.
도 6은 멀티미디어를 캡처하고 전자 메시지로 송신하는 방법(600)의 흐름도를 도시한다. 방법(600)은 메시지 그래픽 사용자 인터페이스를 제공하는 행위(602)를 포함한다. 특히, 행위(602)는 메시지 그래픽 사용자 인터페이스(304)의 제1 부분에 통신 스레드(306)를 메시지 그래픽 사용자 인터페이스(304)에게 제공하는 것을 포함할 수 있다. 하나 이상의 실시예에서, 통신 스레드(306)는 사용자와 하나 이상의 상대 사용자 간에 교환된 복수의 전자 메시지(308a, 308b)를 포함할 수 있다.
방법(600)은 카메라 뷰파인더 입력 컨트롤의 선택을 감지하는 행위(604)를 더 포함한다. 특히, 행위(604)는 카메라 뷰파인더 입력 컨트롤(312b)와 상호작용하는 탭 터치 제스처를 감지하는 것을 포함할 수 있다. 하나 이상의 실시예에서, 카메라 뷰파인더 입력 컨트롤(312b)의 선택의 감지는 입력 컨트롤의 팔레트(310)로부터 카메라 뷰파인더 입력 컨트롤(312b)의 선택의 감지를 포함할 수 있다.
나아가, 방법(600)은 카메라 뷰파인더를 제공하는 행위(606)를 포함한다. 특히, 행위(606)는 카메라 뷰파인더 입력 컨트롤(312b)의 선택에 응답하여, 메시지 그래픽 사용자 인터페이스(304)의 제2 부분 내에 카메라 뷰파인더(316)를 제공하는 것을 포함할 수 있다. 하나 이상의 실시예에서, 메시지 그래픽 사용자 인터페이스(304)의 제1 부분과 메시지 그래픽 사용자 인터페이스(304)의 제2 부분은 동시에 디스플레이된다.
방법(600)은 메시지 그래픽 사용자 인터페이스(304)의 제2 부분 내에서 탭 터치 제스처를 감지하는 것을 더 포함할 수 있다. 예를 들어, 하나 이상의 실시예에서, 탭 터치 제스처는 카메라 뷰파인더(316)와 상호작용할 수 있다. 메시지 그래픽 사용자 인터페이스(304)의 제2 부분 내의 탭 터치 제스처의 감지에 응답하여, 방법(600)은 카메라 뷰파인더(316)를 통한 디지털 사진의 캡처도 포함할 수 있다. 방법(600)은 캡처된 디지털 사진의 전송과 캡처된 디지털 사진을 메시지 그래픽 사용자 인터페이스(304)의 제1 부분의 통신 스레드(306)에 추가하는 것을 더 포함할 수 있다.
추가적으로, 방법(600)은 메시지 그래픽 사용자 인터페이스(304)의 제2 부분 내의 프레스-앤드-홀드 터치 제스처의 감지를 포함할 수 있다. 메시지 그래픽 사용자 인터페이스(304) 내의 프레스-앤드-홀드 터치 제스처가 감지되는 길이 동안, 방법(600)은 카메라 뷰파인더(316)를 통한 디지털 비디오의 캡처를 포함할 수 있다. 추가적으로, 프레스-앤드-홀드 터치 제스처의 릴리즈의 감지에 응답하여, 방법(600)은 캡처된 디지털 비디오의 송신을 포함할 수 있다. 또한 프레스-앤드-홀드 터치 제스처의 릴리즈의 감지에 응답하여, 방법(600)은 메시지 그래픽 사용자 인터페이스(304)의 제1 부분의 통신 스레드(306)에 캡처된 디지털 비디오를 재생할 수 있는 재생 컨트롤(329)의 추가를 포함할 수 있다.
나아가, 방법(600)은 재생 컨트롤(329)와의 탭 터치 제스처의 감지를 포함할 수 있다. 예를 들어, 하나 이상의 실시예에서, 재생 컨트롤(329)와의 탭 터치 제스처의 감지는 메시지 그래픽 사용자 인터페이스(304)의 제1 부분의 통신 스레드(306)의 재생 컨트롤(329)와의 탭 터치 제스처의 감지를 포함할 수 있다. 재생 컨트롤(329)과의 탭 터치 제스처의 감지에 응답하여, 방법(600)은 메시지 그래픽 사용자 인터페이스(304)의 제1 부분의 통신 스레드(306)의 캡처된 디지털 비디오를 재생하는 것을 포함할 수 있다.
방법(600)은 메시지 입력 컨트롤 팔레트 또는 툴바(310)로부터 텍스트 입력 컨트롤(312a-e)의 선택의 감지를 포함할 수 있다. 예를 들어, 텍스트 입력 컨트롤(312a-e)의 선택의 감지는 텍스트 입력 컨트롤(312a)와 상호작용하는 탭 터치 제스처를 감지하는 것을 포함할 수 있다. 선택의 감지에 응답하여, 방법(600)은 메시지 그래픽 사용자 인터페이스(304)의 제2 부분에서 카메라 뷰파인더(316)를 제거하는 것을 더 포함할 수 있다.
본 명세서의 실시예들은 보다 자세히 후술되는 바와 같은 컴퓨터 하드웨어, 예컨대 하나 이상의 프로세서와 시스템 메모리를 포함하는 특수 목적 또는 일반 목적 컴퓨터를 포함하거나 이용할 수 있다. 본 명세서의 범위 내의 실시예들은 또한 컴퓨터 실행가능한 명령어 및/또는 데이터 구조를 실행하거나 저장하기 위한 물리적 및 다른 컴퓨터 판독가능한 매체를 포함한다. 특정한, 본 명세서에 서술되는 하나 이상의 프로세스는 적어도 부분적으로 컴퓨터 판독가능한 비-일시적 저장매체에 포함되고 하나 이상의 컴퓨팅 장치(예컨대, 본 명세서에 서술되는 임의의 매체 컨텐츠 접근 장치)에 의해 실행가능한 명령어로서 구현될 수 있다. 일반적으로, 프로세서(예컨대, 마이크로프로세서)는 컴퓨터 판독가능한 비-일시적 저장매체(예컨대, 메모리, 기타 등등)으로부터 명령어를 수신하고, 그들 명령어를 실행하고, 그럼으로써 본 명세서에 서술되는 하나 이상의 프로세스를 포함하는 하나 이상의 프로세스를 수행한다.
컴퓨터 판독가능한 매체는 일반 목적 또는 특수 목적용 컴퓨터 시스템에 의해 접근될 수 있는 임의의 사용가능한 미디어일 수 있다. 컴퓨터-실행가능한 명령어를 저장하는 컴퓨터 판독가능한 매체는 비-일시적 컴퓨터 판독가능한 저장 매체(장치)이다. 컴퓨터-실행가능한 명령어를 수행하는 컴퓨터 판독가능한 매체는 전송 매체이다. 그러므로, 예로서 제한 없이, 본 명세서의 실시예는 적어도 두 개의 분리된 상이한 종류의 컴퓨터 판독가능한 매체를 포함할 수 있다: 비-일시적 컴퓨터 판독가능한 저장 매체(장치) 및 전송 매체.
비-일시적 컴퓨터 판독가능한 저장 매체(장치)는 RAM, ROM, EEPROM, CD-ROM, 고체 상태 드라이브("SSD")(예컨대, RAM에 기반한), 플래시 메모리, 상변화 메모리("PCM"), 다른 타입의 메모리, 다른 광학 디스크 저장소, 자기 디스크 저장소 또는 다른 자기적 저장 장치 또는 소정의 프로그램 코드 수단을 컴퓨터 실행가능한 명령어 또는 데이터 구조의 형태로 저장할 수 있고 일반 목적 또는 특수 목적용 컴퓨터에 의해 접근가능한 다른 매체를 포함한다.
"네트워크"는 컴퓨터 시스템 및/또는 모듈 및/또는 다른 전자적 장치 간의 전자적 데이터의 전송을 가능하게 하는 하나 이상의 데이터 링크로 정의된다. 정보가 네트워크 또는 다른 통신 연결(유선, 무선, 또는 유선이나 무선의 조합)을 거쳐 컴퓨터로 전송되거나 제공되면, 컴퓨터는 적절하게 연결을 전송 매체로서 볼 수 있다. 전송 매체는 소정의 프로그램 코드 수단을 컴퓨터 실행가능한 명령어 또는 데이터 구조의 형태로 옮기고 일반 목적 또는 특수 목적용 컴퓨터에 의해 접근가능한 네트워크 및/또는 데이터 링크를 포함할 수 있다. 상기의 조합 또한 컴퓨터 판독가능한 매체의 범위에 포함되어야 한다.
나아가, 다양한 컴퓨터 시스템 구성요소에 이르러, 컴퓨터 실행가능한 명령어 또는 데이터 구조의 형태의 프로그램 코드 수단은 자동으로 전송 매체에서 비-일시적 컴퓨터 판독가능한 저장 매체(장치)로 전송될 수 있다(또는 그 반대). 예를 들어, 네트워크 또는 데이터 링크를 거쳐 수신된 컴퓨터 실행가능한 명령어 또는 데이터 구조는 네트워크 인터페이스 모듈(예컨대, "NIC") 내의 RAM에 버퍼링될 수 있고 최종적으로 컴퓨터 시스템 RAM 및/또는 컴퓨터 시스템에서 덜 휘발적인 컴퓨터 저장 매체(장치)로 전송될 수 있다. 그러므로, 비-일시적 컴퓨터 판독가능한 저장 매체(장치)는 전송 매체 또한(또는 주로) 이용하는 컴퓨터 시스템 구성요소에 포함될 수 있음이 이해될 것이다.
컴퓨터 실행가능한 명령어는 예컨대 프로세서에 의해 실행될 때, 일반 목적 컴퓨터, 특수 목적 컴퓨터 또는 특수 목적 프로세싱 장치가 특정한 기능 또는 기능의 그룹을 수행하게 하는 명령어 및 데이터를 포함한다. 일부 실시예에서, 컴퓨터 실행가능한 명령어는 일반 목적용 컴퓨터에서 실행되어 일반 목적용 컴퓨터를 본 명세서의 요소를 구현하는 특수 목적용 컴퓨터로 바꿀 수 있다. 컴퓨터 실행가능한 명령어는, 예컨대 이진수, 어셈블리 언어와 같은 중간 형태 명령어 또는 소스 코드일 수 있다. 주제가 구조적 특징 및/또는 방법론적 행위 특유의 언어로 서술됐지만, 첨부된 청구항에 정의된 주제는 상술한 특징 또는 행위에 반드시 제한되지 않는다는 것이 이해될 것이다. 오히려, 서술된 특징 및 행위는 청구항을 구현하는 예시적인 형태로서 개시된 것이다.
통상의 기술자는 본 명세서가 개인용 컴퓨터, 데스크탑 컴퓨터, 랩탑 컴퓨터, 메시지 프로세서, 휴대용 장치, 멀티 프로세서 시스템, 마이크로프로세서 기반 또는 프로그램 가능한 소비자 전자 기기, 네트워크 PC, 미니 컴퓨터, 메인프레임 컴퓨터, 모바일 전화, PDA, 태블릿, 페이저, 라우터, 스위치 등등의 많은 타입의 컴퓨터 시스템 구성을 가지는 네트워크 컴퓨팅 환경에서 실현됨을 이해할 것이다. 본 명세서는 또한 네트워크를 통해 연결된(유선 데이터 링크, 무선 데이터 링크 또한 유선과 무선 데이터 링크의 조합에 의하여) 로컬 및 원격 컴퓨터 시스템 양자가 작업을 수행하는 분산형 시스템 환경에서 실현될 수 있다. 분산형 시스템 환경에서, 프로그램 모듈은 로컬 및 원격 메모리 저장 장치 양자에 저장될 수 있다.
본 명세서의 실시예는 또한 클라우드 컴퓨팅 환경으로 구현될 수 있다. 본 서술에서, "클라우드 컴퓨팅"은 구성가능한 컴퓨팅 자원의 공유된 풀에 주문형 네트워크 접근을 가능하게 하는 모델로 정의된다. 예를 들어, 클라우드 컴퓨팅은 유비쿼터스와 구성가능한 컴퓨팅 장원의 공유된 풀에 편리한 주문형 네트워크 접근을 제안하는 마켓플레이스에 채용될 수 있다. 구성가능한 컴퓨팅 가원의 공유된 풀은 신속하게 가상화를 통해 제공되고 낮은 관리 노력 또는 서비스 제공자 상호작용으로 방출될 수 있고, 그 후 따라 조정될 수 있다.
클라우드 컴퓨팅 모델은 예컨대, 주문형 셀프 서비스, 넓은 네트워크 접근, 자원 풀링, 신속한 탄력성, 계산된 서비스, 기타 등등과 같은 다양한 특징으로 이루어질 수 있다. 클라우드 컴퓨팅 모델은 또한 다양한 서비스 모델, 예컨대 서비스로서의 소프트웨어(Software as a Service, "SaaS"), 서비스로서의 플랫폼(Platform as a Service, "PaaS") 및 서비스로서의 인프라구조(Infrastructure as a Service, "IaaS")를 낼 수 있다. 클라우드 컴퓨팅 모델은 또한 개인형 클라우드, 커뮤니티 클라우드, 공공 클라우드, 하이브리드 클라우드, 기타 등등과 같은 상이한 배치 모델을 사용하여 배치될 수 있다. 본 서술 및 청구항에서, "클라우드 컴퓨팅 환경"은 클라우드 컴퓨팅이 채용되는 환경이다.
도 7은, 상술한 하나 이상의 프로세스를 수행하도록 구성될 수 있는 예시적인 컴퓨팅 장치(700)의 블록도를 도시한다. 당업자는 컴퓨팅 장치(700)과 같은 하나 이상의 컴퓨팅 장치가 전자 메시지 시스템(100)을 구현할 수 있음을 이해할 것이다. 도 7에 도시된 바와 같이, 컴퓨팅 장치(700)는 통신 인프라(712)로 통신적으로 연결될 수 있는 프로세서(702), 메모리(704), 저장 장치(706) I/O 인터페이스(708) 및 통신 인터페이스(710)를 포함할 수 있다. 예시적인 컴퓨팅 장치(700)이 도 7에 도시되나, 도 7에 도시된 구성요소는 제한하는 의도가 아니다. 추가적인 또는 대안적인 구성요소가 다른 실시예에서 사용될 수 있다. 나아가, 특정 실시예에서, 컴퓨팅 장치(700)는 도 7에 도시된 것보다 적은 구성요소를 포함할 수 있다. 도 7에 도시된 컴퓨팅 장치(700)의 구성요소는 이제 보다 자세히 서술될 것이다.
하나 이상의 실시예로, 프로세서(들)(702)는 가령 컴퓨터 프로그램을 구성하는 명령어와 같은 명령어를 실행하기 위한 하드웨어를 포함한다. 예로서 제한 없이, 명령어를 실행하기 위해, 프로세서(들)(702)는 내부 레지스터, 내부 캐시, 메모리(704) 또는 저장 장치(706)로부터 명령어를 검색(또는 페치(fetch))할 수 있고; 명령어를 디코딩하고 실행할 수 있다. 하나 이상의 실시예로, 프로세서(들)(702)는 데이터용, 명령어용 또는 주소용 하나 이상의 내부 캐시를 포함할 수 있다. 예로서 제한 없이, 프로세서(들)(702)는 하나 이상의 명령어 캐시들, 하나 이상의 데이터 캐시들 및 하나 이상의 변환 색인 버퍼(translation lookaside buffers, TLBs)를 포함할 수 있다. 명령어 캐시에 저장된 명령어들은 메모리(704)나 저장소(706) 내 명령어들의 사본일 수 있다.
메모리(704)는 데이터, 메타데이터, 프로세서(들)에 의한 실행을 위한 프로그램을 저장하기 위해 사용될 수 있다. 메모리(704)는 하나 이상의 휘발성 및 비휘발성 메모리, 예컨대 랜덤 액세스 메모리("RAM")상태 디스크("SSD"), 플래시, 상변화 메모리("PCM") 또는 다른 타입의 데이터 저장소를 포함할 수 있다. 메모리(704)는 내부 또는 분산형 메모리일 수 있다.
저장 장치(706)는 데이터 또는 명령어를 저장하기 위한 저장소를 포함한다. 예로서 제한 없이, 저장 장치(706)는 상술한 비-일시적 저장 매체를 포함할 수 있다. 저장 장치(706)는 하드 디스크 드라이브(HDD), 플로피 디스크 드라이브, 플래시 메모리, 광디스크, 자기-광학 디스크, 자기 테이프 또는 범용 직렬 버스(USB) 드라이브 또는 이들의 2 이상의 조합을 포함할 수 있다. 적절한 경우, 저장 장치(706)는 착탈식 또는 비-착탈식(또는 고정) 매체를 포함할 수 있다. 저장 장치(706)는 컴퓨팅 장치(700)의 내부 또는 외부에 있을 수 있다. 하나 이상의 실시예로, 저장 장치(706)는 비휘발성, 고체-상태(solid-state) 메모리이다. 다른 실시예로, 저장 장치(706)는 읽기 전용 메모리(ROM)을 포함한다. 적절한 경우, 이런 ROM은 마스크-프로그램화된 ROM, 프로그램가능 ROM(PROM), 소거가능 PROM(EPROM), 전기적 소거가능 PROM(EEPROM), 전기적 변경가능 ROM(EAROM), 플래시 메모리 또는 이들의 2 이상의 조합일 수 있다.
I/O 인터페이스(708)는 사용자가 입력을 제공하고, 출력을 수신하고, 다르게 컴퓨팅 장치(700)과 데이터를 주고받을 수 있게 한다. I/O 장치/인터페이스(708)는 마우스, 키패드 또는 키보드, 터치 스크린, 카메라, 광학식 스캐너, 네트워크 인터페이스, 모뎀, 기타 알려진 I/O 장치 또는 이러한 I/O 인터페이스의 조합을 포함할 수 있다. I/O 인터페이스(708)는 그래픽 엔진, 디스플레이(예컨대, 디스플레이 스크린), 하나 이상의 출력 드라이버(예컨대, 디스플레이 드라이버), 하나 이상의 오디오 스피커 및 하나 이상의 오디오 드라이버를 포함하나 이에 제한되지는 않는, 사용자에게 출력을 표시하는 하나 이상의 장치를 포함할 수 있다. 특정 실시예에서, I/O 인터페이스(708)는 사용자에게 표시하기 위하여 디스플레이에 그래픽 데이터를 제공하도록 구성된다. 그래픽 데이터는 하나 이상의 그래픽 사용자 인터페이스 및/또는 특정 구현을 제공하는 다른 그래픽 컨텐츠를 표시할 수 있다.
통신 인터페이스(710)는 하드웨어, 소프트웨어 또는 양자를 포함할 수 있다. 어떤 경우에도, 통신 인터페이스(710)는 컴퓨팅 장치(700)와 하나 이상의 다른 컴퓨팅 장치나 네트워크 사이의 통신(가령, 예컨대 패킷-기반 통신)을 위한 하나 이상의 인터페이스를 제공할 수 있다. 예로서 제한 없이, 통신 인터페이스(710)는 이더넷이나 다른 유선-기반 네트워크로 통신하기 위한 네트워크 인터페이스 제어장치(NIC)나 네트워크 어댑터 또는 가령 WI-FI와 같이 무선 네트워크로 통신하기 위한 무선 NIC(WNIC)나 무선 어댑터를 포함할 수 있다.
추가적으로 또는 선택적으로, 통신 인터페이스(710)는 애드 혹 네트워크(ad hoc network), 개인 영역 네트워크(PAN), 근거리 네트워크(LAN), 광역 네트워크(WAN), 대도시 네트워크(MAN), 인터넷의 하나 이상의 부분 또는 2 이상의 이런 네트워크들의 조합과의 통신을 용이하게 할 수 있다. 하나 이상의 이런 네트워크의 하나 이상의 부분은 유선 또는 무선일 수 있다. 예로서, 통신 인터페이스(710)는 무선 PAN(WPAN)(가령, 예컨대 BLUETOOTH WPAN), WI-FI 네트워크, WI-MAX 네트워크, 셀룰러 전화 네트워크(가령, 예컨대 GSM(Global System for Mobile Communication) 네트워크), 다른 적절한 무선 네트워크 또는 그 조합과의 통신을 용이하게 할 수 있다.
추가적으로, 통신 인터페이스(710)는 다양한 통신 프로토콜의 통신을 가능하게 할 수 있다. 통신 프로토콜의 예시는 데이터 전송 미디어, 통신 장치, 전송 제어 프로토콜("TCP"), 인터넷 프로토콜("IP"), 파일 전송 프로토콜("FTP"), 텔넷, 하이퍼텍스트 전송 프로토콜("HTTP"), 하이퍼텍스트 전송 프로토콜 보증("HTTPS"), 세션 개시 프로토콜 ("SIP"), 심플 오브젝트 접근 프로토콜 ("SOAP"), 확장가능한 마크-업 언어("XML") 및 이의 변형들, 심플 메일 전송 프로토콜("SMTP"), 실시간 전달 프로토콜("RTP"), 사용자 데이터그램 프로토콜("UDP"), 모바일 통신용 글로벌 시스템("GSM") 기술들, 코드 분할 다중 접속("CDMA") 기술들, 시간 분할 다중 접속("TDMA") 기술들, 단문 서비스("SMS"), 멀티미디어 메시지 서비스("MMS"), 라디오 주파수("RF") 신호 기술들, 롱텀 에볼루션("LTE") 기술들, 무선 통신 기술들, 인-밴드 및 아웃-오브-밴드 시그널링 기술들, 및 다른 접합한 통신 네트워크 및 기술들을 포함하지만 이에 제한되지 않는다.
통신 인프라(712)는 컴퓨팅 장치(700)의 구성요소를 서로 연결하는 하드웨어, 소프트웨어 또는 이들 모두를 포함할 수 있다. 예로서 제한 없이, 통신 인프라(712)는 AGP(Accelerated Graphics Port)이나 다른 그래픽 버스, EISA(Enhanced Industry Standard Architecture) 버스, FSB(front-side bus), HT(HYPERTRANSPORT) 인터커넥트, ISA(Industry Standard Architecture) 버스, INFINIBAND 인터커넥트, LPC(low-pin-count) 버스, 메모리 버스, MCA(Micro Channel Architecture) 버스, PCI(Peripheral Component Interconnect) 버스, PCIe(PCI-Express) 버스, SATA(serial advanced technology attachment) 버스, VLB(Video Electronics Standard Association local) 버스, 다른 적절한 버스 또는 그 조합을 포함할 수 있다.
상술한 바와 같이, 네트워크(206) 및/또는 통신 서버(208)은 소셜 네트워크 시스템을 포함할 수 있다. 소셜 네트워크 시스템은 사용자들(가령, 개인들 또는 단체들)이 소셜 네트워크 시스템 및 서로와 상호작용할 수 있게 해줄 수 있다. 소셜 네트워크 시스템은 사용자로부터의 입력으로 사용자와 연관된 사용자 프로필을 생성하고 소셜 네트워크 시스템에 저장할 수 있다. 사용자 프로필은 사용자의 인구학적 정보, 통신-채널 정보 및 개인 관심사에 대한 정보를 포함할 수 있다. 또한, 소셜 네트워크 시스템은 사용자로부터의 입력으로 소셜 네트워크 시스템의 다른 사용자들과의 사용자의 관계에 대한 기록을 생성하고 저장할 수 있을 뿐만 아니라 서비스(예컨대, 담벼락 게시물, 사진-공유, 이벤트 조직, 메시징, 게임 또는 광고)를 제공하여 사용자들 사이의 소셜 상호작용을 용이하게 할 수 있다.
소셜 네트워크 시스템은 사용자의 기록 및 사용자 간의 관계를 복수의 노드 및 노드를 연결하는 복수의 에지를 포함하는 소셜 그래프에 저장할 수 있다. 노드는 복수의 사용자 노드와 복수의 컨셉 노드를 포함할 수 있다. 소셜 그래프의 사용자 노드는 소셜 네트워크 시스템의 사용자에 대응할 수 있다. 사용자는 개인(인간 사용자), 엔티티(예컨대, 기업, 비즈니스 또는 제3자 애플리케이션) 또는 그룹(예컨대, 개인 또는 엔티티의)일 수 있다. 사용자에 대응하는 사용자 노드는 사용자에 의해 제공된 정보와 소셜 네트워크 시스템을 포함하는 다양한 시스템에 의해 수집된 정보를 포함할 수 있다.
예를 들어, 사용자는 그 또는 그녀의 이름, 프로필 사진, 거주하는 도시, 연락처 정보, 출생일, 성별, 혼인 여부, 가족 상황, 고용, 교육 배경, 선호, 관심사 및 사용자 노드에 포함될 다른 인구통계학적 정보를 제공할 수 있다. 소셜 그래프의 각 사용자 노드는 대응하는 웹 페이지(일반적으로 프로필 페이지로 알려진다)를 가질 수 있다. 사용자 이름을 포함하는 요청에 응답하여, 소셜 네트워크 시스템은 사용자 이름에 대응하는 사용자 노드에 접근할 수 있고, 이름, 프로필 사진 및 사용자와 연관된 다른 정보를 포함하는 프로필 페이지를 구성할 수 있다. 제1 사용자의 프로필 페이지는 제1 사용자에 의한 하나 이상의 사생활 설정과 제1 사용자 및 제2 사용자 간의 관계에 기반하여 제1 사용자의 정보 전체 또는 일부가 제2 사용자에게 디스플레이될 수 있다.
컨셉 노드는 소셜 네트워크 시스템의 컨셉에 대응할 수 있다. 예를 들어, 컨셉은 실제 세계의 엔티티, 가령 영화, 노래, 스포츠 팀, 연예인, 그룹, 레스토랑 또는 장소나 위치를 나타낼 수 있다. 컨셉에 대응하는 컨셉 노드의 관리 사용자는 컨셉의 정보를 제공함으로써(예컨대, 온라인 폼을 채움으로써) 컨셉 노드를 생성 또는 업데이트하여, 소셜 네트워크 시스템이 정보를 컨셉 노드와 연관시키도록 할 수 있다. 예로서 제한 없이, 컨셉과 연관된 정보는 이름 또는 제목, 하나 이상의 이미지(예컨대, 책의 표지 이미지), 웹 사이트(예컨대, URL 주소) 또는 연락처 정보(예컨대, 전화번호, 이메일 주소)를 포함할 수 있다. 소셜 그래프의 각 컨셉 노드는 웹 페이지에 대응할 수 있다. 예를 들어, 이름을 포함한 요청에 응답하여, 소셜 네트워크 시스템은 이름에 대응하는 컨셉 노드에 접근하고, 이름 및 컨셉과 연관된 다른 정보를 포함하는 웹 페이지를 구성할 수 있다.
노드 쌍을 연결하는 에지는 노드 쌍 사이의 관계를 표현할 수 있다. 예를 들어, 두 사용자 노드 간의 에지는 두 사용자 간의 친구 사이를 표시할 수 있다, 다른 예로서, 소셜 네트워크 시스템은 웹 페이지에 하나 이상의 선택가능한 버튼(예컨대, "좋아요", 체크인")을 포함하는 컨셉 노드(예컨대, 레스토랑, 연예인)의 웹 페이지(또는 구조화된 문서)를 구성할 수 있다. 사용자는 사용자의 클라이언트 장치에 의해 호스팅되는 웹 브라우저를 사용하여 페이지에 접근하고 선택가능한 버튼을 선택하여, 클라이언트 장치가 소셜 네트워크 시스템으로 사용자의 사용자 노드 및 컨셉의 컨셉 노드 간의, 사용자와 컨셉 사이의 관계(예컨대, 사용자가 레스토랑에 체크인하거나, 사용자가 연예인을 "좋아요"하는)를 나타내는 에지를 생성하는 요청을 전송하게 할 수 있다.
예로서, 사용자는 그 또는 그녀의 거주 도시를 제공(또는 변경)하여, 소셜 네트워크 시스템이 사용자에 대응하는 사용자 노드 및 사용자가 그 또는 그녀의 거주 도시로 공표한 도시에 대응하는 컨셉 노드 간의 에지를 생성하도록 할 수 있다. 나아가, 임의의 두 노드 간의 이격도는 한 노드에서 다른 노드로 소셜 그래프를 순회하는데 필요한 홉(hops)의 최소수로 정의된다. 두 노드 간의 이격도는 소셜 그래프의 두 노드에 의해 표시되는 사용자 또는 컨셉 간의 관련성의 척도로 간주될 수 있다. 예를 들어, 에지로 직접 연결되는 사용자 노드(예컨대, 1도 노드)를 가지고 있는 두 사용자는 "연결된 사용자" 또는 "친구"로 서술될 수 있다. 유사하게, 다른 사용자 노드 만을 통하여 연결된 사용자 노드(예컨대, 2도 노드)를 가지고 있는 두 사용자는 "친구의 친구"로 서술될 수 있다.
소셜 네트워크 시스템은 다양한 애플리케이션, 예컨대 사진 공유, 온라인 일정과 이벤트, 게임, 인스턴트 메시지 및 광고를 지원할 수 있다. 예를 들어, 소셜 네트워크 시스템은 미디어 공유 기능도 포함할 수 있다. 또한, 소셜 네트워크 시스템은 사용자가 사진 및 다른 멀티미디어 컨텐츠 아이템을 사용자의 프로필 페이지(일반적으로 "담벼락 게시" 또는 "타임라인 게시"로 알려짐) 또는 사진 앨범에 게시할 수 있게 할 수 있는데, 양자 모두 사용자의 설정된 사생활 설정에 따라 소셜 네트워크 시스템의 다른 사용자가 접근가능할 수 있다. 소셜 네트워크 시스템은 또한 사용자가 이벤트를 설정하도록 할 수 있다. 예를 들어, 제 1 사용자는 이벤트의 시간과 날짜, 이벤트의 장소 및 이벤트에 초대되는 다른 사용자를 포함하는 속성으로 이벤트를 설정할 수 있다. 초대된 사용자는 이벤트 초대를 수신하고 응답할 수 있다(초대를 수락하거나 거절함으로써). 나아가, 소셜 네트워크 시스템은 사용자가 개인적인 일정을 유지할 수 있도록 한다. 이벤트와 유사하게, 일정 항목은 시간, 날짜, 장소 및 다른 사용자의 식별을 포함할 수 있다.
도 8은 소셜 네트워크 시스템의 네트워크 환경의 예시를 도시한다. 하나 이상의 실시태양에서, 소셜 네트워크 시스템(802)은 하나 이상의 데이터 스토어를 포함할 수 있다. 예를 들어, 소셜 네트워크 시스템(802)은 전술한 바와 같은 사용자 노드, 컨셉 노드 및 노드 간의 에지를 포함하는 소셜 그래프를 저장할 수 있다. 각 사용자 노드는 사용자와 연관되거나 설명하는 정보에 대응하는 하나 이상의 데이터 객체를 포함할 수 있다. 각 컨셉 노드는 컨셉과 연관된 정보에 대응하는 하나 이상의 데이터 객체를 포함할 수 있다. 한 쌍의 노드 간의 각 에지는 한 쌍의 노드에 대응하는 사용자들 간(또는 사용자와 컨셉 간, 또는 컨셉들 간)의 관계에 연관된 정보에 대응하는 하나 이상의 데이터 객체를 포함할 수 있다.
하나 이상의 실시태양에서, 소셜 네트워크 시스템(802)은 소셜 네트워크 시스템(802)의 구동을 겨냥한 기능을 호스팅하는 하나 이상의 컴퓨팅 장치(예컨대, 서버)를 포함할 수 있다. 소셜 네트워크 시스템(802)의 사용자는 클라이언트 장치(806)와 같은 클라이언트 장치를 사용하여 소셜 네트워크 시스템(802)에 접근할 수 있다. 예를 들어, 클라이언트 장치(806)는 네트워크(804)를 통하여 소셜 네트워크 시스템(802)과 상호작용할 수 있다.
클라이언트 장치(806)는 데스크톱 컴퓨터, 랩탑 컴퓨터, 태블릿 컴퓨터, 개인용 정보 단말기(PDA), 차량 내장 또는 외장 내비게이션 시스템, 스마트폰 또는 다른 셀룰러 또는 모바일 전화, 또는 모바일 게임 장치, 다른 모바일 장치, 또는 다른 적절한 컴퓨팅 장치일 수 있다. 클라이언트 장치(806)는 하나 이상의 클라이언트 애플리케이션, 예컨대 웹 브라우저(예컨대, Microsoft Windows Internet Explorer, Mozilla Firefox, Apple Safari, Google Chrome, Opera, 기타 등등) 또는 네이티브 또는 특수 목적 클라이언트 애플리케이션(예컨대, iPhone이나 iPad를 위한 Facebook, Android를 위한 Facebook, 기타 등등)을 실행하여 네트워크(804)를 통해 컨텐츠에 접근하고 열람할 수 있다.
네트워크(804)는 클라이언트 장치(806)가 거쳐서 소셜 네트워크 시스템(802)에 접근할 수 있는 네트워크 또는 네트워크의 컬렉션(예컨대 인터넷, 기업 인트라넷, 가상 사설망(VPN), 근거리 통신망(LAN), 무선 근거리 통신망(WLAN), 셀룰러 네트워크, 광역 통신망(WAN), 도시권 통신망(MAN) 또는 이러한 네트워크의 둘 이상의 조합)을 나타낼 수 있다.
이들 방법, 시스템 및 사용자 인터페이스가 공적으로 이용가능한 정보뿐만 아니라 소셜 네트워크 시스템의 사용자에 의해 제공되는 정보를 사용하지만, 이러한 정보의 모든 사용은 명시적으로 연관된 사용자의 모든 사생활 설정과 소셜 네트워크 시스템 전체의 사생활 정책 하에 있는 것이다.
이상의 명세에서, 본 발명은 특정한 예시적인 실시예를 참조하여 서술되었다. 본 발명의 다양한 실시예와 측면은 본 명세서에 서술된 상세를 참조하여 서술되고, 첨부되는 도면은 다양한 실시예를 도시한다. 상기 설명과 도면은 본 발명을 설명하는 것이고 본 발명을 제한하는 것으로 해석되지 않는다. 많은 특정한 상세가 본 발명의 다양한 실시예의 철저한 이해를 제공하기 위하여 서술된다.
본 발명은 그 사상 또는 본질적인 특징에서 벗어남 없이 다른 특정한 형태로 구체화될 수 있다. 서술된 실시예는 모든 점에 있어서 설명적일 뿐이고 제한적이지 않은 것으로 간주되어야 한다. 그러므로, 본 발명의 범위는 상기 설명이 아니라 첨부된 청구항에 의하여 표시된다. 청구항과 균등한 의미와 범위 내에서 유래하는 모든 변화는 그 범위 내에 포함된다.

Claims (25)

  1. 컴퓨팅 장치의 터치스크린 디스플레이에, 사용자와 하나 이상의 상대 사용자 간에 교환된 복수의 전자 메시지를 포함하는 통신 스레드를 포함하는 메시지 그래픽 사용자 인터페이스를 제공하는 단계;
    컴퓨팅 장치의 적어도 하나의 프로세서에 의하여, 카메라 뷰파인더 입력 컨트롤의 선택을 감지하는 단계;
    카메라 뷰파인더 입력 컨트롤의 선택의 감지에 응답하여 메시지 그래픽 사용자 인터페이스 내에 카메라 뷰파인더를 제공하는 단계;
    컴퓨팅 장치의 적어도 하나의 프로세서에 의하여, 카메라 뷰파인더와의 제1 사용자 상호작용을 감지하는 단계; 및
    제1 사용자 상호작용의 감지에 응답하여, 컴퓨팅 장치의 카메라에 의하여, 멀티미디어 컨텐츠 아이템을 캡처하고, 컴퓨팅 장치에 의하여, 캡처된 멀티미디어 컨텐츠 아이템을 전자 메시지로서 송신하는 단계를 포함하는 방법.
  2. 청구항 1에 있어서,
    카메라 뷰파인더와의 제1 사용자 상호작용을 감지하는 단계는 카메라 뷰파인더와의 탭 터치 제스처를 감지하는 단계를 포함하는 방법.
  3. 청구항 2에 있어서,
    멀티미디어 컨텐츠를 캡처하는 단계는 탭 터치 제스처의 감지에 응답하여 디지털 사진을 캡처하는 단계를 포함하는 방법.
  4. 청구항 3에 있어서,
    캡처된 디지털 사진을 통신 스레드에 추가하는 단계를 더 포함하는 방법.
  5. 청구항 1에 있어서,
    카메라 뷰파인더와의 제2 사용자 상호작용을 감지하는 단계를 더 포함하는 방법.
  6. 청구항 5에 있어서,
    카메라 뷰파인더와의 제2 사용자 상호작용을 감지하는 단계는 카메라 뷰파인더와의 프레스-앤드-홀드 터치 제스처를 감지하는 단계를 포함하는 방법.
  7. 청구항 6에 있어서,
    멀티미디어 컨텐츠 아이템을 캡처하는 단계는 프레스-앤드-홀드 터치 제스처의 감지에 응답하여 디지털 비디오를 캡처하는 단계를 포함하는 방법.
  8. 청구항 7에 있어서,
    캡처된 디지털 비디오의 길이는 프레스-앤드-홀드 터치 제스처가 감지된 길이와 동일한 방법.
  9. 청구항 8에 있어서,
    프레스-앤드-홀드 터치 제스처의 릴리즈의 감지에 응답하여, 통신 스레드에 캡처된 디지털 비디오를 재생할 수 있는 재생 컨트롤을 추가하는 단계를 더 포함하는 방법.
  10. 컴퓨팅 장치의 터치스크린 디스플레이에, 메시지 그래픽 사용자 인터페이스의 제1 부분에 통신 스레드를 가지는 메시지 그래픽 사용자 인터페이스를 제공하는 단계;
    컴퓨팅 장치의 적어도 하나의 프로세서에 의하여, 카메라 뷰파인더 입력 컨트롤의 선택을 감지하는 단계; 및
    카메라 뷰파인더 입력 컨트롤의 선택에 응답하여, 컴퓨팅 장치의 카메라를 활성화하고 메시지 그래픽 사용자 인터페이스의 제2 부분 내에 카메라 뷰파인더를 제공하는 단계를 포함하고,
    통신 스레드는 사용자와 하나 이상의 상대 사용자 간에 교환된 복수의 전자 메시지를 포함하는 방법.
  11. 청구항 10에 있어서,
    메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 탭 터치 제스처를 감지하는 단계; 및
    메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 탭 터치 제스처의 감지에 응답하여, 카메라 뷰파인더를 통하여 디지털 사진을 캡처하는 단계를 더 포함하는 방법.
  12. 청구항 11에 있어서,
    탭 터치 제스처에 응답하여 캡처된 디지털 사진을 송신하는 단계; 및
    탭 터치 제스처에 응답하여 메시지 그래픽 사용자 인터페이스의 제1 부분의 통신 스레드에 캡처된 디지털 사진을 추가하는 단계를 더 포함하는 방법.
  13. 청구항 12에 있어서,
    메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 프레스-앤드-홀드 터치 제스처를 감지하는 단계; 및
    메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 프레스-앤드-홀드 터치 제스처를 감지한 기간 동안, 카메라 뷰파인더를 통하여 디지털 비디오를 캡처하는 단계를 더 포함하는 방법.
  14. 청구항 13에 있어서,
    프레스-앤드-홀드 터치 제스처의 릴리즈의 감지에 응답하여, 캡처된 디지털 비디오를 송신하는 단계를 더 포함하는 방법.
  15. 청구항 14에 있어서,
    프레스-앤드-홀드 터치 제스처의 릴리즈의 감지에 응답하여, 메시지 그래픽 사용자 인터페이스의 제1 부분 내의 통신 스레드에 캡처된 디지털 비디오를 재생할 수 있는 재생 컨트롤을 추가하는 단계를 더 포함하는 방법.
  16. 청구항 15에 있어서,
    재생 컨트롤과의 탭 터치 제스처를 감지하는 단계; 및
    재생 컨트롤과의 탭 터치 제스처의 감지에 응답하여, 메시지 그래픽 사용자 인터페이스의 제1 부분 내의 통신 스레드에서 캡처된 디지털 비디오를 재생하는 단계를 더 포함하는 방법.
  17. 청구항 16에 있어서,
    메시지 입력 컨트롤의 팔레트로부터 메시지 입력 컨트롤의 선택을 감지하는 단계; 및
    선택의 감지에 응답하여, 메시지 그래픽 사용자 인터페이스의 제2 부분으로부터 카메라 뷰파인더를 제거하는 단계를 더 포함하는 방법.
  18. 저장된 컴퓨터-실행가능한 명령어를 가지는 비-일시적 컴퓨터 판독가능한 저장매체로서, 명령어는 프로세서에 의해 실행 시 컴퓨터 시스템으로 하여금:
    메시지 그래픽 사용자 인터페이스의 제1 부분에 통신 스레드를 가지는 메시지 그래픽 사용자 인터페이스를 제공하고;
    카메라 뷰파인더 입력 컨트롤의 선택을 감지하고; 및
    카메라 뷰파인더 컨트롤의 선택에 응답하여, 메시지 그래픽 사용자 인터페이스의 제2 부분에 카메라 뷰파인더를 제공하도록 야기하고,
    통신 스레드는 사용자와 하나 이상의 상대 사용자 간에 교환된 복수의 전자 메시지를 포함하는 비-일시적 컴퓨터 판독가능한 저장매체.
  19. 청구항 18에 있어서,
    실행 시 컴퓨터 시스템으로 하여금:
    메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 탭 터치 제스처를 감지하고;
    메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 탭 터치 제스처의 감지에 응답하여, 카메라 뷰파인더를 통하여 디지털 사진을 캡처하고;
    캡처된 디지털 사진을 송신하고; 및
    메시지 그래픽 사용자 인터페이스의 제1 부분의 통신 스레드에 캡처된 디지털 사진을 추가하도록 야기하는 컴퓨터-실행가능한 명령어를 더 포함하는 시스템.
  20. 청구항 18에 있어서,
    실행 시 컴퓨터 시스템으로 하여금:
    메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 프레스-앤드-홀드 터치 제스처를 감지하고;
    메시지 그래픽 사용자 인터페이스의 제2 부분 내에서 프레스-앤드-홀드 터치 제스처를 감지한 기간 동안, 카메라 뷰파인더를 통하여 디지털 비디오를 캡처하고;
    캡처된 디지털 비디오를 송신하고; 및
    메시지 그래픽 사용자 인터페이스의 제1 부분 내의 통신 스레드에 캡처된 디지털 비디오를 재생할 수 있는 재생 컨트롤을 추가하도록 야기하는 컴퓨터-실행가능한 명령어를 더 포함하는 시스템.
  21. 청구항 1 또는 청구항 2에 있어서,
    멀티미디어 컨텐츠 아이템을 캡처하는 단계는 탭 터치 제스처의 감지에 응답하여 디지털 사진을 캡처하는 단계를 포함하는 방법.
  22. 청구항 1 내지 청구항 4 및 청구항 21 중 어느 하나의 항에 있어서,
    카메라 뷰파인더와의 제2 사용자 상호작용을 감지하는 단계를 더 포함하는 방법.
  23. 청구항 6 내지 청구항 8 중 어느 하나의 항에 있어서,
    프레스-앤드-홀드 터치 제스처의 릴리즈의 감지에 응답하여, 통신 스레드에 캡처된 디지털 비디오를 재생할 수 있는 재생 컨트롤을 추가하는 단계를 더 포함하는 방법.
  24. 하나 이상의 컴퓨터-판독가능한 비-일시적 저장 매체로서, 실행 시 청구항 1 내지 청구항 9 중 어느 하나의 항에 따른 방법을 수행하도록 구동되는 소프트웨어를 포함하는 컴퓨터-판독가능한 비-일시적 저장 매체.
  25. 하나 이상의 프로세서; 및 프로세서와 연결되고 프로세서에 의해 실행가능한 명령어를 포함하는 적어도 하나의 메모리를 포함하는 시스템으로서, 프로세서는 명령어를 실행 시 청구항 1 내지 청구항 9 및 청구항 21 내지 청구항 24 중 어느 하나의 항에 따른 방법을 수행하도록 구동되는 시스템.
KR1020167024610A 2014-04-28 2014-06-25 멀티미디어를 캡처하고 전자 메시지로 전송하기 KR101734312B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201461985456P 2014-04-28 2014-04-28
US61/985,456 2014-04-28
US14/314,623 US9391934B2 (en) 2014-04-28 2014-06-25 Capturing and sending multimedia as electronic messages
US14/314,623 2014-06-25
PCT/US2014/044138 WO2015167590A1 (en) 2014-04-28 2014-06-25 Capturing and sending multimedia as electronic messages

Publications (2)

Publication Number Publication Date
KR20160118336A true KR20160118336A (ko) 2016-10-11
KR101734312B1 KR101734312B1 (ko) 2017-05-11

Family

ID=50982798

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020167025352A KR101733637B1 (ko) 2014-04-28 2014-06-23 통신 스레드 내에서 메시지의 작성
KR1020167024610A KR101734312B1 (ko) 2014-04-28 2014-06-25 멀티미디어를 캡처하고 전자 메시지로 전송하기

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020167025352A KR101733637B1 (ko) 2014-04-28 2014-06-23 통신 스레드 내에서 메시지의 작성

Country Status (11)

Country Link
US (9) US10845982B2 (ko)
EP (4) EP2940569B1 (ko)
JP (2) JP6262362B2 (ko)
KR (2) KR101733637B1 (ko)
CN (2) CN106255949B (ko)
AU (2) AU2014392592B2 (ko)
BR (1) BR112016025271A2 (ko)
CA (2) CA2938529C (ko)
IL (2) IL247021A (ko)
MX (2) MX2016014088A (ko)
WO (2) WO2015167589A1 (ko)

Families Citing this family (382)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8554868B2 (en) 2007-01-05 2013-10-08 Yahoo! Inc. Simultaneous sharing communication interface
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US9954996B2 (en) 2007-06-28 2018-04-24 Apple Inc. Portable electronic device with conversation management for incoming instant messages
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US8779265B1 (en) * 2009-04-24 2014-07-15 Shindig, Inc. Networks of portable electronic devices that collectively generate sound
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US8280954B2 (en) * 2010-03-25 2012-10-02 Scomm, Inc. Method and system for providing live real-time communication via text between mobile user devices
TWI439960B (zh) 2010-04-07 2014-06-01 Apple Inc 虛擬使用者編輯環境
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US9459778B2 (en) 2011-07-12 2016-10-04 Mobli Technologies 2010 Ltd. Methods and systems of providing visual content editing functions
US8972357B2 (en) 2012-02-24 2015-03-03 Placed, Inc. System and method for data collection to validate location data
US11734712B2 (en) 2012-02-24 2023-08-22 Foursquare Labs, Inc. Attributing in-store visits to media consumption based on data collected from user devices
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9154456B2 (en) 2012-04-17 2015-10-06 Trenda Innovations, Inc. Messaging system and method
US10155168B2 (en) 2012-05-08 2018-12-18 Snap Inc. System and method for adaptable avatars
US9459781B2 (en) 2012-05-09 2016-10-04 Apple Inc. Context-specific user interfaces for displaying animated sequences
US9547425B2 (en) 2012-05-09 2017-01-17 Apple Inc. Context-specific user interfaces
US10613743B2 (en) * 2012-05-09 2020-04-07 Apple Inc. User interface for receiving user input
US10990270B2 (en) 2012-05-09 2021-04-27 Apple Inc. Context-specific user interfaces
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
DE212014000045U1 (de) 2013-02-07 2015-09-24 Apple Inc. Sprach-Trigger für einen digitalen Assistenten
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
JP6259911B2 (ja) 2013-06-09 2018-01-10 アップル インコーポレイテッド デジタルアシスタントの２つ以上のインスタンスにわたる会話持続を可能にするための機器、方法、及びグラフィカルユーザインタフェース
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US11921471B2 (en) 2013-08-16 2024-03-05 Meta Platforms Technologies, Llc Systems, articles, and methods for wearable devices having secondary power sources in links of a band for providing secondary power in addition to a primary power source
US20150124566A1 (en) 2013-10-04 2015-05-07 Thalmic Labs Inc. Systems, articles and methods for wearable electronic devices employing contact sensors
KR102138515B1 (ko) 2013-10-01 2020-07-28 엘지전자 주식회사 이동단말기 및 그 제어방법
WO2015081113A1 (en) 2013-11-27 2015-06-04 Cezar Morun Systems, articles, and methods for electromyography sensors
US9246961B2 (en) 2013-11-27 2016-01-26 Facebook, Inc. Communication user interface systems and methods
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9628950B1 (en) 2014-01-12 2017-04-18 Investment Asset Holdings Llc Location-based messaging
US10845982B2 (en) 2014-04-28 2020-11-24 Facebook, Inc. Providing intelligent transcriptions of sound messages in a messaging application
US9396354B1 (en) 2014-05-28 2016-07-19 Snapchat, Inc. Apparatus and method for automated privacy protection in distributed images
US9537811B2 (en) 2014-10-02 2017-01-03 Snap Inc. Ephemeral gallery of ephemeral messages
WO2015184186A1 (en) 2014-05-30 2015-12-03 Apple Inc. Multi-command single utterance input method
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10382378B2 (en) 2014-05-31 2019-08-13 Apple Inc. Live location sharing
US9207835B1 (en) * 2014-05-31 2015-12-08 Apple Inc. Message user interfaces for capture and transmittal of media and location content
IL239237B (en) 2014-06-05 2018-12-31 Rotem Efrat Network document extension
US9113301B1 (en) 2014-06-13 2015-08-18 Snapchat, Inc. Geo-location based event gallery
EP3584671B1 (en) 2014-06-27 2022-04-27 Apple Inc. Manipulation of calendar application in device with touch screen
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9225897B1 (en) 2014-07-07 2015-12-29 Snapchat, Inc. Apparatus and method for supplying content aware photo filters
KR20160009915A (ko) * 2014-07-17 2016-01-27 삼성전자주식회사 데이터 처리 방법 및 그 전자 장치
TWI647608B (zh) 2014-07-21 2019-01-11 美商蘋果公司 遠端使用者介面
DE212015000194U1 (de) 2014-08-06 2017-05-31 Apple Inc. Verkleinerte Benutzeroberflächen für Batteriemanagement
US10452253B2 (en) 2014-08-15 2019-10-22 Apple Inc. Weather user interface
CN115623117A (zh) 2014-09-02 2023-01-17 苹果公司 电话用户界面
US10254948B2 (en) 2014-09-02 2019-04-09 Apple Inc. Reduced-size user interfaces for dynamically updated application overviews
KR101901796B1 (ko) 2014-09-02 2018-09-28 애플 인크. 경고를 관리하기 위한 축소된 크기의 인터페이스
EP3189416B1 (en) * 2014-09-02 2020-07-15 Apple Inc. User interface for receiving user input
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10423983B2 (en) 2014-09-16 2019-09-24 Snap Inc. Determining targeting information based on a predictive targeting model
US10824654B2 (en) 2014-09-18 2020-11-03 Snap Inc. Geolocation-based pictographs
US11216869B2 (en) 2014-09-23 2022-01-04 Snap Inc. User interface to augment an image using geolocation
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10284508B1 (en) * 2014-10-02 2019-05-07 Snap Inc. Ephemeral gallery of ephemeral messages with opt-in permanence
US20160105388A1 (en) * 2014-10-09 2016-04-14 Footspot, Inc. System and method for digital media capture and related social networking
KR102250777B1 (ko) * 2014-10-21 2021-05-11 삼성전자주식회사 컨텐츠 제공 방법 및 그 전자 장치
US9754624B2 (en) * 2014-11-08 2017-09-05 Wooshii Ltd Video creation platform
US9015285B1 (en) 2014-11-12 2015-04-21 Snapchat, Inc. User interface for accessing media at a geographic location
US9385983B1 (en) 2014-12-19 2016-07-05 Snapchat, Inc. Gallery of messages from individuals with a shared interest
US10311916B2 (en) 2014-12-19 2019-06-04 Snap Inc. Gallery of videos set to an audio time line
US9854219B2 (en) 2014-12-19 2017-12-26 Snap Inc. Gallery of videos set to an audio time line
JP2016126445A (ja) * 2014-12-26 2016-07-11 Ｌｉｎｅ株式会社 サーバ、サーバの制御方法およびプログラム
US9754355B2 (en) 2015-01-09 2017-09-05 Snap Inc. Object recognition based photo filters
US11388226B1 (en) 2015-01-13 2022-07-12 Snap Inc. Guided personal identity based actions
US10133705B1 (en) 2015-01-19 2018-11-20 Snap Inc. Multichannel system
US9521515B2 (en) 2015-01-26 2016-12-13 Mobli Technologies 2010 Ltd. Content request by location
KR102377277B1 (ko) * 2015-02-27 2022-03-23 삼성전자주식회사 전자 장치에서 커뮤니케이션 지원 방법 및 장치
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US10055121B2 (en) 2015-03-07 2018-08-21 Apple Inc. Activity based thresholds and feedbacks
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10223397B1 (en) 2015-03-13 2019-03-05 Snap Inc. Social graph based co-location of network users
KR102371138B1 (ko) 2015-03-18 2022-03-10 스냅 인코포레이티드 지오-펜스 인가 프로비저닝
US9692967B1 (en) 2015-03-23 2017-06-27 Snap Inc. Systems and methods for reducing boot time and power consumption in camera systems
US10210563B2 (en) * 2015-03-23 2019-02-19 Hipmunk, Inc. Search machine with dynamically updated flag on graphical slider
AU2016252993B2 (en) 2015-04-23 2018-01-04 Apple Inc. Digital viewfinder user interface for multiple cameras
US10135949B1 (en) 2015-05-05 2018-11-20 Snap Inc. Systems and methods for story and sub-story navigation
US9881094B2 (en) 2015-05-05 2018-01-30 Snap Inc. Systems and methods for automated local story generation and curation
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160373388A1 (en) * 2015-06-19 2016-12-22 Voxer Ip Llc Messaging application for recording and inserting a video message into a chat
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US11284170B1 (en) 2015-06-29 2022-03-22 Twitter, Inc. Video preview mechanism
US10993069B2 (en) 2015-07-16 2021-04-27 Snap Inc. Dynamically adaptive media content delivery
US10817898B2 (en) 2015-08-13 2020-10-27 Placed, Llc Determining exposures to content presented by physical objects
US10003938B2 (en) 2015-08-14 2018-06-19 Apple Inc. Easy location sharing
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US20170078240A1 (en) * 2015-09-16 2017-03-16 Whatsapp Inc. Techniques to select and configure media for media messaging
US9787819B2 (en) * 2015-09-18 2017-10-10 Microsoft Technology Licensing, Llc Transcription of spoken communications
US20170090718A1 (en) 2015-09-25 2017-03-30 International Business Machines Corporation Linking selected messages in electronic message threads
US10212116B2 (en) * 2015-09-29 2019-02-19 International Business Machines Corporation Intelligently condensing transcript thread history into a single common reduced instance
US10157039B2 (en) * 2015-10-05 2018-12-18 Motorola Mobility Llc Automatic capturing of multi-mode inputs in applications
CN105282013A (zh) * 2015-10-30 2016-01-27 腾讯科技（深圳）有限公司 事项消息通知方法、装置及系统
US9652896B1 (en) 2015-10-30 2017-05-16 Snap Inc. Image based tracking in augmented reality systems
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
CN105450930B (zh) * 2015-11-09 2018-11-13 广州多益网络股份有限公司 一种自拍方法及装置
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US9984499B1 (en) 2015-11-30 2018-05-29 Snap Inc. Image and point cloud based tracking and in augmented reality systems
US10474321B2 (en) 2015-11-30 2019-11-12 Snap Inc. Network resource location linking and visual content sharing
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
CN105429860A (zh) * 2015-12-15 2016-03-23 浙江吉利控股集团有限公司 一种即时通讯的装置及方法
US9792896B2 (en) * 2015-12-15 2017-10-17 Facebook, Inc. Providing intelligent transcriptions of sound messages in a messaging application
US10354425B2 (en) 2015-12-18 2019-07-16 Snap Inc. Method and system for providing context relevant media augmentation
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
CN107038023A (zh) * 2016-02-02 2017-08-11 腾讯科技（深圳）有限公司 互动评论的交互方法和装置
US10679389B2 (en) 2016-02-26 2020-06-09 Snap Inc. Methods and systems for generation, curation, and presentation of media collections
US10285001B2 (en) 2016-02-26 2019-05-07 Snap Inc. Generation, curation, and presentation of media collections
US11023514B2 (en) 2016-02-26 2021-06-01 Snap Inc. Methods and systems for generation, curation, and presentation of media collections
DK201670539A1 (en) * 2016-03-14 2017-10-02 Apple Inc Dictation that allows editing
KR20170109283A (ko) * 2016-03-21 2017-09-29 현대자동차주식회사 차량 및 차량의 제어방법
US10339365B2 (en) 2016-03-31 2019-07-02 Snap Inc. Automated avatar generation
KR20240023200A (ko) 2016-05-18 2024-02-20 애플 인크. 그래픽 메시징 사용자 인터페이스 내의 확인응답 옵션들의 적용
US10592098B2 (en) 2016-05-18 2020-03-17 Apple Inc. Devices, methods, and graphical user interfaces for messaging
DK201670641A1 (en) * 2016-05-18 2017-12-04 Apple Inc Devices, Methods, and Graphical User Interfaces for Messaging
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
AU2017100667A4 (en) 2016-06-11 2017-07-06 Apple Inc. Activity and workout updates
US10009536B2 (en) 2016-06-12 2018-06-26 Apple Inc. Applying a simulated optical effect based on data received from multiple camera sensors
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
US10430838B1 (en) 2016-06-28 2019-10-01 Snap Inc. Methods and systems for generation, curation, and presentation of media collections with automated advertising
US9681265B1 (en) 2016-06-28 2017-06-13 Snap Inc. System to track engagement of media items
US10733255B1 (en) 2016-06-30 2020-08-04 Snap Inc. Systems and methods for content navigation with automated curation
US10855632B2 (en) 2016-07-19 2020-12-01 Snap Inc. Displaying customized electronic messaging graphics
US10990174B2 (en) 2016-07-25 2021-04-27 Facebook Technologies, Llc Methods and apparatus for predicting musculo-skeletal position information using wearable autonomous sensors
US11216069B2 (en) 2018-05-08 2022-01-04 Facebook Technologies, Llc Systems and methods for improved speech recognition using neuromuscular information
US20190121306A1 (en) 2017-10-19 2019-04-25 Ctrl-Labs Corporation Systems and methods for identifying biological structures associated with neuromuscular source signals
US10664157B2 (en) * 2016-08-03 2020-05-26 Google Llc Image search query predictions by a keyboard
EP3800618B1 (en) 2016-08-30 2022-12-07 Snap Inc. Systems and methods for simultaneous localization and mapping
US10133916B2 (en) 2016-09-07 2018-11-20 Steven M. Gottlieb Image and identity validation in video chat events
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
DK179978B1 (en) 2016-09-23 2019-11-27 Apple Inc. IMAGE DATA FOR ENHANCED USER INTERACTIONS
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10942971B2 (en) * 2016-10-14 2021-03-09 NewsRx, LLC Inserting elements into artificial intelligence content
US10432559B2 (en) 2016-10-24 2019-10-01 Snap Inc. Generating and displaying customized avatars in electronic messages
US10623666B2 (en) 2016-11-07 2020-04-14 Snap Inc. Selective identification and order of image modifiers
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10203855B2 (en) 2016-12-09 2019-02-12 Snap Inc. Customized user-controlled media overlays
CN108459781B (zh) * 2016-12-13 2021-03-12 阿里巴巴（中国）有限公司 输入框的展现控制方法、装置及用户终端
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11616745B2 (en) 2017-01-09 2023-03-28 Snap Inc. Contextual generation and selection of customized media content
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US10454857B1 (en) 2017-01-23 2019-10-22 Snap Inc. Customized digital avatar accessories
US10915911B2 (en) 2017-02-03 2021-02-09 Snap Inc. System to determine a price-schedule to distribute media content
KR101894928B1 (ko) 2017-02-14 2018-09-05 (주)스톤아이 방문 횟수를 이용한 보너스 정산 시스템의 보너스 금액 산출 장치 및 방법
WO2018151486A1 (ko) * 2017-02-15 2018-08-23 삼성전자 주식회사 전자 장치 및 전자 장치의 메시지 데이터 출력 방법
US11250075B1 (en) 2017-02-17 2022-02-15 Snap Inc. Searching social media content
US10319149B1 (en) 2017-02-17 2019-06-11 Snap Inc. Augmented reality anamorphosis system
US10074381B1 (en) 2017-02-20 2018-09-11 Snap Inc. Augmented reality speech balloon system
US10565795B2 (en) 2017-03-06 2020-02-18 Snap Inc. Virtual vision system
US10523625B1 (en) 2017-03-09 2019-12-31 Snap Inc. Restricted group content collection
US10581782B2 (en) 2017-03-27 2020-03-03 Snap Inc. Generating a stitched data stream
US10582277B2 (en) 2017-03-27 2020-03-03 Snap Inc. Generating a stitched data stream
US11170393B1 (en) 2017-04-11 2021-11-09 Snap Inc. System to calculate an engagement score of location based media content
TWI647609B (zh) * 2017-04-14 2019-01-11 緯創資通股份有限公司 即時通訊方法、系統及電子裝置與伺服器
US10387730B1 (en) 2017-04-20 2019-08-20 Snap Inc. Augmented reality typography personalization system
US10212541B1 (en) 2017-04-27 2019-02-19 Snap Inc. Selective location-based identity communication
US11893647B2 (en) 2017-04-27 2024-02-06 Snap Inc. Location-based virtual avatars
EP3616079A4 (en) 2017-04-27 2020-03-11 Snap Inc. LOCATION PRIVACY MANAGEMENT ON CARD-BASED SOCIAL MEDIA PLATFORMS
US10467147B1 (en) 2017-04-28 2019-11-05 Snap Inc. Precaching unlockable data elements
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK179948B1 (en) * 2017-05-16 2019-10-22 Apple Inc. Recording and sending Emoji
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
KR20230144661A (ko) * 2017-05-16 2023-10-16 애플 인크. 이모지 레코딩 및 전송
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10803120B1 (en) 2017-05-31 2020-10-13 Snap Inc. Geolocation based playlists
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
DK180859B1 (en) 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
US10796103B2 (en) 2017-07-12 2020-10-06 T-Mobile Usa, Inc. Word-by-word transmission of real time text
US10404632B2 (en) * 2017-07-12 2019-09-03 T-Mobile Usa, Inc. Determining when to partition real time text content and display the partitioned content within separate conversation bubbles
CN107592415B (zh) * 2017-08-31 2020-08-21 努比亚技术有限公司 语音发送方法、终端和计算机可读存储介质
US11475254B1 (en) 2017-09-08 2022-10-18 Snap Inc. Multimodal entity identification
US10740974B1 (en) 2017-09-15 2020-08-11 Snap Inc. Augmented reality system
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10499191B1 (en) 2017-10-09 2019-12-03 Snap Inc. Context sensitive presentation of content
US10573043B2 (en) 2017-10-30 2020-02-25 Snap Inc. Mobile-based cartographic control of display content
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US11265273B1 (en) 2017-12-01 2022-03-01 Snap, Inc. Dynamic media overlay with smart widget
WO2019117361A1 (ko) * 2017-12-14 2019-06-20 라인 가부시키가이샤 메시징 서비스 환경에서의 인터랙션 방법 및 시스템
US10749831B2 (en) * 2017-12-15 2020-08-18 Microsoft Technology Licensing, Llc Link with permission protected data preview
US11017173B1 (en) 2017-12-22 2021-05-25 Snap Inc. Named entity recognition visual context and caption data
US10523606B2 (en) 2018-01-02 2019-12-31 Snap Inc. Generating interactive messages with asynchronous media content
US10567321B2 (en) 2018-01-02 2020-02-18 Snap Inc. Generating interactive messages with asynchronous media content
US10678818B2 (en) 2018-01-03 2020-06-09 Snap Inc. Tag distribution visualization system
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US11961494B1 (en) 2019-03-29 2024-04-16 Meta Platforms Technologies, Llc Electromagnetic interference reduction in extended reality environments
US11481030B2 (en) 2019-03-29 2022-10-25 Meta Platforms Technologies, Llc Methods and apparatus for gesture detection and classification
US11907423B2 (en) 2019-11-25 2024-02-20 Meta Platforms Technologies, Llc Systems and methods for contextualized interactions with an environment
US10937414B2 (en) 2018-05-08 2021-03-02 Facebook Technologies, Llc Systems and methods for text input using neuromuscular information
US11150730B1 (en) 2019-04-30 2021-10-19 Facebook Technologies, Llc Devices, systems, and methods for controlling computing devices via neuromuscular signals of users
US11493993B2 (en) 2019-09-04 2022-11-08 Meta Platforms Technologies, Llc Systems, methods, and interfaces for performing inputs based on neuromuscular control
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US11112964B2 (en) 2018-02-09 2021-09-07 Apple Inc. Media capture lock affordance for graphical user interface
US11507614B1 (en) 2018-02-13 2022-11-22 Snap Inc. Icon based tagging
US10885136B1 (en) 2018-02-28 2021-01-05 Snap Inc. Audience filtering system
US10979752B1 (en) 2018-02-28 2021-04-13 Snap Inc. Generating media content items based on location information
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10327096B1 (en) 2018-03-06 2019-06-18 Snap Inc. Geo-fence selection system
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
WO2019178361A1 (en) 2018-03-14 2019-09-19 Snap Inc. Generating collectible media content items based on location information
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US11163941B1 (en) 2018-03-30 2021-11-02 Snap Inc. Annotating a collection of media content items
US10219111B1 (en) 2018-04-18 2019-02-26 Snap Inc. Visitation tracking system
DK179992B1 (en) 2018-05-07 2020-01-14 Apple Inc. DISPLAY OF USER INTERFACES ASSOCIATED WITH PHYSICAL ACTIVITIES
US11722764B2 (en) 2018-05-07 2023-08-08 Apple Inc. Creative camera
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10375313B1 (en) * 2018-05-07 2019-08-06 Apple Inc. Creative camera
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
DK201870374A1 (en) 2018-05-07 2019-12-04 Apple Inc. AVATAR CREATION USER INTERFACE
US10592001B2 (en) * 2018-05-08 2020-03-17 Facebook Technologies, Llc Systems and methods for improved speech recognition using neuromuscular information
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US10896197B1 (en) 2018-05-22 2021-01-19 Snap Inc. Event detection system
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US10504518B1 (en) 2018-06-03 2019-12-10 Apple Inc. Accelerated task performance
US11063889B2 (en) 2018-06-08 2021-07-13 Snap Inc. Generating interactive messages with entity assets
KR20200002610A (ko) * 2018-06-29 2020-01-08 캐논 가부시끼가이샤 전자기기, 전자기기의 제어방법, 및 컴퓨터 판독가능한 매체
US10679393B2 (en) 2018-07-24 2020-06-09 Snap Inc. Conditional modification of augmented reality object
USD890198S1 (en) 2018-08-21 2020-07-14 Facebook, Inc. Display screen with graphical user interface
USD894921S1 (en) 2018-08-21 2020-09-01 Facebook, Inc. Display screen with graphical user interface
US10942978B1 (en) 2018-08-27 2021-03-09 Facebook, Inc. Systems and methods for creating interactive metadata elements in social media compositions
US11017164B1 (en) * 2018-08-27 2021-05-25 Facebook, Inc. Systems and methods for collecting multiple forms of digital content using a single landing screen
US10842407B2 (en) 2018-08-31 2020-11-24 Facebook Technologies, Llc Camera-guided interpretation of neuromuscular signals
US10997760B2 (en) 2018-08-31 2021-05-04 Snap Inc. Augmented reality anthropomorphization system
US11025582B1 (en) 2018-09-05 2021-06-01 Facebook, Inc. Systems and methods for creating multiple renditions of a social media composition from inputs to a single digital composer
DK201870623A1 (en) 2018-09-11 2020-04-15 Apple Inc. USER INTERFACES FOR SIMULATED DEPTH EFFECTS
CN112789577B (zh) 2018-09-20 2024-04-05 元平台技术有限公司 增强现实系统中的神经肌肉文本输入、书写和绘图
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US10645294B1 (en) 2019-05-06 2020-05-05 Apple Inc. User interfaces for capturing and managing visual media
CN109120866B (zh) 2018-09-27 2020-04-03 腾讯科技（深圳）有限公司 动态表情生成方法、装置、计算机可读存储介质和计算机设备
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11321857B2 (en) 2018-09-28 2022-05-03 Apple Inc. Displaying and editing images with depth information
US10698583B2 (en) 2018-09-28 2020-06-30 Snap Inc. Collaborative achievement interface
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
CN109298825B (zh) * 2018-09-30 2020-11-06 广东电网有限责任公司 图像归类方法、装置及电子终端
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US10778623B1 (en) 2018-10-31 2020-09-15 Snap Inc. Messaging and gaming applications communication platform
USD941850S1 (en) * 2018-11-06 2022-01-25 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD941320S1 (en) * 2018-11-06 2022-01-18 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
CN113423341A (zh) 2018-11-27 2021-09-21 脸谱科技有限责任公司 用于可穿戴电极传感器系统的自动校准的方法和装置
US10447842B1 (en) * 2018-11-28 2019-10-15 Motorola Solutions, Inc. Push-to-talk to messaging application graphical interface
US10939236B1 (en) 2018-11-30 2021-03-02 Snap Inc. Position service to determine relative position to map features
US11199957B1 (en) 2018-11-30 2021-12-14 Snap Inc. Generating customized avatars based on location information
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11032670B1 (en) 2019-01-14 2021-06-08 Snap Inc. Destination sharing in location sharing system
US10939246B1 (en) 2019-01-16 2021-03-02 Snap Inc. Location-based context information sharing in a messaging system
US11107261B2 (en) 2019-01-18 2021-08-31 Apple Inc. Virtual avatar animation based on facial feature movement
US11294936B1 (en) 2019-01-30 2022-04-05 Snap Inc. Adaptive spatial density based clustering
US11972529B2 (en) 2019-02-01 2024-04-30 Snap Inc. Augmented reality system
US10936066B1 (en) 2019-02-13 2021-03-02 Snap Inc. Sleep detection in a location sharing system
US10838599B2 (en) 2019-02-25 2020-11-17 Snap Inc. Custom media overlay system
US10964082B2 (en) 2019-02-26 2021-03-30 Snap Inc. Avatar based on weather
US10852918B1 (en) 2019-03-08 2020-12-01 Snap Inc. Contextual information in chat
US11868414B1 (en) 2019-03-14 2024-01-09 Snap Inc. Graph-based prediction for contact suggestion in a location sharing system
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11852554B1 (en) 2019-03-21 2023-12-26 Snap Inc. Barometer calibration in a location sharing system
US11012390B1 (en) 2019-03-28 2021-05-18 Snap Inc. Media content response in a messaging system
US11249614B2 (en) 2019-03-28 2022-02-15 Snap Inc. Generating personalized map interface with enhanced icons
US10810782B1 (en) 2019-04-01 2020-10-20 Snap Inc. Semantic texture mapping system
CN114938360B (zh) * 2019-04-12 2023-04-18 腾讯科技（深圳）有限公司 一种基于即时通讯应用的数据处理方法和装置
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
DK201970530A1 (en) 2019-05-06 2021-01-28 Apple Inc Avatar integration with multiple applications
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
CN110134515A (zh) * 2019-05-16 2019-08-16 极智(上海)企业管理咨询有限公司 一种多通道短信服务系统、方法及装置
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US10582453B1 (en) 2019-05-30 2020-03-03 Snap Inc. Wearable device location systems architecture
US10560898B1 (en) 2019-05-30 2020-02-11 Snap Inc. Wearable device location systems
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11106342B1 (en) * 2019-06-03 2021-08-31 Snap Inc. User interfaces to facilitate multiple modes of electronic communication
US10893385B1 (en) 2019-06-07 2021-01-12 Snap Inc. Detection of a physical collision between two client devices in a location sharing system
US11307747B2 (en) 2019-07-11 2022-04-19 Snap Inc. Edge gesture interface with smart interactions
US20220157345A1 (en) * 2019-07-16 2022-05-19 Lg Electronics Inc. Display device
CN110674618A (zh) * 2019-09-03 2020-01-10 北京达佳互联信息技术有限公司 一种内容展示方法、装置、设备及介质
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US11821742B2 (en) 2019-09-26 2023-11-21 Snap Inc. Travel based notifications
US11218838B2 (en) 2019-10-31 2022-01-04 Snap Inc. Focused map-based context information surfacing
US11429618B2 (en) 2019-12-30 2022-08-30 Snap Inc. Surfacing augmented reality objects
US11128715B1 (en) 2019-12-30 2021-09-21 Snap Inc. Physical friend proximity in chat
US11343323B2 (en) 2019-12-31 2022-05-24 Snap Inc. Augmented reality objects registry
US11169658B2 (en) 2019-12-31 2021-11-09 Snap Inc. Combined map icon with action indicator
US20210210099A1 (en) * 2020-01-06 2021-07-08 Soundhound, Inc. Multi Device Proxy
US11228551B1 (en) 2020-02-12 2022-01-18 Snap Inc. Multiple gateway message exchange
US11265274B1 (en) 2020-02-28 2022-03-01 Snap Inc. Access and routing of interactive messages
US11516167B2 (en) 2020-03-05 2022-11-29 Snap Inc. Storing data based on device location
US11619501B2 (en) 2020-03-11 2023-04-04 Snap Inc. Avatar based on trip
US10956743B1 (en) 2020-03-27 2021-03-23 Snap Inc. Shared augmented reality system
US11430091B2 (en) 2020-03-27 2022-08-30 Snap Inc. Location mapping for large scale augmented-reality
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11513667B2 (en) 2020-05-11 2022-11-29 Apple Inc. User interface for audio message
US11183193B1 (en) 2020-05-11 2021-11-23 Apple Inc. Digital assistant hardware abstraction
DK181103B1 (en) 2020-05-11 2022-12-15 Apple Inc User interfaces related to time
US11921998B2 (en) 2020-05-11 2024-03-05 Apple Inc. Editing features of an avatar
US11054973B1 (en) 2020-06-01 2021-07-06 Apple Inc. User interfaces for managing media
JP2023529126A (ja) 2020-06-08 2023-07-07 アップル インコーポレイテッド 三次元環境におけるアバターの提示
US11392275B2 (en) * 2020-06-10 2022-07-19 Snap Inc. Contextual sending menu
US11503432B2 (en) 2020-06-15 2022-11-15 Snap Inc. Scalable real-time location sharing framework
US11314776B2 (en) 2020-06-15 2022-04-26 Snap Inc. Location sharing using friend list versions
US11483267B2 (en) 2020-06-15 2022-10-25 Snap Inc. Location sharing using different rate-limited links
US11290851B2 (en) 2020-06-15 2022-03-29 Snap Inc. Location sharing using offline and online objects
US11308327B2 (en) 2020-06-29 2022-04-19 Snap Inc. Providing travel-based augmented reality content with a captured image
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
US11349797B2 (en) 2020-08-31 2022-05-31 Snap Inc. Co-location connection service
US11212449B1 (en) 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
US11297281B1 (en) * 2021-03-22 2022-04-05 Motorola Mobility Llc Manage a video conference session in a multi-tasking environment
US11606756B2 (en) 2021-03-29 2023-03-14 Snap Inc. Scheduling requests for location data
US11645324B2 (en) 2021-03-31 2023-05-09 Snap Inc. Location-based timeline media content system
US11868531B1 (en) 2021-04-08 2024-01-09 Meta Platforms Technologies, Llc Wearable device providing for thumb-to-finger-based input gestures detected based on neuromuscular signals, and systems and methods of use thereof
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media
US11539876B2 (en) 2021-04-30 2022-12-27 Apple Inc. User interfaces for altering visual media
US11714536B2 (en) 2021-05-21 2023-08-01 Apple Inc. Avatar sticker editor user interfaces
US11776190B2 (en) 2021-06-04 2023-10-03 Apple Inc. Techniques for managing an avatar on a lock screen
CN115562540A (zh) * 2021-07-01 2023-01-03 祖玛视频通讯公司 在视频通信会话中应用视频效果的方法
US11868596B2 (en) * 2021-07-28 2024-01-09 Capital One Services, Llc Color-based system for generating notifications
KR20240049836A (ko) * 2021-09-02 2024-04-17 스냅 인코포레이티드 전자 안경류 디바이스들에 대한 스캔 기반 메시징
US11829834B2 (en) 2021-10-29 2023-11-28 Snap Inc. Extended QR code
CN114780190B (zh) * 2022-04-13 2023-12-22 脸萌有限公司 消息处理方法、装置、电子设备及存储介质
KR20240037705A (ko) * 2022-09-15 2024-03-22 삼성에스디에스 주식회사 주목 메시지를 처리하기 위한 수신 디바이스 및 방법

Family Cites Families (116)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2011A (en) 1841-03-18 Appabatxts for piling saws
US14312A (en) 1856-02-26 Air-cock for steam-heating
US14092A (en) 1856-01-15 ctjmings
US5477264A (en) 1994-03-29 1995-12-19 Eastman Kodak Company Electronic imaging system using a removable software-enhanced storage device
JPH11308434A (ja) 1998-04-24 1999-11-05 Sanyo Electric Co Ltd 画像印刷装置
US6473769B1 (en) 1999-03-31 2002-10-29 Microsoft Corporation Property linking in object-oriented computing environments
US7315848B2 (en) 2001-12-12 2008-01-01 Aaron Pearse Web snippets capture, storage and retrieval system and method
JP2004304297A (ja) 2003-03-28 2004-10-28 Kyocera Corp 携帯情報端末
EP2326071A3 (en) * 2003-04-22 2011-11-23 Spinvox Limited A method of providing voicemails to a wireless information device
US20070054678A1 (en) * 2004-04-22 2007-03-08 Spinvox Limited Method of generating a sms or mms text message for receipt by a wireless information device
FR2872660B1 (fr) 2004-07-05 2006-12-22 Eastman Kodak Co Appareil de prise de vue et procede pour la formation d'images annotees
EP1653398A1 (en) 2004-10-29 2006-05-03 Research In Motion Limited Extended User Interface for Email Composition
US7376699B2 (en) * 2004-12-02 2008-05-20 Scenera Technologies, Llc System and method for sending an image from a communication device
US20060174203A1 (en) 2005-01-31 2006-08-03 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Viewfinder for shared image device
US20060215242A1 (en) 2005-03-24 2006-09-28 Mohammad Besharat Communication device configured to automatically append an image to a message and method therefore
US7685530B2 (en) 2005-06-10 2010-03-23 T-Mobile Usa, Inc. Preferred contact group centric interface
US20070136750A1 (en) 2005-12-13 2007-06-14 Microsoft Corporation Active preview for media items
KR100746943B1 (ko) * 2006-02-06 2007-08-07 주식회사 케이티프리텔 단문 메시지 서비스를 이용한 문자 채팅 기능을 지원하는이동통신 단말기 및 문자 채팅 서비스 방법
US9304675B2 (en) * 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
US8330773B2 (en) 2006-11-21 2012-12-11 Microsoft Corporation Mobile data and handwriting screen capture and forwarding
JP5196777B2 (ja) 2006-12-11 2013-05-15 株式会社スクウェア・エニックス ゲーム設備
US8031170B2 (en) 2007-05-09 2011-10-04 Research In Motion Limited User interface for selecting a photo tag
US8694379B2 (en) 2007-05-14 2014-04-08 Microsoft Corporation One-click posting
KR101396974B1 (ko) 2007-07-23 2014-05-20 엘지전자 주식회사 휴대 단말기 및 휴대 단말기에서의 호 신호 처리방법
US7873746B2 (en) 2007-07-27 2011-01-18 Lagavulin Limited User interface for a portable, image-processing transmitter
US8407603B2 (en) 2008-01-06 2013-03-26 Apple Inc. Portable electronic device for instant messaging multiple recipients
US8913176B2 (en) * 2008-09-05 2014-12-16 Lg Electronics Inc. Mobile terminal and method of performing multi-focusing and photographing image including plurality of objects using the same
US20100124906A1 (en) 2008-11-14 2010-05-20 Nokia Corporation Method and Apparatus for Transmitting and Receiving Data
US8584031B2 (en) 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
US8406386B2 (en) * 2008-12-15 2013-03-26 Verizon Patent And Licensing Inc. Voice-to-text translation for visual voicemail
US8799806B2 (en) 2008-12-31 2014-08-05 Verizon Patent And Licensing Inc. Tabbed content view on a touch-screen device
US20100223345A1 (en) * 2009-03-02 2010-09-02 Microsoft Corporation Communications application having conversation and meeting environments
EP2228711A3 (en) 2009-03-12 2014-06-04 Lg Electronics Inc. Mobile terminal and method for providing user interface thereof
US8564541B2 (en) 2009-03-16 2013-10-22 Apple Inc. Zhuyin input interface on a device
US20100262924A1 (en) 2009-04-08 2010-10-14 Kalu Onuka Kalu System and method for linking items to a group
KR101588730B1 (ko) 2009-04-21 2016-01-26 엘지전자 주식회사 이동 단말기 및 이것의 인스턴트 메시징 서비스를 이용한 대화 방법
KR101590766B1 (ko) 2009-06-26 2016-02-02 삼성전자주식회사 메시지를 그룹화하고 디스플레이하는 장치 및 방법
US9251428B2 (en) * 2009-07-18 2016-02-02 Abbyy Development Llc Entering information through an OCR-enabled viewfinder
KR101598632B1 (ko) 2009-10-01 2016-02-29 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 이동 단말기 및 그의 태그 편집 방법
US8380231B2 (en) 2009-10-14 2013-02-19 Research In Motion Limited System and method for managing messages in conversational-type messaging applications
US8239783B2 (en) 2009-11-19 2012-08-07 Microsoft Corporation Integrated viewfinder and digital media
US8698762B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
WO2011085248A1 (en) 2010-01-07 2011-07-14 Swakker, Llc Methods and apparatus for modifying a multimedia object within an instant messaging session at a mobile communication device
US8554731B2 (en) 2010-03-31 2013-10-08 Microsoft Corporation Creating and propagating annotated information
US9003306B2 (en) 2010-05-04 2015-04-07 Qwest Communications International Inc. Doodle-in-chat-context
US20110276901A1 (en) 2010-05-04 2011-11-10 Qwest Communications International Inc. Family chat
KR101606727B1 (ko) 2010-06-25 2016-03-28 엘지전자 주식회사 휴대 단말기 및 그 동작 방법
KR101701836B1 (ko) 2010-07-05 2017-02-02 엘지전자 주식회사 이동 단말기 및 이것의 메시지 송신 제어 방법
US8811948B2 (en) * 2010-07-09 2014-08-19 Microsoft Corporation Above-lock camera access
US8645136B2 (en) * 2010-07-20 2014-02-04 Intellisist, Inc. System and method for efficiently reducing transcription error using hybrid voice transcription
KR20120023405A (ko) 2010-09-03 2012-03-13 삼성전자주식회사 사용자 인터페이스 제공 방법 및 장치
WO2012038771A1 (en) 2010-09-21 2012-03-29 Sony Ericsson Mobile Communications Ab System and method of enhancing messages
US20120102403A1 (en) 2010-10-22 2012-04-26 Robert Sanford Havoc Pennington Video integration
US9338197B2 (en) 2010-11-01 2016-05-10 Google Inc. Social circles in social networks
US9203796B2 (en) 2010-11-12 2015-12-01 Facebook, Inc. Messaging system with multiple messaging channels
CN103392306A (zh) * 2010-11-12 2013-11-13 脸谱公司 具有多个消息信道的消息系统
US8738705B2 (en) 2010-12-21 2014-05-27 Facebook, Inc. Categorizing social network objects based on user affiliations
US20120210200A1 (en) * 2011-02-10 2012-08-16 Kelly Berger System, method, and touch screen graphical user interface for managing photos and creating photo books
CA2771503C (en) * 2011-03-18 2016-06-14 Research In Motion Limited Method and apparatus for join selection of a conference call
CA2828752C (en) 2011-04-29 2020-07-28 American Greetings Corporation Systems, methods and apparatuses for creating, editing, distributing and viewing electronic greeting cards
KR101704549B1 (ko) * 2011-06-10 2017-02-22 삼성전자주식회사 문자 입력 인터페이스 제공 방법 및 장치
US8635293B2 (en) 2011-06-13 2014-01-21 Microsoft Corporation Asynchronous video threads
US8660582B2 (en) 2011-09-20 2014-02-25 Steve Y. Chen System and method for electronic communications between users in a similar geographic location
US20130083215A1 (en) 2011-10-03 2013-04-04 Netomat, Inc. Image and/or Video Processing Systems and Methods
KR101789626B1 (ko) 2011-10-10 2017-10-25 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
EP2582120A1 (en) 2011-10-14 2013-04-17 Research In Motion Limited User interface methods and apparatus for use in communicating text and photo messages
US8819154B2 (en) 2011-10-14 2014-08-26 Blackberry Limited User interface methods and apparatus for use in communicating text and photo messages
US9042527B2 (en) * 2011-10-17 2015-05-26 At&T Intellectual Property I, L.P. Visual voice mail delivery mechanisms
JP5793054B2 (ja) 2011-10-20 2015-10-14 京セラ株式会社 携帯端末装置、プログラムおよび実行抑制方法
KR101301794B1 (ko) 2011-11-04 2013-08-29 (주)카카오 동적 이모티콘을 이용하는 인스턴트 메시징 서비스를 제공하는 방법 및 그 방법을 실행하는 이동 단말
US20130117378A1 (en) 2011-11-06 2013-05-09 Radoslav P. Kotorov Method for collaborative social shopping engagement
KR101833825B1 (ko) 2011-11-11 2018-03-02 엘지전자 주식회사 이동 단말기 및 그 제어 방법
KR20130054071A (ko) 2011-11-16 2013-05-24 삼성전자주식회사 다중 어플리케이션을 실행하는 모바일 장치 및 그 방법
US9743357B2 (en) * 2011-12-16 2017-08-22 Joseph Akwo Tabe Energy harvesting computer device in association with a communication device configured with apparatus for boosting signal reception
KR101655876B1 (ko) 2012-01-05 2016-09-09 삼성전자 주식회사 메시지 기반의 대화 기능 운용 방법 및 이를 지원하는 단말기
JP5859330B2 (ja) 2012-02-02 2016-02-10 株式会社コナミデジタルエンタテインメント メッセージ送信システム、制御方法およびプログラム
KR102008495B1 (ko) 2012-02-24 2019-08-08 삼성전자주식회사 데이터 공유 방법 및 이를 위한 이동 단말기
US20130239063A1 (en) 2012-03-06 2013-09-12 Apple Inc. Selection of multiple images
US10282055B2 (en) * 2012-03-06 2019-05-07 Apple Inc. Ordered processing of edits for a media editing application
EP2637128B1 (en) * 2012-03-06 2018-01-17 beyo GmbH Multimodal text input by a keyboard/camera text input module replacing a conventional keyboard text input module on a mobile device
US20130246138A1 (en) 2012-03-16 2013-09-19 J. Aaron Johnson Systems and methods propagating advertising materials in a social media environment
JP5706868B2 (ja) 2012-03-30 2015-04-22 Ｌｉｎｅ株式会社 メッセンジャープラットフォームでアバタ／ゲーム／エンターテイメント機能を提供するシステムおよび方法
US9154456B2 (en) 2012-04-17 2015-10-06 Trenda Innovations, Inc. Messaging system and method
KR101873761B1 (ko) 2012-04-20 2018-07-03 엘지전자 주식회사 이동단말기 및 그 제어방법
CN106133748B (zh) * 2012-05-18 2020-01-31 苹果公司 用于基于指纹传感器输入来操纵用户界面的设备、方法和图形用户界面
US9135751B2 (en) 2012-06-05 2015-09-15 Apple Inc. Displaying location preview
KR101917691B1 (ko) 2012-06-07 2018-11-13 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US20160050289A1 (en) 2012-06-26 2016-02-18 Google Inc. Automatic sharing of digital content
US20130346904A1 (en) * 2012-06-26 2013-12-26 International Business Machines Corporation Targeted key press zones on an interactive display
US9911222B2 (en) 2012-07-06 2018-03-06 Tangome, Inc. Animation in threaded conversations
WO2014009610A1 (en) 2012-07-13 2014-01-16 Entetrainer Oy Imaging module in mobile device
KR102001215B1 (ko) 2012-07-20 2019-07-17 삼성전자주식회사 컨텐트 공유 방법 및 시스템, 그 기기 및 기록 매체
US20140040773A1 (en) 2012-07-31 2014-02-06 Apple Inc. Transient Panel Enabling Message Correction Capabilities Prior to Data Submission
US9785314B2 (en) 2012-08-02 2017-10-10 Facebook, Inc. Systems and methods for displaying an animation to confirm designation of an image for sharing
US8428453B1 (en) 2012-08-08 2013-04-23 Snapchat, Inc. Single mode visual media capture
US9443271B2 (en) 2012-08-15 2016-09-13 Imvu, Inc. System and method for increasing clarity and expressiveness in network communications
WO2014031899A1 (en) 2012-08-22 2014-02-27 Goldrun Corporation Augmented reality virtual content platform apparatuses, methods and systems
CN103634198B (zh) * 2012-08-29 2018-07-27 深圳市京弘全智能科技股份有限公司 一种即时通信软件的界面显示方法及装置
US8928724B2 (en) * 2012-08-31 2015-01-06 Microsoft Corporation Unified user experience for mobile calls
JP5631947B2 (ja) 2012-09-21 2014-11-26 株式会社コナミデジタルエンタテインメント 管理装置、メッセージ管理方法およびプログラム
KR102013443B1 (ko) * 2012-09-25 2019-08-22 삼성전자주식회사 이미지를 전송하기 위한 방법 및 그 전자 장치
US8762895B2 (en) 2012-10-28 2014-06-24 Google Inc. Camera zoom indicator in mobile devices
US9509645B2 (en) 2012-12-28 2016-11-29 Lg Electronics Inc. Mobile terminal, message transceiving server and controlling method thereof
WO2014123270A1 (ko) 2013-02-08 2014-08-14 에스케이플래닛 주식회사 인스턴트 메시징 서비스 제공 방법, 이를 위한 프로그램을 기록한 기록 매체 및 단말
KR102074940B1 (ko) 2013-03-07 2020-03-02 삼성전자주식회사 메시지 송수신 방법 및 장치
US9946365B2 (en) * 2013-03-11 2018-04-17 Barnes & Noble College Booksellers, Llc Stylus-based pressure-sensitive area for UI control of computing device
US9261985B2 (en) * 2013-03-11 2016-02-16 Barnes & Noble College Booksellers, Llc Stylus-based touch-sensitive area for UI control of computing device
US9419935B2 (en) 2013-08-02 2016-08-16 Whatsapp Inc. Voice communications with real-time status notifications
CN110673769A (zh) 2013-08-16 2020-01-10 联想(北京)有限公司 一种信息处理的方法及电子设备
US9804760B2 (en) 2013-08-22 2017-10-31 Apple Inc. Scrollable in-line camera for capturing and sharing content
US20150089389A1 (en) 2013-09-24 2015-03-26 Sap Ag Multiple mode messaging
US9246961B2 (en) 2013-11-27 2016-01-26 Facebook, Inc. Communication user interface systems and methods
KR20160086848A (ko) 2013-11-27 2016-07-20 페이스북, 인크. 통신 사용자 인터페이스 시스템 및 방법
CN103761216B (zh) * 2013-12-24 2018-01-16 上海斐讯数据通信技术有限公司 编辑文本的方法及移动终端
US20150264303A1 (en) 2014-03-17 2015-09-17 Microsoft Corporation Stop Recording and Send Using a Single Action
US10845982B2 (en) 2014-04-28 2020-11-24 Facebook, Inc. Providing intelligent transcriptions of sound messages in a messaging application

Also Published As

Publication number Publication date
CN106255949B (zh) 2020-04-24
EP2940570A1 (en) 2015-11-04
KR101734312B1 (ko) 2017-05-11
EP3862862A1 (en) 2021-08-11
US20160299658A1 (en) 2016-10-13
US20150312182A1 (en) 2015-10-29
AU2014392593A1 (en) 2016-09-01
CN106255949A (zh) 2016-12-21
US20150312184A1 (en) 2015-10-29
AU2014392592A1 (en) 2016-09-01
US11455093B2 (en) 2022-09-27
KR20160113309A (ko) 2016-09-28
WO2015167590A1 (en) 2015-11-05
US20150312175A1 (en) 2015-10-29
CA2938528A1 (en) 2015-11-05
US20210191589A1 (en) 2021-06-24
US20150312185A1 (en) 2015-10-29
CN106255989A (zh) 2016-12-21
MX2016014087A (es) 2017-02-09
IL247022A (en) 2017-12-31
JP6262362B2 (ja) 2018-01-17
US10809908B2 (en) 2020-10-20
US9391933B2 (en) 2016-07-12
KR101733637B1 (ko) 2017-05-10
US9391934B2 (en) 2016-07-12
CA2938529C (en) 2017-03-21
EP2940569B1 (en) 2021-03-17
MX365297B (es) 2019-05-29
EP2940569A1 (en) 2015-11-04
US20180081518A1 (en) 2018-03-22
AU2014392593B2 (en) 2017-04-06
JP2017521736A (ja) 2017-08-03
US9836207B2 (en) 2017-12-05
AU2014392592B2 (en) 2017-02-16
US10976915B2 (en) 2021-04-13
CA2938529A1 (en) 2015-11-05
JP2017521737A (ja) 2017-08-03
MX2016014088A (es) 2017-02-09
IL247021A (en) 2017-04-30
BR112016025271A2 (pt) 2017-08-15
US20220300132A1 (en) 2022-09-22
US20160283109A1 (en) 2016-09-29
CA2938528C (en) 2017-03-21
JP6266805B2 (ja) 2018-01-24
US11397523B2 (en) 2022-07-26
EP3825835A1 (en) 2021-05-26
US10845982B2 (en) 2020-11-24
WO2015167589A1 (en) 2015-11-05

Similar Documents

Publication Publication Date Title
KR101734312B1 (ko) 멀티미디어를 캡처하고 전자 메시지로 전송하기
US11256398B2 (en) Systems and methods for providing responses to and drawings for media content
US20200275159A1 (en) Transmitting video clips of viewers' reactions during a broadcast of a live video stream
KR20160086848A (ko) 통신 사용자 인터페이스 시스템 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
GRNT Written decision to grant