KR20100028573A - 멀티미디어 통신 방법 - Google Patents

멀티미디어 통신 방법 Download PDF

Info

Publication number
KR20100028573A
KR20100028573A KR1020097026979A KR20097026979A KR20100028573A KR 20100028573 A KR20100028573 A KR 20100028573A KR 1020097026979 A KR1020097026979 A KR 1020097026979A KR 20097026979 A KR20097026979 A KR 20097026979A KR 20100028573 A KR20100028573 A KR 20100028573A
Authority
KR
South Korea
Prior art keywords
media
conversation
network
received
rendering
Prior art date
Application number
KR1020097026979A
Other languages
English (en)
Other versions
KR101398254B1 (ko
Inventor
토마스 이. 카티스
제임스 티. 판타자
마리 지. 판타자
매튜 제이. 라니
Original Assignee
레블복스, 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=40160514&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=KR20100028573(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 레블복스, 엘엘씨 filed Critical 레블복스, 엘엘씨
Publication of KR20100028573A publication Critical patent/KR20100028573A/ko
Application granted granted Critical
Publication of KR101398254B1 publication Critical patent/KR101398254B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21—Monitoring or handling of messages
    • H04L51/23—Reliability checks, e.g. acknowledgments or fault reporting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/752—Media network packet handling adapting media to network capabilities
    • E—FIXED CONSTRUCTIONS
    • E04—BUILDING
    • E04H—BUILDINGS OR LIKE STRUCTURES FOR PARTICULAR PURPOSES; SWIMMING OR SPLASH BATHS OR POOLS; MASTS; FENCING; TENTS OR CANOPIES, IN GENERAL
    • E04H3/00—Buildings or groups of buildings for public or similar purposes; Institutions, e.g. infirmaries or prisons
    • E04H3/10—Buildings or groups of buildings for public or similar purposes; Institutions, e.g. infirmaries or prisons for meetings, entertainments, or sports
    • E04H3/12—Tribunes, grandstands or terraces for spectators
    • E04H3/126—Foldable, retractable or tiltable tribunes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1831—Tracking arrangements for later retrieval, e.g. recording contents, participants activities or behavior, network status
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/06—Message adaptation to terminal or network requirements
    • H04L51/066—Format adaptation, e.g. format conversion or compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21—Monitoring or handling of messages
    • H04L51/216—Handling conversation history, e.g. grouping of messages in sessions or threads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21—Monitoring or handling of messages
    • H04L51/226—Delivery according to priorities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/42—Mailbox-related aspects, e.g. synchronisation of mailboxes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00—Network arrangements, protocols or services for addressing or naming
    • H04L61/09—Mapping addresses
    • H04L61/25—Mapping addresses of the same type
    • H04L61/2503—Translation of Internet protocol [IP] addresses
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1083—In-session procedures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/401—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference
    • H04L65/4015—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference where at least one of the additional parallel sessions is real time or time sensitive, e.g. white board sharing, collaboration or spawning of a subconference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/403—Arrangements for multi-party communication, e.g. for conferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/762—Media network packet handling at the source 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/764—Media network packet handling at the destination 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/54—Presence management, e.g. monitoring or registration for receipt of user log-on information, or the connection status of the users
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40—Network security protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/64—Automatic arrangements for answering calls; Automatic arrangements for recording messages for absent subscribers; Arrangements for recording conversations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M11/00—Telephonic communication systems specially adapted for combination with other electrical systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/50—Centralised arrangements for answering calls; Centralised arrangements for recording messages for absent or busy subscribers ; Centralised arrangements for recording messages
    • H04M3/53—Centralised arrangements for recording incoming messages, i.e. mailbox systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/50—Centralised arrangements for answering calls; Centralised arrangements for recording messages for absent or busy subscribers ; Centralised arrangements for recording messages
    • H04M3/53—Centralised arrangements for recording incoming messages, i.e. mailbox systems
    • H04M3/5307—Centralised arrangements for recording incoming messages, i.e. mailbox systems for recording messages comprising any combination of audio and non-audio components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Architecture (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Software Systems (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Security & Cryptography (AREA)
  • Structural Engineering (AREA)
  • Civil Engineering (AREA)
  • Telephonic Communication Services (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Telephone Function (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

음성 및 다른 미디어 통신을 지원하고 사용자가 (i) 라이브 전화 통화, 컨퍼런스 콜, 인스턴트 음성 메시징 또는 전술적 통신을 포함하는 다수의 대화 모드에 참여하도록 하고; (ii) 라이브 모드 또는 타임-쉬프트 모드 중 어느 하나로 대화의 메시지를 검토하고 상기 두 모드들 간에 오가며 끊김없이 전환하도록 하고; (iii) 연속적으로 또는 동시적으로 다수의 대화에 참여하도록 하고; (iv) 추후 검토 또는 처리를 위해 대화의 메시지를 보관하도록 하고; 그리고 (v) 사용자의 통신 장치에서 생성되거나 수신된 미디어를 영구적으로 저장하도록 하는 전기통신 및 멀티미디어 관리 장치 및 방법을 제공한다. 후자의 특징은 사용자가 네트워크로부터 분리되거나 네트워크 상태가 열악한 경우 미디어를 생성하거나 검토할 수 있도록 하고, 네트워크 상태 및 대화에 참여하는 사용자의 의도를 기반으로 네트워크를 통해 미디어의 전달을 최적화하도록 한다.

Description

멀티미디어 통신 방법{MULTIMEDIA COMMUNICATIONS METHOD}
본 발명은 전기 통신에 관한 것으로, 보다 구체적으로, 사용자가 라이브 모드(live mode) 또는 타임 쉬프트 모드(time-shifted mode) 중 어느 하나로 대화 메시지를 검토할 수 있도록 하고, 상기 두 개의 모드를 오가며 대화를 변환시킬 수 있으며, 다중 대화(multiple conversations)에 참여하고 추후 검토 또는 처리를 위해 대화 메시지를 보관하는 전기 통신 및 멀티미디어 관리 방법 및 장치에 관한 것이다.
음성 통신의 현재 상태는 타성에 젖어있다. 자동화된 스위칭(automated switching), 높은 대역폭의 네트워크 및 기술들, 예컨대 위성, 광섬유, VoIP(Voice over IP), 무선 및 셀룰러 네트워크에도 불구하고, 사람들이 전화기를 사용하는 방법에는 거의 변화가 없다. 사람들은 여전히 전화기를 들고, 다른 자에게 다이얼을 돌리고, 연결이 성사되기를 기다리고, 그리고 나서 다이얼된 자와의 양방향, 동기화된 대화에 참여하도록 요구된다. 만약 착신자가 대답을 하지 않으면, 연결은 성사되지 않고, 대화는 일어나지 않는다.
착신자가 음성 메일을 구비하는 경우, 고작 단-방향 비동기(one-way asynchronous) 음성 메시지가 남겨질 수 있다. 그러나, 음성 메일을 전달하는 프로 세스는 번거롭고 시간을 소비하게 한다. 발신자는 다른 단의 전화기에서 전화벨이 멈추고, 음성 메일 시스템으로 전환되고, 음성 메시지의 인사말을 듣고, 그리고 나서 메시지를 남기도록 요구된다. 현재의 음성 메일 시스템은 또한 착신자에게도 불편하다. 착신자는 그들의 음성 메일에 액세스하기 위해 코드를 다이얼로 입력하고, 일련의 조언들을 거쳐, 큐(queue)에 저장된 임의의 기수신된 음성 메시지를 듣고, 그리고 나서 마침내 발신자의 메시지를 들어야 한다.
종래의 음성 메일 시스템의 또 다른 문제점은 음성 메시지의 조직화(organize) 또는 영구적인 보관이 불가능하다는 점이다. 일부 음성 메일 시스템에서, 사용자는 메시지를 보관할 수 있으나, 기결정된 기간이 지난 후에는 자동적으로 삭제되어 영원히 잃어버리게 된다.
현재의 음성 메일 시스템의 또 다른 문제점은 메시지가 남겨질 수 있기 전에 발신자와 음성 메일 시스템 간의 연결이 구축되어야하는 점이다. 연결이 구축되지 않으면, 발신자는 메시지를 남길 수 있는 방법이 없다.
현재의 전화 시스템은 다음과 같은 상대적으로 단순한 사용 패턴을 기반으로 한다: 실시간 라이브 콜 또는 분해된(disjointed) 음성 메일 메시지로서, 이들은 착신자에게 들려지면 일반적으로 삭제된다. 이러한 형태의 음성 통신은 음성 통신으로 달성될 수 있는 실제 파워(real power)를 포착하지 않거나 최근에 사용가능해진 네트워크 속도 및 대역폭의 발전에 대한 이로움을 취하지 않는다. 또한, 전화 네트워크가 다운되거나 또는 접속불가능한 경우(예컨대, 휴대폰 사용자가 커버리지가 아닌 영역에 있거나 기상 악화로 인해 전화선이 다운된 경우), 통신은 일어나지 않는다.
일반적으로, 전화 기반 통신은 텍스트-기반 통신의 진보와 보조를 맞추지 않았다. 인스턴트 메시지, 이메일, 팩스, 그룹 채팅, 및 텍스트 메시지의 보관을 위한 능력은 모두 텍스트 기반 통신에서는 평범한 것들이다. 이에 반해 음성 메일은은 음성 메시지를 관리하거나 및/또는 보관하도록 하는 툴은 거의 존재하지 않았다. 비교해보면, 현재 전화 통신을 관리하도록 하는 툴은 텍스트 통신에 비해 원시적이다.
통합 환경은 단지 현재의 음성 통신 툴의 결점의 일 예를 제공한다. 통합 자산(corporate asset)으로서 조직화를 거쳐 음성 통신을 관리하는 통합된 방법은 현재 존재하지 않는다. 고용인은 일반적으로 그들의 전화 대화를 기록하거나 지속적으로 저장하지 않는다. 음성 통신 자산과 관련된 대부분의 사업은 임의의 관리가능한 형태로 그들의 대화 내용을 관리하거나 저장하기 위한 방법이 없이, 단어가 말해지자마자 사라진다.
설명적인 예로서, 회사의 판매 중역을 생각해보자. 바쁜 일상 중에, 중역은 매우 많은 전화를 할 수 있으며, 전화를 통해 소비자와 다수의 판매를 완료시킬 수 있다. 이러한 대화를 조직화하고, 저장하고, 추후에 검색하는 기능이 없이 중역은 발생할 수 있는 잠재적인 이슈, 예컨대 다른 자와의 거래의 기간을 기억해내거나 판매에서 이전에 합의된 기간을 다투는 소비자를 환기하는 이슈를 해결할 방법이 없다. 이 중역이 대화를 용이하게 검색하고 검토하는 능력을 구비하였다면, 이러한 타입의 이슈는 쉽고 호의적으로 해결될 수 있었을 것이다.
현재의 전술적인 라디오 시스템, 예컨대 군대, 소방서, 경찰서, 의료기관, 구호 팀, 및 최초 대처자(first responders)에 의해 사용되는 라디오 시스템도 또한 매우 많은 결점으로 고민하고 있다. 대부분의 전술적인 라디오 통신은 메시지의 발신자와 착신자 간의 "라이브" 라디오 연결을 통해 발생되어야 한다. 만약 양자 간에 라디오 연결이 없는 경우, 통신은 구축될 수 없다. 발신자 또는 수신자 중 어느 하나라도 그들의 라디오에 접근할 수 없거나 라디오 회로 연결이 구축되지 않으면, 긴급 메시지는 전송될 수 없다. 따라서 전술적인 통신은 다수의 기본적인 문제를 가지고 있다. (i)메시지 전달의 보증, (ii) 착신자가 실시간으로 듣지 않은 메시지로 돌아가 듣도록 하는 것, (iii) 대화에 참여한 참여자의 단위(granularity)를 제어하고, (iv) 라이브 대화를 위한 신호 강도가 부족한 경우 시스템이 이를 극복하는 것을 위한 방법이 없다. 발신자 또는 착신자 중 어느 하나에게도 기전송된 대화의 메시지를 관리하고, 우선 순위를 매기고, 보관하고, 추후 검색(later retrieve)(즉, 타임-쉬프트)하도록 하는 툴을 가지고 있지 않다.
전술적인 라디오 통신 시스템의 또 다른 문제점은 오직 하나의 메시지만이 채널 당 시간(time per channel)에 전송될 수 있는 점이다. 대형 빌딩의 화재를 예로서 가정하고, 여기에 다수의 팀의 소방관, 경찰관 및 의료진이 동시에 빌딩에 갇힌 요구조자를 구출하고, 불을 끄고, 요구조자들에게 의료 지원을 제공하고, 구경꾼들을 통제한다고 가정한다. 각각의 팀이 동일한 채널을 사용하는 경우, 통신은 복잡해지고 혼란스러워질 수 있다. 하나 이상의 사람이 동시에 전송하는 경우 전송은 "스텝 온(stepped on)"된다. 또한, 높고 낮은 우선 순위 메시지 간의 구별이 불 가능하다. 화재가 발생된 빌딩 내부에서 화재를 진화하거나, 갇힌 요구조자들을 구출하는 팀은 다른 팀, 예컨대 구경꾼을 통제하는 팀에 비해 보다 높은 우선 순위를 가져야 한다. 높은 우선 순위의 메시지가 낮은 우선 순위의 메시지에 의해 스텝 온되는 경우, 중요한 통신을 방해할 뿐만 아니라, 빌딩 내의 소방관 및 요구조자들의 생명을 위협할 수도 있다.
메시지를 우선 순위화 하는 기능의 부족에 대한 한 가지 가능한 해결책은 다수의 채널을 사용하는 것이며, 여기서 각각의 팀은 다른 채널을 할당받는다. 그러나, 이러한 해결책은 그들 자신만의 문제점을 발생시킨다. 소방대장은 임의의 시간에 어떤 채널을 들어야하는지 어떻게 결정하는가? 그들이 모두 다른 채널에 있으면 다수의 팀들은 어떻게 다른 팀과 통신하는가? 만약 한 팀이 급한 도움을 요청하는 경우, 다른 팀들이 다른 채널을 듣고 있으면 그들은 어떻게 이러한 상황을 알 것인가? 다수의 채널들이 일부 문제점을 해결할 수 있는 반면, 이는 또한 단일 채널이 사용될 때보다 더 많은 혼란을 야기하고 더 많은 문제점을 만들어낸다.
효율적으로 메시지를 우선 순위화하거나, 다수의 대화가 동시에 일어나도록 하거나, 타임-쉬프팅된 메시지의 전달을 보증하도록 하거나, 또는 추후 검색 및 검토를 위한 대화의 보관 및 저장을 지원하는 관리 툴의 부족은 모두 전술적인 라디오와 관련된 문제점에 기여한다. 군대, 경찰관, 및 소방관과 같은 최초 대처자의 상황에서, 효율적인 통신 툴은 글자그대로 사람과 죽음 간의 차이 또는 임무의 성공 또는 실패를 의미한다. 상술한 화재가 발생한 빌딩의 예는 현재의 전술적인 라디오 통신에 대한 일부 이슈들에 대한 설명에 유용하다. 유사한 문제점이 군대, 경 찰, 최초 대처자 및 전술적인 통신을 사용하는 다른 자에게 존재한다.
패킷-기반 네트워크에서, 일반적으로 사용되는 프로토콜은 TCP(Transmission Control Protocol) 및 UDP(User Datagram Protocol)을 포함한다. UDP는 데이터의 빠른 전달을 장점으로 제공하지만, 완결성(completeness)에서는 손실이 있다. 패킷은 목적지에서 가능한 한 데이터를 넘겨주도록 하고자 하는 경우, 통과(transit)가 감소하고 사용불가능해질 수 있다. 이러한 단점에도 불구하고, UDP는 그 속도적 특징에 기인해 VoIP(Voice over Internet Protocol) 전송에 대한 표준을 이룬다. 반면 TCP는 데이터의 완전한 전달(즉, 전송된 데이터의 정확한 카피)을 보증하지만, 지연(latency)에서는 손실이 있다. 모든 패킷은 그것이 얼마나 걸리는지에 관계없이 전달된다. 이러한 지연은 TCP를 "라이브" 전화 통화에서의 사용에 부적절하게 만든다. 현재 이들 TCP 및 UDP 둘 모두의 성능적 장점을 제공하는 프로토콜은 존재하지 않으며, 여기서 "충분히 우수한" 미디어는 미디어의 완전한 카피의 종국적 전달과 함께 렌더링을 위해 가능한 한 전송될 수 있다. 또한 네트워크 상의 착신자의 존재 및 라이브 또는 타임-쉬프트 모드 중 어느 하나에서 데이터를 렌더링하는 그들의 의도를 기반으로 얼마나 많은 정보가 네트워크를 통해 전달되어야 하는지 결정하는 프로토콜은 존재하지 않는다. 또한, 일반적으로 고려되는 다른 팩터, 예컨대 네트워크 지연(network latency), 네트워크 저하(network degradation), 패킷 손실, 패킷 손상, 및 일반적인 대역폭 조건은 얼마나 많은 데이터가 전송되어야 하는지 결정하는 것에 사용된다. 그러나 종래의 시스템은 착신자의 존재 및 의도를 고려하지 않는다. 그 결과, 데이터가 실시간으로 착신자에 의해 렌더링되는 것을 기본 가정으로 한다. 착신자가 데이터를 즉시 렌더링하지 않는 경우, 이러한 종래의 시스템들은 이들이 필요하지 않은 경우에도 불필요하게 대역폭을 사용하고, 네트워크의 전반적인 성능을 저하시킨다.
상술한 바로 인해, 전화, 음성메일 및 전술적인 음성 통신 시스템은 부적절하다. 따라서, 향상된 음성 및 미디어 통신 및 관리 시스템 및 방법과, 패킷-기반 네트워크를 통한 향상된 음성 및 다른 미디어의 전달이 요구된다.
본 발명은 제 1 통신 장치에서 통신하기 위한 통신 방법에 관한 것이다. 상기 방법은 상기 제 1 통신 장치에서 네트워크를 통해 하나 또는 그 이상의 참여자와의 대화의 미디어를 수신하는 단계 및 상기 미디어가 상기 네트워크를 통해 수신됨에 따라 상기 수신된 미디어를 상기 제 1 통신 장치에 저장하는 단계를 포함한다. 상기 수신된 대화의 미디어는 거의 실시간 모드 또는 타임-쉬프트 모드 중 어느 하나로 렌더링(rendering)될 수 있다. 상기 미디어의 렌더링은 상기 제 1 통신 장치에서 상기 저장된 미디어를 검색하고(retrieving), 상기 검색된 미디어를 증가된 렌더링 레이트로 스토리지로부터 렌더링하고, 상기 증가된 레이트로의 상기 검색된 미디어의 렌더링이 상기 네트워크를 통해 수신되고 있는 상기 대화의 미디어를 따라잡고 이와 실질적으로 동시 발생하는 경우, 캐치업(catch-up) 지점을 확인하고, 상기 캐치업 지점 뒤를 상기 대화의 미디어가 상기 네트워크를 통해 수신됨에 따라 상기 대화의 미디어를 상기 거의 실시간 모드로 렌더링함으로써, 상기 타임-쉬프트 모드에서 상기 거의 실시간 모드로 전환될 수 있다.
본 발명은 첨부한 도면을 참조하여 이어지는 발명의 상세한 설명을 참조로 이해될 수 있으며, 이는 본 발명의 특정 실시예를 설명한다.
도 1은 본 발명의 통신 및 미디어 관리 시스템의 구성도이다.
도 2A 및 도 2B는 본 발명의 통신 및 관리 시스템에서 장치에서 구동하는 클라이언트의 블록도를 도시한다.
도 3은 본 발명의 통신 및 미디어 관리 시스템에서 사용되는 서버의 블록도이다.
도 4A 내지 도 4D는 본 발명의 통신 및 관리 시스템에서 사용되는 데이터 페이로드의 다양한 실시예를 설명한다.
도 5는 본 발명에 따라 공유된 IP 네트워크를 통해 전송되는 데이터를 설명하는 도면이다.
도 6은 본 발명에 따라 회선 기반 네트워크를 통해 전송되는 데이터를 설명하는 도면이다.
도 7은 본 발명에 따라 셀룰러 네트워크 및 인터넷을 걸쳐 전송되는 데이터를 설명하는 도면이다.
도 8A 내지 도 8F는 본 발명의 통신 및 관리 시스템의 저장 및 스트림 기능을 설명하는 일련의 흐름도이다.
도 9A 내지 도 9C는 PQM(Payload Quality Manager)의 동작을 설명하는 흐름도이고, 도 9D 내지 도 9F는 DQM(Data Quality Manager)을 설명하는 흐름도이며, 이들 모두는 본 발명의 클라이언트 및 서버에 의해 사용된다.
도 10은 본 발명의 시스템과 함께 사용될 수 있는 GUI를 구비한 예시적인 장치이다.
도 11A 내지 도 11F는 본 발명의 MCMS(Multiple Conversation Management System) 특징을 설명하는 도면이다.
도 12A 내지 도 12C는 본 발명의 MCMS-C(Multiple Conversation Management System-Consecutive) 특징을 설명하는 도면이다.
도 13A 내지 도 13D는 본 발명의 동작을 상세히 설명하는 일련의 도면을 도시한다.
도 14A 및 도 14B는 본 발명의 클라이언트 및 서버 애플리케이션을 구동하기 위해 사용되는 하드웨어를 설명하는 블록도이다.
본 발명의 상세한 설명에서 사용되는 식별번호는 도면의 구성요소를 나타냄을 알려둔다.
본 발명은 첨부한 도면에 도시된 바와 같이 그 다양한 실시예를 참조하여 상세하게 기술된다. 이어지는 명세서에서, 구체적인 세부사항은 본 발명의 이해를 위해 제공된다. 그러나, 당업자에게 있어서 본 발명이 여기에 기술되지 않은 일부 구현 세부사항을 사용하지 않고도 실현될 수 있음은 명백할 것이다. 또한 본 발명이 불필요하게 불분명해지지 않도록 하기 위해 잘 알려진 동작은 기술되지 않을 것이다.
A. 기능상 개관( Functional Overview )
통신 미디어 관리 방법 및 시스템은 음성 대화에 관여하거나 및/또는 다양한 미디어 타입, 예컨대 음성, 비디오, 텍스트, 위치, 센서 정보, 및 다른 데이터를 사용하여 다수의 동시적인 대화를 관리하는 새로운 모드를 지원한다. 사용자는 음성 메시지를 지정된 착신자에게 송신함으로써 대화에 관여할 수 있다. 선호도 및 우선 순위에 따라, 착신자(들)은 실시간으로 대화에 참여할 수 있거나, 또는 단순히 메시지의 검색이 준비되었음을 통지받을 수 있다. 후자의 경우, 착신자는 그들의 편의에 따라 기록된 메시지를 검토하고 응답함으로써 타임-쉬프트 모드에서 대화에 참여한다.
사용자는 다음 중 어느 하나로 통신을 수행하도록 허용된다: (i) 동기화에 가까운 또는 "라이브" 대화로서, 이는 표준 양방향 전화 통화(standard full duplex phone call)에 유사한 사용자 경험을 제공하며; 또는 (ii) 오가며(back and forth) 통신하는 일련의 시간-지연 전송(즉, 타임-쉬프트 모드). 또한, 대화에 참여한 사용자는 라이브 모드에서 타임-쉬프트 모드로 끊김없이 전환할 수 있고 다시 역으로 전환할 수 있다. 이러한 특성은 또한 각각의 대화에 대해 우선 순위화하고(prioritizing) 두 모드들 간에 이동을 함으로써 사용자가 동시에 다수의 대화에 참여할 수 있도록 한다. 따라서, 상기 시스템을 사용하는 두 명의 사용자는 서로 간에 주고 받으며 기록된 음성 메시지를 송신하고 편리한 때 메시지를 검토할 수 있거나, 메시지는 이들이 필수적으로 라이브의 동기적 음성 대화로 병합되는 비율로 송신될 수도 있다. 본 발명에서는 이러한 통신의 새로운 형태를 가리켜 "복 싱(Voxing)"이라고 언급한다.
사용자가 다른 자에게 "복싱"하는 경우, 대화는 일련의 이산적인(discrete) 기록된 메시지로 구성되며, 이는 많은 위치에 기록되며, 그러한 장소는 송신자의 인코딩 장치(예컨대, 전화기 또는 컴퓨터), 네트워크를 걸쳐 호핑(hopping)하는 다중 전송 상의 서버, 및 수신자의 렌더링(rendering) 장치를 포함할 수 있다. 일반적인 전화 통화 또는 음성 메일과 달리, 상기 시스템은 다음과 같은 특징 및 장점을 제공한다: (i)대화는 라이브와 타임-쉬프트 간에 전환될 수 있고 그 역으로도 전환될 수 있으며; (ii) 대화의 이산적인 메시지는 의미적으로(semantically) 함께 스레딩(threading)되고 보관되며; (iii) 메시지가 기록되고 추후 검색을 위해 사용가능해지기 때문에, 주의집중이 일시적으로 대화로부터 전환되고 그리고 나서 편리한 때 대화는 추후에 검토될 수 있으며; (iv)대화는 수 초, 수 분, 수 시간, 또는 수 일까지 정지되고 그만둔 대화를 다시 취할 수 있으며; (v) 사용자는 진행 중인 대화에 다시 참여하고 빠뜨린 메시지를 신속하게 검토하고 현재의 메시지(즉, 라이브 메시지)까지 따라잡을 수 있으며; (vi) 일어날 대화를 위해 전용 회선을 구비할 필요가 없으며, (vii) 마지막으로, 사용자는 단순히 개인 또는 그룹으로의 전송을 시작하여 대화를 개시할 수 있다. 사람 또는 다른 단의 사람이 메시지의 수신을 인지하는 경우, 그들은 실시간으로 대화를 검토하고 수행하거나, 그들의 선택으로 추후에 검토하는 옵션을 가진다.
통신 미디어 관리 시스템은 또한 네트워크를 통한 데이터의 전송을 최적화하는 새로운 모드를 지원한다. 상기 시스템은 네트워크 상태가 이상적이지 못한 경 우, 실시간으로 대화에 참여하는 착신자로의 페이로드의 전달을 능동적으로 관리한다. 예를 들어, 네트워크 상태가 열악한 경우, 상기 시스템은 전송을 위한 데이터의 품질을 착신자에 의한 착신에서 렌더링되기에 "충분히 양호한" 상태까지 의도적으로 감소시켜, 대화의 실시간 참여를 허용한다. 상기 시스템은 또한 시간 상에서 메시지의 "정확한" 카피의 종국적인 전달을 보증한다. 따라서 상기 시스템 및 방법은 속도 및 정확성 둘 모두의 장점을 제공한다. 네트워크 대역폭의 이용은 타임라인과 미디어 품질 간의 트레이드오프를 성사시킴으로써 최적화되며, 이는 네트워크 지연, 네트워크 저하, 패킷 손실 또는 손상, 및/또는 현재의 대역폭 상태 뿐만 아니라, 착신자의 존재(presence) 및 착신자(들)이 메시지를 실시간으로 즉시 검토할 의도가 있는지 여부에 대한 의도(intentions)를 사용하여 최적화된다.
대화의 메시지는 오직 음성만을 포함하거나, 음성, 영상 및 다른 데이터, 예컨대 센서 정보를 포함할 수 있음을 주의한다. 메시지가 검토될 때, 이들은 청취되거나 시각적으로 검토되거나, 또는 그 조합이 될 수 있으며, 이는 메시지에 포함된 미디어의 타입에 의존한다. 비록 본원의 출원 당시, 대부분의 대화가 음성만을 포함하더라도, 여기에 기술되는 통신 시스템 및 방법은 광범위하게 다수의 미디어 타입, 예컨대 음성 및 영상을 포함하는 대화를 포함한다.
향상된 음성 및 다른 미디어 통신 및 관리 시스템 및 방법이 하나 또는 그 이상의 다음과 같은 특징 및 기능을 제공하도록 개시된다:
i. 사용자가 다수의 대화 타입에 참여할 수 있도록 하며, 이는 라이브 전화 통화, 컨퍼런스 콜, 음성 메시지, 연속적이거나 동시적인 통신에 참여하도록 하며;
ii. 사용자가 라이브 모드 또는 타임-쉬프트 모드(음성 메시지) 중 어느 하나로 대화의 메시지를 검토하도록 하며;
iii. 사용자가 동기적인 "라이브" 모드 및 타임 쉬프트 모드 간에 대화를 끊김없이 전환하도록 하며;
iv. 사용자가 다른 참여자 또는 네트워크와의 연결 구축을 기다리지 않고도 대화에 참여하도록 한다. 이러한 속성은 사용자가 대화를 시작하고, 대화에 참여하고, 네트워크가 사용 가능하지 않거나, 네트워크가 열악한 상태이거나, 또는 다른 참여자가 유효하지 않은 상태인 경우, 기수신된 타임-쉬프트된 대화의 메시지를 검토할 수 있도록 하며;
v. 시스템이 송신자 측에 미디어 페이로드 데이터를 저장하도록 하고, 네트워크 전송 후, 모든 수신자 측에 미디어 페이로드 데이터를 저장하며;
vi. 시스템이 각각의 메시지가 식별되고 주어진 대화 내의 주어진 참여자에게 결합되어 메시지들을 의미상으로(semantically) 의미가 있는 대화로 순차적으로 스레딩함으로써 메시지를 조직화하도록 하며;
vii. 사용자가 기능, 예컨대 "라이브", 검토하기 용이한 때까지 대화의 일시정지 또는 타임 쉬프팅, 다양한 모드로의 재생(예컨대, 빠른 재생, 라이브로 따라잡기(catch up), 대화의 시작부분으로 점프) 및 대화를 관리하는 방법(보관, 태그달기(tagging), 검색, 및 보관장소로부터의 독출)이 제어되는 사용자의 그룹과 수행되는 각각의 대화를 관리할 수 있도록 하며;
viii. 시스템이 현재 대화를 관리하고 온라인 상태를 포함하여 모든 대화 참 여자와 함께 공유하도록 하며, 라이브 또는 타임-쉬프트 모드 중 어느 하나에서 임의의 주어진 메시지를 검토하는 것에 대한 의도, 메시지에 대한 현재 의도, 렌더링 방법, 및 송신자 및 수신자 간의 네트워크 상태를 공유하도록 하며;
ix. 사용자가 동시에 다수의 대화를 관리할 수 있도록 하며, 여기서 (a) 하나의 대화가 현재 진행되고 다른 모든 대화는 일시정지되거나; (b) 다수의 대화, 예컨대 전술적인 통신이지만 이에 제한되지는 않는 대화가 연속적으로 렌더링되거나; 또는 (c) 다수의 대화가 활성화되고 동시적으로 렌더링되며, 예컨대 스톡 교호나(stock exchange) 또는 트레이딩 플로어 환경(trading floor environment)에서 렌더링된다.
x. 사용자가 모든 대화를 저장하고, 원한다면 영구적으로 이들을 실재의 매체에 보관할 수 있도록 하고, 필요에 따라 구조화되고, 인덱스되고, 검색되고, 전사되고(transcribed), 번역되고 및/또는 검토될 수 있는 자산을 제공하며;
xi. 시스템이 가능한 한 즉시 렌더링하기에 "충분히 양호한" 비율로의 메시지 전달의 최적 모드(best-efforts mode)를 사용하는 실시간 콜 기능을 제공할 수 있도록 하고(UDP와 유사함), 근원적으로 저장된 완전한 카피로부터 임의의 잃어버리거나 결함이 있는 데이터를 재전송하도록 요구함으로써 전송됨에 따라 메시지의 정확한 카피의 종국적인 전달이 보증되도록 하며(TCP와 유사함);
xii. 시스템이 타임라인 및 미디어 품질 간의 트레이드오프를 수행함으로써 네트워크 대역폭의 이용을 최적화할 수 있도록 하며, 이는 네트워크 지연, 네트워크 저감, 패킷 손실 또는 손상, 및/또는 현재의 대역폭 상태 뿐만 아니라 착신자 (들)의 존재 및 의도(즉, 실시간으로 미디어를 검토하거나 타임-쉬프트 모드로 검토하는 의도)를 이용하여 최적화하도록 한다.
다양한 실시예에서, 상술된 일부 또는 전부의 많은 특징 및 기능이 구현될 수 있다. 그러나, 본 발명의 다른 실시예는 상술된 특징 및 기능의 전부를 포함할 필요는 없음을 확인한다.
B. 용어 정리( Glossary )
본 발명을 상세하게 설명하기 전에, 명세서에 사용되는 일부 용어 및 두문자를 정의하는 것이 유용하다. 이러한 용어 정리는 시스템 컴포넌트, 미디어, 미디어 관리, 사람들 및 대화 관리의 그룹으로 조직화된다.
B.1. 시스템 컴포넌트( System Components )
클라이언트( Client ): 클라이언트는 통신 시스템에서 사용자 애플리케이션이며, 이는 사용자 인터페이스, 영구적인 데이터 스토리지, 및 "복싱(Voxing)" 기능을 포함한다. 사용자는 클라이언트 애플리케이션과 상호작용하고, 클라이언트 애플리케이션은 모든 통신(메시지 및 신호) 및 네트워크를 통해 전송되거나 수신되는 페이로드 (미디어) 전송을 관리한다. 클라이언트는 미디어의 인코딩(예컨대, 음성, 영상, 또는 다른 데이터 컨텐츠의 캡쳐링) 및 미디어의 렌더링(rendering)을 지원하고, 네트워크를 걸친 데이터의 전송의 최적화뿐만 아니라 보안, 암호화(encryption) 및 인증(authentication)을 지원한다. 클라이언트는 하나 또는 다수의 사용자(즉, 다수의 차용자(tenant))에 의해 사용될 수 있다.
장치( Device ): 클라잉너트 애플리케이션을 구동하는 물리적인 장치이다. 사 용자는 능동적으로 임의의 주어진 시점에 단일의 장치 또는 다수의 장치에 로그인될 수 있다. 다양한 실시예에서, 장치는 전반적인 목적의 컴퓨터, 휴대용 컴퓨터 장치, 프로그래밍 가능한 전화, 프로그래밍 가능한 라디오, 또는 임의의 다른 프로그래밍 가능한 통신 장치일 수 있다.
서버( Servers ): 통신 네트워크 상의 컴퓨터 노드이다. 서버는 네트워크 상의 사용자들과 용속적인 스토리지 간에 오가며 전송된 메시지를 라우팅하고, 미디어 페이로드를 보관한다. 서버는 네트워크를 걸쳐 데이터의 전송을 라우팅하고, 트랜스코딩하고, 보안, 암호화 및 인증, 및 최적화를 제공한다.
B.2. 미디어( Media )
메시지( Message ): 임의의 사용자로부터 다른 사용자로의 통신의 개별적인 단위이다. 각각의 메시지는 음성 또는 영상과 같은 일부 종류의 미디어로 구성된다. 각각의 메시지는 특정 속성이 할당되며, 이는 (i) 메시지를 전송하는 사용자; (ii) 메시지가 속하는 대화; (iii) 선택적이거나 사용자가 생성한 중요 태그(Importance Tag); (iv) 타임 스탬프; 및 (v) 미디어 페이로드를 포함한다.
미디어( Media ): 오디오, 비디오, 텍스트, 위치, 센서 기록값, 예컨대 온도, 또는 다른 데이터이다.
대화( Conversation ): 장치 상의 둘 또는 그 이상의 사용자 간의 메시지(식별되고, 영구적으로 저장되고, 그룹화되고, 그리고 우선 순위화된)의 스레드(thread)이다. 사용자는 일반적으로 그들의 장치를 사용하여 실시간 또는 타임 쉬프트 모드로 메시지를 검토하거나, 또는 원하는 경우 대화의 메시지를 생성하여 송신함으로 써 대화에 참여한다. 새로운 메시지가 생성된 경우, 이들은 새로운 대화를 정의하거나 또는 기존의 대화에 추가된다.
대화의 헤드( Head of a Conversation ): 가장 최근의 스피커에 의해 인코딩된 대화의 가장 최근의 메시지이다. 이는 "라이브"로 검토하는 경우 사용자가 대화에 위치된 장소이거나, "라이브로의 점프(Jump To Live)" 특징이 사용된 경우 사용자가 점프하는 장소를 의미한다.
다중 대화 관리 시스템( Multiple Conversation Management System ) 또는 MCMS: 클라이언트 애플리케이션의 일부로서 동작하는 애플리케이션이며, 이는 사용자가 다양한 미디어 타입을 사용하여 다수의 대화에 참여할 수 있도록 한다. MCMS 애플리케이션을 사용하여, 사용자는 현재의 다수의 대화 중 하나의 대화를 선택하고, 여기서 오직 현재 대화의 메시지만이 렌더링된다. 선택된 현재의 대화에 대해, 사용자는 타임 쉬프트 모드에서 일련의 오가는 메시지들로부터 거의 동기적인 "라이브" 모드로 전환할 수 있으며, 이는 일반 전화 대화와 유사하며, 그 역으로도 전환할 수 있다. 선택되지 않은 대화의 메시지는 일시정지된 상태이다. 선택되지 않은 대화에 관한 메시지는 사용자들이 여전히 이들 대화에 참여하고 있는 경우 축적될 것이다. 사용자는 선택적으로 다수의 대화 중에서 현재의 대화를 전환할 수 있고 선택된 현재의 대화의 축적된 메시지를 검토할 수 있다.
다중 대화 관리 시스템-연속적( Multiple Conversation Management System -Consecntive) 또는 MCMS -C: MCMS와 유사하고, 렌더링하고 사용자가 우선 순위의 계층적 시스템(hierarchical system of Priorities)을 통해 연속적으로 다수의 대화 를 관리하고 참여할 수 있도록 하는 추가된 특징이 구비되며, 이는 시스템에 의해 자동적으로 관리된다. MCMS-C 애플리케이션은 연속적인 대화의 메시지가 우선 순위화된 순서로 렌더링되도록 하며, 이는 현재 선택된 대화의 메시지만이 렌더링되는 MCMS와 다른 점이다. MCMS-C는 연속적인 대화의 메시지가 우선순위화된 순서로 렌더링되는 것이 중요하거나, 및/또는 비록 메시지들이 낮은 우선 순위 대화에 속하더라도 모든 메시지의 수신이 메시지의 실시간 수신보다 더 중요한 상황에서 특히 적용가능하다. MCMS-C가 적합할 수 있는 상황의 예는 병원, 택시 그룹의 관리, 또는 전술적인 통신을 포함하지만 이에 제한되지는 않는다.
다중 대화 관리 시스템-동시적( Multiple Conversation Management System -Simultaneous) 또는 MCMS -S: MCMS와 유사하고, MCMS-S를 사용하여 가능한, 다수의 대화가 동시적인 렌더링을 위해 선택되는 추가적인 특징을 구비하며, 이 점에서 오직 선택된 현재의 대화의 메시지만이 렌더링되는 MCMS와 다르다. MCMS-S 애플리케이션은 사용자가 다수의 대화를 동시에 청취하고 있는 상황, 예컨대 다른 교환 상의 다수의 브로커를 청취하는 트레이더 및 동시적으로 하나 또는 다수의 브로커에게 교역 요청을 주기적으로 송신하는 상황에 특히 적용가능하다. MCMS-S는 또한 전술적인 통신에서도 적합할 수 있다.
우선 순위( Priority ): 사용자가 MCMS-C에 참여하고 있는 경우, 시스템이 어떤 메시지를 다음으로 렌더링할지 결정하는 메커니즘이다. 우선 순위는 시스템에 의해 자동적으로 관리된다. 사용자는 기본 우선 순위를 설정하거나, 또는 시스템 우선 순위의 기결정된 세트가 사용될 수도 있다. 하나 이상의 메시지가 동시에 렌 더링될 준비가 된 충돌이 발생한 경우, 시스템은 우선 순위를 기반으로 적어도 부분적으로 충돌을 해결하며, 어떤 메시지를 즉시 렌더링하고 어떤 메시지를 타임 쉬프트할지를 결정한다.
태그( Tags ): 사용자 또는 시스템이 대화 또는 메시지에 할당할 수 있는 속성의 세트로서, 예컨대 제목(회사 이름), 지시어("액션 아이템"), 지시자("대화 요약"), 또는 사용자가 데이터를 검색하거나 조직화하기를 원함에 의한 임의의 다른 라벨이다.
중요 태그( Importance Tangs ): 메시지가 렌더링될 예정인 경우, 다른 우선 순위 설정에 관계없이 특정하도록 하는 특정 메시지 속성이다. "긴급" 중요 태그는 예를 들어 다른 우선 순위에 우선할 것이다. 이러한 특징은 임의의 시스템이 이러한 특징을 사용하도록 구성하거나 사용불능으로 구성할 수 있어도, 전술적인 시스템에서 중요하게 사용된다.
패킷( Packet ): 컴퓨터 네트워크를 통해 라우팅될 수 있는 임의의 바이너리 데이터 단위이다. 각각의 패킷은 헤더(메타 데이터) 및 페이로드(미디어 데이터)로 구성된다. 이는 표준 패킷 프로토콜, 예컨대 IP(Internet Protocol), EvDO, UMTS 또는 라디오, 광섬유 또는 유선의 임의의 다른 패킷 기반 네트워크를 포함하지만 이에 제한되지는 않는다.
헤더 또는 패킷 헤더( Header or Packet Header ): 패킷을 기술하는 패킷의 부분이며; 페이로드, 그 인코딩 타입 및 목적지에 관계된 메타데이터이다.
복스 패킷( Vox packet ): 시스템 및 방법이 메시지, 미디어 및 다른 신호 정 보의 전달을 개량하고 최적화하도록 하는 독점적인 패킷(proprietary packet)이다.
미디어 페이로드 (또는 페이로드 )( Media Payload or Payload ): 패킷의 실제 미디어 부분이다.
B.3. 미디어 관리( Media Management )
TSD ( Time Shift Delay ): 복스 패킷의 도달과 장치에서 패킷의 렌더링 간의 시간차이다. TSD는 MTSD를 초과해야한다. TSD는 일반적으로 착신 후 임의의 시간에 대화의 메시지를 검토하도록 선택하는 사용자의 행동에 의해 결정된다.
MTSD ( Minimum Time Shift Delay ): 지터(jitter) 버퍼 기술을 사용한 지터 프로세싱을 허용하도록 클라이언트에 의해 강제된 타임 쉬프트 딜레이이다. 이는 시스템이 렌더링을 적절한 개수의 패킷이 도달하여 사용가능한 미디어 스트림을 생성할 때까지 지연시키도록 야기한다. 시스템은 일반적으로 적응적으로(adaptively) 시간 상에서 MTSD를 조절하여 네트워크의 변할 수 있는 상태를 보상한다.
렌더링( Rendering ): 미디어 스트림을 사용자에게 사용자의 사용(예컨대, 음성, 텍스트, 그래픽 디스플레이, 영상, 또는 그 조합)에 적합한 형태로 전달하는 것이다.
믹싱 ( Mixing ): 하나 또는 그 이상의 미디어 스트림을 렌더링하는 것이다. 예를 들어, 대화의 두 참여자로부터의 미디어 스트림은 렌더링될 때 믹스되어 다수의 사람들이 동시에 말하는 대화와 유사한 사용자 경험을 생성한다.
인코딩( Encoding ): 사용자(예컨대 음성 또는 영상) 또는 장치에 구비된 다른 것(예컨대 GPS 또는 다른 센서 데이터에 의해 생성된 미디어를 번역하고, 미디어를 클라이언트에 의해 처리될 디지털 데이터를 변환하는 프로세스이다.
적응적 지터 버퍼( Adaptive Jitter Buffer ): 지터 버퍼 또는 디-지터 버퍼가 패킷 교환 네트워크에 의해 도입된 지터(즉, 시퀀스 패킷의 도달 또는 패킷의 지연된 도달 중 어느 하나)를 카운트하기 위해 사용되어, 네트워크를 통해 전송된 오디오(또는 비디오) 신호의 연속적인 렌더링은 방해 없이 수행될 수 있다. 데이터는 렌더링 전에 버퍼에 저장되어 알맞게 사이즈가 조정된 버퍼의 미디어가 도달하도록 한다. 미디어는 모든 패킷이 수신되기 전에 렌더링될 수 있고, 전달성(currency)의 품질을 트레이드 오프한다. 적응적 지터 버퍼는 그 사이즈를 동적으로 변화시킬 수 있어 지연/품질 트레이드 오프를 최적화한다.
PIMB ( Persistent Infinite Message Buffer ): PIMB는 "라이브" 데이터의 디-지터링과 보관된 데이터의 저장 및 검색 둘 모두를 수행하는 시간-기반 미디어의 저장을 위한 저장 관리 시스템이다. PIMB는 잠재적으로 무한하고 영구적인 미디어의 저장에 대한 추가적인 속성을 더 포함하낟. PIMB는 일부 또는 모든 참여자 장치 및/또는 서버에서 메시지 및 대화의 복스 패킷의 "정확하거나" 또는 완전한 카피를 유지한다.
PLC ( Packet Loss Compensation or Concealment ): 미디어 스트림의 렌더링 도중, PLC 컴포넌트는 손실된 패킷을 보상하며, 이는 결과를 인터폴레이팅하여 스트림을 리뷰어(reviewer)로 제공하도록 수행된다. 손실된 패킷은 침묵(silence)으로 렌더링될 수 있거나, 패킷 주변으로부터의 정보는 인터폴레이트된 소리 또는 이미지를 제공하도록 사용될 수 있다. 사용될 특정 방법은 미디어, 사용중인 코덱, 및 다른 알려진 파라미터에 종속될 것이다.
B.4. 사람들( People )
사용자( User ): 시스템을 사용하도록 허가된 사람이다.
연락처( Contact ): 시스템의 사용자 또는 비-사용자의 어느 하나의 기록이다. 사용자는 일반적으로 연락처 리스트 상의 멤버와 대화에 참여한다. 비-사용자는 레거시(legacy) 전화, 라디오 또는 다른 비-클라이언트(12)가 사용가능한 장치에 액세스하거나 사용하는 사용자이다.
그룹( Group ): 다수의 연락처의 연합이다. 연락처는 선택적으로 추가되거나 그룹으로부터 삭제될 수 있다. 대화가 그룹 중에서 일어난 경우, 그룹의 모든 멤버는 참여할 수 있거나 참여하지 않을 수 있다.
채널( Channel ): 전술적인 통신 시스템에서 일반적으로 사용된다. 채널은 채널에 다수의 연락처를 연합시키는 점에서 그룹과 유사하다.
참여자( Paticipant ): 대화의 멤버로 식별된 사람이다. 이는 사용자 또는 비-사용자 참여자일 수 있다.
B.5. 대화 관리( Conversation Management )
타임 쉬프팅 ( Time Shifting ): 타임 쉬프팅은 메시지가 수신된 후 사용자-참여자에 의해 결정됨에 따라 임의의 시간에 임의의 메시지를 재생하는 능력이다. 타임-쉬프팅에 의해, 사용자는 메시지를 다음과 같이 검토할 수 있다: (i)MTSD 후 즉시 렌더링함으로써 요구에 의해 즉시; 또는 (ii) 사용자의 재량으로 메시지를 검토하는 모드에서 타임-쉬프트되어; (iii) 구(old) 대화의 검색, 재구성 등을 위해 보 관소로부터; (iv) 지연된 기간 후 먼저 검토될 필요가 있는 다른 높은 우선 순위의 메시지(또는 대화)의 검토를 수용하기 위해; (v) 및/또는 다시 듣고 이해할 메시지를 위해 필요한 경우 반복적으로. 다른 말로, 타임 쉬프팅은 시스템이 MTSD를 부과한 후 임의의 시간에 메시지를 렌더링하는 사용자의 능력이다.
검토( Reviewing ): 메시지 내의 미디어 컨텐츠를 청취, 시청, 읽기 또는 다른 관찰을 의미한다. 검토는 거의 동기적인 실시간 "라이브 모드" 또는 타임-쉬프트 모드 중 어느 하나로 일어날 수 있다.
의도( Intention ): (i) 사용자가 대화의 메시지를 가능한 한 즉시 또는 타임 쉬프트 모드로 검토하기를 원하는지 여부를 포착하는 사용자-정의된 속성; 또는 (ii) 사용자의 행동에 의해 함축된 것 중 어느 하나; 또는 (i)과 (ii)의 조합이다.
주의( Attention ): 지금 사용자가 주어진 대화의 메시지를 검토하고 있는지 여부를 포착하는 사용자 속성이다.
CTL ( Catch Up To Live ): 대화의 헤드에 있지 않은 사용자가 "라이브(즉, 대화의 헤드)를 따라 잡기 위해(Catch Up To Live)" 보다 신속하게 이전 메시지를 검토하도록 하는 렌더링 모드이다. CTL 특징은 임의의 많은 따라잡기 기술, 예컨대 메시지의 빠른 재생, 메시지의 미디어 내의 간격을 제거, 주저하는 조각(hesitation particles)의 제거 등을 사용할 수 있다. 사용자가 CTL을 구비하는 경우, 시스템은 라이브 대화로 끊김없이 흘러간다. 이는 컨퍼런스 콜, 예컨대 사용자가 대화로부터 일시적으로 그의 주의를 이동시킬 필요가 있으나, 그가 돌아오자마자 전체 대화를 듣고자 하는 상황에서 매우 유용한 특징이다.
따라잡기 모드 ( Catch Up Mode ): 어떻게 CTL 프로세스가 따라잡을 것인지(즉, 빠르게 재생, 침묵 및 주저하는 부분의 제거, 도는 그 조합) 결정하는 사용자-구성 또는 기구성된 모드이다.
JTL ( Jump To Live ): 이 특징은 사용자가 그들의 현재 위치에서 대화의 헤드로 점프하도록 한다. 사용자는 일반적으로 그들이 대화 내 그들의 현재 위치와 헤드 간의 메시지 모두를 검토하기를 원하지 않는 경우 JTL 특징을 사용할 것이다.
MCMS 참여자 속성( MCMS Participant Attributes ): 사용자에 의해 정의되거나, 사용자의 행위로부터 시스템에 의해 해석되거나, 관리자에 의해 할당되거나, 또는 그 조합 중 어느 하나에 의해 주어진 대화에 대한 수신자의 의도, 주의, 우선 순위, 및 렌더링 선호도에 대한 속성의 세트이다. 상기 속성은 다음을 포함하지만 이에 제한되지는 않는다: (i) 수신자가 대화의 메시지로 렌더링하기를 원하는 시기에 대한 의도. 가능한 의도 값은 다음을 포함한다: "지금", "타임-쉬프트", "라이브까지 따라잡기(CTL)", "일시정지", 및 "원치 않음(never)"; (ii) 따라잡기 모드로서, 이는 어떻게 CTL 프로세스가 수신자를 라이브까지 따라잡도록 할 것인지(예컨대, 빠른 재생, 침묵 간격 또는 주저하는 곳을 스킵, 또는 일반 속도로 재생) 결정하는 구성 설정이다; (iii) TSD(Time Shift Delay)로서, 이는 대화 상에서 수신자의 현재 위치가 대화의 헤드로부터 얼마나 멀리 떨어져 있는지를 정의하며, 그리고 (iv) 수신자의 다른 대화에 관한 메시지의 우선 순위이다.
C. 시스템 구성( System Architecture )
도 1을 참조하여, 본 발명의 일 실시예에 따른 통신 및 미디어 관리 시스템 의 블록도가 도시된다. 시스템(10)은 다수의 클라이언트(121 내지 12n)를 포함하며, 이는 장치들(131 내지 13n)에서 각각 구동한다. 장치(13)는 통신 서비스 네트워크(14) 상에서 다른 장치와 통신하며, 하나 또는 그 이상의 서버(16)를 포함한다. 하나 또는 그 이상의 네트워크(181 내지 18n)는 다수의 장치들(131 내지 13n)을 통신 서비스 네트워크(14)와 결합하도록 제공된다. 다양한 실시예에서, 네트워크(18)은 PSTN(Public Switched Telephone Network), CDMA 또는 GSM을 기반으로 한 셀룰러 네트워크 예컨대 인터넷, 전술적인 라디오 네트워크, 또는 임의의 다른 통신 네트워크일, 또는 그 조합일 수 있다. 통신 서비스 네트워크(14)는 다양한 네트워크(181 내지 18n)의 위에 있는 네트워크 레이어이거나 그와 통신하는 다른 네트워크이다. 다양한 실시예에서, 네트워크 레이어(14)는 이종(heterogeneous) 또는 동종(homogeneous) 중 어느 하나일 수 있다. 클라이언트(121 내지 12n)는 네트워크(181 내지 18n) 및 네트워크(14)를 통해 "복스 패킷(Vox packets)"로 불리는 개별적인 메시지 유닛을 사용하여 다른 클라이언트 및 서버(16)와 통신하며, 이는 이하 상세하게 기술된다.
D. 클라이언트 구성( Client Architecture )
도 2A 및 도 2B를 참조하여, 장치(13)에서 구동하는 클라이언트(12)의 블록도가 설명된다. 도 2A에 도시된 바와 같이, 클라이언트(12)는 MCMS(Multiple Conversation Management System) 애플리케이션(20), 렌더링 및 인코딩 모듈(21), 및 MCMS 애플리케이션 데이터베이스(22)를 포함한다. 도 2B에 도시된 바와 같이, 클라이언트(12)는 PIMB(Persistent Infinite Message Buffer) 리더26)를 구비한 SAS(Store and Stream) 모듈(24), PIMB 라이터(28), PIMB 데이터베이스(30), DNQS(Data and Network Quality Store)(32), 및 미디어 드라이버 및 인코더 하드웨어(34)를 더 포함한다. MCMS 애플리케이션(20) 및 SAS 모듈(24)은 각각 메시지 핸들링 모듈(25a 및 25b)를 통해 서로 간에 통신한다. 클라이언트(12)는 인증-암호화-보안 모듈(40) 및 통신 프로토콜 모듈(44)을 더 포함한다.
모듈(40)은 클라이언트(12)로 "복스" 패킷의 전송하고 클라이언트(12)로부터 복스 패킷을 수신하는 도중 인증, 암호화 및 보안 서비스를 제공한다. 통신 프로토콜 모듈(44)은 데이터를 전송할 때 클라이언트(12)를 구동하는 장치(13)에 연결된 근원 네트워크(underlying network)(18)에 의해 사용되는 네이티브 패킷으로 복스 패킷을 캡슐에 넣고(encapsulate), 데이터를 수신할 때 네이티브 패킷으로부터 복스 패킷을 캡슐에서 뺀다(decapsulate). 모듈(40 및 44)을 사용하여, 멀티-파티(multy-party) 엔드-투-엔드 인증, 암호화 및 보안이 클라이언트(12)들 간에 제공된다. 메시지는 제 1 송신 장치(13)로부터 제 2 수신 장치(13)로의 네트워크(181 내지 18n) 및 네트워크(14)를 걸쳐 인증되고, 암호화되고 보안된다.
D.1.1. MCMS 데이터베이스( MCMS Database )
데이터베이스(22)는 시스템(10) 내의 많은 엔티티(entities)에 대한 영구적인 메타데이터를 저장하고 관리하며, 이는 연락처 및 참여자, 대화 및 메시지(라이 브 및 저장된), 및 기본 우선 순위, 및 서버(16)에 대한 정보를 포함한다. 또한, MCMS 데이터베이스(22)는 사용자 또는 사용자의 연락처 리스트와 대화하는 모든 참여자의 모멘트-투-모멘트 동작 데이터뿐만 아니라, 사용자의 대화, 존재, 및 상태의 모멘트-투-모멘트 동작 데이터를 저장한다. 예를 들어, 대화 및 메시지에 대해, 데이터베이스(22)는 상태 정보, 예컨대 어떤 대화의 메시지를 사용자가 검토하였거나 검토하지 않았는지에 대한 정보, 그리고 클라이언트(12)가 참여자인 각각의 대화에 대한 CTL 상태, 모든 참여자의 존재 및 상태, 및 다른 네트워크 및 다른 시스템 관리 데이터를 추적한다.
D.1.2. MCMS 애플리케이션( MCMS Application )
MCMS 애플리케이션(20)은 대화에 참여하는 다른 복싱 모드 및/또는 다양한 미디어 및 데이터 타입(음성, 영상, 텍스트, 위치, 데이터 등)을 사용한 다수의 대화의 관리를 지원한다. 사용자는 클라이언트(12)를 사용가능하게 된 장치(client enabled device)(13)를 사용하여 메시지를 지정된 착신자에게 송신함으로써 대화에 개입한다. 선호도 및 우선 순위에 따라, 착신자는 실시간으로 메시지를 검토하거나, 단순히 메시지가 검토를 위해 준비되었음을 통지받을 수 있다. 사용자는 오가는 일련의 메시지로부터 전환할 수 있으며, 이는 타임-쉬프트(음성 메시지) 모드 또는 거의 동기화된 양방향 대화(일반 "라이브" 전화 통화와 유사함)에서 검토된 메시지이며, 그리고 나서 다시 음성 메시지로 돌아갈 수 있다. MCMS 애플리케이션(20)은 다른 진행중인 대화에서 임의의 메시지를 손실하지 않으면서 실시간으로 사용자가 그의 가장 중요한 대화와의 상호작용을 제어하도록 한다. 예를 들어, MCMS 애플리케이션(20)은 사용자에게 그들이 현재 검토하고 있지 않은 대화로부터의 긴급하거나 높은 우선 순위의 통신을 통지한다. MCMS 애플리케이션(20)은 또한 추후 검색을 위해 저장될 모든 대화로부터의 모든 메시지를 사용가능하게 하여, 이들이 임의의 시간에 검토될 수 있도록 한다.
다양한 실시예에 따라, MCMS 애플리케이션(20)의 다수의 상이한 동작 모드가 있으며, 이는 MCMS-C(Consecutive) 및 MCMS-S(Simultaneous)를 포함하며, 이는 각각 메시지의 연속적이고 동시적인 렌더링을 지원한다. 이들 각각의 실시에는 이하 더 상세하게 기술된다. 특별히 특정하지 않은 경우, 용어 "MCMS"는 일반적으로 MCMS 애플리케이션(20)을 의미하도록 의도되며, 이는 전술한 상이한 모드를 포함한다.
MCMS 애플리케이션(20)은 많은 모듈 및 서비스를 포함한 다중-계층(multi-tiered) 구조이다. 모듈 및 서비스는 MCMS 데이터베이스 모듈(20a), SAS 서비스 모듈(20b), 메시징 및 시그널링 서비스 모듈(20c), 사용자 인터페이스 API(Application Programming Interface)(20d), 사용자 인터페이스 모듈(20e), 대화/메시지 관리 서비스(20f), 우선 순위 서비스(20g), 연락처 서비스(20h), 존재/상태 서비스(20i), 및 메시지/신호 서비스(20j)를 포함한다.
D.1.2.1 MCMS 데이터베이스 모듈( MCMS Database Module )
MCMS 데이터베이스 모듈(20a)는 MCMSMS 데이터베이스(22)에 액세스하기 위해 MCMS 애플리케이션(20)에 필요한 모든 기능 콜을 관리하는 서비스 모듈이다.
D.1.2.2 SAS 서비스 모듈( SAS Service Module )
SAS 서비스 모듈(20b)은 MCMS 애플리케이션(20)과 SAS 모듈(24) 간의 통신과 조정(coordination)을 가능하게 하는 기능 콜의 세트를 포함하고, 이는 각각 메시지 핸들링 모듈(25a 및 25b)을 통해 오가며 전달된다. 기능 콜의 세트는 MCMS 애플리케이션(20) 및 SAS 모듈(24) 둘 모두가 사용자에 의해 개시된 때 다양한 복싱 기능을 구현하기에 필요한 대로 동작하거나 및/또는 네트워크 상태에 의해 지시된 대로 동작할 수 있도록 한다. SAS 서비스 모듈(20b)에 의해 수행되는 일부 기능성은 메시지 전송 및 메시지 확인응답(acknowledgments)의 상태, 메시지의 렌더링에 대한 지시, 및 사용자의 상태 및 존재를 유지하고 통신하는 것을 포함한다.
D.1.2.3 메시징 및 시그널링 서비스 모듈( Messaging and Signaling Services Module )
메시징 및 시그널링 서비스 모듈(20c)은 클라이언트(12) 및 서버(16) 둘 모두에서 구동하고, 시스템(10)의 클라이언트(12)와 서버(16) 간의 통신을 가능하게 한다. 메시지, 데이터 및 다른 신호를 포함하는 이러한 통신은 클라이언트(12) 및 시스템(10)이 관리자 통신, 네트워크 상태, 사용자 및 사용자 상태를 추적하도록 한다. 예를 들어, 클라이언트(12)에서 구동하는 메시지 및 시그널링 서비스 모듈(20c)과 서버(16) 간에 송신된 메시지 및 신호의 타입은 사용자의 네트워크 능력, 서버(16)가 클라이언트(12)로 송신하여("높은 워터 마크(high water mark)"를 포함할 수 있음) 전체 메시지 또는 메시지의 일부 부분이 손실되었는지 여부를 결정하는 메시지의 추적, (예컨대 "생성(generating)" 클라이언트에 의해 생성된 대화 당 참여자 당 시퀀스 번호), 사용자가 말하거나 주어진 대화의 메시지를 검토하 는지 여부, 사용자가 대화의 헤드에 대해 존재하는 위치, 또는 참여자가 더 이상 대화를 라이브로 검토하고 있지 않은 시간을 포함한다. 클라이언트(12)의 메시지 및 시그널링 서비스 모듈과 서버(16) 간에 송신된 메시지 및 신호의 많은 타입 중 일부가 예로 존재하고, 이는 본 발명을 제한하는 의미로 해석되지 않는다.
D.1.2.4 사용자 인터페이스 API( User Interface API )
사용자 인터페이스 API(20d)는 사용자 인터페이스 모듈(20e) 및 MCMS 애플리케이션(20)의 근원 서비스 간의 프로그래밍 인터페이스를 정의하는 기능 콜의 세트를 정의한다. 사용자 인터페이스 API(20d)는 UI 애플리케이션 지원과 같은 일반적인 목적의 방법 및 사용자 인터페이스가 MCMS 애플리케이션(20)을 동작시키기 위해 필요한 모든 기능 콜을 지원한다. 다양한 실시예에서, 사용자 인터페이스 API(20d)는 클라이언트(12)가 넓은 다양성의 사용자 인터페이스 및 장치 타입, 예컨대 어도비 플래시-기반 및/또는 마이크로소프트 윈도우 애플리케이션, 셀룰러 또는 이동 통신 단말기, 톤(tone)으로 구동되는 PSTN 장치, VUI(Voice User Interface), 및 물리적 라디오 통신 인터페이스를 지원할 수 있도록 한다. 다양한 실시예에서, 사용자 인터페이스 API 모듈(20d)은 매우 유연하고 매우 강제적인 사용자 인터페이스의 디자인이 MCMS 애플리케이션(20)의 기능성을 지원할 수 있도록 한다.
D.1.2.5 MCMS 사용자 인터페이스 모듈( MCMS User Interface Module )
MCMS 사용자 인터페이스 모듈(20e)은 클라이언트(12)의 오디오 및 비디오 사용자 인터페이스의 동작 및 기능을 지원한다. 사용자 인터페이스 모듈(20e)은 사용자 상호작용의 호스트를 지원하고 다양한 상호작용 매체, 예컨대 GUI 스크린의 어 레이, 오디오/DTMF 인터페이스, 또는 장치(13) 상의 음성 사용자 인터페이스를 사용하여 구현될 수 있으며, 이들 모두는 사용자가 시스템(10)과 인터페이스하도록 한다. 예를 들어, 지원되는 사용자 상호작용의 부분적인 리스트는: 로그인; 대화 관리, 참여, 및 감시; 대화 렌더링의 제어; 우선 순위의 관리; 및 보관된 대화의 검토를 위한 요구;하는 기능을 포함한다. 이러한 리스트는 예시적일 뿐 본 발명을 제한하도록 해석되지 않음을 명시한다.
D.1.2.6 대화/메시지 관리 서비스
대화/메시지 관리 서비스(20f)는 사용자가 대화의 참여자들 간에 전송되고 수신된 미디어(예컨대, 음성 또는 영상 컨텐츠 메시지)의 수신 및 검토를 관리하기 위해 필요한 모든 정보를 관리하고 유지하는 데이터 구조 및 프로세스를 관리하는 기능의 세트를 정의한다. 메시지는 대화로 조직화된다. 애플리케이션(20)을 구동하는 장치(13)에 의해 송신되거나 수신된 미디어는 수신되는 도중 즉각적인 검토를 위해 사용가능하다. 수신된 미디어는 또한 타임-쉬프트 모드에서의 검토, 대화 관리, 및 보관의 목적으로 기록된다. 대체적인 실시예에서, 메시지 또는 대화는 선택적으로 일시적이도록(transience) 마크될 수 있어, 그들의 요구되는 보유 요건(retention requirements)을 특정한다(예컨대, 일부 메시지는 즉각적인 렌더링을 위한 요건을 넘어 유지되거나 저장되지 않을 것이다). 다른 실시예에서, 미디어는 선택적으로 오직 타임-쉬프트 모드에서만 검토되도록 마크되고 착신 시 즉시 검토되지 않을 수 있다.
대화/메시지 관리 서비스(20f)는 사용자의 각각의 현재 또는 진행중인 대화 를 위해 수신하는 클라이언트(12)로의 미디어의 송신이 임의의 시간에 수행되도록 할 수 있고, 수신하는 클라이언트(12)는 이들 메시지를 수신자의 활동 또는 휴지(inaction)에 관계없이 적절한 대화에 끊김없이 결합시킬 수 있다.
대화/메시지 관리 서비스(20f)를 사용하여, 모든 대화가 본질적으로 비동기화된다. 만약 두 명의 사용자가 능동적으로 주어진 대화에 관여되고 사용자가 제어하는 전송들 간의 지연이 최소화되면, 경험(experience)은 현재의 전화기 또는 VoIP 대화와 마찬가지로, 동기적인 양방향 대화 중 하나일 것이다. 어떤 이유든 간에, 사용자가 그들의 참여를 지연시키는 경우, 대화는 비동기 음성(또는 다른 미디어) 메시징 경험으로 이동한다. 대체적인 실시예에서, 대화는 선택적으로 오직 비동기적 메시지 또는 오직 동기적 메시지로서 태그될 수 있다. 이들 경우 중 하나에서, 대화는 태그가 리셋되지 않는 한 두 모드들 간에 이동할 수 없다. 태그가 리셋된 후, 대화는 다시 거의 동기적인 모드(즉, 라이브 또는 실시간)와 비동기 모드(즉, 타임-쉬프트 또는 음성 메시지) 간에 흐를 수 있다.
대화/메시지 관리 서비스(20f)는 점진적인 방식(progressive fashion)에서 메시지의 전송 및 수신을 처리한다. 전송 시, 미디어는 메시지가 동시적으로 인코딩되고 저장되고 전송되는 도중 생성될 수 있다. 다른 말로, 메시지의 전송은 사용자에 의한 미디어의 생성과 함께(즉, 그들의 장치(13)로 말하거나 영상을 생성하는 도중) 동시적으로 발생할 수 있다. 수신 단에서, 메시지의 착신, 저장, 및 렌더링은 또한 점진적으로(progressively) 모두 발생한다. 메시지는 그들이 렌더링될 수 있기 전에 완전히 수신될 필요는 없다. 메시지의 렌더링은 메시지가 전달되고 있는 동시에 바로 MTSD까지 발생할 수 있다. 게다가, 서비스(20f)는 또한 출력되는 메시지의 전송 및 입력되는 메시지의 렌더링을 동시에 수행할 수 있다. 서비스(20f)의 점진적인 성질은 여기에 기술되는 다른 기능 외에 추후 검색 및 검토를 위한 대화의 미디어를 저장하고 스트리밍하는 도중 사용자가 라이브 대화에 관여되도록 할 수 있다.
대화/메시지 관리 서비스(20f)에 의한 메시지의 타임-쉬프팅은 사용자가 이전 메시지를 손실하거나 다른 대화에 참여된 경우, 사용자가 대화에서 "라이브를 따라잡기(CTL)"가 가능하도록 한다. 이러한 타임-쉬프팅 프로세스는 사용자가 그들의 전체 그룹 또는 채널에게 메시지를 반복하도록 하는 요청을 방송할 필요를 제거한다. 더 오래된 메시지는 임의의 시간에 시간을 절약하기 위해 잠재적으로 빠른 속도로 재생될 수 있다. 사용자는 용이하게 그들의 메시지 및 개별적인 메시지 내에서 앞뒤로 스킵할 수 있다. 검토 프로세스는 메시지-우선 순위 기반에서 구성되어 잠재적으로 낮은 우선 순위의 메시지를 스킵하도록 구성될 수 있다.
일 실시예에서, 대화/메시지 관리 서비스(20f)는 또한 특정 참여자(발언자)에 의해 식별되고, 기본적으로 동시에 전달된 대화의 메시지(MCMS-S)를 믹스한다. 선택적인 실시예에서, 사용자는 분리하여 대화의 다른 참여자인 발언자의 전송을 검토할 수 있다.
대화/메시지 관리 모듈(20f)은 참여자 간의 대화 공유를 더 허용하며, 이들은 능동적이거나 보관된 대화로 추가될 수 있다. 일 실시예에서, 대화로 추가된 참여자는 대화로의 액세스가 제공되고 검토를 위한 대화의 이전 메시지를 검색하는 능력을 가진다. 대체적인 실시예에서, 추가된 참여자는 새로운 참여자가 참가된 지점으로부터의 대화의 메시지로의 액세스가 제공되고, 대화의 임의의 이전 메시지로의 액세스는 제공되지 않는다.
대화/메시지 관리 모듈(20f)은 또한 SAS 모듈(24)에 의해 수행되는 모든 렌더링 태스크를 제어하기 위해 사용되는 기능을 관리하도록 구성된다. 이러한 태스크는 애플리케이션(20)을 구동하는 장치(13)를 위해 적절하게 미디어(즉, 음성, 영상 등)를 렌더링하는 것을 포함한다. 이들 렌더링 태스크는 사용자-정의된 기준, 예컨대 빠른 재생, 라이브를 따라잡음(CTL), 침묵 제거, 주저하는 조각의 제거, 주파수 쉬프팅, 및 독립적인 이득 제어를 다자간 대화의 개별적인 송신자로 적용하는 능력에 따라 렌더링할 뿐만 아니라, 믹스된 메시지를 렌더링하는 것(즉, 메시지의 중복(overlapping))을 포함하지만, 이에 제한되지는 않는다.
D.1.2.7 우선 순위 서비스( Priority Services )
우선 순위 서비스(20g)는 사용자가 이들이 관여된 연속적인 대화(즉, MCMS-C)의 우선 순위를 관리하기 위해 필요한 모든 정보를 관리하고 유지하는 데이터 구조 및 프로세스를 관리하는 기능의 세트를 정의한다. 사용자가 많은 연속적인 라이브 대화에 참여하는 경우, 사용자는 대화를 우선 순위화하는 것이 요구된다. 상이한 대화의 메시지가 동시에 렌더링될 준비가 되는 경우 이슈가 발생한다. 알고리즘은 렌더링될 메시지의 능력 및 사용자에 의해 설정된 우선 순위를 고려하여 메시지가 렌더링되는 순서를 결정하도록 사용된다. 알고리즘은 가장 높은 우선 순위의 사용가능한 메시지가 우선적으로 렌더링되는 반면 임의의 동시적으로 사용가능한 메 시지는 보다 높은 우선 순위의 메시지의 렌더링을 허용하기에 충분할만큼 자동으로 타임 쉬프트되도록 결정한다. 렌더링 시간이 사용가능해짐에 따라, 시스템은 사용자의 우선 순위에 따라 타임-쉬프트된 메시지를 자동으로 렌더링할 것이다.
D.1.2.8 연락처 서비스( Contacts Services )
연락처 서비스(20h)는 하나 또는 그 이상의 연락처를 인증하고 대화에 결합시키기 위해 필요한 모든 정보를 관리하고 유지하는 데이터 구조 및 프로세스를 관리하는 기능의 세트를 정의하는 모듈이다. 많은 연락처와 결합된 대화의 일부로서 메시지를 송신하는 경우, 모든 연락처들은 메시지를 수신한다.
D.1.2.9 존재/상태 서비스( Presence / Status Services )
존재/상태 서비스(20i)는 시스템의 특정 사용자 및/또는 비-사용자 간의 존재 및 상태 정보를 관리하고 공유하는 데이터 구조 및 프로세스를 유지하는 기능의 세트를 정의하는 모듈이다. 다양한 실시예에서, 존재 및 상태 정보는 대화에 관여된 모든 사용자 및 비-사용자를 위해 유지되며, 클라이언트(12)의 사용자는 연락처 리스트 내의 모든 사용자 및 비-사용자, 또는 기정의된 도메인 내의 사용자(예컨대, 법인 또는 다른 단체의 멤버)에 관여된다. 이러한 예는 단지 설명적일 뿐이며 제한적으로 해석되지 않는다. 존재/상태 서비스(20i) 모듈은 사용자 및/또는 비-사용자의 임의의 기정의된 세트에 대한 존재 및 상태 정보를 관리하고 공유할 수 있다.
존재/상태 서비스(20i)는 사용자가 다른 사용자의 의도, 주의, 및 그들의 임의의 주어진 대화 상의 타임 쉬프트 딜레이(TSD)의 상태를 감시할 수 있도록 한다 (즉, 이들이 라이브 대화의 메시지 검토로부터 얼마나 멀리 떨어져 있는지). 일 실시예에서, 프라이버시(privacy) 제어가 존재 및 상태 데이터의 능력에 관여하도록 제공된다. 존재/상태 모듈(20i)은 시스템(10)이 사용자의 행동 및 의도를 매치하는 메시지를 전달할 수 있도록 하는 데이터를 더 제어한다. 예를 들어, 사용자는 라이브 대화를 검토하거나 검토하지 않는 것 중 어느 하나에 대한 의도를 지정함으로써 그들의 상태를 지시할 수 있다. 이에 응답하여, 존재/상태 서비스(20i)는 사용자의 의도에 따라, "라이브" 또는 타임-쉬프트 중 어느 하나로 메시지의 렌더링을 야기하는 명령을 발급한다. 또한, 사용자의 의도는 대화의 다른 참여자와 공유된다. 서비스(20i)는 또한 사용자의 행동으로부터 다른 상태 값을 추측할 수도 있다. 존재 및 상태 정보는 또한 이하 보다 상세하게 기술되는 바와 같이, 네트워크 트래픽 및 대역폭을 최적화하도록 사용된다.
D.1.2.10 메시지/신호 서비스( Messages / Signals Services )
메시지/신호 서비스(20j)는 시스템(10)의 사용자에게 메시징하고 시그널링하는 데이터 구조 및 프로세스를 관리하는 기능의 세트를 정의하는 모듈이며, 이는 특정 메시지 또는 들을수 있는 톤(tones)을 사용한다. 특정 메시지 또는 톤은 예를 들어 메시지 또는 메시지들이 라이브이거나 타임-쉬프트된 경우를 지시하고, 메시지(들)이 어디로부터 오는지, 우선 순위, 및 다른 팩터를 지시하는 지시(indication)를 포함할 수 있다. 메시지/신호 서비스(20j)는 (i) 하나 또는 그 이상의 사용자가 더 이상 능동적으로 대화의 메시지를 검토하지 않는지 여부를 통지하는 기능뿐만 아니라 네트워크 상의 사용자의 존재 또는 부재를 시그널링하며; (ii) 다른 사용자들이 다른 대화에 주의를 기울이거나 그들의 장치(13)에 전혀 주의를 기울이지 않는 경우 다른 사용자에게 "벨을 울리거나(ring)" 통지하여 그들의 주의를 집중시키며; (iii) 현재 네트워크(18)에 있지 않은 사용자를 위해 메시지를 남겨 다음에 개인이 네트워크(18)에 재접속하면 즉시 메시지를 검토하도록 하며; (iv) 송신된 메시지가 착신자(들)에 의해 수신되지 않음을 송신자에게 경고하는 들을 수 있거나 볼 수 있는 피드백을 생성하고, 메시지가 착신자(들)에 의해 수신되면 확인을 생성하고, 및/또는 메시지가 착신자(들)에 의해 청취된 때를 지시하는 확인을 생성하고; (v) 컨퍼런스 또는 전술적인 콜을 받는 개인이 그들의 주의가 상기 콜에 즉시 필요함을 통지받는 우선 순위 구조를 구현한다. 이러한 지시는 다수의 레벨의 긴급도(urgency) 및 착신자에 의한 일부 종류의 확인응답(acknowledgement)을 전달할 수 있다.
D.1.2.11 렌더링 및 인코딩( Rendering and Encoding )
렌더링 및 인코딩 모듈(21)은 MCMS 애플리케이션(20)에 대한 모든 렌더링 태스크를 수행한다. 이러한 태스크는 애플리케이션(20)을 구동하는 장치(13)를 위해 적절히 미디어를 렌더링하는 것을 포함한다.
D.2 저장 및 스트림 모듈( Store and Stream Module )
저장 및 스트림 모듈(24)은 많은 기능 및 성능적 속성을 지원하며, 이는 이하 기술된다.
저장 및 스트림 모듈(24)을 사용하여, 메시지 전송은 본질적으로 "양-방향(full-duplex)"이 되고, 다른 사용자가 메시지를 송신하거나 다른 사용자가 사용 가능하지 않거나 관여된 경우에도, 임의의 사용자가 임의의 시간에 메시지를 송신할 수 있도록 한다. 저장 및 스트림 모듈은 라이브 PSTN 또는 VoIP 콜의 경우와 같이 메시지를 렌더링할 수 있거나, 메시지를 타임 쉬프트된 메시징 모드로 전달할 수 있다. 이는 사용자의 요구에 따라 전송을 최적화하고 렌더링을 제어할 수 있다.
저장 및 스트림 모듈(24)은 근원 네트워크(18) 상의 모든 타겟 착신자(예컨대 서버(16) 또는 다른 장치(13))와의 연결성(connectivity)을 유지하고, 모든 메시지, 신호, 및 미디어 전송을 관리하고, 네트워크 품질 및 역량(capacity)을 관리함과 동시에, 네트워크(18)를 걸친 전달 속도 및 대역폭 사용을 최적화하여 사용자의 즉각적인 성능 요구를 만족시킨다. 모듈(24)은 근원 네트워크(18)의 품질 및 용량에 적당한 미디어 전달을 적응시키고 최적화한다. 불충분한 근원 네트워크 리소스가 사용가능한 경우, 전송된 미디어 스트림의 품질은 떨어질 수 있다. 대역폭이 사용가능해짐에 따라, 전송된 미디어 스트림의 품질은 증가될 수 있다. 미디어 품질의 트레이드 오프에 더하여, 저장 및 스트림 기능성은 사용자의 의도를 기반으로 각각의 패킷에 전송된 미디어의 양을 트레이드 오프하여 아래 기술한 바와 같이 데이터를 실시간으로 렌더링할 수 있다.
근원 네트워크(18)의 상태를 기반으로 미디어의 전달률을 동적으로 제어함으로써, 저장 및 스트림 모듈(24)은 착신 시 렌더링하기에 "충분히 양호한" 시간에 민감한(time-sensitive) 미디어를 전달하기 위해 최적화되고, 보관의 목적을 위해 손실되거나, 낮은 품질의, 또는 손상된 패킷의 재전송을 요청하는 백그라운드 프로세스를 통해 미디어의 정확하거나 완전한 카피의 종국적인 전달을 보증한다. 충분 한 네트워크 리소스가 최소 미디어 품질 레벨을 만족하도록 존재하는 한, 이러한 재전송은 라이브 콜 미디어의 렌더링을 방해하지 않는다. 따라서, 시스템(10)의 클라이언트(12)는 완전성에 대한 보증이 없지만 미디어의 신속한 전달에 대한 실질적인 잠재적 지연(latency)을 희생하면서 미디어의 정확하거나 완전한 카피의 전달 간의 성능적 갭을 연결하도록 설계된다. 본원의 맥락에서, 용어 "충분히 양호한"은 미디어의 품질이 충분하여 그것이 렌더링되면, 의미가 명료한 것을 의미한다. 따라서, "충분히 양호한"의 개념은 주관적이고 절대적인 용어로 해석되지 않아야 한다. 예를 들어, 충분히 양호할 정도의 특정 미디어의 품질 레벨은 미디어의 타입, 환경, 및 다른 팩터에 의해 변할 수 있다.
저장 및 스트림 모듈(24)은 장치(13)에 의해 생성되거나 장치(13)를 사용하여 발생하거나 또는 다른 장치(13) 및/또는 사용자로부터 네트워크(18)를 통해 수신된 모든 미디어를 영구적으로 더 저장한다. 클라이언트(12)를 구동하는 장치(13) 상의 이러한 미디어를 저장함으로써 다음과 같은 다수의 현저한 장점이 있다: (i)이는 송신자 및/또는 착신자가 사용불가능하거나 또는 열악한 네트워크 연결성을 가지는 경우에도, 사용자가 메시지를 다른 자에게 남길 수 있도록 한다. 불충분한 대역폭의 경우, 메시지는 대역폭이 효율적으로 사용될 수 있자마자 전송될 것이다. 연결성이 없는 경우, 메시지는 네트워크 연결성이 사용가능해지자마자 전송될 수 있도록 큐잉되고, 이는 타임-쉬프트 전달을 야기하며; (ii) 사용자는 이전 대화의 보관된 메시지를 검색하고 검토할 뿐만 아니라, 일시정지, 재생, 빠른 재생, 및 들오오는 대화에 대해 라이브를 따라잡기(CTL)의 기능을 구비하며; (iii) 이는 시스 템(10) 상의 데이터 페이로드의 최적화를 가능하게 하고 가끔씩 발생할 수 있는 네트워크 대역폭 및 연결성 문제에 대해 시스템의 복원력을 향상시킨다.
저장 및 스트림 모듈(24)은 또한: 다른 잠재적인 렌더링 옵션뿐만 아니라; 중복 메시지(overlapping messages)(대화 내 화자 또는 배경 잡음의 일반적인 중첩에 의해 생성됨)를 생성하도록 적절해짐에 따라 메시지를 믹싱하고, 다수의 사용자가 말하는 실제 대화를 시뮬레이팅하며; 오디오 미디어의 전사(transcription) 또는 번역을 렌더링하며; 빠른 재생, 발설된 단어들 간의 침묵 간격(silence gaps)의 제거, 주저하는 조각(hesitation particles)의 제거, 및 주파수 쉬프팅을 포함하는 많은 사용자-정의 기준에 따라 미디어의 렌더링을 조절하며; 독립적인 이득 제어를 다자간 대화의 개별적인 송신자에게 적용하는 능력을 가진다.
저장 및 스트림 모듈(24)은 그 자체 및 MCMS 간의 제어 및 정보적인 메시징을 관리한다.
D.2.1 PIMB( Persistent Infinite Message Buffer )
영구적인 무한 메시지 버퍼(Persistent Infinite Message Buffer) 또는 PIMB(30)는 미디어의 저장 및 검색을 위한 인덱스된(즉, 타임-스탬프되고 순차적으로 넘버링된) 미디어 페이로드 데이터 구조 및 시스템의 세트이다. 일 실시예에서, PIMB(30) 내의 데이터는 독단적으로(arbitrarily) 영구적이고, 이는 그 데이터가 가상적으로 영원히 사용가능하거나 적어도 시스템의 스토리지가 고갈될 때까지 사용가능하다는 의미이다. 다양한 보유(retention) 비율 및 전략이 스토리지 리소스의 효율적인 사용을 구현하도록 적용될 수 있다. 많은 가능한 구현들이 PIMB(30)의 물리적인 스토리지 구현을 위해 존재하며, 이는 다음을 포함하지만 이에 제한되지는 않는다: RAM, 플래시 메모리, 하드 드라이브, 광학 미디어, 또는 그 일부 조합. PIMB(30)은 또한 사이즈가 "무한하며", 이는 PIMB(30)에 저장될 수 있는 데이터의 양이 본래 제한되지 않음을 의미한다. 이러한 제한의 부족은 렌더링되자마자 데이터를 폐기하는 종래의 지터(jitter) 버퍼 기술과 비교된다. 일 특정 실시예에서, PIMB(30)은 영구적인 저장을 위한 하드 드라이브와 결합된 작고 상대적으로 빠른 RAM 캐쉬 메모리를 사용하여 구현될 수 있다. PIMB(30)의 물리적인 저장 용량이 초과함에 따라, 데이터는 추후 요구에 따른 검색을 위해 서버(16)에서 유지된다. 사용자 기준 또는 대체(replacement) 알고리즘, 예컨대 LRU(least-Recently-Used), 또는 FILO(First-In-Last-Out)가 PIMB(30)에 저장된 실제 데이터 및 서버(16)에 유지되거나 임의의 시점에 보관된 데이터를 제어하도록 사용된다. PIMB(30)는 파일 시스템 스토리지 및 데이터베이스의 랜덤 액세스 속성을 더 제공한다. 각각의 메시지의 지속기간 또는 개수에 관계없이, 임의의 개수의 대화는 검토를 위해 저장되고 추후 검색될 수 있다. 또한, 대화의 메시지와 결합된 메타데이터, 예컨대 그 창설자 및 그 길이는 또한 PIMB(30)에 저장될 수 있다. 대체적인 실시예에서, 인덱스된 미디어 페이로드 및 다른 데이터는 지정된 기간의 시간동안(예컨대 30일) 저장될 수 있다. 미디어의 저장 기간이 지정된 기간을 초과하면, 페이로드 및 데이터는 폐기된다. 또 다른 실시예에서, 페이로드는 페이로드를 포함하는 메시지의 송신자 및/또는 착신자, 또는 페이로드와 결합된 대화 또는 메시지의 제목을 기반으로 폐기될 수 있다. 다른 실시예에서, 페이로드 및 데이터는 일시적이도록 마크될 수 있으 며, 이는 메시지가 즉각적인 렌더링을 위한 요구를 벗어나 PIMB(30)에 저장되지 않을 것을 의미한다.
D.2.2 데이터 및 네트워크 품질 저장( Data and Network Quality Store )
DNQS(Data and Network Quality Store)(32)는 PIMB(30)로부터 독출되거나 PIMB(30)로 기록되는 미디어 페이로드 및 복스 패킷에 관한 정보를 저장하는 데이터 저장이다.
D.2.3 PIMB 라이터( PIMB Writer )
PIMB 라이터(28)는 두 가지 기본적인 목적을 위해 데이터를 PIMB(30)에 기록한다. PIMB 라이터(28)는 클라이언트(12)를 구동하는 장치(13) 상의 미디어 캡쳐 장치(예컨대 마이크 또는 카메라)로부터의 데이터를 기록한다("인코딩 수신(Encode Receive)"). PIMB 라이터(28)는 또한 네트워크(18)를 통해 다른 클라이언트(12)로부터 수신된 데이터를 PIMB(30)로 기록한다("네트 수신(Net Receive)").
D.2.3.1 인코딩 수신( Encode Receive )
장치(13)로부터의 미디어를 캡쳐하기 위해, PIMB 라이터(28)는 인코더 리시버(28a) 및 데이터 스토어(28c)를 포함한다. 예를 들어, 사용자가 마이크로 말하거나 장치(13)를 사용하여 비디오 이미지를 생성하는 경우, 하드웨어(34)는 로우 오디오(raw audio) 및/또는 비디오 신호를 수신하고 이들을 인코더 리시버(28a)로 제공하며, 이는 신호를 인덱스된 미디어 페이로드로 인코딩한다(이하, 가끔씩 단순하게 "페이로드" 또는 "페이로드들"로 언급된다). 데이터 스토어(28c)는 페이로드를 PIMB(30)으로 저장한다. 미디어의 다른 타입, 예컨대 센서 데이터는 유사한 방식으 로 페이로드로 변환된다.
D.2.3.2 네트 수신( Net Receive )
네트워크(18)를 통해 수신된 미디어를 PIMB(30)로 저장하기 위해, PIMB 라이터(28)의 네트 수신 기능은 네트워크 리시버(28d), 데이터 버퍼(28e), 데이터 스토어(28f), 데이터 품질 관리자(28g), 및 네트워크 품질 관리자(28h)를 포함한다. 네트워크 리시버(28d)는 네트워크(18)를 통해 복스 패킷을 수신한다. 데이터 버퍼(28e)는 수신된 복스 패킷을 적절한 시퀀스로 위치시키고, 들어오는 복스 패킷의 렌더링의 MTSD(Minimum Time Shift Delay)의 지연을 방지한다. 데이터 스토어(28f)는 패킷을 인덱스된 미디어 페이로드로 변환하고 인덱스된 미디어 페이로드를 PIMB(30)에 저장한다. 페이로드가 저장됨에 따라, DQM(Data Quality Manager)(28g)은 임의의 손실되거나 결함있는 패킷을 파악한다. 패킷이 손실되거나 결함이 있는 경우, DQM(28g)은 네트워크(18)를 통한 재전송을 요청하도록 스케쥴링한다. 송신 장치는 손실되거나 결함있는 패킷을 재송신함으로써 대답한다. 결과적으로 이들 패킷은 인덱스된 미디어 페이로드로 변환되고 PIMB(30)에 저장된다. 손실되거나 결함있는 패킷을 검색함으로써, 송신자의 메시지의 "정확한" 카피는 결과적으로 PIMB(30)에 저장된다. 손실되거나 및/또는 결함있는 패킷의 재전송은 실시간의 메시지 렌더링을 지연시키지 않으며, 전달된 패킷이 충분히 양호한 품질 및 양을 가지도록 제공된다. 불충분한 네트워크 리소스가 재전송 뿐만 아니라 새로운 "라이브" 데이터 둘 모두를 지원하는 경우, 재전송 요청은 DQM(28g)에 의해 지연될 수 있다.
D.2.4 PIMB 리더( PIMB Reader )
PIMB 리더(26)는 두 가지 목적을 위해 PIMB(30)로부터 데이터를 독출한다. PIMB 리더(26)는 데이터가 로컬 클라이언트(12)를 위해 렌더링될("렌더(Render)") 경우 PIMB(30)에 액세스한다. 데이터는 또한 데이터가 네트워크(18)를 통해 클라이언트(12)에 의해 전송될 경우 PIMB(30)로부터 독출된다.
D.2.4.1 렌더링( Render )
클라이언트(12) 상의 메시지의 렌더링을 위해, PIMB 리더(26)는 데이터 우선 순위 지정기(Prioritizer)(26a), 데이터 리트리버(Retriever)(26b), 패킷 손실 보상(Packet Loss Compensation)/인터폴레이터("PLC/Interpolator")(26c), 데이터 믹서(26d) 및 데이터 렌더러(Render)(26e)를 포함한다. 우선순위 지정기(26a)는 잠재적으로 렌더링될 수 있는 메시지의 순서화된 큐(queue)를 구축함으로써 렌더링될 데이터를 우선순위화 할 수 있다. 이는 연속적인 대화의 렌더링을 위해 사용자 구성 우선순위(user configured priority)를 사용한다(MCMS-C). 또한, 데이터 우선순위 지정기는 미디어 데이터의 가용성(avalability)을 사용하여 MTSD, 사용자의 현재 의도, 및 사용자에 의해 정의되고 함축된 의도에 의해 부과되는 제한 내에서 렌더링한다. 데이터 리트리버(26b)는 PIMB(30)로부터 우선순위화되고 인덱스된 미디어 페이로드를 검색한다(retrieve). PLC/인터폴레이터(26c)는 검색된 페이로드에 패킷 손실 보상 및 인터폴레이션을 수행하며, 이는 알려진 패킷 손실 보상 및 인터폴레이션 알고리즘을 사용하여 수행한다. 사용될 특정 방법은 사용되는 미디어 코덱, 및 다른 알려진 파라미터에 종속된다. 믹서(26d)는 단일 대화의 다수의 메시지 로부터의 동시 발생하는(concurrent) 데이터 스트림을 함께 적절하게 믹스하도록 사용된다. 예를 들어, 대화의 둘 또는 그 이상의 참여자가 동시에 말하는 경우, 믹서(26d)는 메시지를 믹스하여, 두 참여자 모두가 동시에 말하는 효과를 생성한다. 대체적인 실시예에서, 사용자는 한 번에 하나의 참여자로부터의 다수의 스트림을 검토하는 옵션을 가진다. 대화에서 오직 하나의 참여자만이 말하는 경우, 믹서(26d)는 단순히 임의의 믹싱을 수행하지 않고 단일 메시지 스트림을 전달할 수 있다. 렌더러(26e)는 믹서 모듈(26d)로부터 데이터를 수신하고 이를 하드웨어 드라이버(34)에 적합한 형태로 변환한다. 그리고 나서 하드웨어(34)는 장치(134)의 스피커 또는 비디오 디스플레이 중 어느 하나를 구동하며, 이는 미디어의 타입에 종속되며, 음성, 영상 또는 장치(13) 상에서 다른 들을 수 있거나 및/또는 볼 수 있는 통지자(notifier)를 생성한다.
D.2.4.2 전송( Transmit )
메시지를 네트워크(18)를 통해 클라이언트(12)로부터 전송하도록 준비하기 위해, PIMB 리더(26)는 데이터 우선순위 지정기(26f), PQM(Packet Quality Manager)(26g), 데이터 리트리버(26h), 패킷타이저(26i), 트랜스미터(26j) 및 확인응답기(acknowledger)(26k)를 포함한다. 데이터 우선순위 지정기(26f)는 네트워크(18)를 통한 전송을 위해 메시지를 우선순위화한다. 우선순위는 전송, 네트워크 연결성 및 대역폭 조건, 및 다음 호핑(hopping)부터 라이브 또는 타임-쉬프트 중 어느 하나로 렌더링할지에 대한 사용자의 의도에 대해 사용가능한 페이로드에 관련된 MCMS 참여자 속성을 사용하여, 그리고 일부 실시예에서는 임의의 주어진 다음 네트워크 홉(hop)으로의 다수의 패킷이 사용가능한 전송 번들링(bundling)의 가능한 최적화(optimizations)를 사용하여 결정된다. 그리고 나서, 우선순위화된 패킷은 PQM(26g)를 사용하여 최적화되며, 이는 실시간 대역폭을 최소화하는 반면, 라이브 메시지를 위해 "충분히 양호한" 데이터 품질의 적시 전달을 보증하며, 이는 이하 보다 상세히 기술되는 바와 같다. 데이터 리트리버(26h)는 PIMB(30)로부터 적절한 페이로드를 검색한다. 패킷타이저(26i)는 페이로드를 복스 패킷으로 어셈블링하며, 그리고 나서 이는 트랜스미터 모듈(26j)에 의해 네트워크(18)를 통해 전송된다. 착신자가 복스 패킷을 수신하는 경우, 메시지가 그 목적지에 도달하였음을 송신자인 사용자에게 알리기 위해 네트워크(18)를 통해 확인 응답(acknowledgement)이 확인응답기(26k)로 송신된다.
D.2.5 PQM( Packet Quality Manager )
PQM(26g)는 다음과 같은 다수의 최적화 목표가 있다: (i) 시간에 민감한(time-sensitive) 미디어("가능한 한 즉시 렌더링을 위해 충분히 양호한" 미디어)의 적절한 카피의 적시 전달; (ii) 사용가능한 대역폭의 효율적인 사용, 이는 최적의 전송 주파수, 페이로드 품질, 및 근원 네트워크를 위한 패킷 사이즈를 사용하는 것을 의미한다; (iii) 네트워크 상태의 변화에 따라 전송 주파수, 페이로드 컨텐츠, 페이로드 품질, 패킷 사이즈 등을 동적으로 조절하거나 변화시키는 기능.
D.2.6 NQM( Network Quality Manager )
네트워크 전송의 수신단은 NQM(Network Quality Manager)(28h)이다. NQM은 미디어를 클라이언트(12)로 송신한 각각의 송신자에 대한 네트워크 성능의 특정 성 질을 관찰하도록 구성되며, 지터(jitter), 손실, 및 실제 값에 대한 처리량(throughput)의 예상과 비교한다. 이는 모든 송신자에 대한 NQR(Network Quality Rating)을 계산하도록 사용된다. 이러한 NQR은 송신자 가용성(sender availability) 및 대화 라이브화(conversation live-ness)를 수신 장치의 사용자에게 지시하도록 사용된다.
D.2.7 DQM( Data Quality Manager )
DQM(28g)는 패킷 손실, 지터 및 처리량을 관찰함으로써 네트워크를 통해 수신되고 있는 데이터의 품질을 측정한다. DQM(28g)은 다음과 같은 세 가지 목적을 위해 이들 측정값을 사용한다: (i) 착신 보고(receipt report)를 송신자에게 역전송하기 위해; (ii) 상기 착신 보고를 선택적으로 사용하여 특정 데이터의 재전송을 요청하기 위해; (iii) 상기 측정값들을 NQM(28h)에서 사용가능하도록 하기 위함이다.
E. 서버 구성( Server Architecture )
도 3을 참조하여, 서버(들)(16)에서 구동하는 애플리케이션(78)의 블록도를 설명한다. 애플리케이션(78)은 많은 부분에서 클라이언트 애플리케이션(12)과 유사하고 MCMS 서버 애플리케이션(80), MCMS 데이터베이스(82), SAS 모듈(84), PIMB(85), DNQS(Data and Network Quality Store)(86), MCMS 서버 애플리케이션(80) 및 SAS 모듈(84) 간에 오가는 메시지 및 신호를 관리하는 MCMS-SAS 메시지 핸들링 모듈(87a 및 87b), 보관/리트리버(88), 및 아카이브(archive)(89)를포함한다. 애플리케이션(78)은 인증-암호화-보안 모듈(40) 및 통신 프로토콜 모듈(44)을 더 포함한다.
MCMS 서버 애플리케이션(80)은 MCMS 데이터베이스 모듈(20a), SAS(Store and Stream) 모듈(20b), 메시징/시그널링 모듈(20c), 대화/메시지 관리 서비스(20f), 우선순위 서비스(20g), 연락처(사용자 및 인증을 포함함) 서비스(20h), 존재/상태 서비스(20i), 및 메시지/신호 서비스(20)를 포함하는 다중-계층 구조이다. 전술한 애플리케이션(78)의 모듈 및 서비스는 클라이언트(12)의 참조번호를 가지는 모듈 및 서비스와 유사하거나 동일하고, 따라서 하나의 주목할만한 예외를 제외하고 여기에서는 상세하게 기술하지 않는다. 다양한 실시예에서, MCMS 데이터베이스(82)를 포함하는 MS 서버 애플리케이션(80) 및 SAS 모듈(84)는 애플리케이션의 한 인스턴스(instance)에서 많은 사용자를 지원하도록 구성된다. 상기 한 인스턴스는 다수의 도메인을 지원하도록 더 구성되며, 여기서 각각의 도메인은 사용자의 그룹(즉, 회사 또는 공통의 조직체에 속하는 사용자의 다른 그룹)으로 정의된다.이러한 구성은 서버(16) 상의 각각의 애플리케이션(78)이 다수의 사용자(또는 도메인)에게 서비스를 제공하도록 하며, 이는 각각의 사용자(또는 도메인)은 다른 사용자에게 보여지지 않는다. 이러한 구분은 "다중-차용(multi-tenancy)"이라고 불린다.
서버의 SAS 모듈(84)은 네트 수신 및 전송(Net Receive and Transmit)의 기능을 수행한다. 네트 수신 기능을 위해, 모듈(84)은 네트 리시버(28d), 데이터 버퍼(28e), 데이터 스토어(28f), DQM(Data Quality Manager)(28g), 및 NQM(Network Quality Manager)(28h)를 포함한다. 전송 기능을 위해, 모듈(84)은 데이터 우선순위 지정기(26f), 패킷 최적화기(26g), 데이터 리트리버(26h), 패킷타이저(26i), 트 랜스미터(26j) 및 확인응답기(26k)를 포함한다. 전술한 SAS 모듈(84)의 구성요소는 클라이언트(12)의 참조번호를 가지는 구성요소와 유사하거나 동일하며, 따라서 여기서 상세하게 기술하지 않는다.
서버(16)가 직접적으로 사용자와 상호작용하지 않으므로, 클라이언트(12)의 SAS 모듈(24)에 제공된 인코딩 및 렌더링 기능은 존재할 필요는 없다. 서버(16)에서 구동하는 경우, MCMS 애플리케이션(80)은 사용자와 직접적으로 상호작용하지 않는다. 결과적으로, 사용자 인터페이스 및 사용자 인터페이스 API 모듈 및 서비스(20e 및 20d)는 필요하지 않다.
각각의 서버(16) 상의 애플리케이션(78)은 잠재적으로 다수의 차용자(tenants)에게 서비스를 제공하며, 이는 시스템(10)의 다수의 사용자에게 서비스를 제공하는 것을 의미한다. 따라서, 오직 단일의 사용자의 생성되거나 수신된 페이로드를 단지 저장하기 위해 사용되는 PIMB(30)과 달리, 서버 애플리케이션(78)의 PIMB(85)는 현저히 커지고 다수의 사용자의 미디어 페이로드를 저장하기 위해 사용된다. SAS 모듈(84)의 주된 목적은 클라이언트(12)에 의해 전송된 메시지를 수신하고 다른 클라이언트(12)로 메시지를 전송하는 것이다. 메시지가 수신되면, 이들은 PIMB(85)에 저장되고 의도된 착신자(들), 또는 시스템 구성에 직접적으로 종속하는 착신자(들)로의 경로를 따라 네트워크 레이어(14)의 다음 서버(16)(즉, 다음 "홉(hop)")으로 전송된다. 보관/리트리버(88)는 PIMB(85)에 저장된 미디어 페이로드를 아카이브(89)에 보관하도록 구성된다. PIMB(85) 내의 물리적인 공간이 고갈됨에 따라, PIMB(85) 내의 미디어 페이로드는 아카이브(89)로 이동하며, 상기 아카이브 는 커다란 저장장치이다. 다양한 실시예에서, PIMB(85)에 저장된 페이로드는 사용자 정의 기준 및/또는 임의의 알려진 대체 알고리즘, 예컨대 FIFO(First-In-Fist-Out) 또는 LRU(Least Recently Used)에 따라 보관될 수 있다. 도 1에는 단순화를 위해 오직 단일의 서버(16)가 도 1에 도시되었다. 실제 실시예에서는 다수의 서버 또는 "서버 팜(server farm)"이 많은 수의 사용자를 구비한 네트워크를 위해 사용될 수 있다.
PIMB(30) 및 PIMB(85)를기술하기 위해 사용된 용어 "영구적인(persistent)" 및 "무한의(infinite)"는 문자그대로인 절대적인 용어로 해석되지 않아야 한다. 사용자는 중요하다고 간주되는 일부 메시지를 무기한으로 저장하기를 원할 수 있다. 다른 상황에서, 예컨대 두 친구들 간의 캐쥬얼 채팅에서, 메시지는 저장공간을 아끼기 위해 소정 기간 후 삭제될 수 있다. 본 발명의 다양한 실시예에 따르면, 다른 유지 정책이 사용될 수 있으며, 이는 시스템(10)에 의해 설정되거나 또는 사용자에 의해 구성될 수 있다. 단어 "무한의"의 사용은 PIMB에 의해 강제된 임의의 기설정된 시간 경계의 결여를 의미한다. 이는 현재의 지터 버퍼 시스템과 대조되며, 지터 버퍼 시스템은 미디어가 렌더링된 후 폐기되는 시스템이다. 따라서, 용어 영구적이고 무한한은 PIMB(30) 및 PIMB(85)가 시간 영역에서 내부적인 제한이 없으며 그 안에 저장될 수 있는 메시지의 양에 제한이 없음을 의미하도록 광범위하게 해석되어야 한다.
대화의 메시지를 영구적인 저장 매체에 보관하는 것은 많은 장점이 있다. 음성 메시지 및 다른 미디어는 필요에 따라 구조화되고, 인덱스되고, 검색되고, 전사 되고, 번역되고 검토될 수 있다. 따라서, 다른 미디어 뿐만 아니라 음성은 사용자 및 조직 둘 모두에 의해 관리될 수 있는 자산이 된다. 이러한 미디어 자산은 군대뿐만 아니라 회사, 최초 대처자, 경찰서 및 소방서에게도 가치가 있다.
F. 복스 프로토콜 및 인덱스된 미디어 페이로드( Vox Protocol and Indexed Media Payloads )
상술한 바와 같이, 복스 프로토콜은 페이로드 전송, 저장, 및 최적화의 모든 국면을 지원하도록 SAS 모듈(24)에 의해 사용된다. 복스 패킷은 네트워크(18)의 근원 기술의 전송 패킷 또는 전송 패킷들 내에 캡슐화(encapsulate)하도록 설계된 구조화된 메시지 포맷이다. 이러한 배열은 시스템(10)의 유연성을 현저히 향상시킨다. "복싱" 애플리케이션을 위한 새로운 전송 레이어를 정의하는 것과 달리, 복스 패킷을 종래의 전송 패킷에 임베딩시킴으로써, 시스템(10)은 종래의 전기 통신 인프라구조 상에서 구동하는 현재 패킷 기반의 통신 네트워크의 장점을 취할 수 있다. 따라서 이하 기술되는 시스템 및 방법의 모든 이익을 장점으로 취하기 위해 복스 패킷을 다루는 새로운 네트워크 인프라구조가 생성될 필요는 없다.
도 4A를 참조하여, 복스 패킷(95)의 일반적인 포캣 구조가 설명된다. 복스 패킷(95)의 포맷은 타입, 서브-타입, 길이, 및 페이로드를 위한 필드를 포함한다. 복스 패킷의 다른 타입은 인증, 시그널링, 미디어 페이로드, 미디어 멀티플렉스(하나의 메시지), 및 미디어 멀티플렉스(다수의 메시지)를 포함한다. 서브-타입 필드는 인증, 시그널링 또는 미디어 타입 메시지의 다른 타입을 지정하기 위해 사용된다. 메시지 인증을 위한 가능한 서브-타입은 키 교환(key exchanges) 및 인증을 위 해 필요한 것들을 포함한다. 메시지 시그널링을 위한 가능한 서브-타입은 등록(registration), 라우팅, 메시지 설정, 및 네트워크 관리를 포함한다. 미디어 메시지를 위한 가능한 서브-타입은 상이한 코덱 스타일 및 상이한 페이로드 집합(aggregation) 기술을 포함한다. 길이 필드는 전체 길이 또는 페이로드의 사이즈를 정의한다. 페이로드 필드는 패킷(95)의 실제 페이로드 또는 미디어를 포함한다.
도 4B를 참조하여, 네트워크(18)에 의해 사용되는 예시적인 프로토콜로 캡슐화된 복스 패킷(95)을 설명하는 도면을 도시한다. 이 예에서, 복스 패킷(95)은 각각 근원 UDP, IP 및 이더넷 전송 패킷(96)에 임베딩된다. 이러한 방식에서, 복스 패킷(95)은 네트워크(18)의 근원 UDP, IP 및 이더넷 레이어를 걸쳐 전송될 수 있다. 이는 패킷 네트워크에 의해 사용되는 표준적인 프로토콜 캡슐화(encapsulation) 기술이다.
도 4C를 참조하여, UDP, IP, 및 이더넷(97)에 캡슐화된 미디어 멀티플렉스 복스 패킷(95)을 설명하는 도면이 설명된다. 이 예에서, 복스 패킷(95)은 미디어 타입 필드, 미디어 서브-타입 필드, 길이 필드, 메시지 ID 필드, 타임 스탬프 필드, 시퀀스 ID 필드, 및 미디어 페이로드 필드를 포함한다.
도 4D를 참조하여, 인덱스된 미디어 페이로드(98)의 포맷이 설명된다. 인덱스된 미디어 페이로드는 서브-타입 필드, 길이 필드, 메시지 식별자(ID) 필드, 타임-스탬프 필드, 시퀀스 식별자(ID) 필드, 및 미디어 페이로드를 위한 필드를 포함한다.
근원 네트워크의 전송 패킷으로의 복스 패킷(95)의 캡슐화는 미디어, 메시지 및 대화가 각각 많은 속성에 의해 정의되도록 한다.
미디어가 생성되거나 또는 장치(13)에서 발생된 경우, 이는 일반적으로 시간-기반(time-based)이며, 이는 미디어가 시간에 걸쳐 일부 의미있는 방식으로 변화하는 것을 의미한다. 예를 들어, 사용자가 대화에 참여함에 따라, 그들이 말한 단어는 문장 또는 진술로 함께 엮여지며(string), 이는 시간에 걸쳐 변하고, 결과 데이터(스트림 및 패킷)은 시간에 걸쳐 동일한 분산(variance)를 유지할 것이다. 유사하게, GPS 또는 다른 센서 데이터 뿐만 아니라 영상(정지 사진과 달리)도 시간에 걸쳐 변화할 것이다. 타입 또는 그것이 어떻게 발생되었는지에 관계없이, 미디어는 분할되고 다수의 복스 패킷(95)의 페이로드에 위치된다. 그리고 나서, 패킷은 각각 전송 및 수신 장치(13)에서 연속적으로 저장되고, 전송되고, 수신되고, 스트림(즉, 스트리밍 미디어)으로 저장되고 렌더링된다. 각각의 패킷(95)이 인덱스되고, 타임-스탬프되고, 시퀀스 식별자가 주어지므로, 개별적인 패킷은 메시지로 분할될 수 있다. 개별적인 메시지를 순차적으로 함께 스레딩함으로써, 대화가 파악될 수 있다.
시스템(10)의 또 다른 한 독특한 양상은 클라이언트(12)에 의해 생성된 미디어 페이로드가 다수의 위치에 저장되는 것이다. 생성 장치(13)의 PIMB(30)에 저장되는 페이로드 뿐만 아니라, 서버(들)(16)의 PIMB(85) 및 수신 장치(13)의 PIMB(30)에도 저장된다. 이러한 기본적인 특징은 비록 네트워크 상태가 열악하거나 대화의 참여자가 네트워크에 연결되지 않은 경우에도, 상술한 다수의 복싱 기능성이 가능하도록 하고 시스템(10)에 탄성과 동작성을 제공한다.
G. 근원 전기통신 프로토콜과의 상호 운용성(Interoperability With Underlying Telecommunication Protocols)
시스템(10)은 다양한 기존의 통신 네트워크(18), 예컨대 인터넷, 고정된 PSTN 타입의 회선 네트워크, 및 모바일 또는 셀룰라 폰 네트워크, 또는 그 조합 상에서 구동하고 레이어를 구성하도록 의도된다. 시스템(10)은 시스템(10) 내 상이한 클라이언트(12)와 서버(16) 간에 이동하는 많은 작은 정보 단위(즉, 복스 패킷)의 개념에 대해 설계된다. 복스 패킷의 기능 및 페이로드에 종속하는 복스 패킷의 사이즈가 변하면, 이들은 모두 근원 네트워크 레이어에 동일한 종류의 데이터가 되도록 나타난다. 일 실시예에서, 시스템(10)은 IPv4 네트워크, 예컨대 인터넷에 대해 디자인되고 최적화되지만, 다른 타입의 네트워크 또한 지원될 수 있다. 본 발명의 명세서의 목적을 위해, 용어 "IP"는 IPv4, IPv6 또는 임의의 다른 현재 또는 미래의 인터넷 프로토콜의 구현을 의미하도록 이해되어야 한다.
도 5를 참조하여, 장치(13)에서 구동하고 공유된 IP 네트워크(100)를 통해 서버(16)와 통신하는 클라이언트(12)의 도면이 도시된다. 도시된 바와 같이, 클라이언트(12)는 제 1 인터넷 서비스 제공자 A를 통해 공유된 IP 네트워크(100)와 결합되고, 서버(16)는 제 2 인터넷 서비스 제공자 B에 의해 공유된 IP 네트워크 (100)와 결합된다. 통신 도중, 복스 패킷(95)(도면에서 "VP"로 도시됨)은 UDP/IP 패킷 내에 캡슐화되고, 그리고 나서 알려진 바와 같이 다른 IP프로토콜 패킷 중에 인터리브(interleave)되고, 공유된 IP 네트워크(100)를 걸쳐 클라이언트(12)로부터 서버(16)로 전송되거나, 그 역으로 전송된다. 알려진 바와 같이, 각각의 낮은 패킷 레이어는 바로 위 레이어의 전체 패킷을 캡슐화한다. 패킷은 또한 두 서버(16) 간 에 유사한 방식으로 전송될 수도 있다. 메시지는 임의의 클라이언트(12)가 이네이블된 장치(13)로부터 공유된 IP 네트워크(100)를 통해 다른 곳으로 송신된다. 각각의 홉(hop)에서, 복스 패킷(95)은 근원 IP 프로토콜에 임베디드되고 그들이 타겟 목적지에 이르기까지 전송된다.
도 5의 도면은 단지 예시적이며, 설명을 위해 네트워크(100)에 연결된 단일의 클라이언트(12) 및 서버(16)만을 도시한다. 시스템(10)의 실제 실시예에서, 많은 수의 클라이언트(12) 및 하나 또는 그 이상의 서버(16)가 일반적으로 공유된 IP 네트워크(100)에 연결된다. 또한 클라이언트(12) 및 서버(16)는 IP 네트워크(100)의 사용을 독점할 필요가 없는 점에서 유용하다. 도시된 예에서, 인터넷 제공자 A를 통해 네트워크(100)와 결합된 HTTP 클라이언트는 제3 인터넷 제공자 C를 통해 네트워크(100)에 결합된 HTTP 서버를 사용하여 오가며 패킷을 전송할 수 있다. 시스템(10)은 IP 패킷에 임베디드된 VP가 네트워크(100)를 가로지르는 방식을 제어하지 않는다. 이보다는, 네트워크(100)를 가로지르고 공유하는 모든 패킷이 근원적인 공유된 IP 네트워크(100)의 표준 과정에 따라 전송된다.
도 6을 참조하여, "회선" 기반 네트워크(104), 예컨대 GSM 이동 통신 단말기 네트워크가 설명된다. 회선 네트워크(104)는 장치(13)에서 구동하는 클라이언트(12)와 서버(16) 사이에 결합된다. 회선이 클라이언트(12)와 서버(16) 사이에 구축되면, 시스템(10)은 복스 패킷들(VP1, VP2, VP3, VP4, VP5 등)을 네트워크(104)에 의해 사용되는 근원 패킷에 층으로 쌓아놓고(layer) 이들을 네트워크(104)를 걸쳐 전송하여, "가상 복스(virtual Vox)" 회선을 생성한다. 복스 패킷은 순차적으로 회선 네트워크(104)를 가로지르며, 이는 일반적으로 회선 네트워크를 통해 데이터를 전송하기 위해 잘 알려진 방법으로 데이터에 간격을 적용하고(spacing) 프레임화(framing)하여 수행된다. 또한, 패킷 구성 파라미터, 예컨대 페이로드 사이즈 및 포함된 헤더 필드의 개수는 패킷 별 오버헤드(per-packet overhead)의 결여를 이용하기 위해 사용될 수 있으며, 네트워크(104)를 걸친 데이터 전송의 속도 및/또는 효율을 증가시키기 위해 사용된다. 또 다시 단순화를 위해, 단일 클라이언트(12) 및 서버(16)만이 네트워크(104)에 연결되도록 도시되었다. 그러나, 다른 컴포넌트뿐만 아니라 클라이언트(12)와 서버(16) 사이에 추가적인 회선이 네트워크(104)를 통해 동시적으로 구축될 수 있음이 이해되어야 한다. 따라서, 네트워크(104)는 복스 패킷의 전송을 위해 전용되지 않고, 네트워크 트래픽의 다른 타입과 공유될 수 있다.
도 7을 참조하여, 제 1 네트워크 A와 결합된 제 1 클라이언트(12A)가 이네이블된 장치(13A)와 제 2 네트워크 B와 결합된 제 2 클라이언트(12B)가 이네이블된 장치(13B) 간의 통신을 설명하는 도면이 설명된다. 네트워크 A 및 B는 각각 게이트웨이 서버(16A 및 16B)를 더 포함한다. 게이트웨이 서버 쌍(16A 및 16B)은 두 네트워크 A 및 B 간의 통신을 구현하여, 장치(13A 및 13B)가 서로 간에 통신할 수 있도록 한다. 다양한 실시예에서, 네트워크 A 및 B는 각각 임의의 타입의 네트워크가 될 수 있다. 예를 들어, 각각의 네트워크 A 및/또는 B는 IP 네트워크, 회선 타입 네트워크, 또는 무선 또는 셀룰러 네트워크(즉, CDMA, GSM, TDMA 등)일 수 있다. 서버(16)는 트래픽을 라우팅하거나 두 네트워크 간의 "게이트"로서 역할하기 때문 에, 두 네트워크 A 및 B를 걸치고 있는 서버(16)는 게이트웨이 서버로 간주된다.
시스템(10)에 대하여, 시스템 성능을 최적화하기 위한 다수의 기본적인 네트워크 상호작용 고려사항이 존재한다. 이러한 고려사항은 팩터, 예컨대 근원 어드레스를 복스 패킷(95)이 송신되는 곳으로 적용시키고, 임의의 송신된 복스 패킷의 보전(integrity), 및 주어진 네트워크 또는 네트워크의 조합을 걸쳐 송신될 ㅅ수U( 있는 단일 메시지의 Maximum Transmission Unit)의 관리를 포함한다.
타겟 클라이언트(12)의 어드레스는 알려져야할 필요가 있어, 근원 네트워크가 복스 패킷(95)을 정확한 장소로 전달하도록 한다. IPv4 네트워크에 대하여, 어드레스는 일반적으로 IPv4 어드레스이며, 이는 고유하게 네트워크 내의 호스트를 식별하는 32 비트의 숫자이다. 다른 네트워크 기술에 대해, 어드레스는 다른 타입의 식별자일 수 있다. IP 네트워크는 DNS(Domain Name System)를 사용하여 인간이 읽을 수 있는 이름을 IP 주소에 적용하고, ARP(Address Resolution Protocol)를 사용하여 IP 어드레스를 물리적인 어드레스로 적용시킨다. 근원 네트워크 기술에 관계없이, 시스템(10)은 복스 패킷(95)을 정확한 장소로 전달하기 위해 상술하거나 다른 알려진 어드레싱 구성 중 어느 하나를 사용한다.
대부분의 임의의 패킷-기반 통신 시스템과 같이, 근원 네트워크가 복스 패킷이 캡슐화된 패킷을 전달할 수 없는 경우, 전송된 복스 패킷은 그들의 어드레스된 장소로 전달되지 않을 수 있다. 대부분의 패킷 네트워크는 트랜스미터에게 패킷이 언제 손실되었는지 알려주지 않는다. 대신 임의의 손실된 패킷을 알리고 보상하는 작업을 트랜스미터 및 리시버에 의지한다. 시스템(10)은 리시버 수신 보고 메시지 를 사용하여 이러한 패킷 손실 관리를 조정하도록 지정된다. 만약 근원 네트워크가 송신자에게 손실되거나 분실된 패킷을 알려줄 수 있는 경우, 시스템(10)은 이러한 정보를 재전송 프로토콜에 이용한다.
MTU의 관리는 네트워크를 걸쳐 송신될 수 있는 최대 전송 단위(즉, 단일 메시지의 최대 크기)의 결정이다. 패킷-기반 네트워크에서, 근원 네트워크는 MTU를 부과한다. 회선-교환 네트워크에서, MTU는 네트워크 효율 및 성능을 위한 조율가능한 파라미터일 수 있다. 따라서 대부분의 경우, 근원 네트워크는 효율적으로 전송될 수 있는 복스 패킷(95)의 최대 크기를 부과하거나 결정한다. 예를 들어, IP 네트워크에서, 페이로드가 MTU를 초과하는 경우, 패킷은 분할될 수 있으나, 이는 실질적인 성능적 페널티이다. 이더넷 네트워크 상의 IP에서, 전송 장치는 1518 바이트의 MTU를 가지며, 이는 이더넷에 의해 강제된다. 가장 큰 IP 패킷은 이더넷 헤더를 위한 공간을 남겨두어야 한다. 가장 큰 UDP 패킷은 IP 및 이더넷 헤더 둘 모두를 위한 공간을 남겨두어야 하고, 예를 들어 이더넷 상에서 생성될 수 있는 가장 큰 복스 프로토콜은 이더넷 MTU(1518) - IP 헤더(20) - UDP 헤더(8) = 1490 바이트이다. 복스 프로토콜이 그 자체의 헤더를 구비할 것이기 때문에, 실제 복스 미디어 페이로드는 이더넷 네트워크 상의 1490 바이트보다 더 작을 것이다. 기가비트(Gigabit) 이더넷에서, MTU는 보다 클 수 있으나, 유사한 공식을 사용하여 결정될 것이다.
순수한 패킷-기반 네트워크는 MTU에 대한 두 가지 잠재적인 값, 로컬 링크 MTU 및 경로 MTU가 있다. 로컬 링크 MTU는 로컬 네트워크 인터페이스로 효율적으로 송신될 복스 패킷을 위한 최대 크기를 나타내도록 결정한다. 경로 MTU는 원거리 노드로 손상되지 않은 채 완전히 송신될 수 있는 복스 패킷의 최대 크기를 나타낸다. 송신자가 이더넷을 통해 연결되는 경우, 복스 패킷은 착신자로 향하는 더 작은 MTU 경로를 사용하여 다양한 다른 시스템을 통과할 수 있다. 목적지까지의 경로 상 가장 작은 MTU는 송신자에 의해 적용되고 알려질 필요가 있다. IP 분야에는 "경로 MTU 발견(Path MTU Discovery)"라고 불리는 가장 작은 MTU를 발견하는 표준 과정이 있다. 다른 종류의 네트워크에서, 동등한 과정이 사용될 수 이TEk. 또 다시, 시스템(10)이 다른 네트워크의 상부에 레이어를 구성하기 때문에, 상술한 MTU 알고리즘 중 임의의 알고리즘이 사용될 수 있다.
H. 동작 흐름도( Operation Flow Diagrams )
H.1 저장 및 스트림( Store and Stream )
도 8A 내지 도 8F를 참조하여, 일련의 흐름도가 클라이언트(12) 및 서버(16)의 저장 및 스트림 모듈(24 및 84)을 각각 설명하기 위해 제공된다. 도 8A는 메시지를 제 2 클라이언트(122)로 전송하는 제 1 클라이언트(121)에 대한 동작의 순서를 도시한다. 도 8B 및 도 8C는 전송 클라이언트(121)의 PIMB 라이터(28) 및 PIMB 리더28)의 동작을 설명한다. 도 8D 및 도 8E는 수신 클라이언트(122)의 PIMB 라이터(28) 및 PIMB 리더(26)의 동작을 설명한다. 도 8F는 서버(16)의 저장 및 스트림 모듈(84)의 흐름도를 설명한다.
도 8A에서, 장치(131)에서 구동하는 클라이언트(121)의 사용자는 전송될 미 디어를 발생시킨다. 미디어는 많은 다른 방법으로 장치(13)에서 발생될 수 있으며, 사용자는 마이크를 통해 발언하거나 장치(13)에서 영상 컨텐츠를 생성함으로써 미디어를 생성한다. 미디어는 또한 센서 데이터, 예컨대 GPS 정보 또는 온도 값을 수신함으로써 장치(13)에 의해 생성된다. 어떻게 미디어가 발생되는지에 관계없이, 미디어는 PIMB 라이터(28)에 의해 인코딩되며(박스(130)), 이는 미디어를 인덱스된 미디어 페이로드로 변환하고 이들을 클라이언트(121)의 PIMB(30)에 저장한다(박스(132)). 클라이언트(121)의 PIMB 리더(26)은 PIMB(30)에서 페이로드를 독출하고, 복스 패킷을 생성하고, 네트워크(18)를 통해 패킷을 수신 클라이언트(122)로 전송한다(박스(134)). 송신 클라이언트(121)와 수신 클라이언트(122) 간의 경로를 따라 구성된 각각의 서버(16)는 전송된 페이로드를 PIMB(85)에 저장하고 복스 패킷을 다음 홉으로 전송한다(박스(133)). 수신 클라이언트(122)에서, PIMB 라이터(28)의 네트 수신 기능은 복스 패킷을 인덱스된 미디어 페이로드로 변환하고(박스(136)), 페이로드를 클라이언트(122)의 PIMB(30)으로 저장한다(박스(138)). 클라이언트(122)의 PIMB 리더26)의 렌더링 모듈은 PIMB(30)으로부터 독출한 페이로드 정보를 인간이 사용하기에 적절한 매체, 예컨대 음성 또는 영상으로 렌더링한다(박스(140)). 이들 각각의 단계는 도 10B 내지 도 10E를 참조로 이하 보다 상세하게 기술된다.
도 8B에서, PIMB 라이터(28)에 의해 수행되는 인코딩 수신 기능의 순서(도 8A에서 단계(130))가 상세하게 제공된다. 개시 단계(1301)에서, 클라이언트(121)를 구동하는 장치(13)의 사용자는 전송될 미디어를 발생시킨다. 상술한 바와 같이, 미디어는 마이크를 통해 발언하거나, 카메라를 사용하거나, 센서 데이터를 수신하거나 또는 다른 미디어 생성 컴포넌트에 의해 도출될 수 있다. 다음 단계(1302)에서, 인코딩 리시버(28a)는 미디어를 인코딩하고 인덱스된 미디어 페이로드를 생성하며(단계(1303)), 그리고 나서 이는 데이터 저장기(28c)에 의해 PIMB(30)에 저장된다(단계(132)).
도 8C에서, 송신 클라이언트(121)의 PIMB 리더(26)에 의해 수행되는 전송 기능의 순서(도 8A에서 단계(134))가 상세하게 제공된다. 루프(1341)의 결정에서, PIMB 리더(26)의 전송 기능은 전송될 인덱스된 미디어 페이로드가 PIMB(30)에 기록되었는지 그리고 전송을 위해 사용가능한지 여부를 연속적으로 확인한다. 그러한 페이로드가 PIMB(30)에서 사용가능한 경우, 단계(1342)에 설명된 바와 같이, 데이터 우선순위 지정기(26f)는 우선 송신되어야할 페이로드를 우선순위화하며, 이는 MCMS 참여자 속성 정보를 사용하여 수행된다. 가장 높은 우선순위 페이로드에 대한 정보가 PQM을 구동하는 패킷 최적화기 모듈(26g)로 전달되며, 이는 도 9A 내지 도 9C를 참조로 보다 상세하게 기술된다. 그리고 나서 적절한 페이로드가 데이터 리트리버(26h)에 의해 PIMB(30)으로부터 검색되고(단계(1344)), 패킷타이저(26i)에 의해 복스 패킷(95)으로 변환된다(단계(1345)).그리고 나서, 복스 패킷(95)은 트랜스미터(26j)에 의해 네트워크(18)를 통해 수신 클라이언트(122)로 전송되며(단 계(1346)), 수신 클라이언트는 수신된 패킷의 속성(손실, 지터, 처리량)을 반영하는 착신 보고를 역전송한다. 이러한 착신 보고는 PQM이 주어진 리시버를 위한 MABR의 계산에 필요한 정보를 제공한다. 전술한 프로세스는 전송 단계에서 흐름도의 최상부로 향하는 귀환 화살표에 의해 지시되는 바와 같이 각각의 전송 루프에서 반복된다.
상술한 실시예에서, 미디어는 인코딩되고 PIMB(30)에 저장되고 그리고 나서 직렬 방식으로 네트워크를 통해 전송된다. 대체적인 실시예에서, 인코딩된 미디어는 PIMB(30)에 저장되고 네트워크를 통해 병렬적으로 전송될 수 있으며, 이는 두 개의 기능이 실질적으로 동시에 발생하는 것을 의미한다.
도 8D에서, 수신 클라이언트(122)의 PIMB 라이터(28)의 네트 수신 기능에 대한 순서(도 8A에서 단계(136))가 설명된다. 개시 단계(1361)에서, 네트워크 리시버(28d)는 네트워크(18)를 통해 복스 패킷(95)을 수신한다. 데이터 저장기(28f)는 패킷을 인덱스된 미디어 페이로드로 변환하며(단계(1363)), 이는 PIMB(30)에 저장된다(단계(1364)). 페이로드가 저장됨에 따라, DQM(Data Quality Manager)(28g)가 구동한다. DQM(28g)는 손실되거나 손상된 패킷을 확인하고, 전송된 데이터의 정확한 카피의 종국적인 저장을 확인하고, 네트워크의 상태에 대한 착신 보고를 트랜스미터로 송신한다. DQM(28g)의 이러한 각각의 기능은 도 9D 내지 도 9F를 참조로 이하 보다 상세하게 기술된다.
도 9E에서, 수신 클라이언트(122)의 PIMB 리더(26)의 렌더링 기능에 대한 순서(도 8A의 박스(140))가 설명된다. 개시 단계(1401)에서, 데이터 우선순위 지정기(26a)는 렌더링될 인덱스된 미디어 페이로드를 사용자 상태 및 존재 정보뿐만 아니라 MTSD 정보를 사용하여 MCMS 애플리케이션(20)에 의해 결정되는 바대로 우선순위화 하며, 상기 사용자 상태 및 존재 정보는 이는 사용자의 의도 및 주의 상태를 포함한다. 그리고 나서, 우선순위화된 페이로드는 데이터 리트리버(26b)에 의해 PIMB(30)으로부터 독출된다(단계(1402). PLC/인터폴레이터(26c)는 검색된 페이로드에 대해 패킷 손실 보상 및 인터폴레이션을 수행하며(단계(1403)), 이는 어떤 코덱을 사용하는지에 종속하는 알려진 패킷 손실 보상 및 인터폴레이션 알고리즘을 사용한다. 다음 단계에서, 둘 또는 그 이상의 참여자가 동일한 대화에서 동시에 미디어를 생성한 경우(예컨대, 둘 모두가 동시에 발언한 경우), 믹서(26d)는 대화의 다수의 메시지를 믹스한다(단계(1404)). 렌더러(26e)는 믹서(26d)로부터 데이터 스트림을 렌더링하고(단계(1405), 착신 사용자를 위한 음성, 영상, 또는 다른 미디어를 생성한다(단계(1406)).
도 8F에서, 서버(16)가 네트워크(18) 상의 이전 홉으로부터 복스 패킷을 수신하고, 저장하고, 보관하고 다음 홉으로 복스 패킷을 전송하는 순서가 설명된다. 개시 단계에서, 서버(16)는 PIMB 라이터의 네트 수신 기능을 수행하여(도 8D와 유사함) PIMB(85) 및 아카이브(89) 또는 서버(16) 내에 수신된 데이터의 인덱스된 미 디어 페이로드를 저장한다. 서버(16)는 또한 PIMB 라이터의 전송 기능을 수행하여(도 8C와 유사함) 수신된 패킷을 네트워크(18) 상의 다음 홉으로 전달한다. 이러한 방식에서, 전송 클라이언트(121)에 의해 생성된 미디어의 카피가 수신되고, 저장되고 각각의 홉에서 수신 클라이언트(122)로의 경로를 따라 전송된다.
전술한 실시예에서, 수신된 인덱스된 미디어의 기록은 서버(16)의 PIMB(91)에 저장되고 직렬 방식으로 다음 홉으로 전송된다. 대체적인 실시예에서, 수신된 인덱스된 미디어 페이로드는 PIMB(91)에 저장되고 실질적으로 동시에 다음 홉으로 전송될 수 있다. 전송 및 수신 장치(13) 둘 모두의 PIMB(30) 상의 미디어의 저장은 미디어의 점진적인 전송 및 렌더링을 허용한다. 전송 단에서, 전송 장치에서 발생된 미디어는 그것이 수신됨에 따라 점진적으로(progressively) 네트워크를 통해 전송될 수 있다. 다양한 실시예에서, 인코딩된 미디어(그것이 어떻게 발생되는지 여부에 관계없이)는 그것이 PIMB(30)에 저장되기 전, 후, 또는 실질적으로 그와 동시에 점진적으로 전송될 수 있다. 수신단에서, 유입되는 미디어는 또한 그것이 네트워크를 통해 수신됨에 따라 점진적으로 렌더링될 수 있으며, 이는 사용자가 거의 실시간 모드로 미디어를 검토하도록 선택되는 것을 제공한다. 다양한 실시예에서, 유입되는 미디어는 그것이 수신 장치(13)의 PIMB(30)에 저장되기 전, 후, 또는 실질적으로 그와 동시에 점진적으로 렌더링될 수 있다. 만약 수신된 미디어가 타임-쉬프트 모드에서 검토될 경우, 미디어는 사용자에 의해 지정된 시간에 추후 검토되기 위해 PIMB(30)(또는 로컬 PIMB(30)에 교체된 경우 서버(16)의 PIMB(85))로부터 검색된다.
본원의 문맥 상에서, 용어 점진적인(progressive) 또는 점진적으로(progressively)는 광범위하게 해석되도록 의도되며 일반적으로 데이터의 가용성(availability)을 기반으로 하는 데이터 스트림의 연속적인 처리를 의미한다. 예를 들어, 미디어가 생성되거나 장치(13)에서 발생됨에 따라, 상기 미디어의 점진적인 인코딩, 저장, 패킷타이징 및 전송은 미디어가 사용가능한 한 연속적이다. 사용자가 발언함에 따라, 상기 미디어는 사용자의 발언의 지속기간 동안 연속적이거나 연속적으로 인코딩되고, 저장되고, 패킷타이징되고 전송된다. 사용자가 발언을 일시정지하거나 중단하는 경우, 점진적으로 처리될 미디어가 존재하지 않는다. 사용자가 발언을 다시 재개하는 경우, 미디어의 점진적인 처리는 재개된다. 수신단에서, 미디어는 또한 미디어가 수신됨(즉, 사용가능함)에 따라 처리된다. 미디어가 수신됨에 따라, 이는 연속적으로 저장된다. 이는 또한 거의 실시간 모드에서는 미디어가 수신됨에 따라 연속적으로 렌더링되거나, 타임-쉬프트 모드에서는 저장장치로부터 수신됨에 따라 연속적으로 렌더링된다. 비록 상술한 설명이 음성의 맥락에서 제공되더라도, 이는 모든 타입의 미디어가 유사한 방식으로 점진적으로 처리될 수 있음이 이해되어야 한다. 또한, 미디어의 점진적인 처리는 필수적으로 시간-인덱스된 순서로 점진적으로 처리될 필요는 없다. 오히려 미디어는 수신된 순서로 처리된다. 일 실시예에서, 미디어가 인덱스 순서를 벗어나 수신되면, 미디어는 수신된 순서로 점진적으로 처리되고, 그리고 나서 PIMB(30)에 인덱스된 순서로 구성된다. 대체적인 실시예에서, 수신된 미디어는 그 인덱스된 순서로 구성되고 그리고 나서 점진적으로 렌더링될 수 있다.
H.2 PQM 동작 흐름도( PQM Operation Flow Diagrams )
PQM(26g)은 MABR(Maximum Available Bit Rate)로 불리는 수치에 의존하며, 이는 송신 및 수신 노드 쌍 간의 실제 전송 용량 또는 대역폭의 연속적으로 계산되는 근사값(즉, 주어진 시점에서의 네트워크의 능력의 수치)이다. 즉각적인 네트워크 상태 변화에 따라, MABR는 업데이트된다. 네트워크 처리량, 패킷 손실, 및 지터의 일반적인 측정값은 MABR의 계산에 고려된다. 대체적인 실시예에서, MABR은 또한 수동으로 설정되거나 하루 중 시간, 네트워크의 타입, 다른 조건 또는 파라미터를 기반으로 제한될 수도 있다.
PQM은 또한 착신자(들)의 의도를 고려하여 시간에 민감한 전송을 최적화한다. 전송은 다음과 같은 경우 시간에 민감한 것으로 간주된다: (i) 착신자(들)의 의도가 "라이브" 전송을 검토하거나 거의 실시간 모드로 검토하는 것이거나, (ii) 착신자가 어떠한 이유로 그들의 장치(13)에 동시적으로 저장되지 않은(예컨대, 메시지가 아카이브(89)에 기저장됨) 메시지를 즉시 검토하기를 원하는 경우. 착신자의 의도는 착신자의 행동에 의해 추측되거나 또는 착신자가 그들의 의도를 설정하거나 지정할 수 있다. 반면에, 착신자의 의도가 타임-쉬프트 모드로 메시지를 검토하는 것인 경우, 전송은 시간에 민감한 것이 아닌 것으로 간주된다. 라이브 또는 타임-쉬프트 모드 중 어느 하나로 전송을 검토하는 착신자의 의도는 적어도 부분적으로 전송의 "즉시성 요건(timeliness requirement)"을 정의한다. 다양한 실시예에서, 팩터, 예컨대 전송의 긴급도 또는 우선순위는 또한 전송의 즉시성 요건을 정의 하는데 고려될 수도 있다.
송신자 및 수신자 쌍 간의 네트워크 경로에서 노드는 또한 착신자의 의도의 상태를 고려하여 일관될 필요가 있다. 만약 한 타겟 착신자가 즉시성을 지시한 경우, 즉 그들이 즉시 또는 라이브로 전송을 검토하기를 원하는 경우, 다른 착신자의 요구에 관계없이, 송신자-수신자 경로를 따른 네트워크 상의 모든 중간 노드는 동일한 즉시성 요건을 구비할 것이 요구된다. 따라서, 각각의 중간 노드의 즉시성 요건은 전송이 송신되고 있는 수신 노드에 의존한다. 이러한 종속성은 가끔씩 네트워크 전송 경로의 타겟 노드를 위한 "요건 연합(union of requirements)"으로 불린다.
PQM은 각각의 스케쥴된 메시지 페이로드 전송을 위한 "IBR(Ideal Bit Rate)" 또는 이상 비트율을 더 고려한다. 시간에 민감한 전송에서, IBR은 실질적으로 실시간이거나 라이브 통신을 위해 요구되는 패킷화율(여기서는 RTBR(Real Time Bit Rate) 또는 실시간 비트율로 언급한다)을 기반으로 계산된다. 예를 들어, 음성에서, 20 msec의 음성 데이터를 포함하는 매 20 msec의 패킷의 패킷화율이 라이브 대화를 수행하기 위해 허용가능한 IBR로 간주된다. 초당 킬로비트의 시스템을 위한 RTBR은 1초의 음성 페이로드 데이터의 사이즈에 전송을 위해 생성될 모든 네트워크 헤더의 사이즈를 더한 것일 수 있다. 영상 미디어 또는 음성 및 영상의 조합에서, RTBR은 단순한 음성보다 실질적으로 더 높을 것이다. 다른 타입의 미디어, 예컨대 센서 또는 GPS 위치 데이터에서, RTBR은 음성의 RTBR보다 더 낮을 것이다. 시간에 민감하지 않은 전송에서, IBR은 MEBR(Maximum Efficiency Bit Rate)로 설정되어 네 트워크를 통한 전송의 사용 또는 효율을 최적화한다. MEBR은 근원 네트워크를 위한 가장 큰 가능한 값으로 패킷화율을 조절함으로써 계산된다. 다중 메시지 또는 페이로드가 송신 및 수신 쌍 간에 전송될 경우, AIBR(Aggregate IBR)은 전송을 위해 고려된다.
PQM은 각각의 송신 및 수신 쌍에 대해 데이터를 일련의 전송 루프로 송신함으로써 동작한다. 각각의 송신 및 수신 쌍에 대한 전송 루프는 독립적이다. 네트워크 상의 임의의 전송은 다른 송신-수신 쌍의 MABR에 영향을 미칠 수 있다. 따라서, MABR은 바람직하게 모든 착신자에 대해 연속적으로 계산된다.
도 9A 내지 도 9C를 참조하여, 단일의 송신 및 수신 쌍에 대한 PQM의 동작의 순서를 설명하는 흐름도가 설명된다. 도 9A에서, 단일의 송신 및 수신 쌍 간의 MABR이 결정되는 단계가 설명된다. 도 9B에서, 단일의 송신 및 수신 쌍에 대한 각각의 전송 루프에 대한 AIBR의 계산을 위한 단계를 설명하는 흐름도가 설명된다. 도 9C에서, 송신 및 수신 쌍 간에 전송할 데이터의 양을 결정하는 순서가 설명된다. 위 세 도면에서 설명되는 프로세스는 이하 보다 상세하게 기술되는 바와 같이, 동시에 수행되고 서로 간에 상호작용한다.
도 9A에서, 송신 및 수신 쌍 간의 네트워크 인터페이스에 대한 MABR을 계산하는 흐름도(50)이 도시된다. 개시 단계(501)에서, 송신 및 수신 쌍 간의 네트워크 인터페이스가 감시된다. 송신자는 주기적으로 보고를 수신하며, 이는 단계(502)의 수신자 단에서 네트워크 연결의 상태에 관한 정보를 포함한다. 상기 보고는 네트워 크 인터페이스에서 수신자에 의해 관찰된 데이터 처리량(503), 패킷 손실(504), 및 지터(505)의 현재 상태에 관한 정보를 포함한다. 단계(506)에서, MABR은 상기 보고에 포함된 이러한 관찰을 기반으로 송신자 측에서 계산된다. 이러한 보고 내의 데이터를 감시하거나 관찰함으로써, MABR 값은 송신 및 수신 쌍 간의 현재 네트워크 용량 또는 상태를 기반으로 연속적으로 조절된다. 네트워크 용량이 데이터 전송을 위해 보다 호의적으로 됨에 따라, MABR은 증가할 것이다. 만약 네트워크 용량이 전송에 덜 호의적으로 되는 경우, MABR은 감소할 것이며, 사용불가능한 네트워크에서는 잠재적으로 완전히 영으로 된다. 상기 보고는 TCP 네트워크에서 노드에 의해 생성되는 패킷 손실 보고와 유사하지만, 그뿐만 아니라 추가적으로 처리량 및 지터 정보를 더 포함한다.
송신 및 수신 쌍 간에 다수의 네트워크 인터페이스가 있는 경우, MABR은 착신 보고가 수신되는 각각의 인터페이스에 대해 계산된다. 만약 어떠한 트래픽도 네트워크 상에서 최근에 송신되지 않은 경우, 또는 어떠한 착신 보고도 수신되지 않은 경우, MABR은 현재의 네트워크 상태를 반영하지 않을 수 있다. 그러나, 착신 보고는 데이터가 전송되는 동안 수신자에 의해 연속적으로 생성되며, 송신자의 MABR 수치는 보다 정확한 값으로 빠르게 수렴할 것이다.
도 9B를 참조하여, 전송 루프에 대한 AIBR을 계산하는 단계를 설명하는 흐름도(52)가 설명된다. 개시 단계(521)에서, 현재 루프 내의 송신 및 수신 쌍 간에 전송될 준비가 된 미디어(이 메시지에 속하는 시간이 인덱스된 미디어의 일부를 의미 함)를 구비한 메시지가 확인된다. 미디어를 구비한 메시지의 리스트가 구축된다(522). 리스트 내의 각각의 메시지에서(523), 각각의 메시지의 시간 민감성(time-sensitivity) 즉시성 요건(timeliness requirement)이 고려된다(524). 특정 메시지가 시간에 민감하지 않은 경우, IBR은 MEBR(Maximum Efficiency Bit Rate)로 설정된다(525). 반면에, 메시지가 시간에 민감한 경우, IBR은 RTBR(Real Time Bit Rate)로 설정된다(526). 다음 단계(527)에서, 리스트 내의 각각의 메시지에 대한 이전에 계산된 IBR이 함께 합산되며, 이는 전송 루프에 대한 AIBR(Aggregate Ideal Bit Rate)를 도출한다(528). 복귀 화살표에 의해 지시되는 바와 같이(529), 전술한 프로세스는 송신 및 수신 쌍 간의 각각의 전송 루프마다 반복된다.
도 9C를 참조하여, 전송 루프마다 송신 및 수신 쌍 간에 전송할 데이터의 비율을 결정하는 순서를 설명하는 흐름도(54)가 설명된다. 개시 단계(541)에서, MABR은 다음 전송을 위해 AIBR(도 9B에서 결정된 바와 같음)과 비교된다.
MABR이 AIBR보다 크거나 동일한 경우, 루프 내의 전송이 준비된 것으로 식별되는 모든 메시지는 IBR 레이트에서 패킷화되고(542), 전송된다(543).
반면에, MABR이 AIBR보다 작은 경우, PQM이 데이터의 적절한 카피의 적시 전달, 사용가능한 대역폭의 효율적인 사용, 및/또는 페이로드 컨텐츠 및 품질, 패킷 사이즈, 및 현재 네트워크 상태를 만족시키는 전송율에 대한 조절의 목표를 만족하도록 일련의 과정들이 적용된다.
개시 단계에서, 리스트 내의 메시지는 시간 민감성(time sensitivity)에 대해 검토된다(544). 시간에 민감한 메시지가 없는 경우, 비트율은 MABR까지 감소되고(545), 메시지는 전송된다(543).
리스트가 시간에 민감한 메시지를 포함하는 경우, 시간에 민감하지 않은 메시지에 대해 할당된 비트율이 MABR 한계를 만족할 때까지 감소된다(546). 비트율이 완전히 영까지 감소하는 단계가 MABR을 만족하기에 불충분한 경우, 시간에 민감하지 않은 메시지는 루프 내에서 전송될 메시지의 리스트로부터 제거된다. 비트율이 감소되어 MABR보다 작거나 동일한 경우, 남은 메시지는 패킷화되고 전송된다(543).
시간에 민감하지 않은 메시지의 제거가 MABR을 만족하기에 충분하지 않은 경우, 남은 시간에 민감한 메시지에 대한 보다 낮은 품질의 코덱(또는 코덱들)의 사용을 포함하는 또 다른 과정이 사용된다. 전송 루프 도중 보다 적은 비트를 송신함으로써 페이로드 데이터를 가능한 한 신속하게 전송하도록 하는 시도가 수행된다. 다른 말로, 페이로드의 품질을 감소시킴으로써, 전송은 주어진 기간에 보다 적은 비트를 송신한다. 다양한 실시예에서, 각각 서로 다른 비트율 대 품질의 트레이드 오프를 구비하는 상이한 코덱 또는 코덱들이 사용될 수 있다. 보다 낮은 품질의 코덱 또는 코덱들의 사용이 충분한 경우, 즉 MABR 제한이 만족된 경우, 메시지는 전송된다(543).
보다 낮은 품질의 코덱(들)의 사용이 여전히 MABR을 만족하지 못하는 경우, 시간에 민감한 메시지의 패킷화 간격이 증가된다(548). 이러한 과정으로, 헤더 대 페이로드(header-to-payload) 비율이 증가되며, 이는 전반적인 비트율을 감소시키지만 지연을 야기한다(즉, 착신자로의 전송의 전달의 지연). 이러한 과정이 AIBR을 MABR보다 작거나 동일한 정도로 감소시키면, 전송이 수행된다(543).
패킷화 간격의 변경 후 MABR이 여전히 만족되지 않은 경우, 비트율은 MABR 한계 내로 진입할 때까지 점진적으로 낮아진다(549). 비트율이 이러한 방식으로 낮아지는 경우, 시간에 민감한 메시지는 라이브 대화를 유지하기에 불충분한 비율로 전송된다. 따라서, 대화는 "라이브"에서 벗어나도록 강제된다. 네트워크가 다운되거나 상태가 매우 열악한 경우, 데이터 전송이 발생하지 않을 가능성이 있다. 또 다시, 전술한 시퀀스가 각각의 송신 및 수신 쌍 간의 전송 루프(5410)에 대해 반복된다.
송신 및 수신 쌍 간에 다수의 네트워크 인터페이스가 존재하는 경우, 도 9C에관하여 기술된 시퀀스가 착신 보고가 사용가능한 각각의 인터페이스에 대해 수행된다. 다양한 실시예에서, 송신자는 다수의 인터페이스 사이에 전송 로드를 분배하는 로직을 포함할 수 있다. 다른 예에서, 페이로드는 오직 하나의 인터페이스 상으로 송신될 수 있는 반면, 다른 실시예에서, 인터페이스의 일부 또는 전부가 사용될 수 있다.
전술한 기술은 시스템(10)의 임의의 송신 및 수신 쌍에 관련된다. 대부분의 상황에서, 송신 및 수신 쌍은 각각 클라이언트(12), 사용가능한 장치(13) 및 서 버(16), 두 개의 서버(16), 서버(16) 및 클라이언트(12)가 이네이블된 장치(13), 또는 두 개의 클라이언트들(12)조차 포함할 것이다. 송신 노드가 동시에 둘(또는 그 이상)의 수신 노드로 전송하는 경우, 도 9A 내지 도 9C에 관련하여 기술된 바와 같은 전술한 시퀀스는 각각의 수신-송신 쌍에 대해 동시적으로 발생한다.
H.3 DQM 동작 흐름도( DQM Operation Flow Diagrams )
DQM(28g)는 클라이언트(12)에서 수신된 데이터가 손상되었는지 또는 손실된 패킷이 있는지 여부를 결정한다. 또한, 수신 클라이언트(12)의 DQM(28g)는 착신 보고를 생성하며, 이는 네트워크 상의 전송 노드로 역전송된다. DQM(28g)는 또한 백그라운드 프로세스를 구동하여 전송된 데이터의 정확한 카피가 종국적으로 수신되고 저장되는지 보증한다. 이러한 기능은 이하 도 9D 내지 도 9F에 각각 기술된다.
도 9D를 참조하여, 손실되거나 및/또는 손상된 데이터를 확인하는 DQM(28g)의 동작을 설명하는 흐름도가 설명된다. 개시 단계(561)에서, DQM(28g)은 알려진 기술, 예컨대 CRC 또는 유사한 완전성 확인 메커니즘을 사용하여 손상된 패킷을 확인한다. 패킷이 손상된 경우, 패킷은 손실된 것으로 처리된다(562). 다음으로 DQM(28g)은 임의의 패킷이 손실되었는지 확인한다(563). 기결정된 기간 후 순서를 벗어난 패킷이 수신되지 않은 경우, 손실된 것으로 간주된다. DQM(28g)은 DNQS(32) 내에 임의의 손실되거나 손상된 패킷을 기록한다(564). 반면, 손상되거나 손실된 패킷이 검출되지 않으면, DQM(28g)은 수신된 데이터의 품질이 대역폭을 절약하기 위 한 목적으로 송신자에 의해 의도적으로 저하되지 않았는지 여부를 결정한다(565). 저하된 품질은 DNQS(32)에 기록된다. 수신된 데이터의 품질이 저하되거나 그렇지 않음에 관계없이, 데이터의 착신 정보(예컨대, 패킷 시퀀스 번호, 타임 스탬프, 및 패킷이 송신될 네트워크에서 다음 노드의 네트워크 어드레스)가 DNQS(32)에 저장된다(567). 전술한 프로세스는 흐름도의 시작으로 돌아가는 화살표에 의해 지시된 바와 같이 연속적으로 반복된다.
도 9D에 상세하게 기술된 프로세스의 결과에 따라, 저하되지 않은 패킷의 수신에 관한 정보, 저하된 품질의 패킷의 결함, 및 손실된 패킷은 모두 DNQS(32)에 저장된다. 미디어가 수신되는 대로, DNQS(32)는 미디어의 상태에 관한 정보를 업데이트하도록 유지한다.
도 9E를 참조하여, DQM(28g)의 착신 보고 생성기 기능의 동작을 설명하는 흐름도가 설명된다. 개시 단계에서, DNQS(32)는 착신 보고가 생성될 필요가 있는 임의의 미디어가 존재하는지 여부를 결정하기 위해(582) 주기적으로 스캐닝을 수행한다(581). 대답이 아니오인 경우, 상기 스캐닝 프로세스는 반복된다. 반면, 미디어가 식별되면, 프로세스는 미디어가 시간에 민감한 것인지 여부를 결정하며(583), 이는 사용자가 미디어를 라이브로 검토하기를 의도하는지 또는 사용자가 그들의 장치(13)에 저장되지 않은 미디어를 즉시 검토하기를 원하는지 여부를 의미한다.
시간에 민감하지 않은 경우, 착신자는 송신자에게 재전송 우선순위를 낮게 설정하도록 알린다(584). 시간에 민감한 경우, 패킷 손실의 양이 고려된다(585). 패킷 손실의 양이 사용가능한 품질 범위를 벗어나는 경우, 재전송 우선순위가 높게 설정된다(586). 상술한 바와 같이, 패킷 손실의 양이 너무 크면, 착신자는 수신 시 미디어를 검토할 수 없을 수 있다. 품질이 허용가능한 범위에 있는 경우, 즉 전송의 품질이 렌더링되면 이해할 수 있을 정도로 충분한 경우, 착신 보고의 송신에 대한 우선순위가 낮게 설정된다(584). 착신자가 수신시 검토하고 있는지 아닌지에 관계없이, 착신 보고는 송신되며(587), DNQS(32)는 업데이트되고 NQM(Network Quality Manager)(28h)는 업데이트된다(589). 따라서, 단계(584)에 정의된 재전송 요청은 시간-민감성을 기반으로 조건부이다. 단계(586)에 정의된 전송 요청은 시간-민감성 및 품질 둘 모두에 조건부이다.
재전송 우선순위는 재전송을 요구하는 미디어에 대한 전송률을 적절히 우선순위화하도록 송신자의 PQM(26g)에 알린다. 예를 들어, 재전송 우선순위가 높게 설정되면, 송신자의 송신하는 PQM(26g)은 임의의 새로운 미디어가 오기 전에 임의의 재전송을 송신해야 한다. 우선순위가 낮으면, PQM(26g)은 임의의 새로운 미디어 후에 재전송된 미디어를 송신해야 한다.
전술한 프로세스는 연속적으로 반복되어 미디어가 수신됨에 따라 착신 보고가 생성된다. 송신자가 적절한 방식으로 착신 보고를 수신하지 않으면, 송신자의 PQM(26g)은 전송률을 감소시킬 것이며, 어떠한 착신 보고도 수신되지 않으면 종국 적으로 전송을 중지할 것이다.
도 9F를 참조하여, 손실되거나 저감된 미디어의 요청에 대한 순서를 설명하는 흐름도가 설명된다. 개시 단계(601)에서, DNQS(32)는 손실되거나 저감된 미디어(602)를 주기적으로 스캔한다. 만약 손실되거나 저감도니 미디어가 존재하지 않는 경우, 상기 정의된 스캔은 주기적으로 반복된다.
순서에서 벗어난 패킷이 기결정된 임계 기간 후에 도달하지 않은 경우 미디어는 손실된 것으로 간주된다(603). 임계 기간 전에 패킷이 도달하면, 이는 더 이상 손실된 것으로 간주되지 않는다. 반면에, 패킷이 임계치를 초과한 후에도 도달하지 않으면, 손실된 것으로 간주된다. 손실된 패킷으로, 재전송의 낮은 우선순위 요청이 만들어지고(604) 요청의 시간이 DNQS(32)에 기록된다(605). 이러한 프로세스는 손실된 패킷이 수신될 때까지 반복된다. 손실된 패킷이 도달하고 대응 미디어가 PIMB(30)에서 사용가능한 경우, 미디어의 손실된 상태는 DNQS(32)에서 제거된다. 따라서, 단계(604)에 정의된 재전송 요청은 미디어가 손실된 것으로 결정되는지 여부를 기반으로 조건부이다.
저감된 경우, DQM(32)은 미디어가 라이브 대화의 일부인지 여부를 결정한다(606). 그렇지 않은 경우, 저감된 미디어의 완전한 품질의 카피에 대한 요청이 만들어지며(607), 완전한 품질의 미디어가 손실된 것으로 지정되고(608) 요청 시간이 DNQS(32)에 기록된다(609). 미디어가 라이브 대화의 일부인 경우, 네트워크 대역폭 을 보존하기 위한 어떠한 조치도 즉시 취해지지 않는다. 대화가 라이브 모드를 벗어나도록 전환하면, 단계(607) 내지 단계(609)는 저감된 미디어의 완전한 품질(즉, 정확하거나 완전한) 카피가 종국적으로 수신됨을 보증하도록 수행된다. 데이터가 착신자 클라이언트(12)의 PIMB(30)에 사용가능하게 된 경우, 결합된 미디어의 저감된 상태가 DQNS(32)로부터 제거된다. 단계(607)에 정의된 전송 요청은 미디어가 저감되고 라이브 대화의 일부인지 여부에 대해 조건부이다.
전술한 프로세스는 단계(605) 및 단계(609)로부터 흐름도의 최상부인 단계(601)까지의 복귀 화살표에 의해 지시된 바와 같이, 연속적으로 반복된다. 도 9F에 도시된 프로세스를 반복함으로써, 모든 전송된 미디어의 정확한 카피가 종국적으로 착신 장치(13)의 PIMB(30)에 저장된다. 이러한 방식으로, 전송된 미디어의 정확한 카피의 저장이 착신자 장치(13)에서 보증된다.
I. GUI( Graphical User Interface )
도 10을 참조하여, 클라이언트 애플리케이션(12)을 구동하는 예시적인 장치(13)가 설명된다. 장치(13)는 GUI 디스플레이(110), 데이터 엔트리 버튼, 키, 또는 키보드(112), 마이크(114), 및 전기적 신호를 음성으로 변환하는 트랜스듀서(116), 예컨대 스피커를 포함한다. 디스플레이(110)는 또한 터치 스크린으로서 입력을 수용할 수 있다. 또한, 디스플레이(110) 및 키보드(112)는 터치 스크린 인터페이스를 이용하여 결합될 수 있다. 상술한 바와 같이, 장치(13)는 다양한 서로 다른 통신 툴, 예컨대 데스크탑 컴퓨터, 랩탑 또는 다른 모바일 컴퓨터, PDA(Personal Digital Assistants), 프로그래밍 가능한 랜드-라인(land-line) 또는 이동통신 전화기, 또는 프로그래밍 가능한 라디오, 또는 프로그래밍 가능한 통신 장치의 임의의 다른 타입일 수 있다. 도면에 도시된 예시적인 장치(13)는 "일반적"이도록 의도되며, 이러한 견지에서 이는 상기 열거된 모든 통신 장치를 나타내거나 포괄한다. 또한, 용어 "시각적인(graphical)" 사용자 인터페이스는 제한적으로 해석되지 않아야 한다. 오디오/DTMF 인터페이스, VUI(Voice User Interface), 라디오 스위치 인터페이스, 또는 그 조합을 포함할 뿐만 아니라 장치(13)에 구현될 수 있는 다른 타입의 사용자 인터페이스는 모두 이하 기술되는 다양한 기능을 구현하도록 사용될 수 있다. 단순화를 위해, 사용자가 장치(13)와 상호작용할 수 있는 이러한 타입의 방법 각각은 일반적으로 "사용자 인터페이스"로 언급된다.
타입에 관계없이, 모든 장치(13)는 바람직하게 사용자가 장치(13)를 동작하고 시스템(10) 내의 다른 사용자와 통신할 수 있는 사용자 인터페이스를 구비한다. 비록 사용자 인터페이스가 가상적으로 무한한 개수의 상이한 외관 및 느낌 구현을 구비하도록 설계될 수 있어도, 모든 장치(13)가 공통으로 구비해야하는 특정 기능 및 특징이 존재한다. 이러한 기능 및 특징은 이하 열거된다.
사용자 인터페이스는 바람직하게 하나 또는 그 이상의 다음과 같은 상태 지시자(status indicators) 또는 플래그(flags)를 포함한다: (i) 배터리 지시자; (ii) 연결성(connectivity) 지시자; (iii) 시계; (iv) 트랜스미터 상태; (ㅍ) 전송 싱크 상태; (vi) 검토(reviewing) 상태; (vii) 주의가 필요한 우선순위 메시지; 및 (viii) 손실된 메시지.
사용자 인터페이스는 바람직하게 다음과 같은 단일 대화를 수행하고 관리하는 기능, 플래그 및 컴포넌트를 포함한다: (i) 대화의 이름 및/또는 참여자의 리스트; (ii) 대화 상태; (iii) 대화 타입; (iv) 대화 지속기간; (v) 대화의 헤드 뒤의 시간; (vi) 눈에 띄는(outstanding) 메시지; (vii) 참여자의 존재/상태; (viii) 내비게이션을 구비한 메타데이터; (iix) 대화 속성 또는 지정자(designators); (ix) 제목, 스케쥴링, 참여자, 대화 요약을 포함한 대화 설정; 및 (v) 어떤 참여자가 메시지에 기여하고 어떤 참여자가 메시지를 청취하거나 검토하는지를 보여주는 지시자.
사용자 인터페이스는 또한 바람직하게 바로 위에서 열거된 사항들 외에 다음과 같은 다수의 대화를 수행하고 관리하는 기능, 플래그 및 컴포넌트를 포함한다: (i) 각각의 대화에 대한 이름/식별자; (ii) 라이브/액티브 또는 스탠딩/인액티브 지시자; (iii) 리뷰 위치, 헤드 또는 타임 쉬프트 중 어느 하나; (iv) 우선 순위 및 다른 속성; 및 (v) 어떤 위치의 대화가 손실되었는지의 지시자.
사용자 인터페이스는 또한 바람직하게 다음과 같은 많은 내비게이션 특징을 포함한다: (i) 대화 당 DVR 스타일의 빠른 전/후 재생; (ii) 인스턴트 메시징 스타일의 퍼스널 메시지 내비게이션; (iii) 대화 시간 지시자; (iv) 타임 스케일 쉬프팅(즉, 대화의 메시지 또는 메시지들에 걸친 전방 및 후방의 줌(zooming)); (v) 대화의 우선순위 변경; (vi) 통화 종료(hanging up); 및 (vii) 홈(home).
전술한 기능 및 특징은 다양한 방법, 예컨대 터치스크린의 GUI(110), 또는 다른 입력 장치, 예컨대 데이터 엔트리 버튼, 키, 또는 키보드(112), 마우스, 음성 활성화 명령, 또는 그 조합을 사용하여 구현될 수 있다. 또 다시 상기 열거된 기능 및 특징 및 그들이 어떻게 구현되었는지는 소모적으로 되도록 의도되지 않는다. 사용될 수 있는 다양한 방법 및 기술은 매우 포괄적이고, 여기에 이들 모두를 열거하거나 논의하는 것은 실제적이지 않다.
J. 대화( Conversations )
MCMS 애플리케이션(20)은 대화의 많은 상이한 타입, 예컨대 지연이 어디부터 되었는지 참여자가 언제 발언하는지 및 다른 참여자(들)이 첫 번째 참여자를 듣는 것이 매우 작은 거의 실시간 또는 "라이브"의 콜, 참여자가 메시지들 간에 보다 긴 지연을 두고 앞뒤로 음성 메시지를 교환하는 대화, 다수의 사용자가 관여되는 "라이브" 컨퍼런스 콜, 일반적으로 스케쥴된 시간의 스탠딩 컨퍼런스 콜, 또는 동시 프리핑으로서 참여자 각각이 다른 사람을 위해 미리 메시지 브리핑을 남겨 모두가 라이브 컨퍼런스 콜에 참여하기 전에 검토하는 구성가능하도록 구조화된 콜 타입을 지원한다. MCMS 애플리케이션(20)의 또 다른 고유한 속성은 사용자가 다른 타입의 대화간에 전환할 수 있는 기능이다. 예를 들어, 참여자는 음성-메시징 모드에서 라이브 콜로 끊김없이 전환하거나 역으로 전환할 수 있다. 또는 라이브 컨퍼런스 콜의 참여자는 음성-메시징 모드로 전환하고, 컨퍼런스 콜 후에 업데이트 또는 액션 아이템을 서로 간에 송신할 수 있다. 다수의 예가 기록되지만, 시스템(10)은 매우 유연하고 상이한 타입의 콜 또는 대화 및 다수의 대화들간의 전환을 위한 많은 옵션을 제공하는 것이 이해되어져야 한다. 메시지들 간의 지연을 변경함으로써, 참여자는 효율적으로 그들의 필요에 가장 적합한 타입의 대화 사이에 흘러갈 수 있다. 따라서, 상기 예는 제한적으로 해석되지 않아야 한다.
상술한 바와 같이, 대화는 그들의 원래의 문맥 및 문장으로 유지되는 메시지로 구성된다. 송신된 메시지는 기존의 대화에 속하거나 또는 새로운 대화를 개시한다. 일반적은 대화는 정의된 내용, 주제, 시간, 그룹 또는 채널에 연관된 메시지의 세트를 포함한다. 예를 들어, 대화는 사람들의 공통 그룹, 예컨대 클럽의 멤버를 포함할 수 있으며, 회사는 고정된 시간, 에컨대 주간 판매 미팅에 스탠딩 대화를 구비하거나, 친구들은 다양한 주제, 예컨대 저녁식사 계획을 짜는 것에 대한 애드-호크(ad-hoc) 대화를 가질 수 있다.
각각의 대화는 한 세트의 속성에 의해 정의되며, 이는 이름, 참여자의 리스트, 시작 및 종료 시간, 및 적어도 진행중이거나, 활성화되거나, 또는 종료된 상태를 포함한다. 다른 대화 상태가 다른 실시예에서 가능하다. 사용자는 그들의 장치(13) 상의 MCMS 애플리케이션(20)과 상호작용한다. 바람직한 실시예에서, 인터페이스는 사용자가 임의의 다양한 속성에 의해 대화를 구성하도록 한다.
참여자 및 대화 간의 관계는 또한 속성을 가진다. 이러한 속성은 우선순위, 상태(대화의 참여자의 상태)를 포함하지만, 이에 제한되지는 않는다. 참여자 상태의 값은 능동(active), 한 번에 하나 이상의 대화에 참여, 타임-쉬프트 모드로 대화를 검토, 라이브를 따라잡기(CTL), 수동적으로 참여(즉, 능동적이지 않게 검토하지만, 높은 우선순위 메시지를 수신), 대기, 또는 대화 무시(즉, 대화에 참여하거나 기록하는 것을 거부)를 포함한다.
참여자의 관점으로부터, 사용자는 메시지의 상대적인 우선순위를 선택하거나 정의할 수 있다. 예를 들어, 사용자의 상관으로부터의 메시지는 일반적으로 사회적 지인보다 높은 우선순위가 주어질 것이다. 일부 실시예에서, 착신자는 그들 소유의 우선순위를 설정하는 기능을 구비한다. MCMS-C의 구현에서, 사용자는 연속적으로 렌더링될 그들의 대화의 서브세트를 선택한다. 그리고 나서, 사용자는 이들 대화를 위한 순서화된 우선순위를 설정한다. 시스템은 사용자에 의해 설정된 우선순위를 사용하여 렌더링될 메시지를 순서화한다. 전술한 알고리즘은 사용자 우선순위 및 사용가능한 메시지 데이터에 관한 정보(MTSD를 넘어섬)를 사용하여 렌더링될 메시지를 큐잉한다(queue).
다른 실시예에서, 예컨대 전술적인 통신에서, 착신자는 우선순위를 설정하는 기능을 가지지 않거나 제한된 기능을 가질 수 있다. 예를 들어, 소방관은 소방대장으로부터의 메시지의 우선순위를 낮추는 기능을 구비하지 않을 수 있다. 그러나, 송신하는 사용자는 긴급한 도는 매우 중요한 메시지를 송신하는 기능을 구비할 수 있다. 메시지를 긴급하거나 비상상태로 태깅함으로써, 메시지는 착신자에게 가능한한 즉시 렌더링되며, 착신자의 임의의 우선순위 설정에 우월해진다. 다수의 응급 메시지 간의 임의의 충돌은 기결정된 우선순위 구성을 기반으로 해결된다.
K. MCMS 동작( MCMS Operation )
도 11A를 참조하여, MCMS 애플리케이션(20)의 주요 기능을 그룹화하는 조직도가 설명된다. 주요 기능은 계정(account) 관리(1102), 대화 관리(1104), 집합적인(aggregate) 대화 리스트 관리(1106), 대화 참여자(1108), 콜 제어(1110), 및 연락처 관리(1112)를 포함한다. 시스템(10)에 등록하고 로그인한 후, 사용자는 다양 한 관리 기능을 구현한 그들의 장치(13)의 사용자 인터페이스를 통해 탐색할 수 있으며, 이는 이하 상세하게 기술된다. 일부 실시예에서, 이러한 기능성은 매우 큰 유연성을 제공할 것이다. 다른 실시예에서, 예컨대 전술적이거나 통신 라디오에서, 사용자 인터페이스의 구현은 장치의 이용성을 만족시키도록 기구성된 많은 사용자 기능성 및 옵션으로 제한될 수 있다. 이하의 논의는 예시적이고 MCMS 기능성의 소모적인 설명이 되도록 의도되지 않으며, 단지 일부 MCMS 속성의 개관을 제공하도록 의도된다.
K.1 계정 관리( Account Management )
계정 관리 기능(1102) 하에서, 등록된 사용자는 특정 설정 및 선호도를 변경할 수 있다. 사용자는 그들의 이메일 주소, 패스워드, 이름, 전화번호, 전화 패스워드, 착신 번호(call-in number), 기본 및/또는 사용자 정의 렌더링 속도, 태그, 메시지 검토에 관한 이득(gain) 또는 볼륨 레벨, 라이브로 따라잡기(CTL) 모드 등을 변경할 수 있다. 이러한 변경을 가하기 위해, 사용자는 적절한 정보를 장치(13)의 인터페이스(110)를 통해 입력한다. MCMS 애플리케이션(20)은 업데이트된 선호도를 MCMS 데이터베이스(22)로 기록함으로써 응답한다.
K.2 대화 관리( Conversation Management )
도 11B에 도시된 바와 같이, 대화 관리(1104)는 사용자가 그들의 집합적인 대화 리스트를 보고, 새로운 대화를 생성하고, 대화의 세부사항을 업데이트하고, 대화를 삭제하고, 대화를 종료하도록 하는 기능의 세트이다. 각각의 기능은 이하 기술된다.
대화 보기(View Converesation)(1104a) - 각각의 대화에 대해, MCMS 애플리케이션(20)은 사용자에게 다음과 같은 속성 중 하나 또는 그 이상을 제공할 수 있다: 대화의 이름, 실제 시작 시간, 마지막 활동, 태그, 지속기간, 및 참여자의 리스트. 각각의 참여자에 대한 이름 및/또는 전화 번호, 상태(라이브, 다른 콜, 과거(in past), 따라잡기 모드(catch-up-mode), 오프라인-연락가능함(offline-reachable), 오프라인-연락불가능(offline-unavailable)).
대화 생성(1104b) - 사용자는 대화 이름, 연락처 리스트, 및 선택적인 스케쥴된 시작 시간을 입력함으로써 인터페이스(110)을 통해 대화를 생성한다. 만약 시작 시간이 지정되지 않는다면, 시작 시간은 즉시이다. 이에 응답하여, MCMS 애플리케이션(20)은 데이터베이스(22)에 새로운 대화를 생성하며, 이는 연락처 리스트 상의 각각의 참여자에 대한 기록과 결합된다. MCMS 애플리케이션(20)은 또한 연락처 리스트 상의 각각의 사용자에 대한 참여자 기록을 데이터베이스(22)에 생성하며, 이는 발신자가 연락처 리스트 상의 다른 사람의 존재 정보를 수신하도록 한다. 대화가 스케쥴링되면, MCMS 애플리케이션(20)은 지정된 시간에 대화를 시작한다. 그 외에, 대화는 바로 시작된다.
대화의 세부사항 업데이트(1104c) - 사용자는 사용자 인터페이스(110)를 통해 대화에 변경을 가할 수 있다. 예를 들어, 참여자는 추가되거나 제거될 수 있다. 참여자의 상태에 대한 임의의 변화는 MCMS 데이터베이스(22)에 업데이트된다.
대화 삭제(1104d) - 사용자는 인터페이스(110)를 통해 특정 대화를 그들의 대화 리스트에서 삭제할 수 있다. 이에 응답하여, MCMS 애플리케이션(20)은 데이터 베이스(22)에 그 변화를 기록하고, 대화가 삭제된 것으로 지시한다.
대화 종료(1104e) - 사용자는 대화의 종료 또는 차단을 결정할 수 있다. 일 실시예에서, 대화를 생성한 사용자만이 대화의 종료를 결정할 수 있다.
K.3 집합적인 대화 리스트 관리( Aggregate Conversation List Management )
도 11C에 도시된 바와 같이, 집합적인 대화 리스트 관리(1106)는 사용자가 다수의 대화에 관여하도록 하는 기능의 세트이다. 집합적인 대화 리스트 관리 기능은 사용자가 그들의 장치의 인터페이스(110)를 통해, 임의의 대화에 "라이브"로 참여하도록 하는 반면, 다른 대화에는 타임-쉬프트 모드로 참여하도록 한다.
선택된 대화(1106a) - 인터페이스(110)를 통해, 사용자는 현재의 사용자의 집합적인 대화 리스트 중 임의의 대화를 선택할 수 있다. 현재 대화의 메시지는 "라이브" 또는 타임-쉬프트 모드 중 어느 하나로 렌더링될 수 있다. 사용자는 집합적인 대화 리스트에서 현재의 대화를 때때로 전환할 수 있다.
대화 교환 모드(1106b) - 선택적인 실시예에서, 사용자는 동작의 MCMS, MCMS-C 및 MCMS-S 모드로부터 교환할 수 있다.
K.4 대화 참여( Conversation Participation )
도 11D에 도시된 바와 같이, 대화 참여(1108)는 사용자가 대화를 시작하고, 대화에 참여하도록 하는 통지를 수신하고, 대화 상태 정보를 획득하고, 대화를 끊도록 하는 기능의 세트이다.
대화 시작(1108a) - 대화가 생성된 후, 인터페이스(110)를 통한 사용자에 의하거나 또는 MCMS 애플리케이션(20)의 스케쥴러에 의해, 각각의 참여자의 상태가 확인된다. 참여자가 오프라인에 있는 경우, 그 사용자에게 연락을 시도한다. 참여자가 온라인에 있으나 다른 대화에 참여하고 있으면, MCMS 애플리케이션(20)은 참여자에게 알린다. 모든 온라인 상 참여자의 존재 상태는 데이터베이스(22)에 업데이트된다.
통지 수신(1108b) - 시스템은 사용자의 주의가 사용자 인터페이스(110)를 통해 그래픽 디스플레이 및/또는 들을 수 있는 통지로 대화 상에 요청되었음을 사용자에게 통지할 수 있다.
대화 상태(1108c) - 사용자는 그들의 장치(13)의 인터페이스(110)를 통해 대화의 상태를 요청할 수 있다. 이에 응답하여, MCMS 애플리케이션(20)은 데이터베이스(22)에 저장된 상태 정보를 조합하고 사용자에게 그 정보를 제공한다.
대화 정지(1108d) - 사용자 인터페이스(110)를 통해, 사용자는 활성화된 대화를 끊거나 그로부터 전환될 수 있다. 이에 응답하여, MCMS 애플리케이션(20)은 활성화된 대화에 대한 사용자의 참여자 상태를 데이터베이스(22)에 업데이트하고, 대화로부터 사용자를 제거하도록 저장 및 스트림 모듈(24)에 지시한다.
K.5 대화 제어( Conversation Controls )
도 11E에 도시된 바와 같이, 대화 제어(1110)은 사용자가 대화 내 그들의 참여를 제어하도록 하는 기능의 세트이다. 이러한 기능은 사용자가 라이브로 따라잡기(CTL), 헤드로 스킵하기, 지난 위치까지 점프하기, 일시정지, 대화의 메시지를 검토할 때 빠른 재생 및 느린 재생을 가능하게 한다. 이러한 기능 각각은 장치(13)의 인터페이스(110)를 통해 사용자에 의해 시작된다.
라이브로 따라잡기(Catch-up-to-live)(1110a) - 사용자는 "CTL" 기능을 사용하여 진행 중인 대화에서 라이브까지 따라잡을 수 있다. 이 기능이 가동되면, MCMS 애플리케이션(20)은 사용자가 검토하였던 대화의 마지막 지점을 확인하고, 이전에 듣지 않은 메시지를 렌더링하도록 저장 및 스트림 모듈(24)을 지시하며, 이는 사용자에 의해 지정된 일반적인 렌더링 옵션보다 더 빠른 렌더링을 사용하고, 헤드에 도달하면 끊김없이 라이브 모드로 전환하도록 한다.
헤드로 점프하기(1110c) - 이 기능은 사용자가 대화의 헤드로 점프하도록 하며, 이는 대화 내 사용자의 현재 지점과 헤드 사이에 임의의 개입되는 메시지를 스킵한다. 이 기능이 구현되면, MCMS 애플리케이션(20)은 대화의 헤드에 있는 메시지를 즉시 렌더링하도록 저장 및 스트림 모듈을 지시한다. (대화의 헤드가 현재 라이브이면 이는 JTL(Jump To Live)로 언급된다.)
지난 위치로 점프(1110d) - 이 기능은 사용자가 대화 내 이전 메시지 또는 이전 지점으로 점프하도록 하며, 되감기 또는 재생(replay) 기능과 유사하다. 이 기능이 구현되면, MCMS 애플리케이션(20)은 되감기 지점부터 시작하는 미디어를 렌더링하도록 저장 및 스트림 모듈(24)을 지시한다.
일시정지(1110e) - 이 기능은 사용자가 대화의 메시지의 검토를 일시정지하도록 한다. 이에 응답하여, 저장 및 스트림 모듈(24)은 또 다른 명령이 발급될 때까지 메시지의 렌더링을 정지한다.
빠른 재생(1110f) - 이 기능은 사용자가 메시지를 보다 빨리 렌더링하도록 한다. 이에 응답하여, 저장 및 스트림 모듈(24)은 메시지를 정상보다 더 빠른 비율 로 렌더링한다. 렌더링 비율은 사용자에 의해 특정되거나 사용자가 많은 기설정된 옵션으로부터 선택할 수 있다.
느린 재생(1110g) - 이 기능은 사용자가 메시지를 보다 느리게 렌더링하도록 한다. 이에 응답하여, 저장 및 스트림 모듈(24)은 메시지를 정상보다 더 느린 비율로 렌더링한다. 렌더링 비율은 사용자에 의해 특정되거나 사용자가 많은 기설정된 옵션으로부터 선택할 수 있다.
K.6 연락처 관리( Contact Management )
도 11F에 도시된 바와 같이, 시스템(10)은 연락처 리스트 및 사용자 그룹을 관리하기 위해 호스트의 기능을 사용자에게 제공한다. 이러한 기능은 연락처 및 사용자 그룹의 추가, 편집, 삭제를 포함한다. 이러한 기능 각각은 그들의 장치(13)의 인터페이스를 통해 사용자에 의해 구현된다. 사용자의 연락처 리스트 또는 그룹 리스트에서의 임의의 수정 또는 삭제는 MCMS 데이터베이스(22)에 저장된다.
연락처 추가(1112a) - 이 기능은 사용자가 새로운 연락처를 그들의 연락처 리스트에 추가할 수 있도록 한다. 새로운 연락처는 등록된 사용자 또는 외부 연락처일 수 있다. 일반적으로 이름, 전화 번호(들), 임의의 타입의 번호(휴대폰, 사무실, 가정, 컴퓨터 등), 이메일 주소 및 다른 개인적인 정보가 각각의 연락처 기록에 제공된다.
연락처 편집(1112b) - 이 기능은 사용자가 기존의 연락처 기록을 편집하거나 업데이트할 수 있도록 한다.
연락처 삭제(1112c) - 이 기능은 사용자가 기존의 연락처 기록을 제거하거나 삭제할 수 있도록 한다.
연락처 검색(1112d) - 이 기능은 사용자가 그들의 연락처 리스트에서 특정 연락처를 검색할 수 있도록 한다. 검색은 많은 기준, 예컨대 이름, 전화 번호, 최근 발신 번호, 가장 자주 발신한 번호, 그룹 등을 사용하여 수행될 수 있다.
참여자 리스트 획득(1112e) - 이 기능은 사용자가 많은 상이한 검색 기준을 사용하여 대화의 참여자의 리스트를 검색하고 독출할 수 있도록 하며, 상기 검색 기준은 이름, 최근 발신 번호, 최근 착신 번호, 가장 자주 발신한 번호 등이다.
발신자의 상태 검토 인증(1112f) - 이 기능은 다른 사용자가 제 1 사용자의 상태를 보는 것을 제 1 사용자가 인증할 수 있도록 한다. 인증되지 않은 사용자는 제 1 사용자의 상태를 볼 수 없다.
연락처의 그룹 생성(1112g) - 이 기능은 사용자가 많은 연락처를 그룹으로 결합시킬 수 있도록 한다. 사용자가 그룹을 정의하는 경우, 그 그룹 내 연락처의 리스트는 MCMS 데이터베이스(22)에 저장된다.
연락처 그룹 편집(1112h) - 이 기능은 사용자가 그룹을 편집하거나, 그룹의 멤버에 대한 연락처 정보를 업데이트할 수 있도록 한다.
연락처 그룹 삭제(1112i) - 이 기능은 사용자가 그룹을 삭제할 수 있도록 한다.
L. MCMS 동작( MCMS Operation )
L.1 MCMS -C
상술한 바와 같이, MCMS-C 동작은 MCMS와 유사하며, 사용자가 우선순위의 계 층화된 시스템 및 메시지의 타임-쉬프팅을 통해 연속적으로 다수의 대화를 관리하고 이에 참여할 수 있도록 하는 특징이 추가되며, 이는 시스템에 의해 자동으로 관리된다. MCMS-C 기능성의 구현은 세 가지 기본적인 프로세스를 포함한다. 도 12A에 도시된 바와 같이, 첫 번째 프로세스는 연속적인 렌더링을 위한 대화의 세트를 정의하는 단계를 포함한다. 리스트가 정의되면, 우선순위의 계층화된 세트 및 다른 팩터가 대화의 세트와 결합된 인덱스된 미디어 페이로드에 적용된다. 그리고 나서, 인덱스된 미디어 페이로드는 시퀀스 순서대로 순서화된다. 미디어를 시퀀스 순서대로 렌더링함으로써, 대화의 세트의 메시지는 연속적으로 렌더링된다.
도 12A를 참조하여, 연속적으로 렌더링할 대화의 리스트를 정의하는 단계를 설명하는 흐름도가 도시된다. 개시 단계(1202)에서, 사용자의 집합적인 대화의 리스트가 정의된다. 사용자 또는 기구성 데이터 중 어느 하나가 다음으로 사용되어 연속적인 렌더링(단계(1206))을 위한 집합적인 리스트 중 대화를 선택한다(단계(1204)). 예를 들어, 전술적인 통신 시스템에서, 일반적으로 기-구성 데이터는 연속적으로 렌더링될 대화를 부과하도록 사용된다. 비-전술적 애플리케이션에서, 사용자는 일반적으로 연속적인 렌더링을 위한 대화를 선택하기 위해 보다 높은 정도의 유연성이 주어진다.
도 12B를 참조하여, 연속적인 대화의 메시지를 렌더링하기 위한 계층적인 우선순위의 세트를 정의하는 단계를 설명하는 흐름도가 도시된다. 개시 단계(단계(1208))에서, 우선순위 룰의 세트가 정의되고 연속적으로 렌더링될 대화의 리스트에 적용된다(단계(1206)). 다양한 실시예에서, 우선순위 룰의 세트는 엄격하고, 계층적인 통신 프로토콜에서 매우 유연한 통신 프로토콜에 이를 수 있다. 예를 들어, 엄격한 계층화가 자주 요구되는 전술적인 통신 시스템에서, 우선순위 룰의 세트는 바람직하게 동시 발생하는 메시지가 렌더링되는 특정 순서를 부과할 것이다. 예를 들어, 전술적 시스템에서 최초 대처자에 대해, 소방대장으로부터의 메시지는 가장 높은 우선순위가 주어질 수 있다. 우선순위의 다음 레벨은 화재 빌딩 내부에 있는 소방관에게 주어질 수 있다. 다음 레벨에서, 우선순위는 빌딩 밖에 있는 소방관에게 주어질 수 있다. 엄격한 우선순위를 정의함으로써, 화재를 진압하는 행위를 감독하는 현재의 메시지, 또는 위험한 경로는 보다 덜 중요한 역할을 수행하는 메시지보다 앞서서 렌더링된다. 비-전술적인 통신에서, 사용자는 개인적인 요구를 만족시키기 위해 그들 자신의 우선순위 구성을 정의하도록 큰 유연성이 주어질 수 있다. 예를 들어, 판매 중역은 클라이언트와의 연속적인 대화를 열거한 우선순위 구성을 가장 중요한 것부터 가장 중요하지 않은 것까지 정의할 수 있다. 또는 사용자는 가족 및 친구로부터의 연속적인 메시지를 우선순위화 할 수 있다. 사용된 구성에 관계없이, 연속적인 대화에 대한 우선순위 리스트가 이러한 프로세스로 정의된다(단계(1210)).
도 12C를 참조하여, 다양한 연속적인 대화로부터 수신된 메시지의 큐 구성을 설명하는 흐름도가 도시된다. 개시 단계에서, 메시지의 렌더링되지 않은 인덱스된 미디어 페이로드의 가용성이 연속적으로 렌더링될 각각의 대화에 대해 연속적으로 검출된다. 우선순위 계층화가 사용가능한 인덱스된 미디어 페이로드 스트림에 적용된다(단계(1214)). 우선순위 계층화의 적어도 일부를 기반으로, 그리고 이하 언급 되는 바와 같은 다른 가능한 파라미터를 기반으로, 사용가능한 인덱스된 미디어 페이로드가 시퀀스 순서로 배열된다(단계(1216)). 그리고 나서, 인덱스된 미디어 페이로드는 시퀀스 오더로 연속적으로 렌더링된다(단계(1218)). 상술한 프로세스를 연속적으로 반복함으로써, 다수의 대화의 메시지가 연속적으로 렌더링된다.
일 실시예에서, 시퀀스 순서는 우선순위 계층화의 일부 또는 전부를 기반으로 한다. 대체적인 실시예에서, 계층 및 가용성에 더하여 다른 파라미터가 더 고려될 수 있다. 예를 들어, 시퀀스 순서는 하나 또는 그 이상의 파라미터, 예컨대 인덱스된 미디어 페이로드의 현재 렌더링된 스트림을 중단하고 보다 높은 우선순위 대화의 인덱스된 미디어 페이로드로 전환하는 전환 비용, 인덱스된 미디어 페이로드의 사용가능한 스트림의 품질, 인덱스된 미디어 페이로드가 수신된 상대적인 시간, 셔플링(shuffling) 순서, 또는 시스템의 컨트롤러의 입력을 사용하여 정의될 수 있다.
일반적으로 다른 대화의 메시지들 간의 충돌이 발생한 경우, 시퀀스 순서에서 가장 빠른 순서의 인덱스된 미디어 페이로드가 렌더링되는 반면 다른 사용가능한 인덱스된 미디어 페이로드의 렌더링은 정지되거나 지연된다. 충돌이 없는 경우, 인덱스된 미디어 페이로드는 그들이 사용가능해짐에 따라 즉시 렌더링된다.
다른 실시예에서, 연속적으로 렌더링되는 대화의 메시지는 타임-쉬프트 모드에서 선택적으로 검토될 수 있다. 첫 번째 통신 장치의 사용자가 연속적으로 렌더링된 대화와 결합된 임의의 미디어를 생성하면, 그 미디어는 인덱스되고 네트워크 상의 서버(16)의 PIMB(들)(85) 뿐만 아니라 장치의 PIMB(30)에도 저장된다. 따라 서, 대화가 타임 쉬프트 모드에서 검토되면, 사용자는 단지 대화와 결합된 유입되는 메시지를 검토하는 옵션을 가지거나, 또는 타임 인덱스 순서대로 대화와 결합된 첫 번째 사용자에 의해 생성된 미디어 뿐만 아니라 유입되는 메시지 둘 모두를 검토하는 옵션을 가진다.
L.2 MCMS -S 동작( MCMS -S Operation )
MCMS-S 또는 동시적인 모드에서, 클라이언트(12)가 이네이블된 장치(13)의 사용자는 동시적인 렌더링을 위한 대화의 세트를 정의할 수 있다. 대화의 세트가 정의되면, 대화의 세트와 연관된 인덱스된 미디어 페이로드 스트림은 동시적으로 장치(13)에 렌더링되며, 이는 이들이 중첩되는지 여부에 관계없이 진행된다. 대체적인 실시예에서, 사용자는 선택적으로 미디어 스트림의 세트로부터 수신된 인덱스된 미디어 페이로드를 개별적으로 렌더링할 수 있다. 동시적인 대화의 인덱스된 미디어 페이로드는 또한 거의 실시간으로 또는 타임-쉬프트 모드로 선택적으로 렌더링될 수도 있다.
L.3 MCMS , MCMS -C 및 MCMS -S의 예
도 13A 내지 도 13D에서, 대화의 속성 및 MCMS, MCMS-C 및 MCMS-S의 동작을 설명하는 일련의 도면이 도시된다.
도 13A에서, 사용자 "X" 및 "Y"와 "Z"로 지시된 두 명의 다른 사용자 간에 "A"로 라벨된 대화의 메시지의 인덱스된 미디어 페이로드의 렌더링 순서를 설명하는 시간 흐름도가 도시된다. 이 예에서, 미디어는 t1, t5, t6, t7 및 t9에 의해 지시된 타임 인터벌 동안 사용자 Y에 의해 생성된다. 미디어는 t3, t6 및 t9 내지 t10으로 지시된 타임 인터벌 동안 사용자 Z에 의해 생성된다.
사용자 X의 장치(13)에서 렌더링 시퀀스는 도면의 하단에 도시된다. 인터벌 t1, t5 및 t7 동안, 오직 Y로부터 도출된 미디어가 렌더링된다. 인터벌 t3 및 t10동안, 오직 Z로부터 도출된 미디어만이 렌더링된다. 인터벌 t6 및 t9에서, Y 및 Z 둘 모두로부터의 미디어가 렌더링된다. 인터벌 t2, t4 및 t8에서는, 사용자 Y 또는 Z 어느도 이 기간동안 미디어를 생성하지 않기 때문에 아무 것도 렌더링되지 않는다. 인터벌 t1 내지 t10은 고정된 타임 인터벌을 의미하지 않으며, 단지 미디어가 생성되고 있는 시간 간격을 의미하도록 의도된다.
도 13A의 도면은 대화의 속성을 설명하는데 유용하다. 한 사용자(Y 또는 Z 중 어느 하나)가 미디어를 생성하는 경우, 그 미디어는 X의 장치(13)에서 수신되고 렌더링을 위해 사용가능해진다. 사용자 X 및 Y 둘 모두가 미디어를 생성하는 경우, 둘 모두의 미디어 스트림은 X의 장치(13)에서 수신되고 믹싱을 위해 사용가능해진다. 사용자 X 또는 Y 어느 누구도 미디어를 생성하지 않는 경우, 어떠한 미디어도 X의 장치(13)에 수신되지 않는다. 상술한 바와 같이, 사용자 X는 대화 A 도중 생성된 미디어를 거의 실시간으로 또는 타임-쉬프트 모드 중 어느 하나로 검토하는 옵션을 가진다. 또한, 사용자 X는 도시된 바와 같이 믹스된 형태로 미디어를 검토하는 옵션을 가지거나, 또는 타임-쉬프트 모드에서 Y 및 Z로부터의 미디어를 개별적으로 검토하는 옵션을 가진다.
도 13B는 MCMS의 동작을 설명한다. 이 예에서, 사용자는 세 개의 대화에 참여하고 있으며, 이는 A, B 및 C로 지정된다. 대화 A, B, 및 C에 대해, 사용자는 각 각 (A1, A2, A3 및 A4), (B1, B2 및 B3) 및 (C1 및 C2)로 지시된 메시지를 생성하거나 수신한다. 각각의 메시지의 타이밍 및 지속시간은 타임-라인을 따라 시작 지점에 의해 지시된다. 이 예에서, 메시지 B2를 제외한 모든 메시지가 일정한 정도로 시간에서 중첩되는 것을 주목하는 것은 유용하다.
MCMS 애플리케이션에서, 사용자는 현재로서 한 대화를 선택한다. 선택된 대화에서, 사용자는 유입되는 메시지를 검토하고 대화의 다른 참여자로 전송되는 메시지를 생성할 수 있다. 이러한 예에서, 사용자는 현재로서 각각 대화 B, C 및 A의 순서로 선택한다. 따라서, 메시지 시퀀스는 처음으로 B1, B2 및 B3이며, C1 및 C2가 뒤따르고, 그리고 나서 마지막으로 A1부터 A4가 뒤따른다. 또 다시, 특정 대화가 현재로서 선택되며, 사용자는 거의 실시간 모드에서 타임-쉬프트 모드 간에 전환할 수 있고 그 역으로 전환할 수 있다. 도면에 도시된 바와 같이 마지막 렌더링은 도면의 상부에 도시된 바와 같은 수신된 메시지의 타이밍에 일치하도록 의도되지 않는다. 도면의 하부는 메시지의 렌더링 순서만을 도시하도록 의도되며, 이는 사용자에 의해 선택된 대화 순서를 기반으로 한다.
따라서, 도 13B의 예는 MCMS 애플리케이션의 속성을 설명하기에 유용하다. 사용자는 현재로서 하나의 대화를 선택한다. 다른 대화는 일시정지된다. 사용자는 또한 임의의 시간에 현재의 대화를 모든 대화 중에서 전환할 수 있다.
도 13C를 참조하여, MCMS-C의 동작을 설명하는 도면이 설명된다. 이 실시예에서, 사용자는 두 개의 연속적인 대화, A 및 B에 참여하고 있다. 대화 A에서, 세 개의 메시지 A1, A2 및 A3가 수신된다. 대화 B에서, 세 개의 메시지 B1, B2 및 B3 가 수신된다. 이 예에서, 메시지 B1은 메시지 A1과 충돌하는 것을 주목하는 것이 유용하다. 또한 대화 A는 대화 B보다 더 높은 우선순위를 가진다.
두 대화의 연속적인 렌더링 도중, 보다 높은 우선순위의 메시지 A1 및 A2는 우선 거의 실시간으로 렌더링되며, 이는 도면의 수직적인 점선에 의해 나타나는 바와 같다. 메시지 A2와 A3 간에 상대적으로 큰 시간 간격이 있으므로, 이 공간은 타임 쉬프팅 및 메시지 B1 및 B2의 렌더링에 의해 채워진다. A3가 도달하면, 이는 거의 실시간으로 렌더링되는 반면, 메시지 B3는 오직 보다 높은 우선순위 메시지 A3가 렌더링된 후에 렌더링된다. 높은 우선순위 메시지들 사이에 낮은 우선순위 메시지의 타임-쉬프팅 렌더링을 수행함으로써, 연속적인 다수의 대화가 관리될 수 있다. 이러한 단순한 예에서, 우선순위는 렌더링에 대한 연속적인 순서를 결정하기 위해 사용되는 유일한 파라미터이다. 상술한 바와 같이, 많은 다른 파라미터가 사용될 수도 있다.
도 13D를 참조하여, MCMS-S를 설명하는 도면이 도시된다. 이 예에서, 사용자는 세 개의 동시적인 대화, A, B 및 C에 참여된다. 메시지 A1, A2 및 A3, B1, B2 및 B3, 및 C1 및 C2는 각각의 대화 A, B 및 C에 대해 각각 수신되는 것이 도시된다. MCMS-S에서, 유입되는 메시지는 그들이 수신됨에 따라 착신자 장치(13)에서 렌더링된다. 따라서, 도면의 하부에 도시된 바와 같이, 세 개의 대화 A, B 및 C의 메시지의 렌더링 시퀀스는 메시지가 수신된 바와 동일하다. 이러한 방식으로, 다수의 대화는 동시적으로 렌더링될 수 있다.
전술한 예에서, MCMS 애플리케이션의 다수의 변화가 기술되며, 이는 MCMS-C 및 MCMS-S를 포함한다. 사용되는 특정 타입의 MCMS 애플리케이션에 관계없이, 이들 모두는 다수의 공통된 특징을 공유한다. 각각의 경우에서, 대화는 메시지의 스레딩된 시퀀스 또는 조합에 의해 정의된다. 메시지는 미디어의 스트림으로 분할되며, 각각의 메시지는 시퀀스 식별자가 주어지고 미디어가 생성된 시간에 의해 인덱스된다. MCMS 애플리케이션의 변화에 종속하여, 메시지는 하나 또는 그 이상의 렌더링 옵션에 따라 렌더링될 수 있다. 어느 한 형태 또는 다른 형태에서, 렌더링 옵션은 메시지의 필터링, 그룹화, 중첩화 및/또는 일련화(serialization)를 포함하며, 이는 영부터 다수의 상이한 속성에 이르는 것을 사용한다. 이러한 방식으로, 각각이 메시지의 스트링을 포함하는 다수의 대화는 단일의 클라이언트(12)가 이네이블된 장치(13)에서 수행될 수 있다. 마지막으로, MCMS의 각각의 변화는 동일한 방식으로 중단된 메시지의 수신을 조절할 수 있다. 중단된 메시지가 수신되면, 이는 일반적으로 다른 대화에 속하는 다른 메시지에 우선하고 그 전에 렌더링된다.
M. 클라이언트 및 서버 하드웨어( Client and Server Hardware )
도 14A를 참조하여, 클라이언트 애플리케이션(12)를 저장하고 실행하기 위해 사용되는 장치(13)의 하드웨어를 설명하는 블록도(140)가 도시된다. 하드웨어는 CPU(142), 메인 메모리(144) 및 매스 스토리지(146)를 포함한다. 잘 알려진 바와 같이, 클라이언트 애플리케이션(12)은 메인 메모리(144) 및 매스 스토리지(146)에 독출되고 저장되며, CPU(142)에 의해 실행된다.
도 14B를 참조하여, 서버 애플리케이션(78)을 저장하고 실행하기 위해 사용되는 서버(16)의 하드웨어를 설명하는 블록도(150)이 도시된다. 하드웨어는 CPU(152), 메인 메모리(154), 매스 스토리지(156), 및 아카이브(archive)(89)를 포함한다. 잘 알려진 바와 같이, 서버 애플리케이션(78)은 메인 메모리(154) 및 매스 스토리지(156)에 독출되고 저장되며, CPU(152)에 의해 실행된다. 상술한 바와 같이, 하나 또는 그 이상의 사용자의 인덱스된 미디어 페이로드는 아카이브(89)에 저장된다.
비록 많은 컴포넌트 및 프로세스들이 편의를 위해 단독으로 전술되었지만, 당업자는 의해 다수의 컴포넌트 및 반복된 프로세스들이 또한 여기에 기술된 시스템 및 방법의 기술을 구현하도록 사용될 수도 있음을 파악할 것이다. 또한, 본 발명이 그 특정 실시예를 참조로 특별히 도시되고 기술되지만, 당업자는 개시된 실시예의 형태 및 세부사항의 변화가 본 발명의 사상 또는 범위로부터 분리되지 않으면서 가해질 수 있음을 파악할 것이다. 예를 들어, 본 발명의 실시예들은 다양한 컴포넌트와 함께 적용될 수 있으며 전술된 바에 제한되지 않아야 한다. 따라서, 본 발명은 본 발명의 진실한 사상 및 범위 내에 들어오는 모든 변화 및 균등물을 포함하도록 해석되도록 의도된다.

Claims (51)

  1. 대화를 구성하고 수행하는 통신 방법에 있어서,
    제 1 통신 장치에서 네트워크를 통해 하나 또는 그 이상의 참여자와의 대화의 미디어를 수신하는 단계;
    상기 미디어가 상기 네트워크를 통해 수신됨에 따라, 상기 수신된 미디어를 상기 제 1 통신 장치에 저장하는 단계;
    상기 수신된 대화의 미디어를 근 실시간 모드(near real-time mode) 또는 타임-쉬프트 모드(time-shifted mode) 중 어느 하나로 상기 제 1 통신 장치에 렌더링(rendering)하는 단계;
    상기 대화와 관련되는 미디어를 상기 제 1 통신 장치에 생성하는 단계;
    상기 생성된 미디어를 상기 제 1 통신 장치에 저장하는 단계;
    상기 네트워크를 통해 상기 제 1 통신 장치에 생성된 미디어를 상기 대화의 하나 또는 그 이상의 참여자로 전송하는 단계;
    상기 생성된 미디어 및 수신된 미디어를 결합하는 단계; 및
    상기 결합된 생성된 미디어와 수신된 미디어로부터 상기 대화를 구성하는 단계;를 포함하는 통신 방법.
  2. 제 1항에 있어서,
    상기 수신된 대화의 미디어를 상기 근 실시간 모드로 상기 제 1 통신 장치에 렌더링하는 단계는, 상기 수신된 미디어가 상기 네트워크를 통해 수신됨에 따라 상기 수신된 미디어를 점진적으로 렌더링하는 단계를 더 포함하는 통신 방법.
  3. 제 1항에 있어서,
    상기 수신된 대화의 미디어를 상기 타임-쉬프트 모드로 상기 제 1 통신 장치에 렌더링하는 단계는, 상기 수신된 미디어를 스토리지 또는 메모리로부터 검색하고 점진적으로 렌더링하는 단계를 더 포함하는 통신 방법.
  4. 제 1항에 있어서,
    상기 수신된 미디어의 렌더링을 상기 근 실시간 모드 및 상기 타임-쉬프트 모드 간에 오가며 전환하는 기능을 상기 제 1 통신 장치에 제공하는 단계를 더 포함하는 통신 방법.
  5. 제 1항에 있어서,
    상기 타임-쉬프트 모드로 동작하는 경우, 상기 수신된 대화의 미디어의 렌더링에 대한 임의의 딜레이를 상기 제 1 통신 장치에서 선택하는 기능을 제공하는 단계를 더 포함하고, 상기 임의의 딜레이는 상기 제 1 통신 장치의 사용자에 의해 정의되는 지속기간을 가지는 통신 방법.
  6. 제 1 통신 장치에서 통신하는 통신 방법에 있어서,
    상기 제 1 통신 장치에서 네트워크를 통해 하나 또는 그 이상의 참여자와의 대화의 미디어를 수신하는 단계;
    상기 수신된 미디어를 상기 미디어가 상기 네트워크를 통해 수신됨에 따라 상기 제 1 통신 장치에 저장하는 단계;
    상기 수신된 대화의 미디어를 근 실시간 모드 또는 타임-쉬프트 모드 중 어느 하나로 상기 제 1 통신 장치에 렌더링하는 단계; 및
    상기 제 1 통신 장치에서의 상기 대화의 미디어의 렌더링을
    상기 저장된 미디어를 검색하는 단계;
    상기 검색된 미디어를 증가된 렌더링 레이트로 스토리지로부터 렌더링하는 단계;
    상기 증가된 레이트에서의 상기 검색된 미디어의 렌더링이 상기 네트워크를 통해 수신되고 있는 상기 대화의 미디어를 따라잡고 실질적으로 동시 발생하는 경우, 캐치업 지점을 확인하는 단계; 및
    상기 캐치업 지점 후부터, 상기 대화의 미디어가 상기 네트워크를 통해 수신됨에 따라 상기 대화의 미디어를 상기 근 실시간 모드로 렌더링하는 단계;
    에 의해, 상기 타임-쉬프트 모드에서 상기 근 실시간 모드로 전환하는 단계;를 포함하는 통신 방법.
  7. 제 6항에 있어서,
    상기 저장된 미디어를 검색하는 단계는, 상기 저장된 미디어를 상기 대화 중 시간상 선택된 이전 지점부터 검색하는 단계를 더 포함하는 통신 방법.
  8. 제 7항에 있어서,
    상기 스토리지로부터 검색된 미디어를 렌더링하는 단계는, 상기 저장된 미디어를 상기 대화 중 시간상 선택된 이전 지점부터 렌더링하는 단계를 더 포함하는 통신 방법.
  9. 제 6항에 있어서,
    상기 스토리지로부터 검색된 미디어를 상기 증가된 렌더링 레이트로 렌더링하는 단계는, 상기 검색된 미디어를 상기 미디어가 원래 인코딩되었던 것보다 더 빠른 렌더링 레이트로 렌더링하는 단계를 더 포함하는 통신 방법.
  10. 제 6항에 있어서,
    상기 수신된 대화의 미디어를 상기 타임-쉬프트 모드로 렌더링하는 단계는,
    딜레이 후, 상기 검색된 미디어를 스토리지 또는 메모리로부터 검색하는 단계; 및
    상기 딜레이 후, 상기 스토리지 또는 메모리로부터 검색된 미디어를 렌더링하는 단계;를 더 포함하는 통신 방법.
  11. 제 6항에 있어서,
    상기 제 1 통신 장치에서의 렌더링은 상기 근 실시간 모드 및 상기 타임-쉬프트 모드 간에 선택적으로 전환될 수 있는 통신 방법.
  12. 제 6항에 있어서,
    미디어를 상기 제 1 통신 장치에 생성하고, 상기 생성된 미디어는 상기 대화와 관련되는 미디어 생성 단계;
    상기 생성된 미디어를 저장하는 단계; 및
    상기 생성된 미디어를 상기 네트워크를 통해 상기 대화의 상기 하나 또는 그 이상의 참여자에게 전송하는 단계;를 더 포함하는 통신 방법.
  13. 제 1 통신 장치에서 통신하는 통신 방법에 있어서,
    상기 제 1 통신 장치에 미디어를 생성하는 단계;
    상기 제 1 통신 장치에 생성된 미디어를 네트워크를 통해 전송하는 단계;
    상기 제 1 통신 장치에서 상기 네트워크를 통해 상기 전송된 미디어와 결합되는 미디어를 수신하고, 상기 결합된 전송된 미디어 및 수신된 미디어는 상기 제 1 통신 장치 및 상기 네트워크를 통해 상기 수신된 미디어를 송신한 하나 또는 그 이상의 참여자 간의 대화를 구성하는 미디어 수신 단계;
    상기 대화와 관련된 상기 전송된 미디어 및 수신된 미디어를 상기 제 1 통신 장치에 저장하는 단계;
    상기 수신된 대화의 미디어를 근 실시간 모드 또는 타임-쉬프트 모드 중 어 느 하나로 렌더링하도록 상기 제 1 통신 장치에 렌더링 옵션을 제공하며, 상기 제 1 통신 장치는,
    (a) 상기 근 실시간 모드에서, 상기 네트워크를 통해 상기 미디어가 수신됨에 따라 상기 수신된 대화의 미디어를 렌더링하거나
    (b) 상기 타임-쉬프트 모드에서, 상기 네트워크를 통해 상기 미디어가 수신됨에 따라 상기 대화의 미디어를 렌더링하지 않으며,
    상기 타임-쉬프트 모드를 선택함으로써 상기 근 실시간 모드에서의 상기 대화의 미디어의 렌더링을 일시정지하는 단계; 및
    상기 대화의 일시정지 후, 상기 대화의 미디어의 렌더링을 재개하는 단계;를 포함하는 통신 방법.
  14. 제 13항에 있어서,
    상기 대화의 미디어의 렌더링을 재개하는 단계는,
    상기 대화가 일시정지된 동안 상기 수신되고 저장된 대화의 미디어를 우선 리뷰하는 단계; 및
    상기 대화의 일시정지 도중 수신된 상기 미디어가 리뷰된 후, 상기 근 실시간 모드에서의 상기 대화의 미디어의 렌더링을 재개하는 단계;를 더 포함하는 통신 방법.
  15. 제 13항에 있어서,
    상기 대화의 미디어의 렌더링을 재개하는 단계는, 상기 대화가 일시정지된 동안 상기 수신되고 저장된 대화의 미디어를 우선 리뷰하지 않고 상기 대화를 일시정지한 후, 상기 근 실시간 모드에서의 상기 대화의 미디어의 렌더링을 즉시 재개하는 단계를 더 포함하는 통신 방법.
  16. 제 13항에 있어서,
    상기 타임-쉬프트 모드에서 상기 대화의 미디어를 리뷰하는 단계를 더 포함하고, 상기 대화의 미디어를 리뷰하는 단계는,
    상기 대화 중 시간상 이전 지점을 선택하는 단계;
    상기 선택된 이전 지점으로부터의 상기 대화의 미디어를 스토리지로부터 검색하는 단계; 및
    상기 검색된 미디어를 상기 제 1 통신 장치에 렌더링하는 단계;에 의해 수행되는 통신 방법.
  17. 제 15항에 있어서,
    스토리지로부터 검색된 미디어가 렌더링되었고 상기 네트워크를 통해 상기 제 1 통신 장치에서 수신되거나 전송되고 있는 상기 대화의 미디어와 동시 발생하는 경우, 상기 타임-쉬프트 모드에서 상기 근 실시간 모드로 전환하는 단계를 더 포함하는 통신 방법.
  18. 제 1 통신 장치에서 통신하는 통신 방법에 있어서,
    상기 제 1 통신 장치에 미디어를 생성하는 단계;
    상기 제 1 통신 장치에 생성된 미디어를 네트워크를 통해 전송하는 단계;
    상기 제 1 통신 장치에서 상기 네트워크를 통해 상기 전송된 미디어와 결합되는 미디어를 수신하고, 상기 결합된 전송된 미디어 및 수신된 미디어는 상기 제 1 통신 장치 및 상기 네트워크를 통해 상기 수신된 미디어를 송신한 하나 또는 그 이상의 참여자 간의 대화를 구성하는 미디어 수신 단계;
    상기 대화와 관련된 상기 전송된 미디어 및 수신된 미디어를 상기 제 1 통신 장치에 저장하는 단계;
    상기 수신된 대화의 미디어를 근 실시간 모드 또는 타임-쉬프트 모드 중 어느 하나로 렌더링하도록 상기 제 1 통신 장치에 렌더링 옵션을 제공하며, 상기 제 1 통신 장치는,
    (a) 상기 근 실시간 모드에서, 상기 미디어가 상기 네트워크를 통해 수신됨에 따라 상기 수신된 대화의 미디어를 렌더링하거나
    (b) 상기 타임-쉬프트 모드에서, 상기 미디어가 상기 네트워크를 통해 수신됨에 따라 상기 대화의 미디어를 렌더링하지 않으며,
    상기 대화의 미디어의 렌더링이 상기 근 실시간 모드와 상기 타임-쉬프트 모드 간에 오가며 전환되도록 하는 단계;를 포함하는 통신 방법.
  19. 제 18항에 있어서,
    스토리지로부터 검색된 미디어가 렌더링되었고 상기 네트워크를 통해 상기 제 1 통신 장치에서 수신되거나 전송되고 있는 상기 대화의 미디어와 동시 발생하는 경우, 상기 타임-쉬프트 모드에서 상기 근 실시간 모드로 전환하는 단계를 더 포함하는 통신 방법.
  20. 제 18항에 있어서,
    상기 타임-쉬프트 모드에서 임의의 수신되고 저장된 미디어를 우선 리뷰하지 않고 상기 수신된 미디어를 상기 네트워크를 통해 수신됨에 따라 즉시 리뷰함으로써 상기 타임-쉬프트 모드에서 상기 근 실시간 모드로 전환하는 단계를 더 포함하는 통신 방법.
  21. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 대화는 상기 참여자 간의 상기 수신된 미디어 및 전송된 미디어의 교환을 더 포함하는 통신 방법.
  22. 제 21항에 있어서,
    상기 대화는 하나 또는 그 이상의 문맥적 속성(contextual attributes)에 의해 특성화되는 통신 방법.
  23. 제 22항에 있어서,
    상기 대화를 특성화하는 상기 하나 또는 그 이상의 문맥적 속성은 대화 주제, 대화 이름, 상기 대화의 하나 또는 그 이상의 참여자의 이름, 또는 지정된 시간 중 하나 또는 그 이상을 포함하는 통신 방법.
  24. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    미디어 수신 단계는, 메시지들로 분할되는 미디어를 수신하는 단계를 더 포함하는 통신 방법.
  25. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 생성된 미디어를 메시지들로 분할하는 단계를 더 포함하는 통신 방법.
  26. 제 24항 또는 제 25항에 있어서,
    상기 메시지들을 상기 대화로 결합하는 단계를 더 포함하는 통신 방법.
  27. 제 1항, 제 12항, 제 13항 및 제 18항에 있어서,
    상기 타임-쉬프트 모드에서 상기 수신된 대화의 미디어를 리뷰하는 단계는,
    상기 대화의 한 참여자를 선택하는 단계;
    상기 선택된 참여자와 관련된 미디어를 스토리지 또는 메모리로부터 검색하는 단계; 및
    상기 선택된 참여자와 관련된 상기 미디어를 개별적으로 렌더링하는 단계;를 더 포함하는 통신 방법.
  28. 제 1항, 제 12항, 제 13항 및 제 18항에 있어서,
    상기 타임-쉬프트 모드에서 상기 수신된 대화의 미디어를 리뷰하는 단계는,
    상기 대화의 둘 또는 그 이상의 참여자를 선택하는 단계;
    상기 선택된 둘 또는 그 이상의 참여자와 관련된 미디어를 스토리지 또는 메모리로부터 검색하는 단계; 및
    상기 선택된 둘 또는 그 이상의 참여자와 관련된 미디어의 렌더링을 믹싱하는 단계;를 더 포함하는 통신 방법.
  29. 제 1항, 제 12항, 제 13항 및 제 18항에 있어서,
    상기 생성되고 수신된 대화의 미디어는 인덱스된 미디어 페이로드를 포함하며, 각각의 인덱스된 미디어 페이로드는 해당 인덱스된 미디어 페이로드와 관련된 시간 및 시퀀스 정보를 구비하는 통신 방법.
  30. 제 29항에 있어서,
    상기 생성되고 수신된 인덱스된 미디어 페이로드는 시간 및 시퀀스 순서로 저장되고 스토리지 또는 메모리로부터 검색가능한 통신 방법.
  31. 제 29항에 있어서,
    상기 시간 인덱스된 미디어 페이로드는 스트리밍되는 통신 방법.
  32. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 미디어의 렌더링에 대한 다수의 렌더링 옵션을 제공하는 단계를 더 포함하고, 상기 렌더링 옵션은 일시정지, 재생, 빠른 재생, 느린 재생, 뒤로 점프, 앞으로 점프, 가장 최근에 수신된 미디어 따라잡기, 또는 가장 최근에 수신된 미디어로 점프 중 하나 또는 그 이상을 포함하는 통신 방법.
  33. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 검색된 미디어를 스토리지 또는 메모리로부터 증가된 렌더링 레이트로 선택적으로 렌더링하는 단계를 더 포함하고, 상기 증가된 렌더링 레이트는 상기 미디어가 원래 인코딩되었던 레이트와 관련되는 통신 방법.
  34. 제 1항, 제 12항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 미디어를 전송하기 전에 상기 미디어가 생성됨에 따라 상기 미디어를 점진적으로 저장하는 단계를 더 포함하는 통신 방법.
  35. 제 1항, 제 12항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 미디어가 저장되기 전에 상기 미디어가 생성됨에 따라 상기 미디어를 점진적으로 전송하는 단계를 더 포함하는 통신 방법.
  36. 제 1항, 제 12항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 미디어가 생성됨에 따라 상기 미디어를 동시적 그리고 점진적으로 전송하고 저장하는 단계를 더 포함하는 통신 방법.
  37. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 수신된 미디어를 상기 근 실시간 모드로 렌더링하기 전에 상기 미디어가 수신됨에 따라 상기 수신된 미디어를 점진적으로 저장하는 단계를 더 포함하는 통신 방법.
  38. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 수신된 미디어가 저장되기 전에 상기 미디어가 수신됨에 따라 상기 수신된 미디어를 점진적으로 렌더링하는 단계를 더 포함하는 통신 방법.
  39. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 미디어가 수신됨에 따라 상기 수신된 미디어를 동시적 그리고 점진적으로 렌더링하고 저장하는 단계를 더 포함하는 통신 방법.
  40. 제 1항, 제 12항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 네트워크를 통해 상기 제 1 통신 장치에 생성된 미디어를 전송하는 단 계는,
    상기 미디어가 생성된 때 상기 제 1 통신 장치가 상기 네트워크에 연결되었는지 여부를 확인하는 단계; 및
    상기 제 1 통신 장치가 상기 네트워크에 연결된 경우, 상기 미디어를 점진적으로 전송하는 단계;를 더 포함하고,
    상기 네트워크에 연결되는 것은 상기 제 1 통신 장치와 상기 네트워크 간에 데이터를 전송하는 능력에 따라 정의되는 통신 방법.
  41. 제 40항에 있어서,
    상기 미디어가 생성되고 있을 때, 상기 네트워크와 상기 제 1 통신 장치 간의 연결의 대역폭 레이트를 확인하는 단계; 및
    상기 생성된 미디어를 상기 확인된 대역폭 레이트로 점진적으로 전송하는 단계;를 더 포함하는 통신 방법.
  42. 제 1항, 제 12항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 네트워크를 통해 상기 제 1 통신 장치에 생성된 미디어를 전송하는 단계는,
    상기 미디어가 생성된 때 상기 제 1 통신 장치가 상기 네트워크로부터 분리되었음을 확인하는 단계;
    상기 제 1 통신 장치가 상기 네트워크에 재연결됨을 검출하는 단계; 및
    상기 제 1 통신 장치가 상기 네트워크에 재연결된 후, 상기 생성된 미디어를 스토리지 또는 메모리로부터 전송하는 단계;를 더 포함하고,
    상기 네트워크에 연결되고 분리되는 것은 각각 상기 제 1 통신 장치와 상기 네트워크 간에 데이터를 전송하거나 전송하지 않는 능력에 따라 정의되는 통신 방법.
  43. 제 1항, 제 12항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 네트워크를 통해 상기 제 1 통신 장치에 생성된 미디어를 전송하는 단계는,
    상기 미디어가 생성된 때 네트워크 상태가 전송을 방해하도록 충분히 열악함을 확인하는 단계;
    네트워크 상태가 충분히 향상되어 상기 전송이 가능함을 검출하는 단계; 및
    상기 네트워크 상태가 충분히 향상됨을 검출한 후, 상기 생성된 미디어를 스토리지 또는 메모리로부터 전송하는 단계;를 더 포함하는 통신 방법.
  44. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 미디어는 음성, 영상, 텍스트, 센서 데이터, 라디오 신호 위치 또는 GPS 정보, 또는 그 조합 중 하나 또는 그 이상을 포함하는 통신 방법.
  45. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 제 1 통신 장치는 랜드-라인 전화기, 무선 또는 휴대 전화기, 컴퓨터, 라디오, 위성 전화기, 위성 라디오, 또는 전술 라디오 또는 전화기 중 하나인 통신 방법.
  46. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 네트워크는 패킷-기반 네트워크, 회선-기반 네트워크, 이동통신 네트워크, 무선 네트워크, 유선 네트워크, 라디오 네트워크, 위성 네트워크, 또는 그 조합을 포함하는 통신 방법.
  47. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 근 실시간 모드에서 렌더링하는 경우, 상기 대화의 하나 또는 그 이상의 참여자로부터의 미디어를 믹싱하는 단계를 더 포함하는 통신 방법.
  48. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 시간-지연 모드에서 렌더링하는 경우, 상기 대화의 하나 또는 그 이상의 참여자로부터의 미디어를 믹싱하는 단계를 더 포함하는 통신 방법.
  49. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 대화의 하나 또는 그 이상의 참여자로부터의 상기 수신된 미디어를 분할하여, 상기 대화의 각각의 참여자로부터의 상기 수신된 미디어가 독립적으로 상 기 제 1 통신 장치에 렌더링되는 단계를 더 포함하는 통신 방법.
  50. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 수신된 대화의 미디어를 상기 타임-쉬프트 모드로 렌더링하는 단계를 더 포함하고, 상기 수신된 대화의 미디어를 상기 타임-쉬프트 모드로 렌더링하는 단계는,
    딜레이 후, 상기 검색된 미디어를 스토리지 또는 메모리로부터 검색하는 단계; 및
    상기 딜레이 후, 상기 스토리지 또는 메모리로부터 검색된 미디어를 렌더링하며, 상기 딜레이는 상기 제 1 통신 장치의 사용자에 의해 정의된 지속기간을 가지는 렌더링 단계;에 의해 수행되는 통신 방법.
  51. 제 1항, 제 6항, 제 13항 또는 제 18항 중 어느 한 항에 있어서,
    상기 수신된 대화의 미디어를 상기 제 1 통신 장치에 렌더링하는 단계는,
    상기 제 1 통신 장치에서 상기 대화와 관련된 다수의 참여자로부터 다수의 미디어 스트림을 수신하고, 상기 다수의 미디어 스트림 각각은 타임 인덱스된 미디어 페이로드를 포함하는 미디어 스트림 수신 단계; 및
    상기 인덱스된 미디어 페이로드를 참여자마다 시간상 오버랩함으로써 상기 다수의 미디어 스트림을 렌더링하는 단계;를 더 포함하는 통신 방법.
KR1020097026979A 2007-06-28 2008-04-30 통신 장치를 작동시키는 컴퓨터 코드가 기록된 컴퓨터 판독가능한 매체 KR101398254B1 (ko)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US93755207P 2007-06-28 2007-06-28
US60/937,552 2007-06-28
US99961907P 2007-10-19 2007-10-19
US60/999,619 2007-10-19
US12/028,400 US8180029B2 (en) 2007-06-28 2008-02-08 Telecommunication and multimedia management method and apparatus
US12/028,400 2008-02-08
US12/037,256 2008-02-26
US12/037,256 US8243894B2 (en) 2007-06-28 2008-02-26 Telecommunication and multimedia management method and apparatus
PCT/US2008/062049 WO2009005885A2 (en) 2007-06-28 2008-04-30 Multimedia communications method

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020137011235A Division KR101527662B1 (ko) 2007-06-28 2008-04-30 멀티미디어 통신 방법

Publications (2)

Publication Number Publication Date
KR20100028573A true KR20100028573A (ko) 2010-03-12
KR101398254B1 KR101398254B1 (ko) 2014-05-22

Family

ID=40160514

Family Applications (9)

Application Number Title Priority Date Filing Date
KR1020097020536A KR101397231B1 (ko) 2007-06-28 2008-04-29 컴퓨터 판독가능한 애플리케이션이 기록된 컴퓨터 판독가능한 매체
KR1020137011111A KR101545793B1 (ko) 2007-06-28 2008-04-29 멀티미디어 통신 방법
KR1020097026979A KR101398254B1 (ko) 2007-06-28 2008-04-30 통신 장치를 작동시키는 컴퓨터 코드가 기록된 컴퓨터 판독가능한 매체
KR1020137011235A KR101527662B1 (ko) 2007-06-28 2008-04-30 멀티미디어 통신 방법
KR1020107001868A KR101397255B1 (ko) 2007-06-28 2008-05-07 컴퓨터 판독가능한 애플리케이션이 기록된 컴퓨터 판독가능한 매체
KR1020107001875A KR20100046156A (ko) 2007-06-28 2008-05-08 멀티미디어 통신 방법
KR1020107001879A KR101397332B1 (ko) 2007-06-28 2008-05-27 통신 애플리케이션이 기록된 컴퓨터 판독가능한 매체
KR1020107001869A KR101552365B1 (ko) 2007-06-28 2008-05-27 멀티미디어 통신 방법
KR1020107001877A KR101336527B1 (ko) 2007-06-28 2008-06-24 멀티미디어 통신 장치

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020097020536A KR101397231B1 (ko) 2007-06-28 2008-04-29 컴퓨터 판독가능한 애플리케이션이 기록된 컴퓨터 판독가능한 매체
KR1020137011111A KR101545793B1 (ko) 2007-06-28 2008-04-29 멀티미디어 통신 방법

Family Applications After (6)

Application Number Title Priority Date Filing Date
KR1020137011235A KR101527662B1 (ko) 2007-06-28 2008-04-30 멀티미디어 통신 방법
KR1020107001868A KR101397255B1 (ko) 2007-06-28 2008-05-07 컴퓨터 판독가능한 애플리케이션이 기록된 컴퓨터 판독가능한 매체
KR1020107001875A KR20100046156A (ko) 2007-06-28 2008-05-08 멀티미디어 통신 방법
KR1020107001879A KR101397332B1 (ko) 2007-06-28 2008-05-27 통신 애플리케이션이 기록된 컴퓨터 판독가능한 매체
KR1020107001869A KR101552365B1 (ko) 2007-06-28 2008-05-27 멀티미디어 통신 방법
KR1020107001877A KR101336527B1 (ko) 2007-06-28 2008-06-24 멀티미디어 통신 장치

Country Status (10)

Country Link
US (42) US8180029B2 (ko)
EP (8) EP2080340B1 (ko)
JP (12) JP2010534955A (ko)
KR (9) KR101397231B1 (ko)
CN (10) CN108134735B (ko)
AT (5) ATE507653T1 (ko)
AU (7) AU2008270956B2 (ko)
CA (10) CA2682184C (ko)
DE (1) DE602008006511D1 (ko)
WO (7) WO2009005882A1 (ko)

Families Citing this family (207)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8489063B2 (en) 2001-10-24 2013-07-16 Sipco, Llc Systems and methods for providing emergency messages to a mobile device
US7480501B2 (en) * 2001-10-24 2009-01-20 Statsignal Ipc, Llc System and method for transmitting an emergency message over an integrated wireless network
US8117597B2 (en) * 2005-05-16 2012-02-14 Shia So-Ming Daniel Method and system for specifying and developing application systems with dynamic behavior
EP1978480A3 (en) * 2005-07-22 2011-09-07 Kangaroo Media, Inc. System and methods for enhancing the experience of spectators atttending a live sporting event
US10389762B2 (en) * 2006-12-19 2019-08-20 Bce Inc. Method, system and apparatus for causing a communication client to join a media-over-packet communication session
US9178916B2 (en) 2007-06-28 2015-11-03 Voxer Ip Llc Real-time messaging method and apparatus
US20110019662A1 (en) 2007-06-28 2011-01-27 Rebelvox Llc Method for downloading and using a communication application through a web browser
US20100198923A1 (en) 2009-01-30 2010-08-05 Rebelvox Llc Methods for using the addressing, protocols and the infrastructure of email to support near real-time communication
US8688789B2 (en) 2009-01-30 2014-04-01 Voxer Ip Llc Progressive messaging apparatus and method capable of supporting near real-time communication
US11095583B2 (en) 2007-06-28 2021-08-17 Voxer Ip Llc Real-time messaging method and apparatus
US8180029B2 (en) 2007-06-28 2012-05-15 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8645477B2 (en) * 2009-01-30 2014-02-04 Voxer Ip Llc Progressive messaging apparatus and method capable of supporting near real-time communication
US8825772B2 (en) 2007-06-28 2014-09-02 Voxer Ip Llc System and method for operating a server for real-time communication of time-based media
US7751361B2 (en) * 2007-10-19 2010-07-06 Rebelvox Llc Graceful degradation for voice communication services over wired and wireless networks
US8001261B2 (en) * 2007-10-19 2011-08-16 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8706907B2 (en) * 2007-10-19 2014-04-22 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8090867B2 (en) * 2007-10-19 2012-01-03 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8391312B2 (en) * 2007-10-19 2013-03-05 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8380874B2 (en) * 2007-10-19 2013-02-19 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8145780B2 (en) * 2007-10-19 2012-03-27 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US20090103529A1 (en) * 2007-10-19 2009-04-23 Rebelvox, Llc Telecommunication and multimedia management method and apparatus
US8321581B2 (en) * 2007-10-19 2012-11-27 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8682336B2 (en) * 2007-10-19 2014-03-25 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US7751362B2 (en) * 2007-10-19 2010-07-06 Rebelvox Llc Graceful degradation for voice communication services over wired and wireless networks
US8699678B2 (en) * 2007-10-19 2014-04-15 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8699383B2 (en) * 2007-10-19 2014-04-15 Voxer Ip Llc Method and apparatus for real-time synchronization of voice communications
US8782274B2 (en) * 2007-10-19 2014-07-15 Voxer Ip Llc Method and system for progressively transmitting a voice message from sender to recipients across a distributed services communication network
US8111713B2 (en) * 2007-10-19 2012-02-07 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8542804B2 (en) 2008-02-08 2013-09-24 Voxer Ip Llc Voice and text mail application for communication devices
US20140343937A1 (en) * 2013-05-16 2014-11-20 Voxer Ip Llc Interrupt mode for communication applications
US9054912B2 (en) 2008-02-08 2015-06-09 Voxer Ip Llc Communication application for conducting conversations including multiple media types in either a real-time mode or a time-shifted mode
JP4975672B2 (ja) * 2008-03-27 2012-07-11 京セラ株式会社 無線通信装置
US20090253512A1 (en) * 2008-04-07 2009-10-08 Palo Alto Research Center Incorporated System And Method For Providing Adjustable Attenuation Of Location-Based Communication In An Online Game
US8616970B2 (en) * 2008-04-07 2013-12-31 Palo Alto Research Center Incorporated System and method for managing a multiplicity of text messages in an online game
US8401582B2 (en) 2008-04-11 2013-03-19 Voxer Ip Llc Time-shifting for push to talk voice communication systems
US8265252B2 (en) * 2008-04-11 2012-09-11 Palo Alto Research Center Incorporated System and method for facilitating cognitive processing of simultaneous remote voice conversations
US8856003B2 (en) * 2008-04-30 2014-10-07 Motorola Solutions, Inc. Method for dual channel monitoring on a radio device
CN104486804A (zh) 2008-06-16 2015-04-01 三星电子株式会社 用于管理无线接入网络中的切换的方法和系统
US8862681B2 (en) 2008-06-25 2014-10-14 Microsoft Corporation Multimodal conversation transfer
US8255923B2 (en) * 2008-07-08 2012-08-28 Avaya Inc. Shared persistent communication thread
JP2010056964A (ja) * 2008-08-28 2010-03-11 Canon Inc 受信装置及びその制御方法、プログラム、記録媒体
US8325662B2 (en) * 2008-09-17 2012-12-04 Voxer Ip Llc Apparatus and method for enabling communication when network connectivity is reduced or lost during a conversation and for resuming the conversation when connectivity improves
EP2175378A1 (en) * 2008-10-13 2010-04-14 Vodafone Holding GmbH Provision of data stored in a memory card to a user device
US20100103463A1 (en) * 2008-10-28 2010-04-29 Dhiraj Joshi Determining geographic location of a scanned image
CA2746734C (en) * 2009-01-30 2015-12-22 Voxer Ip Llc Email client capable of supporting near real-time communication and methods for using the addressing, protocols and the infrastructure of email to support near real-time communication
US8849927B2 (en) 2009-01-30 2014-09-30 Voxer Ip Llc Method for implementing real-time voice messaging on a server node
CN102292945B (zh) * 2009-02-05 2014-04-09 国际商业机器公司 社会性网络的消息系统
US20100217814A1 (en) * 2009-02-18 2010-08-26 Bert Strueber Apparatus and method for enabling network-compatible cameras to operate in instant messaging networks
US9125090B2 (en) * 2009-02-27 2015-09-01 At&T Mobility Ii Llc Staggered channelization code allocation for multi-carrier networks
US9171284B2 (en) 2009-03-02 2015-10-27 Microsoft Technology Licensing, Llc Techniques to restore communications sessions for applications having conversation and meeting environments
US20100223345A1 (en) * 2009-03-02 2010-09-02 Microsoft Corporation Communications application having conversation and meeting environments
US8271106B2 (en) 2009-04-17 2012-09-18 Hospira, Inc. System and method for configuring a rule set for medical event management and responses
US9350817B2 (en) * 2009-07-22 2016-05-24 Cisco Technology, Inc. Recording a hyper text transfer protocol (HTTP) session for playback
US7958244B2 (en) * 2009-09-25 2011-06-07 International Business Machines Corporation Imposed policies for handling instant messages
US9236934B1 (en) * 2009-10-16 2016-01-12 Viasat, Inc. Satellite system architecture for coverage areas of disparate demand
WO2011112767A2 (en) * 2010-03-10 2011-09-15 Sra International, Inc. One vault voice encryption
US8843594B2 (en) 2010-03-26 2014-09-23 Dan Fiul Time shifted transcoded streaming (TSTS) system and method
US20110252083A1 (en) 2010-04-13 2011-10-13 Rebelvox, Llc Apparatus and method for transmitting media using either network efficient protocol or a loss tolerant transmission protocol
US10079892B2 (en) 2010-04-16 2018-09-18 Avaya Inc. System and method for suggesting automated assistants based on a similarity vector in a graphical user interface for managing communication sessions
US20110258550A1 (en) * 2010-04-16 2011-10-20 Avaya Inc. System and method for generating persistent sessions in a graphical interface for managing communication sessions
US9182247B2 (en) * 2010-05-05 2015-11-10 Lg Electronics Inc. Network system
US9635693B2 (en) * 2010-05-07 2017-04-25 Samsung Electronics Co., Ltd. Method of performing pairing between coordinator and device in network, method of performing pairing between devices, method of pairing between coordinators and network system including the coordinators and the devices
DE202010009712U1 (de) 2010-06-30 2011-11-10 Pepperl + Fuchs Gmbh Vorrichtung zur Ermittlung der Dicke von Druckmedien
US20120114108A1 (en) * 2010-09-27 2012-05-10 Voxer Ip Llc Messaging communication application
US8637159B2 (en) 2010-09-29 2014-01-28 Equistar Chemicals, Lp Graft composition for improved tie layers
US20120143985A1 (en) * 2010-11-30 2012-06-07 Enfora, Inc. Method and system for message concatenation
US9282289B2 (en) 2010-12-23 2016-03-08 Citrix Systems, Inc. Systems, methods, and devices for generating a summary document of an online meeting
WO2012088230A1 (en) * 2010-12-23 2012-06-28 Citrix Systems, Inc. Systems, methods and devices for facilitating online meetings
JP2012222642A (ja) 2011-04-11 2012-11-12 Sony Corp データ配信装置、データ配信方法、及びプログラム
US8902890B2 (en) * 2011-05-27 2014-12-02 International Business Machines Corporation Memory saving packet modification
WO2013000125A1 (en) * 2011-06-28 2013-01-03 Nokia Corporation Method and apparatus for live video sharing with multimodal modes
WO2013059615A1 (en) 2011-10-21 2013-04-25 Hospira, Inc. Medical device update system
US9189753B2 (en) 2011-10-24 2015-11-17 Blackberry Limited Multiplatform management system and method for mobile devices
US9372975B2 (en) * 2011-12-19 2016-06-21 Fujitsu Limited Secure recording and sharing system of voice memo
US9031562B2 (en) * 2011-12-19 2015-05-12 Bandwidth.Com, Inc. Intelligent handoffs for enhancing or avoiding dropped and interrupted communication sessions
US10491640B2 (en) * 2011-12-22 2019-11-26 Telefonaktiebolaget Lm Ericsson (Publ) Method and media handling unit for use in a VoIP based communications network
US8918453B2 (en) * 2012-01-03 2014-12-23 Qualcomm Incorporated Managing data representation for user equipments in a communication session
US20150145944A1 (en) * 2012-01-03 2015-05-28 Qualcomm Incorporated Exchanging portions of a video stream via different links during a communication session
US20140310365A1 (en) * 2012-01-31 2014-10-16 Global Relay Communications Inc. System and Method for Tracking Messages in a Messaging Service
US10003565B2 (en) 2012-03-22 2018-06-19 Time Warner Cable Enterprises Llc Use of DNS information as trigger for dynamic IPV4 address allocation
US9264390B2 (en) 2012-03-22 2016-02-16 Google Inc. Synchronous communication system and method
CN104205212B (zh) 2012-03-23 2016-09-07 杜比实验室特许公司 用于减轻听觉场景中的讲话者冲突的方法和装置
KR102096566B1 (ko) 2012-04-13 2020-04-02 지이 비디오 컴프레션, 엘엘씨 저지연 화상 코딩
CN107801030B (zh) * 2012-04-23 2020-10-09 太阳专利托管公司 解码方法、解码装置以及编码方法、编码装置
CN108777676B (zh) * 2012-04-25 2021-01-12 三星电子株式会社 用于在多媒体传输系统中接收媒体数据的装置及方法
US8948804B2 (en) * 2012-05-04 2015-02-03 Voxer Ip Llc Virtual slide-to-lock feature for push-to-talk communication applications
CN102750365B (zh) * 2012-06-14 2014-09-03 华为软件技术有限公司 即时语音消息的检索方法和系统，以及用户设备和服务器
RU2635251C2 (ru) 2012-06-29 2017-11-09 ДжиИ Видео Компрешн, ЭлЭлСи Концепция потока видеоданных
US20140115099A1 (en) * 2012-07-17 2014-04-24 Nowshade Kabir Method and System for Integrating Information from Mobile Devices to a Semantic Knowledge Repository
US9959548B2 (en) * 2012-08-31 2018-05-01 Sprinklr, Inc. Method and system for generating social signal vocabularies
US20140074961A1 (en) * 2012-09-12 2014-03-13 Futurewei Technologies, Inc. Efficiently Delivering Time-Shifted Media Content via Content Delivery Networks (CDNs)
CN104469255A (zh) 2013-09-16 2015-03-25 杜比实验室特许公司 改进的音频或视频会议
US10063596B2 (en) * 2012-10-10 2018-08-28 Sharp Laboratories Of America, Inc. Devices for managing data associated with an audio communication
US8862695B2 (en) * 2012-10-29 2014-10-14 Vmware, Inc. Performance enhancement in virtual desktop infrastructure (VDI)
WO2014071076A1 (en) * 2012-11-01 2014-05-08 Gutman Ronald David Conferencing for participants at different locations
JP6171319B2 (ja) * 2012-12-10 2017-08-02 株式会社リコー 情報処理装置、情報処理方法、情報処理システム及びプログラム
US9654527B1 (en) * 2012-12-21 2017-05-16 Juniper Networks, Inc. Failure detection manager
GB2509323B (en) * 2012-12-28 2015-01-07 Glide Talk Ltd Reduced latency server-mediated audio-video communication
US9294522B1 (en) * 2012-12-28 2016-03-22 Google Inc. Synchronous communication system and method
US9143468B1 (en) 2013-01-08 2015-09-22 Twitter, Inc. Identifying relevant messages in a conversation graph
US9449050B1 (en) * 2013-01-08 2016-09-20 Twitter, Inc. Identifying relevant messages in a conversation graph
CN103929453A (zh) * 2013-01-15 2014-07-16 腾讯科技（深圳）有限公司 一种上传数据的处理方法、装置及系统
CN103152649B (zh) * 2013-01-30 2016-01-06 北京佳讯飞鸿电气股份有限公司 一种流媒体分发传输分级别自动减帧控制方法
US9571403B2 (en) * 2013-02-07 2017-02-14 Broadcom Corporation Packet marking for flow management, including deadline aware flow management
CN109041502A (zh) * 2013-02-21 2018-12-18 Cfm 环球有限责任公司 用于结构的具有隐藏的电子组件的建筑支撑体
US9888115B2 (en) 2013-02-28 2018-02-06 Lennard A. Gumaer Media device and method of using a media device
EP2964079B1 (en) 2013-03-06 2022-02-16 ICU Medical, Inc. Medical device communication method
US8970662B2 (en) * 2013-03-12 2015-03-03 Qualcomm Incorporated Output management for electronic communications
JP2014179806A (ja) * 2013-03-14 2014-09-25 Ricoh Co Ltd 通信システム、通信管理装置、及びプログラム
US9118743B2 (en) * 2013-05-23 2015-08-25 Voxer Ip Llc Media rendering control
US9298344B2 (en) * 2013-06-10 2016-03-29 Adobe Systems Incorporated Method and apparatus for enabling participation in a web conference as a virtual participant
EP2819439B1 (en) * 2013-06-24 2021-06-16 Airbus Defence and Space Oy Handling a pre-empted communication
US20150004965A1 (en) * 2013-06-30 2015-01-01 Avaya Inc. System and method for separation of call origination and call delivery techniques
US9614794B2 (en) * 2013-07-11 2017-04-04 Apollo Education Group, Inc. Message consumer orchestration framework
US20150032845A1 (en) 2013-07-26 2015-01-29 Samsung Electronics Co., Ltd. Packet transmission protocol supporting downloading and streaming
EP3039596A4 (en) 2013-08-30 2017-04-12 Hospira, Inc. System and method of monitoring and managing a remote infusion regimen
US20150066525A1 (en) 2013-08-30 2015-03-05 William Baxter Webb, III System for exchanging medical information
US20150110995A1 (en) * 2013-10-18 2015-04-23 Eastman Chemical Company Extrusion-coated structural systems having reinforced structural members
US9161272B2 (en) 2013-10-24 2015-10-13 Motorola Solutions, Inc. Method and apparatus to achieve lossless call in view of a temporary reception issue
US10311972B2 (en) 2013-11-11 2019-06-04 Icu Medical, Inc. Medical device system performance index
US10042986B2 (en) 2013-11-19 2018-08-07 Icu Medical, Inc. Infusion pump automation system and method
US20150142955A1 (en) * 2013-11-20 2015-05-21 Wefi Inc. Methods and systems for facilitating network switching
JP6239990B2 (ja) * 2014-01-22 2017-11-29 クラリオン株式会社 接続装置、プログラムおよび接続方法
KR102114201B1 (ko) * 2014-04-29 2020-05-25 삼성전자주식회사 전자장치 및 전자장치의 메시지처리 방법
JP6853669B2 (ja) 2014-04-30 2021-03-31 アイシーユー・メディカル・インコーポレーテッド 条件付きの警報転送を用いた患者治療システム
US9629186B2 (en) * 2014-11-20 2017-04-18 Xiaoning Huai Device and a method of an emergency handling wireless communication system
CN104468578B (zh) * 2014-12-10 2017-12-26 怀效宁 一种无线通讯的优先通讯系统和通讯方法
US9724470B2 (en) 2014-06-16 2017-08-08 Icu Medical, Inc. System for monitoring and delivering medication to a patient and method of using the same to minimize the risks associated with automated therapy
US20160006986A1 (en) * 2014-07-02 2016-01-07 Polycom, Inc. Speech rate manipulation in a video conference
CN104144116B (zh) * 2014-07-16 2016-04-27 腾讯科技（深圳）有限公司 即时通讯方法及即时通讯系统
DE202014005970U1 (de) 2014-07-25 2014-08-21 Pepperl + Fuchs Gmbh Vorrichtung zur Ermittlung der Dicke von Druckmedien
EP2977716B1 (de) 2014-07-25 2016-10-12 Pepperl + Fuchs GmbH Vorrichtung und Verfahren zur Messung der Stapelhöhe von Druckmedien
EP2977717A1 (de) 2014-07-25 2016-01-27 Pepperl + Fuchs GmbH Vorrichtung und Verfahren zur Messung der Stapelhöhe von Druckmedien
DE202014005969U1 (de) 2014-07-25 2014-08-22 Pepperl + Fuchs Gmbh Vorrichtung zur Messung von Ladungsänderungszeiten
US9539383B2 (en) 2014-09-15 2017-01-10 Hospira, Inc. System and method that matches delayed infusion auto-programs with manually entered infusion programs and analyzes differences therein
US9825734B2 (en) 2014-12-17 2017-11-21 Cisco Technology, Inc. VoIP system
US11711346B2 (en) * 2015-01-06 2023-07-25 Umbra Technologies Ltd. System and method for neutral application programming interface
KR101622871B1 (ko) * 2015-02-03 2016-05-19 라인 가부시키가이샤 메신저의 대화내용을 관리하는 방법과 시스템 및 기록 매체
US11076052B2 (en) * 2015-02-03 2021-07-27 Dolby Laboratories Licensing Corporation Selective conference digest
CN104579582B (zh) * 2015-02-05 2017-11-17 成都金本华科技股份有限公司 一种基于通信网络的高质量语音传输方法
KR102111572B1 (ko) * 2015-02-13 2020-05-15 에스케이텔레콤 주식회사 저지연 생방송 컨텐츠 제공을 위한 프로그램을 기록한 기록매체 및 장치
US20160285794A1 (en) * 2015-03-27 2016-09-29 Syntel, Inc. High efficiency data communication system
US9232190B1 (en) * 2015-04-01 2016-01-05 Ringcentral, Inc. Systems and methods for managing multimedia conference calls
US9853860B2 (en) * 2015-06-29 2017-12-26 International Business Machines Corporation Application hierarchy specification with real-time functional selection
US10509768B2 (en) * 2015-06-30 2019-12-17 Siemens Aktiengesellschaft Method and system for secure data storage and retrieval from cloud based service environment
CN106341795B (zh) * 2015-07-09 2021-09-17 深圳市海能达通信有限公司 一种针对高优先级呼叫的语音处理方法及设备
JP2017069687A (ja) * 2015-09-29 2017-04-06 ソニー株式会社 情報処理装置及び情報処理方法並びにプログラム
US10206079B1 (en) 2015-09-30 2019-02-12 Groupon, Inc. System and method for notification transmission and confirmation management
CN108700419A (zh) * 2015-10-08 2018-10-23 沃克斯国际公司 用于微定位便携式车辆控制设备并与其通信的系统和方法
KR102350962B1 (ko) 2015-10-30 2022-01-14 삼성전자주식회사 다수의 ptt 채널을 동시에 지원하는 방법 및 장치
KR20170083868A (ko) 2016-01-11 2017-07-19 삼성전자주식회사 데이터 이동 장치 및 데이터 이동 방법
GB201600907D0 (en) 2016-01-18 2016-03-02 Dolby Lab Licensing Corp Replaying content of a virtual meeting
US9542678B1 (en) 2016-03-31 2017-01-10 Square, Inc. Exclusive bonding of wireless devices
US10366383B2 (en) * 2016-03-31 2019-07-30 Square, Inc. Combined reliable and unreliable data transmission
CN107292576B (zh) * 2016-04-05 2020-12-01 中移物联网有限公司 设备的虚拟化管理系统
EP3242438A1 (en) * 2016-05-06 2017-11-08 Telefonica Digital España, S.L.U. Method for syncronizing conversations of group messaging services in mesh networks
AU2017295722B2 (en) 2016-07-14 2022-08-11 Icu Medical, Inc. Multi-communication path selection and security system for a medical device
JP6677614B2 (ja) 2016-09-16 2020-04-08 株式会社東芝 会議支援システム、会議支援方法及びプログラム
US10511668B2 (en) * 2016-10-07 2019-12-17 Hyundai Motor Company Method of transmitting and receiving data in vehicle network and apparatus for the same
EP3526972A1 (en) * 2016-10-12 2019-08-21 Koninklijke KPN N.V. Enabling a media orchestration
US9900440B1 (en) 2016-11-18 2018-02-20 International Business Machines Corporation Context-driven teleconference session management
US10761920B2 (en) 2017-01-17 2020-09-01 Bank Of America Corporation Individualized channel error detection and resolution
US10147415B2 (en) * 2017-02-02 2018-12-04 Microsoft Technology Licensing, Llc Artificially generated speech for a communication session
JP6820475B2 (ja) * 2017-02-08 2021-01-27 アイコム株式会社 音声通信システム、端末装置、および、プログラム
US11010601B2 (en) 2017-02-14 2021-05-18 Microsoft Technology Licensing, Llc Intelligent assistant device communicating non-verbal cues
US11100384B2 (en) 2017-02-14 2021-08-24 Microsoft Technology Licensing, Llc Intelligent device user interactions
US10467510B2 (en) 2017-02-14 2019-11-05 Microsoft Technology Licensing, Llc Intelligent assistant
US10810273B2 (en) 2017-06-13 2020-10-20 Bank Of America Corporation Auto identification and mapping of functional attributes from visual representation
US10097499B1 (en) 2017-07-10 2018-10-09 Qualcomm Incorporated Private message notifications
WO2019021357A1 (ja) * 2017-07-25 2019-01-31 株式会社Ｅ３ ボイスメッセージ通信装置
US10372298B2 (en) * 2017-09-29 2019-08-06 Apple Inc. User interface for multi-user communication session
KR102234089B1 (ko) * 2017-10-31 2021-03-30 삼성에스디에스 주식회사 컨퍼런스 접속 방법 및 이를 수행하기 위한 단말
CN109088667B (zh) * 2017-12-06 2020-09-11 中国人民解放军国防科技大学 一种面向简单任务的同构多星在线协同方法
US11140207B2 (en) * 2017-12-21 2021-10-05 Google Llc Network impairment simulation framework for verification of real time interactive media streaming systems
US20190238605A1 (en) * 2018-01-31 2019-08-01 Salesforce.Com, Inc. Verification of streaming message sequence
US10728187B2 (en) 2018-04-05 2020-07-28 Global Relay Communications Inc. System and method for processing messages with organization and personal interaction controls
DK201870364A1 (en) 2018-05-07 2019-12-03 Apple Inc. MULTI-PARTICIPANT LIVE COMMUNICATION USER INTERFACE
GB2576692A (en) * 2018-06-01 2020-03-04 Stageclip Ltd Media processing
US10964428B2 (en) 2018-07-17 2021-03-30 Icu Medical, Inc. Merging messages into cache and generating user interface using the cache
ES2962660T3 (es) 2018-07-17 2024-03-20 Icu Medical Inc Sistemas y métodos para facilitar la mensajería clínica en un entorno de red
AU2019306490A1 (en) 2018-07-17 2021-02-04 Icu Medical, Inc. Updating infusion pump drug libraries and operational software in a networked environment
AU2019309766A1 (en) 2018-07-26 2021-03-18 Icu Medical, Inc. Drug library management system
US10692595B2 (en) 2018-07-26 2020-06-23 Icu Medical, Inc. Drug library dynamic version management
CN109040079A (zh) * 2018-08-09 2018-12-18 广东省南方数字电视无线传播有限公司 直播链接地址的组建和验证方法及相应装置
US20200089779A1 (en) * 2018-09-19 2020-03-19 Twitter, Inc. Progressive API Responses
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
KR102486151B1 (ko) * 2018-10-16 2023-01-10 현대자동차주식회사 통신 장치, 그를 가지는 차량 및 그 제어 방법
CN109194904B (zh) * 2018-10-25 2021-02-09 成都零壹众科技有限公司 一种适用于指挥调度业务的移动视频会商系统
CN109698924B (zh) * 2018-11-19 2021-02-12 视联动力信息技术股份有限公司 一种视频数据传输的方法和装置
CN109922443B (zh) * 2019-02-03 2021-10-08 倪亮 消息通道建立方法、系统、接收端、服务器和移动端
TWI707574B (zh) * 2019-04-25 2020-10-11 立新 陳 通話系統與方法
CN110213235A (zh) * 2019-04-30 2019-09-06 视联动力信息技术股份有限公司 iOS设备和视联网终端视频通话的实现方法和系统
JP7363317B2 (ja) * 2019-05-10 2023-10-18 コニカミノルタ株式会社 放射線画像撮影装置、電子機器、無線通信システム及びプログラム
CN110139116B (zh) * 2019-05-16 2021-05-25 广州酷狗计算机科技有限公司 直播间切换方法、装置及存储介质
CN110362266B (zh) * 2019-07-19 2020-12-18 北京字节跳动网络技术有限公司 提示信息显示方法、系统、电子设备和计算机可读介质
US11277461B2 (en) * 2019-12-18 2022-03-15 The Nielsen Company (Us), Llc Methods and apparatus to monitor streaming media
CN111464774B (zh) * 2020-03-30 2022-03-29 南京高达软件有限公司 一种视频会议直播或点播的方法与装置
US11416831B2 (en) * 2020-05-21 2022-08-16 HUDDL Inc. Dynamic video layout in video conference meeting
US11893214B2 (en) 2021-05-15 2024-02-06 Apple Inc. Real-time communication user interface
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces
US11449188B1 (en) 2021-05-15 2022-09-20 Apple Inc. Shared-content session user interfaces
RU2766437C1 (ru) * 2021-06-17 2022-03-15 Общество с ограниченной ответственностью "Научно-Технический Центр ПРОТЕЙ" Способ обработки информации о чрезвычайных ситуациях коммутационным оборудованием
US20220415327A1 (en) * 2021-06-24 2022-12-29 Microsoft Technology Licensing, Llc Spatial audio conversational analysis for enhanced conversation discovery
US11909703B2 (en) 2021-08-26 2024-02-20 International Business Machines Corporation Live chat stream comment management
US11812135B2 (en) 2021-09-24 2023-11-07 Apple Inc. Wide angle video conference
US11792032B2 (en) * 2021-10-28 2023-10-17 Zoom Video Communications, Inc. Content replay for conference participants
US11736420B2 (en) * 2021-12-16 2023-08-22 International Business Machines Corporation Management and organization of computer based chat type conversations

Family Cites Families (544)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4360910A (en) * 1980-07-23 1982-11-23 The United States Of America As Represented By The Secretary Of The Air Force Digital voice conferencing apparatus in time division multiplex systems
US4807224A (en) 1987-08-21 1989-02-21 Naron Steven E Multicast data distribution system and method
US4870224A (en) * 1988-07-01 1989-09-26 Intel Corporation Integrated circuit package for surface mount technology
US5117422A (en) 1990-07-09 1992-05-26 Itt Corporation Method for providing an efficient and adaptive management of message routing in a multi-platform and apparatus communication system
US5375018A (en) 1990-07-18 1994-12-20 Klausner Patent Technologies Location acquisition and time adjusting system
US5128932A (en) 1990-08-27 1992-07-07 Bell Communications Research, Inc. Traffic flow control and call set-up in multi-hop broadband networks
US5165091A (en) 1991-03-20 1992-11-17 Nec America Inc. Firmware download from a remote terminal to an optical network terminal in a digital loop carrier system
CA2084575C (en) 1991-12-31 1996-12-03 Chris A. Dinallo Personal computer with generalized data streaming apparatus for multimedia devices
US5390236A (en) 1992-03-31 1995-02-14 Klausner Patent Technologies Telephone answering device linking displayed data with recorded audio message
US5283818A (en) 1992-03-31 1994-02-01 Klausner Patent Technologies Telephone answering device linking displayed data with recorded audio message
JPH07219970A (ja) 1993-12-20 1995-08-18 Xerox Corp 加速フォーマットでの再生方法及び再生装置
US5768350A (en) * 1994-09-19 1998-06-16 Phylon Communications, Inc. Real-time and non-real-time data multplexing over telephone lines
US5790122A (en) * 1994-11-15 1998-08-04 Libera, Inc. Method for providing maximum screen real estate in computer controlled display systems during software application navigation
US5651054A (en) * 1995-04-13 1997-07-22 Active Voice Corporation Method and apparatus for monitoring a message in a voice mail system
US5737011A (en) * 1995-05-03 1998-04-07 Bell Communications Research, Inc. Infinitely expandable real-time video conferencing system
US5734963A (en) 1995-06-06 1998-03-31 Flash Comm, Inc. Remote initiated messaging apparatus and method in a two way wireless data communications network
US5889764A (en) * 1995-08-31 1999-03-30 Intel Corporation Low-latency multi-party audio chat
US6122668A (en) * 1995-11-02 2000-09-19 Starlight Networks Synchronization of audio and video signals in a live multicast in a LAN
KR100847335B1 (ko) 1996-02-09 2008-10-15 아이-링크 시스템즈, 아이엔씨. 음성인터넷전송시스템
JP3066311B2 (ja) 1996-03-25 2000-07-17 三洋電機株式会社 通信方法及び通信システム
US6343313B1 (en) 1996-03-26 2002-01-29 Pixion, Inc. Computer conferencing system with real-time multipoint, multi-speed, multi-stream scalability
US5983278A (en) 1996-04-19 1999-11-09 Lucent Technologies Inc. Low-loss, fair bandwidth allocation flow control in a packet switch
US5768527A (en) 1996-04-23 1998-06-16 Motorola, Inc. Device, system and method of real-time multimedia streaming
US7266686B1 (en) 1996-05-09 2007-09-04 Two-Way Media Llc Multicasting method and apparatus
US6037932A (en) 1996-05-28 2000-03-14 Microsoft Corporation Method for sending computer network data as part of vertical blanking interval
US5970122A (en) 1996-07-24 1999-10-19 Lucent Technologies Inc. Two-way wireless messaging system having user agent
US5918158A (en) 1996-07-24 1999-06-29 Lucent Technologies Inc. Two-way wireless messaging system
US6212535B1 (en) 1996-09-19 2001-04-03 Digital Equipment Corporation Browser-based electronic messaging
JP3622365B2 (ja) 1996-09-26 2005-02-23 ヤマハ株式会社 音声符号化伝送方式
US5963551A (en) 1996-09-30 1999-10-05 Innomedia Pte Ltd. System and method for dynamically reconfigurable packet transmission
US6154499A (en) 1996-10-21 2000-11-28 Comsat Corporation Communication systems using nested coder and compatible channel coding
US6859525B1 (en) 1996-10-23 2005-02-22 Riparius Ventures, Llc Internet telephony device
US6335927B1 (en) 1996-11-18 2002-01-01 Mci Communications Corporation System and method for providing requested quality of service in a hybrid network
US6690654B2 (en) 1996-11-18 2004-02-10 Mci Communications Corporation Method and system for multi-media collaboration between remote parties
US6480541B1 (en) * 1996-11-27 2002-11-12 Realnetworks, Inc. Method and apparatus for providing scalable pre-compressed digital video with reduced quantization based artifacts
DE19651593B4 (de) 1996-12-11 2008-11-20 Rohde & Schwarz Gmbh & Co. Kg Anordnung zum Optimieren der Datenübertragung über einen bidirektionalen Funkkanal
US6775264B1 (en) * 1997-03-03 2004-08-10 Webley Systems, Inc. Computer, internet and telecommunications based network
US6728775B1 (en) * 1997-03-17 2004-04-27 Microsoft Corporation Multiple multicasting of multimedia streams
US5912951A (en) 1997-04-17 1999-06-15 At&T Corp Voice mail system with multi-retrieval mailboxes
JP3446530B2 (ja) * 1997-04-18 2003-09-16 日本電信電話株式会社 マルチメディア議事録作成方法及び装置
JP4147604B2 (ja) * 1997-04-23 2008-09-10 神鋼電機株式会社 誘導加熱溶解炉およびその底部出湯機構
US6215768B1 (en) * 1997-06-30 2001-04-10 Hyundai Electronics Industries Co. Ltd. High speed connection admission controller based on traffic monitoring and a method thereof
US5958005A (en) * 1997-07-17 1999-09-28 Bell Atlantic Network Services, Inc. Electronic mail security
FI105874B (fi) 1997-08-12 2000-10-13 Nokia Mobile Phones Ltd Monipistematkaviestinlähetys
US6507586B1 (en) 1997-09-18 2003-01-14 International Business Machines Corporation Multicast data transmission over a one-way broadband channel
US5966427A (en) * 1997-09-30 1999-10-12 Siemens Information Apparatus and method for troubleshooting internet protocol telephony networks
US6256669B1 (en) 1997-11-25 2001-07-03 Intel Corporation Method and apparatus for bandwidth characterization and reporting in web browsers
US6480667B1 (en) * 1997-12-23 2002-11-12 Intel Corporation Method of time shifting to simultaneously record and play a data stream
FI980022A (fi) * 1998-01-07 1999-07-08 Nokia Mobile Phones Ltd Puhelinpalvelut
US6594693B1 (en) * 1998-02-10 2003-07-15 Nitin A. Borwankar Method and apparatus for a structured, synchronized conversation using electronic messages over a computer network
IL123819A (en) * 1998-03-24 2001-09-13 Geo Interactive Media Group Lt Network media streaming
US6104757A (en) 1998-05-15 2000-08-15 North Carolina State University System and method of error control for interactive low-bit rate video transmission
WO1999060504A1 (en) 1998-05-15 1999-11-25 Unicast Communications Corporation A technique for implementing browser-initiated network-distributed advertising and for interstitially displaying an advertisement
US6092120A (en) 1998-06-26 2000-07-18 Sun Microsystems, Inc. Method and apparatus for timely delivery of a byte code and serialized objects stream
JP2000023130A (ja) * 1998-06-30 2000-01-21 Toshiba Corp テレビ会議システム
JP2000023132A (ja) * 1998-07-06 2000-01-21 Canon Inc データ通信制御装置及びその制御方法、及びデータ通信システム
US6175619B1 (en) * 1998-07-08 2001-01-16 At&T Corp. Anonymous voice communication using on-line controls
US6233389B1 (en) 1998-07-30 2001-05-15 Tivo, Inc. Multimedia time warping system
US6977921B1 (en) * 1998-08-19 2005-12-20 Lucent Technologies Inc. Using discrete message-oriented services to deliver short audio communications
US7023913B1 (en) 2000-06-14 2006-04-04 Monroe David A Digital security multimedia sensor
US6721288B1 (en) * 1998-09-16 2004-04-13 Openwave Systems Inc. Wireless mobile devices having improved operation during network unavailability
US6700902B1 (en) * 1998-10-19 2004-03-02 Elster Electricity, Llc Method and system for improving wireless data packet delivery
US6850965B2 (en) 1998-11-17 2005-02-01 Arthur Douglas Allen Method for connection acceptance and rapid determination of optimal multi-media content delivery over network
FI982490A0 (fi) 1998-11-18 1998-11-18 Nokia Corp Menetelmä ja järjestelmä viestintää varten
US6424996B1 (en) 1998-11-25 2002-07-23 Nexsys Electronics, Inc. Medical network system and method for transfer of information
CA2290030A1 (en) * 1998-12-23 2000-06-23 Behzad Badiee Telecommunication system with a multi-channel digital subscriber line interface and method
US6411685B1 (en) 1999-01-29 2002-06-25 Microsoft Corporation System and method for providing unified messaging to a user with a thin web browser
KR100677063B1 (ko) 1999-02-13 2007-02-01 삼성전자주식회사 단문 메시지 서비스를 사용한 데이터 전송 방법 및 그 장치
JP3170491B2 (ja) 1999-03-29 2001-05-28 松下電送システム株式会社 画像通信装置及びサーバ装置並びに能力交換方法
US6084522A (en) * 1999-03-29 2000-07-04 Pittway Corp. Temperature sensing wireless smoke detector
US6378035B1 (en) 1999-04-06 2002-04-23 Microsoft Corporation Streaming information appliance with buffer read and write synchronization
US6564261B1 (en) * 1999-05-10 2003-05-13 Telefonaktiebolaget Lm Ericsson (Publ) Distributed system to intelligently establish sessions between anonymous users over various networks
US6600914B2 (en) 1999-05-24 2003-07-29 Arraycomm, Inc. System and method for emergency call channel allocation
US7039040B1 (en) * 1999-06-07 2006-05-02 At&T Corp. Voice-over-IP enabled chat
US6577599B1 (en) 1999-06-30 2003-06-10 Sun Microsystems, Inc. Small-scale reliable multicasting
JP2001045560A (ja) 1999-07-29 2001-02-16 Kyocera Corp 携帯電話システム
WO2001010128A1 (en) 1999-08-03 2001-02-08 Videoshare, Inc. Instant video messenger
US6873597B1 (en) * 1999-08-11 2005-03-29 Nortel Networks Limited Reduced data rate communication system
US6580694B1 (en) 1999-08-16 2003-06-17 Intel Corporation Establishing optimal audio latency in streaming applications over a packet-based network
US6691153B1 (en) 1999-08-30 2004-02-10 Zaplet, Inc. Method and system for process interaction among a group
US6807565B1 (en) * 1999-09-03 2004-10-19 Cisco Technology, Inc. Instant messaging system using voice enabled web based application server
US7089278B1 (en) 1999-09-07 2006-08-08 Fuji Xerox Co., Ltd. Anchored conversations: adhesive, in-context, virtual discussion forums
US7149893B1 (en) 1999-09-07 2006-12-12 Poofaway.Com, Inc. System and method for enabling the originator of an electronic mail message to preset an expiration time, date, and/or event, and to control processing or handling by a recipient
US6792085B1 (en) 1999-09-10 2004-09-14 Comdial Corporation System and method for unified messaging with message replication and synchronization
US7339993B1 (en) 1999-10-01 2008-03-04 Vidiator Enterprises Inc. Methods for transforming streaming video data
US7203164B2 (en) * 1999-10-27 2007-04-10 Broadcom Corporation Voice architecture for transmission over a shared, contention based medium
JP2001128133A (ja) 1999-11-01 2001-05-11 Nippon Telegr & Teleph Corp <Ntt> 多地点通信会議システム
JP3752932B2 (ja) 1999-12-03 2006-03-08 三菱電機株式会社 通信システムおよび通信方法
US20020049852A1 (en) * 1999-12-06 2002-04-25 Yen-Jen Lee Global messaging with distributed adaptive streaming control
EP1250778A2 (en) 1999-12-10 2002-10-23 Mosaid Technologies Incorporated Method and apparatus for longest match address lookup
US20010025377A1 (en) 1999-12-30 2001-09-27 Hinderks Larry W. High bandwidth transmission system and method having local insertion, delay play and demand play
GB2358558B (en) 2000-01-18 2003-10-15 Mitel Corp Packet loss compensation method using injection of spectrally shaped noise
US7117273B1 (en) 2000-01-25 2006-10-03 Cisco Technology, Inc. Methods and apparatus for maintaining a map of node relationships for a network
US20050259682A1 (en) 2000-02-03 2005-11-24 Yuval Yosef Broadcast system
US20010052019A1 (en) 2000-02-04 2001-12-13 Ovt, Inc. Video mail delivery system
US6834039B1 (en) 2000-03-10 2004-12-21 Hughes Electronics Corporation Apparatus and method for efficient TDMA bandwidth allocation for TCP/IP satellite-based networks
US6993009B2 (en) 2000-03-10 2006-01-31 Hughes Electronics Corporation Method and apparatus for deriving uplink timing from asynchronous traffic across multiple transport streams
US6480783B1 (en) 2000-03-17 2002-11-12 Makor Issues And Rights Ltd. Real time vehicle guidance and forecasting system under traffic jam conditions
JP2001292090A (ja) 2000-04-05 2001-10-19 Matsushita Electric Ind Co Ltd 携帯電話および携帯電話用半導体装置
EP1146702A3 (de) 2000-04-10 2006-03-01 Siemens Aktiengesellschaft Kommunikationsvorrichtung und Kommunikationssystem zum integrierten Übertragen von ersten Daten mit Echtzeitanforderung und zweiten Daten ohne Echtzeitanforderung
EP1294896A2 (en) * 2000-04-25 2003-03-26 Millennium Pharmaceuticals, Inc. 13295 novel protein kinase molecules and uses therefor
US6791949B1 (en) 2000-04-28 2004-09-14 Raytheon Company Network protocol for wireless ad hoc networks
US20020032799A1 (en) * 2000-05-02 2002-03-14 Globalstar L.P. Deferring DNS service for a satellite ISP system using non-geosynchronous orbit satellites
AU2001259826A1 (en) 2000-05-03 2001-11-12 Daniel Schoeffler Method of enabling transmission and reception of communication when current destination for recipient is unknown to sender
US20020016818A1 (en) 2000-05-11 2002-02-07 Shekhar Kirani System and methodology for optimizing delivery of email attachments for disparate devices
AU2001265407A1 (en) 2000-05-31 2001-12-11 Snip, Llc Method and system for instant messaging
US7058586B1 (en) * 2000-06-06 2006-06-06 Pitney Bowes Inc. Information delivery system for providing senders with a recipient's messaging preferences
US7103344B2 (en) * 2000-06-08 2006-09-05 Menard Raymond J Device with passive receiver
GB2364459B (en) * 2000-06-30 2004-03-31 Nokia Mobile Phones Ltd Video error resilience
US6671732B1 (en) 2000-07-24 2003-12-30 Comverse Ltd. Method and apparatus for control of content based rich media streaming
DE60144233D1 (de) * 2000-07-25 2011-04-28 America Online Inc Videonachrichtenübermittlung
JP2002044360A (ja) 2000-07-27 2002-02-08 Toshiba Tec Corp インターネットファクシミリ装置
FI112307B (fi) 2000-08-02 2003-11-14 Nokia Corp Viestintäpalvelu
US7068619B2 (en) 2000-08-07 2006-06-27 Lucent Technologies Inc. Radio link control with limited retransmissions for streaming services
JP3590949B2 (ja) * 2000-08-17 2004-11-17 松下電器産業株式会社 データ伝送装置およびデータ伝送方法
FI110297B (fi) * 2000-08-21 2002-12-31 Mikko Kalervo Vaeaenaenen Lyhytäänisanomajärjestelmä, -menetelmä ja -päätelaite
US6912544B1 (en) 2000-08-31 2005-06-28 Comverse Ltd. System and method for interleaving of material from database and customized audio-visual material
JP3659484B2 (ja) * 2000-09-01 2005-06-15 光洋電子工業株式会社 サイクリック自動通信による複数局メモリデータ共有システム
AU2001288749A1 (en) * 2000-09-06 2002-03-22 Robert Agresta System, device and method for remotely providing, accessing and using personal entertainment media
US6970926B1 (en) 2000-10-03 2005-11-29 Motorola, Inc. Dispatch call server in a packet based communication network
US7114002B1 (en) 2000-10-05 2006-09-26 Mitsubishi Denki Kabushiki Kaisha Packet retransmission system, packet transmission device, packet reception device, packet retransmission method, packet transmission method and packet reception method
US7313593B1 (en) 2000-10-24 2007-12-25 International Business Machines Corporation Method and apparatus for providing full duplex and multipoint IP audio streaming
NZ507800A (en) 2000-10-26 2003-06-30 Interag Device for herd control and/or monitoring procedures
US20020150094A1 (en) 2000-10-27 2002-10-17 Matthew Cheng Hierarchical level-based internet protocol multicasting
US7321557B1 (en) 2000-10-30 2008-01-22 Lucent Technologies Inc. Dynamic latency assignment methodology for bandwidth optimization of packet flows
CN1259222C (zh) * 2000-11-13 2006-06-14 昭和高分子株式会社 装有拉头的可高气密的塑料拉链及装有该塑料拉链的包体
US20020089973A1 (en) 2000-11-17 2002-07-11 Yehuda Manor System and method for integrating voice, video, and data
DE60144246D1 (de) 2000-11-20 2011-04-28 Takeda Pharmaceutical Imidazolderivate, verfahren zu deren herstellung und deren verwendung
US7304951B2 (en) 2000-11-21 2007-12-04 North Carolina State University Methods and systems for rate-based flow control between a sender and a receiver
US7272662B2 (en) * 2000-11-30 2007-09-18 Nms Communications Corporation Systems and methods for routing messages to communications devices over a communications network
JP2002176510A (ja) 2000-12-06 2002-06-21 Mitsubishi Materials Corp 音声通信装置と支援装置、および記録媒体
US7002973B2 (en) 2000-12-11 2006-02-21 Acme Packet Inc. System and method for assisting in controlling real-time transport protocol flow through multiple networks via use of a cluster of session routers
JP2002251494A (ja) * 2000-12-20 2002-09-06 Victor Co Of Japan Ltd デジタルコンテンツデータ配信システム
US7167451B1 (en) * 2000-12-21 2007-01-23 Cisco Technology, Inc. User controlled audio quality for voice-over-IP telephony systems
US7136630B2 (en) 2000-12-22 2006-11-14 Broadcom Corporation Methods of recording voice signals in a mobile set
US6931114B1 (en) * 2000-12-22 2005-08-16 Bellsouth Intellectual Property Corp. Voice chat service on telephone networks
JP2002199088A (ja) 2000-12-26 2002-07-12 Toshiba Corp 移動無線端末
JP2002199019A (ja) 2000-12-27 2002-07-12 Toshiba Corp 通信制御装置、通信制御方法、及び通信制御プログラムが記録された記録媒体
US6976174B2 (en) 2001-01-04 2005-12-13 Troika Networks, Inc. Secure multiprotocol interface
JP2002281081A (ja) 2001-01-10 2002-09-27 Sega Corp データ配信装置、データ配信方法、データ受信装置、及びデータ受信方法
US7054617B2 (en) * 2002-01-11 2006-05-30 Motorola, Inc. Method and apparatus for providing a message creation reference associated with a real-time communication message
US20020131496A1 (en) 2001-01-18 2002-09-19 Vinod Vasudevan System and method for adjusting bit rate and cost of delivery of digital data
WO2002059802A1 (en) 2001-01-25 2002-08-01 Gts Pacific Pty Ltd Non-recorded audio/video stream transmission using electronic mail
US7240105B2 (en) 2001-01-26 2007-07-03 International Business Machines Corporation Distributed multicast caching technique
FI115744B (fi) 2001-02-08 2005-06-30 Nokia Corp Kommunikaatiopalvelu
US20020118798A1 (en) * 2001-02-27 2002-08-29 Christopher Langhart System and method for recording telephone conversations
US6721703B2 (en) * 2001-03-02 2004-04-13 Jay M. Jackson Remote deposition system and method
US20020126201A1 (en) 2001-03-08 2002-09-12 Star-Bak Communication Inc. Systems and methods for connecting video conferencing to a distributed network
WO2002073984A1 (en) 2001-03-09 2002-09-19 Ayman, L.L.C. Universal point of contact identifier system and method
US6807578B2 (en) 2001-03-14 2004-10-19 International Business Machines Corporation Nack suppression for multicast protocols in mostly one-way networks
JP3773799B2 (ja) * 2001-03-16 2006-05-10 三洋電機株式会社 記録再生装置
US20020143959A1 (en) 2001-04-03 2002-10-03 David El-Baze Method and apparatus for interactive direct peer-to-peer multimedia streaming
US6990180B2 (en) * 2001-04-05 2006-01-24 Nokia Mobile Phones Limited Short voice message (SVM) service method, apparatus and system
US20020184368A1 (en) 2001-04-06 2002-12-05 Yunsen Wang Network system, method and protocols for hierarchical service and content distribution via directory enabled network
US6778660B2 (en) * 2001-04-06 2004-08-17 Concerto Software, Inc. Customer interaction system
JP3882187B2 (ja) * 2001-04-19 2007-02-14 日本電気株式会社 フロー制御システムおよび方法
US20020154745A1 (en) 2001-04-24 2002-10-24 Yuri Shtivelman Systems and methods for visual access to voicemail
US8054971B2 (en) 2001-04-27 2011-11-08 Comverse Ltd Free-hand mobile messaging-method and device
DE60218152T2 (de) * 2001-05-02 2007-12-06 Symbian Ltd. Gruppenkommunikationsverfahren für ein funkkommunikationsgerät
JP4767443B2 (ja) * 2001-07-04 2011-09-07 富士通株式会社 ネットワーク蓄積型ビデオカメラシステム
US20040127279A1 (en) 2001-07-20 2004-07-01 Jean-Marie Gatto Methods, systems and email content enabling email recipients to win prizes
US20030027566A1 (en) 2001-07-30 2003-02-06 Comverse Network Systems, Ltd. Session management method & system
US20030028632A1 (en) 2001-08-02 2003-02-06 Davis Thomas G. System and method of multicasting data messages
WO2003021461A1 (en) * 2001-08-03 2003-03-13 Cnm Network, Inc. System and method for integrating voice over internet protocol network with personal computing devices
JP2005509337A (ja) 2001-08-10 2005-04-07 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ コンシューマ携帯電子装置
US20050021819A1 (en) * 2001-08-17 2005-01-27 Kalevi Kilkki Method, network element, and terminal device for making data packets
JP4636219B2 (ja) * 2001-08-21 2011-02-23 日本電気株式会社 音声伝送方法、通信システム及び通信端末
US20030041165A1 (en) * 2001-08-24 2003-02-27 Spencer Percy L. System and method for group video teleconferencing using a bandwidth optimizer
US7117521B2 (en) 2001-08-31 2006-10-03 Intel Corporation Method to measure the perceived quality of streaming media
JP2003078572A (ja) * 2001-09-04 2003-03-14 Nec Corp 音声ゲートウエイ装置
JP4182257B2 (ja) * 2001-09-27 2008-11-19 京セラ株式会社 携帯型視聴装置
US6996624B1 (en) 2001-09-27 2006-02-07 Apple Computer, Inc. Reliable real-time transport protocol
US7415291B1 (en) * 2001-09-28 2008-08-19 At&T Delaware Intellectual Property, Inc. Device and method for augmenting cellular telephone audio signals
JP2003115920A (ja) 2001-10-09 2003-04-18 Toshiba Corp 通信端末
KR100408525B1 (ko) 2001-10-31 2003-12-06 삼성전자주식회사 네트워크에 적응적인 실시간 멀티미디어 스트리밍 시스템및 방법
US20030084106A1 (en) 2001-10-31 2003-05-01 Comverse, Ltd. Efficient transmission of multi-media contents as electronic mail
JP2003143237A (ja) 2001-11-06 2003-05-16 Mitsubishi Electric Corp ネットワーク装置および移動端末情報システム
JP2003152544A (ja) 2001-11-12 2003-05-23 Sony Corp データ通信システム、データ送信装置、データ受信装置、および方法、並びにコンピュータ・プログラム
US7162418B2 (en) * 2001-11-15 2007-01-09 Microsoft Corporation Presentation-quality buffering process for real-time audio
CA2411806A1 (en) 2001-11-16 2003-05-16 Telecommunications Research Laboratory Wide-area content-based routing architecture
US7356079B2 (en) * 2001-11-21 2008-04-08 Vixs Systems Inc. Method and system for rate control during video transcoding
US20030099198A1 (en) 2001-11-27 2003-05-29 Amplify.Net, Inc. Multicast service delivery in a hierarchical network
EP1452000A2 (en) 2001-12-07 2004-09-01 Telefonaktiebolaget LM Ericsson (publ) Lawful interception of end-to-end encrypted data traffic
JP2003174681A (ja) 2001-12-07 2003-06-20 Nec Access Technica Ltd 録音システム、及び録音方法
US6879822B2 (en) 2001-12-20 2005-04-12 Intel Corporation Method and apparatus for providing a wireless communication device with local audio signal storage
US20030126162A1 (en) 2002-01-03 2003-07-03 Yohe Thomas Patrick System and method for synchronizing databases in a secure network environment
JP2003209611A (ja) 2002-01-11 2003-07-25 Denon Ltd 通話記録再生装置
US7266099B2 (en) 2002-01-23 2007-09-04 Hewlett-Packard Development Company, L.P. Method for hand-off of a data session
CN1625880B (zh) * 2002-01-30 2010-08-11 Nxp股份有限公司 在具有可变带宽的网络上流式传输多媒体数据
US6865398B2 (en) * 2002-02-04 2005-03-08 Sprint Spectrum L.P. Method and system for selectively reducing call-setup latency through management of paging frequency and buffering of user speech in a wireless mobile station
CN1187980C (zh) * 2002-02-08 2005-02-02 华庆国阳信息科技（上海）有限公司 在广播网的单向同轴电缆上实现视频点播的视频流发送方法
US20040039839A1 (en) 2002-02-11 2004-02-26 Shivkumar Kalyanaraman Connectionless internet traffic engineering framework
US7228359B1 (en) 2002-02-12 2007-06-05 Cisco Technology, Inc. Methods and apparatus for providing domain name service based on a client identifier
US6874089B2 (en) 2002-02-25 2005-03-29 Network Resonance, Inc. System, method and computer program product for guaranteeing electronic transactions
US6781962B1 (en) 2002-02-26 2004-08-24 Jetque Apparatus and method for voice message control
US20040252679A1 (en) 2002-02-26 2004-12-16 Tim Williams Stored voice message control extensions
US7324444B1 (en) * 2002-03-05 2008-01-29 The Board Of Trustees Of The Leland Stanford Junior University Adaptive playout scheduling for multimedia communication
US7937443B2 (en) 2002-03-10 2011-05-03 Talkway, Inc. Email messaging program with built-in video and/or audio media recording and/or playback capabilities
US6973309B1 (en) 2002-03-14 2005-12-06 Utstarcom, Inc. Method and system for re-direction and handoff for pre-paid mobile services in third generation networks
WO2003081449A1 (en) * 2002-03-20 2003-10-02 Thomson Licensing S.A. Videoconference system architecture
JP2003289380A (ja) 2002-03-28 2003-10-10 Nec Corp 音声符号化方式の変更方法、通信システム、通信網および通信端末
US20030186722A1 (en) 2002-03-28 2003-10-02 Comverse, Ltd. Method and device for real time GSM user device profile interrogation and registration
US7035385B2 (en) 2002-03-29 2006-04-25 Bellsouth Intellectual Property Corporation Method and system for screening calls during voicemail messaging
JP4368125B2 (ja) * 2002-04-05 2009-11-18 パナソニック株式会社 コンテンツ受信および音声通話が可能な通信端末装置
JP2003304273A (ja) * 2002-04-08 2003-10-24 Rikogaku Shinkokai パケット中継装置、パケット中継プログラム、およびパケット中継方法
US7327708B2 (en) * 2002-04-25 2008-02-05 Inet Technologies, Inc. Multimedia traffic optimization
US20030210265A1 (en) * 2002-05-10 2003-11-13 Haimberg Nadav Y. Interactive chat messaging
US7403775B2 (en) * 2002-05-24 2008-07-22 Kodiak Networks, Inc. Roaming gateway for support of advanced voice services while roaming in wireless communications systems
US7738892B2 (en) * 2002-05-24 2010-06-15 Kodiak Networks, Inc. Architecture, client specification and application programming interface (API) for supporting advanced voice services (AVS) including push to talk on wireless handsets and networks
US20030236892A1 (en) * 2002-05-31 2003-12-25 Stephane Coulombe System for adaptation of SIP messages based on recipient's terminal capabilities and preferences
JP4254996B2 (ja) 2002-06-04 2009-04-15 株式会社日立製作所 コミュニケーションシステムおよびコミュニケーション方法
US8005461B2 (en) 2002-06-10 2011-08-23 Research In Motion Limited Voicemail notification messaging for mobile communication devices
US7340482B2 (en) 2002-06-12 2008-03-04 Eastman Kodak Company Preview function in a digital data preservation system
US6996009B2 (en) * 2002-06-21 2006-02-07 Micron Technology, Inc. NOR flash memory cell with high storage density
US7091851B2 (en) 2002-07-02 2006-08-15 Tri-Sentinel, Inc. Geolocation system-enabled speaker-microphone accessory for radio communication devices
JP2004038575A (ja) * 2002-07-03 2004-02-05 Sony Corp データ送受信システム及びデータ送受信方法、情報提供装置及び情報提供方法、並びにデータ受信装置及びデータ受信方法
US7623653B2 (en) 2002-07-15 2009-11-24 At&T Intellectual Property I, L.P. Systems and methods for passing through alternative network device features to plain old telephone system (POTS) devices
US7111044B2 (en) * 2002-07-17 2006-09-19 Fastmobile, Inc. Method and system for displaying group chat sessions on wireless mobile terminals
US8150922B2 (en) 2002-07-17 2012-04-03 Research In Motion Limited Voice and text group chat display management techniques for wireless mobile terminals
AU2003259278A1 (en) 2002-07-18 2004-02-09 M-Qube, Inc.D Wireless messaging address system and method
US7184530B2 (en) 2002-07-25 2007-02-27 Utstarcom, Inc. Prepaid billing support for simultaneous communication sessions in data networks
US20040019539A1 (en) 2002-07-25 2004-01-29 3Com Corporation Prepaid billing system for wireless data networks
US6829473B2 (en) 2002-07-25 2004-12-07 Utstarcom, Inc. Roaming and hand-off support for prepaid billing for wireless data networks
US7218709B2 (en) 2002-07-29 2007-05-15 At&T Corp. Intelligent voicemail message waiting system and method
JP2004062038A (ja) * 2002-07-31 2004-02-26 Nec Lcd Technologies Ltd 液晶表示装置
US7349871B2 (en) 2002-08-08 2008-03-25 Fujitsu Limited Methods for purchasing of goods and services
US7725730B2 (en) * 2002-08-09 2010-05-25 Emc Corporation Cryptographic methods and apparatus for secure authentication
FI20021527A0 (fi) * 2002-08-27 2002-08-27 Oplayo Oy Menetelmä ja järjestelmä mediavirran kaistanleveyden säätämiseksi
JP2004088466A (ja) * 2002-08-27 2004-03-18 Nec Corp ライブ映像配信システム
US20060116167A1 (en) 2002-09-02 2006-06-01 Roni Raviv Selectable functionality communication system and methodologies
US7383345B2 (en) 2002-09-04 2008-06-03 Darby & Mohaine L.L.C. Client-server emulation supporting multicast transmissions of media objects
US7180997B2 (en) 2002-09-06 2007-02-20 Cisco Technology, Inc. Method and system for improving the intelligibility of a moderator during a multiparty communication session
US6904058B2 (en) * 2002-09-20 2005-06-07 Intel Corporation Transmitting data over a general packet radio service wireless network
FR2844948B1 (fr) * 2002-09-23 2005-01-07 Eastman Kodak Co Procede d'archivage de messages multimedias
FI116498B (fi) 2002-09-23 2005-11-30 Nokia Corp Kaistanleveyden mukauttaminen
JP4276917B2 (ja) 2002-09-30 2009-06-10 パナソニック株式会社 車載用ハンズフリー装置
FI116816B (fi) * 2002-10-14 2006-02-28 Nokia Corp Median suoratoisto
US20040151158A1 (en) 2002-11-08 2004-08-05 Ecrio, Inc. Method and apparatus for exchanging voice over data channels in near real time
US7187941B2 (en) 2002-11-14 2007-03-06 Northrop Grumman Corporation Secure network-routed voice processing
US7801133B2 (en) 2002-11-14 2010-09-21 Northrop Grumman Corporation Secure network-routed voice multicast dissemination
AU2003295834A1 (en) 2002-11-25 2004-06-18 Telesector Resources Group, Inc. Methods and systems for conference call buffering
US7036040B2 (en) * 2002-11-26 2006-04-25 Microsoft Corporation Reliability of diskless network-bootable computers using non-volatile memory cache
JP3815562B2 (ja) 2002-11-28 2006-08-30 インターナショナル・ビジネス・マシーンズ・コーポレーション データ処理方法、これを用いた通信システム、そのデータ送信装置、データ受信装置及びプログラム
JP2004186997A (ja) * 2002-12-03 2004-07-02 Sharp Corp デジタル記録再生装置
US7693058B2 (en) 2002-12-03 2010-04-06 Hewlett-Packard Development Company, L.P. Method for enhancing transmission quality of streaming media
US7058392B1 (en) * 2002-12-03 2006-06-06 At&T Corp. Systems, methods and devices for reliable asynchronous message transmissions
US20040125816A1 (en) * 2002-12-13 2004-07-01 Haifeng Xu Method and apparatus for providing a buffer architecture to improve presentation quality of images
US7606252B2 (en) 2002-12-16 2009-10-20 Gemini Mobile Technologies, Inc. Stateless message routing
JP2004201096A (ja) 2002-12-19 2004-07-15 Matsushita Electric Ind Co Ltd 学習支援システム
JP2006511162A (ja) 2002-12-20 2006-03-30 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ 受信機駆動のストリーミングシステムでのマルチトラックヒンティング
US20040119814A1 (en) 2002-12-20 2004-06-24 Clisham Allister B. Video conferencing system and method
US7613773B2 (en) 2002-12-31 2009-11-03 Rensselaer Polytechnic Institute Asynchronous network audio/visual collaboration system
US6940813B2 (en) 2003-02-05 2005-09-06 Nokia Corporation System and method for facilitating end-to-end quality of service in message transmissions employing message queues
US7603472B2 (en) 2003-02-19 2009-10-13 Google Inc. Zero-minute virus and spam detection
JP2004266503A (ja) * 2003-02-28 2004-09-24 Matsushita Electric Ind Co Ltd 映像伝送システム
US20070168863A1 (en) * 2003-03-03 2007-07-19 Aol Llc Interacting avatars in an instant messaging communication session
US20050086311A1 (en) * 2003-03-03 2005-04-21 Noel Enete Regulating self-disclosure for video messenger
GB2403438B (en) * 2003-03-06 2005-07-27 Three Star Enviromental Ltd Screening apparatus
US20040230659A1 (en) 2003-03-12 2004-11-18 Chase Michael John Systems and methods of media messaging
US20040179092A1 (en) * 2003-03-14 2004-09-16 Lapoint Donald A. Videoconferencing communication system
JP3719251B2 (ja) 2003-03-24 2005-11-24 コニカミノルタビジネステクノロジーズ株式会社 画像処理装置
US20040192378A1 (en) 2003-03-25 2004-09-30 Comverse, Ltd. Wireless switchboard system
US8229086B2 (en) * 2003-04-01 2012-07-24 Silent Communication Ltd Apparatus, system and method for providing silently selectable audible communication
US20040207724A1 (en) * 2003-04-17 2004-10-21 Siemens Information And Communication Networks, Inc. System and method for real time playback of conferencing streams
US7397811B2 (en) 2003-04-23 2008-07-08 Ericsson Ab Method and apparatus for determining shared broadcast domains of network switches, ports and interfaces
US20040225728A1 (en) 2003-05-05 2004-11-11 Huggins Guy Dwayne Network and communications system for streaming media applications
US20040225743A1 (en) 2003-05-05 2004-11-11 Huggins Guy Dwayne Streaming media creation tool
EP1621034A1 (en) 2003-05-08 2006-02-01 Vimplicity Ltd. Methods and systems for instant voice messaging and instant voice message retrieval
EP1623588B1 (en) 2003-05-13 2011-06-29 TELEFONAKTIEBOLAGET LM ERICSSON (publ) Method of reducing connection set-up delay
US7359004B2 (en) * 2003-05-23 2008-04-15 Microsoft Corporation Bi-level and full-color video combination for video communication
US7277453B2 (en) * 2003-05-30 2007-10-02 Motorola, Inc. Inter private network communications between IPv4 hosts using IPv6
CN1219386C (zh) * 2003-06-27 2005-09-14 中国科学院计算技术研究所 利用分组头中的ttl和服务类型字段的传输时延调度方法
US7639728B2 (en) * 2003-07-08 2009-12-29 Qualcomm Incorporated Methods for generating and transmitting frequency hopped signals
US8638910B2 (en) 2003-07-14 2014-01-28 Cisco Technology, Inc. Integration of enterprise voicemail in mobile systems
KR100540241B1 (ko) * 2003-07-21 2006-01-11 엘지전자 주식회사 메시지 관리방법
JP4218456B2 (ja) * 2003-07-25 2009-02-04 ソニー株式会社 通話装置、通話方法及び通話システム
US7636327B1 (en) 2003-07-29 2009-12-22 Sprint Spectrum L.P. Method and system for selectively operating in a half-duplex mode or full-duplex mode in a packet-based real-time media conference
US8437284B2 (en) 2003-07-29 2013-05-07 Citrix Systems, Inc. Systems and methods for additional retransmissions of dropped packets
TWI241836B (en) 2003-07-30 2005-10-11 Sk Telecom Co Ltd Method of providing multimedia messaging service using unique message identifier
DE10335432B4 (de) * 2003-07-31 2007-11-29 Nokia Siemens Networks Gmbh & Co.Kg Verfahren zum Übertragen von Nachrichten zwischen Kommunikationsendgeräten
US7236738B2 (en) 2003-08-01 2007-06-26 Pathfire, Inc. Multicast control systems and methods for dynamic, adaptive time, bandwidth,frequency, and satellite allocations
US7039761B2 (en) * 2003-08-11 2006-05-02 Sony Corporation Methodology for performing caching procedures in an electronic network
GB0319251D0 (en) 2003-08-15 2003-09-17 British Telecomm System and method for selecting data providers
JP4102928B2 (ja) * 2003-09-02 2008-06-18 ヤマハ株式会社 データ通信システム、データ送信端末およびプログラム
US7895523B2 (en) * 2003-09-04 2011-02-22 International Business Machines Corporation Method, system and program product for obscuring supplemental web content
EP1671453A4 (en) * 2003-09-10 2010-01-20 Hyperdata Technologies Inc INTERNET PROTOCOL ENHANCER
JP2005092265A (ja) * 2003-09-12 2005-04-07 Nec Corp データ配信システム、サーバ装置、受信端末及びそれらに用いるデータ配信方法並びにそのプログラム
US20130097302A9 (en) * 2003-10-01 2013-04-18 Robert Khedouri Audio visual player apparatus and system and method of content distribution using the same
JP2005117149A (ja) * 2003-10-03 2005-04-28 Nec Access Technica Ltd 携帯電話機
US7257564B2 (en) 2003-10-03 2007-08-14 Tumbleweed Communications Corp. Dynamic message filtering
US20070008884A1 (en) 2003-10-08 2007-01-11 Bob Tang Immediate ready implementation of virtually congestion free guarantedd service capable network
DE60326777D1 (de) 2003-10-23 2009-04-30 Ericsson Telefon Ab L M Mehrbenutzer-streaming
WO2005041456A1 (en) 2003-10-24 2005-05-06 Telefonaktiebolaget Lm Ericsson (Publ) A method and device for audience monitoring on multicast capable networks
US7444306B2 (en) 2003-10-24 2008-10-28 Thomas Bryan Varble Method and apparatus for the rental or sale, and secure distribution of digital content
US9439048B2 (en) * 2003-10-31 2016-09-06 Alcatel Lucent Method and apparatus for providing mobile-to-mobile video capability to a network
US20050102358A1 (en) * 2003-11-10 2005-05-12 Gold Stuart A. Web page monitoring and collaboration system
US7305438B2 (en) * 2003-12-09 2007-12-04 International Business Machines Corporation Method and system for voice on demand private message chat
US7535890B2 (en) * 2003-12-18 2009-05-19 Ayalogic, Inc. System and method for instant VoIP messaging
US20050160345A1 (en) 2003-12-24 2005-07-21 Rod Walsh Apparatus, system, method and computer program product for reliable multicast transport of data packets
US7830965B2 (en) 2004-01-14 2010-11-09 Sony Ericsson Mobile Communications Ab Multimedia distributing and/or playing systems and methods using separate resolution-enhancing supplemental data
CN1305276C (zh) 2004-01-15 2007-03-14 中兴通讯股份有限公司 一种快速处理实时媒体流数据包的方法及其系统
KR100552519B1 (ko) 2004-01-19 2006-02-14 삼성전자주식회사 브이오아이피를 이용한 유엠에스 서비스 제공 시스템 및그 방법
EP1560377B1 (en) * 2004-01-30 2006-12-27 Mitsubishi Denki Kabushiki Kaisha Method and device of dynamic resource allocation in a wireless network
TWI230547B (en) * 2004-02-04 2005-04-01 Ind Tech Res Inst Low-complexity spatial downscaling video transcoder and method thereof
EP1562342A1 (fr) 2004-02-05 2005-08-10 France Telecom Procédé et système de traitement d'un message multimédia
JP4491832B2 (ja) * 2004-02-05 2010-06-30 日本電気株式会社 Ｔｖ会議支援システム、方法及びｔｖ会議支援をコンピュータで実行するプログラム
US7013074B2 (en) 2004-02-06 2006-03-14 Corning Cable Systems Llc Optical connection closure having at least one connector port
JP4365239B2 (ja) 2004-02-25 2009-11-18 パイオニア株式会社 ネットワーク会議システム
US7809388B1 (en) 2004-02-26 2010-10-05 Core Mobility, Inc. Selectively replaying voice data during a voice communication session
DE602004007413T2 (de) 2004-02-27 2008-03-06 Telefonaktiebolaget Lm Ericsson (Publ) Optimierung von ressourcengebrauch in einem paketvermittelten netzwerk
DE102004010368A1 (de) * 2004-03-03 2005-09-29 Siemens Ag Verfahren zum verspäteten Gesprächseinstieg oder Wiedereinstieg mindestens eines Funkkommunikationsgeräts in eine bereits laufende Push-To-Talk-Gruppendiskussion, Funkkommunikationsgerät, Vermittlungseinheit sowie Funkkommunikationsnetz
US20050210394A1 (en) * 2004-03-16 2005-09-22 Crandall Evan S Method for providing concurrent audio-video and audio instant messaging sessions
US20050215228A1 (en) 2004-03-26 2005-09-29 Comverse Ltd. Voice session data session interoperability in the telephony environment
JP4003753B2 (ja) 2004-03-26 2007-11-07 日本電気株式会社 会話サーバ
FR2868643A1 (fr) 2004-03-30 2005-10-07 Thomson Licensing Sa Methode de decouverte d'appareils connectes a un reseau ip et appareil implementant la methode
US9819624B2 (en) 2004-03-31 2017-11-14 Google Inc. Displaying conversations in a conversation-based email system
US8027276B2 (en) 2004-04-14 2011-09-27 Siemens Enterprise Communications, Inc. Mixed mode conferencing
US7031273B2 (en) * 2004-04-23 2006-04-18 Motorola, Inc. Session initiation protocol retransmission method
US7818444B2 (en) 2004-04-30 2010-10-19 Move Networks, Inc. Apparatus, system, and method for multi-bitrate content streaming
US20060023969A1 (en) 2004-04-30 2006-02-02 Lara Eyal D Collaboration and multimedia authoring
US8296366B2 (en) 2004-05-27 2012-10-23 Microsoft Corporation Efficient routing of real-time multimedia information
US20080192661A1 (en) 2004-06-02 2008-08-14 Yasuo Hamamoto Radio Transmission Method
JP2005348192A (ja) 2004-06-04 2005-12-15 Canon Inc 端末装置、端末装置の制御方法、および端末装置の制御プログラム
ES2326223T3 (es) * 2004-06-07 2009-10-05 Agency For Science, Technology And Research Sistemas y procedimientos para codificar y decodificar datos de forma escalable.
KR100547162B1 (ko) * 2004-06-10 2006-01-26 삼성전자주식회사 그래픽 데이터를 포함한 ａｖ 스트림을 기록한정보저장매체, 재생방법 및 장치
US8376855B2 (en) 2004-06-28 2013-02-19 Winview, Inc. Methods and apparatus for distributed gaming over a mobile device
US20070067407A1 (en) 2004-06-30 2007-03-22 Bettis Sonny R Delivery of video mail and video mail receipt notifications
US7929442B2 (en) * 2004-06-30 2011-04-19 Intel Corporation Method, system, and program for managing congestion in a network controller
US7398079B2 (en) 2004-06-30 2008-07-08 Research In Motion Limited Methods and apparatus for automatically recording push-to-talk (PTT) voice communications for replay
JP4340197B2 (ja) * 2004-07-02 2009-10-07 シャープ株式会社 テレビ放送受信機能付き携帯電話装置
US20060007943A1 (en) 2004-07-07 2006-01-12 Fellman Ronald D Method and system for providing site independent real-time multimedia transport over packet-switched networks
US7626979B1 (en) * 2004-07-28 2009-12-01 Sprint Communications Company L.P. Packet voice network border control
US7571246B2 (en) * 2004-07-29 2009-08-04 Microsoft Corporation Media transrating over a bandwidth-limited network
US20060029050A1 (en) 2004-08-05 2006-02-09 Harris John C IP video telephone having integrated devices
FR2874302B1 (fr) 2004-08-16 2006-11-17 Nortel Networks Ltd Procede de gestion de ressources dans un systeme de communication et equipements pour la mise en oeuvre de ce procede
US20060059199A1 (en) 2004-08-18 2006-03-16 Nokia Corporation Cellular radio telecommunications terminal, a system, a method, a computer program and a user interface
US7681100B2 (en) * 2004-08-18 2010-03-16 Pine Valley Investments, Inc. System and method for retransmission of voice packets in wireless communications
US20060045038A1 (en) 2004-08-27 2006-03-02 Stanley Kay Method and apparatus for transmitting and receiving multiple services utilizing a single receiver in a broadband satellite system
US20060046758A1 (en) 2004-09-02 2006-03-02 Mohsen Emami-Nouri Methods of retrieving a message from a message server in a push-to-talk network
US20060045308A1 (en) * 2004-09-02 2006-03-02 Microsoft Corporation Camera and method for watermarking film content
US7415284B2 (en) 2004-09-02 2008-08-19 Sonim Technologies, Inc. Methods of transmitting a message to a message server in a push-to-talk network
EP2458536A1 (en) 2004-09-03 2012-05-30 Open Text S.A. Systems and methods for collaboration
JP4393955B2 (ja) 2004-09-09 2010-01-06 シャープ株式会社 送信装置、データ送信方法、プログラム、および、そのプログラムを記録したコンピュータ読み取り可能な記録媒体
US20060059267A1 (en) 2004-09-13 2006-03-16 Nokia Corporation System, method, and device for downloading content using a second transport protocol within a generic content download protocol
WO2006033997A2 (en) 2004-09-16 2006-03-30 General Instrument Corporation System and method for providing authorized access to digital content
US7418013B2 (en) * 2004-09-22 2008-08-26 Intel Corporation Techniques to synchronize packet rate in voice over packet networks
GB2418566A (en) 2004-09-23 2006-03-29 Samsung Electronics Co Ltd Cross layer implemented Handover
EP1646239A1 (fr) * 2004-10-07 2006-04-12 France Telecom S.A. Procédé et système de transmission d'un message vidéo vers un poste de télévision
US20110029892A1 (en) 2004-10-14 2011-02-03 Cerulean Studios System and Method For Integrating Advanced Multimedia Features Within An Instant Messaging Environment
US20060085515A1 (en) 2004-10-14 2006-04-20 Kevin Kurtz Advanced text analysis and supplemental content processing in an instant messaging environment
US7958369B2 (en) * 2004-10-22 2011-06-07 Hewlett-Packard Development Company, L.P. Systems and methods for multiple level control of access of privileges to protected media content
WO2006049435A1 (en) * 2004-11-03 2006-05-11 Samsung Electronics Co., Ltd. Method and apparatus for transmitting sms message between mobile communication network and wlan and system using the same
US8165109B2 (en) 2004-11-10 2012-04-24 Cisco Technology, Inc. Method for managing the quality of encrypted voice over IP to teleagents
WO2006050751A1 (en) 2004-11-13 2006-05-18 Telefonaktiebolaget Lm Ericsson (Publ) Provision of a multimedia message
US7266198B2 (en) 2004-11-17 2007-09-04 General Instrument Corporation System and method for providing authorized access to digital content
KR100631743B1 (ko) * 2004-11-26 2006-10-11 삼성전자주식회사 스케일러블 비트스트림의 효율적 전송 방법 및 장치
KR100724872B1 (ko) * 2004-12-06 2007-06-04 삼성전자주식회사 휴대용 단말기에서 통화정보 처리방법
JP2006165846A (ja) * 2004-12-06 2006-06-22 Matsushita Electric Ind Co Ltd 携帯電話装置
JP4807948B2 (ja) 2004-12-10 2011-11-02 シャープ株式会社 コンテンツ閲覧方式、情報処理装置、コンテンツ閲覧装置
US7969959B2 (en) 2004-12-16 2011-06-28 Critical Response Systems, Inc. Method and apparatus for efficient and deterministic group alerting
US20060146822A1 (en) 2004-12-30 2006-07-06 Mikolaj Kolakowski System, protocol and associated methods for wireless multimedia distribution
US20060149811A1 (en) * 2004-12-31 2006-07-06 Sony Ericsson Mobile Communications Ab Method for remotely controlling media devices via a communication network
EP1851646A2 (en) * 2005-01-06 2007-11-07 Tervela Inc. Intelligent messaging application programming interface
US7483899B2 (en) 2005-01-11 2009-01-27 International Business Machines Corporation Conversation persistence in real-time collaboration system
FI120176B (fi) 2005-01-13 2009-07-15 Sap Ag Menetelmä ja järjestely puhelinkonferenssin muodostamiseksi
JP2006203548A (ja) * 2005-01-20 2006-08-03 Yamaha Corp 複数話者の音声信号を処理する音声信号処理装置およびプログラム
US7324802B2 (en) * 2005-01-20 2008-01-29 Cisco Technology, Inc. Method and system for managing communication in emergency communication system
US20060167849A1 (en) 2005-01-26 2006-07-27 Echovox Sa Method and system for mobile instant messaging using multiple protocols
KR100810222B1 (ko) * 2005-02-01 2008-03-07 삼성전자주식회사 셀룰러 기반의 푸쉬 투 토크에서 전 이중 통화 제공 방법및 시스템
US7913053B1 (en) * 2005-02-15 2011-03-22 Symantec Operating Corporation System and method for archival of messages in size-limited containers and separate archival of attachments in content addressable storage
JP2006229884A (ja) 2005-02-21 2006-08-31 Ntt Docomo Inc 電話機
CN100466724C (zh) * 2005-02-25 2009-03-04 华为技术有限公司 一种移动视频广播系统及移动视频广播方法
JP4069207B2 (ja) * 2005-02-25 2008-04-02 国立大学法人北陸先端科学技術大学院大学 コミュニケーション装置
WO2006092810A2 (en) 2005-03-03 2006-09-08 Ayyappa Nagubandi A system and method for delivering video email
US9485686B2 (en) 2005-03-04 2016-11-01 Sonim Technologies, Inc. Restructuring data packets to improve voice quality at low bandwidth conditions in wireless networks
US20060203802A1 (en) 2005-03-14 2006-09-14 Hung-Lin Chou Method and system for dynamically specifying and instantly transmitting and representing/displaying call data
US7912959B2 (en) 2005-03-15 2011-03-22 Microsoft Corporation Architecture for building a peer to peer messaging platform
US7543023B2 (en) 2005-03-15 2009-06-02 Microsoft Corporation Service support framework for peer to peer applications
US7493413B2 (en) 2005-03-15 2009-02-17 Microsoft Corporation APIS to build peer to peer messaging applications
EP1864082B1 (en) 2005-03-18 2016-10-26 Gatekeeper Systems, Inc. Two-way communication system for tracking locations and statuses of wheeled vehicles
JP4487028B2 (ja) * 2005-03-31 2010-06-23 ブラザー工業株式会社 配信速度制御装置、配信システム、配信速度制御方法、及び配信速度制御用プログラム
US7856032B2 (en) 2005-04-04 2010-12-21 Current Technologies, Llc Multi-function modem device
US7116349B1 (en) 2005-04-04 2006-10-03 Leadtek Research Inc. Method of videophone data transmission
US8031645B2 (en) 2005-04-08 2011-10-04 Qualcomm Incorporated Archival of session data exchanged with a wireless communication network
US20060232663A1 (en) 2005-04-14 2006-10-19 Any Corner Llc Systems and methods for a multimedia communications system
KR20060111036A (ko) 2005-04-21 2006-10-26 삼성전자주식회사 약전계 상황을 고려한 이동 통신 단말기에서의 화상 통화서비스 제공 방법
EP1875769B1 (en) 2005-04-28 2018-03-28 Apple Inc. Multi-participant conferencing
US8346862B2 (en) 2005-04-28 2013-01-01 Nokia Corporation Mobile communication terminal and method
US7957363B2 (en) 2005-05-26 2011-06-07 International Business Machines Corporation System, method, and service for dynamically selecting an optimum message pathway
US20060274721A1 (en) 2005-06-01 2006-12-07 Texas Instruments Incorporated Delivery of video or voice mail messages over a packet network
EP1891760A1 (en) 2005-06-03 2008-02-27 Terahop Networks, Inc. Using wake-up receivers for soft hand-off in wireless communications
US7387607B2 (en) 2005-06-06 2008-06-17 Intel Corporation Wireless medical sensor system
US9401934B2 (en) * 2005-06-22 2016-07-26 Microsoft Technology Licensing, Llc Establishing sessions with defined quality of service
US9300790B2 (en) 2005-06-24 2016-03-29 Securus Technologies, Inc. Multi-party conversation analyzer and logger
US7333026B2 (en) 2005-06-29 2008-02-19 Denso Corporation Collaborative multicast for dissemination of information in vehicular ad-hoc networks
US7730142B2 (en) 2005-07-01 2010-06-01 0733660 B.C. Ltd. Electronic mail system with functionality to include both private and public messages in a communication
JP4515979B2 (ja) 2005-07-06 2010-08-04 ユニデン株式会社 Ｉｐ電話機
US9432710B2 (en) 2005-07-08 2016-08-30 At&T Intellectual Property I, L.P. Methods systems, and products for conserving bandwidth
US20090129295A1 (en) * 2005-07-13 2009-05-21 Sharp Kabushiki Kaisha Electronic Conference System, Electronic Conference Managing Device, Terminal Device, Electronic Conference Managing Method, Control Program, and Computer-Readable Storage Medium Storing Same Control Program
US8954510B2 (en) * 2005-07-26 2015-02-10 International Business Machines Corporation Parsing emails
WO2007020627A1 (en) 2005-08-15 2007-02-22 John Roujinsky Method and system for obtaining feedback from at least one recipient via a telecommunication network
JP4156615B2 (ja) 2005-08-22 2008-09-24 ソニー・エリクソン・モバイルコミュニケーションズ株式会社 携帯電話機、通信端末、通話方法及び通話プログラム
US8605718B2 (en) 2005-08-30 2013-12-10 Babitech Ltd. Immediate communication system
JP4549954B2 (ja) * 2005-09-07 2010-09-22 株式会社カシオ日立モバイルコミュニケーションズ テレビ機能付き携帯端末装置及びプログラム
US8775662B2 (en) 2005-09-27 2014-07-08 Blackberry Limited System and method for progressive delivery of multimedia objects
WO2007036032A1 (en) 2005-09-27 2007-04-05 Slipstream Data Inc. System and method for progressive delivery of multimedia objects
US8098603B2 (en) * 2005-09-30 2012-01-17 Intel Corporation Bandwidth adaptation in a wireless network
US7626951B2 (en) * 2005-10-06 2009-12-01 Telecommunication Systems, Inc. Voice Over Internet Protocol (VoIP) location based conferencing
DE102005048388B4 (de) * 2005-10-10 2007-07-26 Siemens Ag Verfahren zur Strahlungskorrektur eines CT-Systems
JP2007110395A (ja) * 2005-10-13 2007-04-26 Sharp Corp ストリームデータ転送装置、ストリームデータ転送方法、及びそれらに用いるプログラム及び記録媒体
EP1943601A1 (en) 2005-10-25 2008-07-16 Koninklijke Philips Electronics N.V. Method and apparatus for traffic flow control of streaming video data
US8156186B2 (en) * 2005-11-11 2012-04-10 Scenera Technologies, Llc Method and system for organizing electronic messages using eye-gaze technology
US7428416B2 (en) 2005-11-29 2008-09-23 Motorola, Inc. Handover in a cellular communication system
CN1852421A (zh) 2005-11-30 2006-10-25 华为技术有限公司 一种实现直播与时移播放之间切换的方法
WO2007064987A2 (en) 2005-12-04 2007-06-07 Turner Broadcasting System, Inc. (Tbs, Inc.) System and method for delivering video and audio content over a network
US20070133405A1 (en) 2005-12-08 2007-06-14 Microsoft Corporation Congestion controller for network transmissions
US7869579B2 (en) 2005-12-09 2011-01-11 Yahoo! Inc. Selectable replay of buffered conversation in a VOIP session
JP2007172264A (ja) 2005-12-21 2007-07-05 Victor Co Of Japan Ltd 電子メール動画再生システム
US7587031B1 (en) 2005-12-22 2009-09-08 Nortel Networks Limited Forced hold call handling in a VoP environment
WO2007072059A1 (en) 2005-12-22 2007-06-28 Intellprop Limited Telecommunications services apparatus and methods
CN100421469C (zh) * 2005-12-23 2008-09-24 华为技术有限公司 实现实时视频信息共享的系统及方法
GB2456593B (en) 2005-12-28 2011-07-13 Intel Corp A novel user sensitive information adaptive video transcoding framework
TWI301025B (en) 2005-12-28 2008-09-11 Ind Tech Res Inst Method for transmitting real-time streaming data and apparatus using the same
FI20055717A0 (fi) 2005-12-30 2005-12-30 Nokia Corp Koodinmuunnosmenetelmä matkaviestinjärjestelmässä
JP4714025B2 (ja) 2006-01-06 2011-06-29 株式会社日立製作所 センサノード、基地局、センサネット及びセンシングデータの送信方法
CN101356796A (zh) 2006-01-06 2009-01-28 奥拉蒂夫公司 移动系统中企业语音邮件的集成
US7634652B2 (en) * 2006-01-12 2009-12-15 Microsoft Corporation Management of streaming content
CA2636010A1 (en) 2006-01-17 2007-07-17 Baker Hughes Inc SYSTEM AND METHOD FOR REMOTE DATA ACQUISITION AND DISTRIBUTION
US7864732B2 (en) * 2006-01-27 2011-01-04 Mediatek Inc. Systems and methods for handoff in wireless network
US20070180032A1 (en) 2006-01-27 2007-08-02 Sbc Knowledge Ventures Lp Method for email service in a visual voicemail system
CN103533515B (zh) 2006-02-03 2016-11-16 黑莓有限公司 实现一键通媒体突发的通信的方法和用户设备
WO2007092568A2 (en) 2006-02-07 2007-08-16 3Jam, Inc. Methods and devices for including a plurality of users in a conversation over a communication network
JP2009527140A (ja) * 2006-02-13 2009-07-23 ノキア コーポレイション 連続接続性送信における適応プリアンブル長
US7924890B2 (en) 2006-02-13 2011-04-12 Cisco Technology, Inc. Apparatus and method for increasing reliability of data sensitive to packet loss
US20070192427A1 (en) * 2006-02-16 2007-08-16 Viktors Berstis Ease of use feature for audio communications within chat conferences
US8483191B2 (en) * 2006-02-21 2013-07-09 Cisco Technology, Inc. System and method for selectively manipulating control traffic to improve network performance
US20070207782A1 (en) 2006-03-06 2007-09-06 Tran Bao Q Multimedia telephone
US20070226804A1 (en) * 2006-03-22 2007-09-27 Method and system for preventing an unauthorized message
CN101047529B (zh) 2006-03-28 2011-03-30 华为技术有限公司 媒体会话数据发送控制方法、控制关系协商方法及控制系统
US7899045B2 (en) 2006-03-29 2011-03-01 Intel Corporation TCP multicast system and method
EP2005680A1 (en) 2006-04-05 2008-12-24 James Andrew Wanless A method and system for smart route dialling to a destination identifier using a telephone
KR100739804B1 (ko) 2006-05-11 2007-07-13 삼성전자주식회사 데이터 통신의 ＱｏＳ 보장 방법 및 장치
US8189621B2 (en) 2006-05-12 2012-05-29 Microsoft Corporation Stack signaling to application with lack of requested bandwidth
US20070271331A1 (en) 2006-05-17 2007-11-22 Steve Muth System of archiving and repurposing a complex group conversation referencing networked media
US8315377B2 (en) 2006-05-17 2012-11-20 France Telecom Method and device for dispatching an alert message in a network
US7570670B2 (en) * 2006-05-19 2009-08-04 Alcatel-Lucent Usa Inc. Method and system for communicating and processing VOIP packets using a jitter buffer
WO2007140139A2 (en) 2006-05-22 2007-12-06 Vidiator Enterprises, Inc. Method and apparatus for mobile personal video recorder
US20070274293A1 (en) * 2006-05-26 2007-11-29 Microsoft Corporation Archiving VoIP conversations
GB2438454B (en) 2006-05-26 2008-08-06 Motorola Inc Method and system for communication
US20070288574A1 (en) 2006-06-09 2007-12-13 Daren Koster System and method of email streaming digital video for subscribers
US20070287477A1 (en) * 2006-06-12 2007-12-13 Available For Licensing Mobile device with shakeable snow rendering
US20070294263A1 (en) * 2006-06-16 2007-12-20 Ericsson, Inc. Associating independent multimedia sources into a conference call
WO2007148300A2 (en) 2006-06-20 2007-12-27 Gal Zuckerman Methods and systems for push-to-storage
CN101094057A (zh) * 2006-06-20 2007-12-26 国际商业机器公司 内容分发方法、装置及系统
US7406560B2 (en) 2006-06-21 2008-07-29 Intel Corporation Using multiple non-volatile memory devices to store data in a computer system
US20080002691A1 (en) 2006-06-29 2008-01-03 Qi Emily H Device, system and method of multicast/broadcast communication
US20080002621A1 (en) 2006-06-29 2008-01-03 Boris Ginzburg Reliable multicast techniques for wireless links
WO2008000289A1 (en) 2006-06-29 2008-01-03 Telecom Italia S.P.A. Method and apparatus for improving bandwith exploitation in real-time audio/video communications
US8727208B2 (en) 2006-06-30 2014-05-20 Intel-Ge Care Innovations Llc Method for identifying pills via an optical device
US8194643B2 (en) 2006-10-19 2012-06-05 Embarq Holdings Company, Llc System and method for monitoring the connection of an end-user to a remote network
US8045682B2 (en) 2006-06-30 2011-10-25 Sony Ericsson Mobile Communications Ab Stream current song
US8817955B2 (en) 2006-06-30 2014-08-26 Microsoft Corporation Peer-to-peer broadcasting in a VoIP system
US7668161B2 (en) * 2006-07-27 2010-02-23 Cisco Technology, Inc. Classifying data packet protocol values
US20080025300A1 (en) * 2006-07-31 2008-01-31 Texas Instruments Incorporated Method and/or apparatus for enabling voice packet redundancy
US20080031250A1 (en) 2006-08-01 2008-02-07 Mehta Neelesh B Energy accumulation in destination nodes of wireless relay networks
US7961212B2 (en) 2006-08-14 2011-06-14 Verizon Data Services Llc Video messaging system
US7898950B2 (en) 2006-08-18 2011-03-01 Microsoft Corporation Techniques to perform rate matching for multimedia conference calls
US7818474B2 (en) * 2006-09-29 2010-10-19 Hibbard Gary D Provisional load sharing buffer for reducing hard disk drive (HDD) activity and improving reliability and lifetime
US8224904B2 (en) 2006-09-29 2012-07-17 Microsoft Corporation Missed instant message notification
US7656836B2 (en) 2006-10-05 2010-02-02 Avaya Inc. Centralized controller for distributed handling of telecommunications features
US20080086700A1 (en) 2006-10-06 2008-04-10 Rodriguez Robert A Systems and Methods for Isolating On-Screen Textual Data
US20080091804A1 (en) * 2006-10-11 2008-04-17 Cingular Wireless Ii, Llc Media delivery utilizing intelligent group list management
US20080091838A1 (en) * 2006-10-12 2008-04-17 Sean Miceli Multi-level congestion control for large scale video conferences
US7698371B2 (en) * 2006-10-16 2010-04-13 Hewlett-Packard Development Company, L.P. Communicating by video without replicating data
US8855275B2 (en) * 2006-10-18 2014-10-07 Sony Online Entertainment Llc System and method for regulating overlapping media messages
US7719975B2 (en) * 2006-10-25 2010-05-18 Reqall, Inc. Method and system for communication session under conditions of bandwidth starvation
US7962637B2 (en) * 2006-11-03 2011-06-14 Apple Computer, Inc. Dynamic adjustments of video streams
US20080115087A1 (en) * 2006-11-13 2008-05-15 Microsoft Corporation Tracking recent contacts
US7626942B2 (en) * 2006-11-22 2009-12-01 Spectra Link Corp. Method of conducting an audio communications session using incorrect timestamps
US8228898B2 (en) * 2006-11-27 2012-07-24 International Business Machines Corporation Method and system for distributed call recording
US8832277B2 (en) 2006-11-30 2014-09-09 Red Hat, Inc. Community tagging of a multimedia stream and linking to related content
US9762861B2 (en) 2006-12-05 2017-09-12 Excalibur Ip, Llc Telepresence via wireless streaming multicast
US20080151786A1 (en) * 2006-12-21 2008-06-26 Motorola, Inc. Method and apparatus for hybrid audio-visual communication
US8019364B2 (en) 2006-12-21 2011-09-13 Telefonaktiebolaget L M Ericsson (Publ) Methods for providing feedback in messaging systems
US20080163312A1 (en) 2006-12-28 2008-07-03 Meca Communications, Inc. System and method for providing content relating to a communication
EP1940097B1 (en) * 2006-12-28 2010-04-28 Ericsson AB Messaging method and server
US8463927B2 (en) 2006-12-29 2013-06-11 Ebay Inc. Video mail through peer to peer network
US7890589B2 (en) 2007-01-04 2011-02-15 Research In Motion Limited System and method for providing information on a received communication for an electronic communication device
US8116236B2 (en) * 2007-01-04 2012-02-14 Cisco Technology, Inc. Audio conferencing utilizing packets with unencrypted power level information
US7822050B2 (en) 2007-01-09 2010-10-26 Cisco Technology, Inc. Buffering, pausing and condensing a live phone call
US7840203B2 (en) 2007-01-22 2010-11-23 Shin Edward M Process and system for automatically transmitting audio/video content from an electronic device to desired recipient(s)
US7617337B1 (en) 2007-02-06 2009-11-10 Avaya Inc. VoIP quality tradeoff system
US20080192903A1 (en) 2007-02-14 2008-08-14 Trinh Trung Tim System and method for facilitating voice communication using presence services
US7817584B2 (en) * 2007-02-28 2010-10-19 International Business Machines Corporation Method and system for managing simultaneous electronic communications
US8671146B2 (en) * 2007-02-28 2014-03-11 Microsoft Corporation Presence aware notification for information technology management
US8271003B1 (en) 2007-03-23 2012-09-18 Smith Micro Software, Inc Displaying visual representation of voice messages
US8159518B2 (en) 2007-03-23 2012-04-17 Verizon Patent And Licensing Inc. Video streaming system
US20080256255A1 (en) * 2007-04-11 2008-10-16 Metro Enterprises, Inc. Process for streaming media data in a peer-to-peer network
US8300773B2 (en) 2007-04-30 2012-10-30 Hewlett-Packard Development Company, L.P. Telephonic recording system and method
US8498405B2 (en) * 2007-04-30 2013-07-30 Oracle Otc Subsidiary Llc Method and apparatus for enhanced call reporting
US8175638B2 (en) * 2007-05-02 2012-05-08 Demand Media, Inc. Virtual video message answering machine platform
US8671210B2 (en) 2007-05-07 2014-03-11 At&T Intellectual Property I, L.P. Methods, devices, systems, and computer program products for managing and delivering a live media stream
US20080288989A1 (en) 2007-05-14 2008-11-20 Zheng Yu Brian System, Methods and Apparatus for Video Communications
DE102007028640A1 (de) 2007-06-21 2008-12-24 Siemens Enterprise Communications Gmbh & Co. Kg Verfahren, Endgerät und Sprachspeicher zum Speichern von Sprachnachrichten in einem Kommunikationsnetz
US8825772B2 (en) 2007-06-28 2014-09-02 Voxer Ip Llc System and method for operating a server for real-time communication of time-based media
US8688789B2 (en) 2009-01-30 2014-04-01 Voxer Ip Llc Progressive messaging apparatus and method capable of supporting near real-time communication
US8645477B2 (en) 2009-01-30 2014-02-04 Voxer Ip Llc Progressive messaging apparatus and method capable of supporting near real-time communication
US9178916B2 (en) 2007-06-28 2015-11-03 Voxer Ip Llc Real-time messaging method and apparatus
US8533611B2 (en) 2009-08-10 2013-09-10 Voxer Ip Llc Browser enabled communication device for conducting conversations in either a real-time mode, a time-shifted mode, and with the ability to seamlessly shift the conversation between the two modes
US20100198923A1 (en) 2009-01-30 2010-08-05 Rebelvox Llc Methods for using the addressing, protocols and the infrastructure of email to support near real-time communication
US20110019662A1 (en) 2007-06-28 2011-01-27 Rebelvox Llc Method for downloading and using a communication application through a web browser
US11095583B2 (en) 2007-06-28 2021-08-17 Voxer Ip Llc Real-time messaging method and apparatus
US8180029B2 (en) 2007-06-28 2012-05-15 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US7941754B2 (en) 2007-06-29 2011-05-10 Nokia Corporation Media content distribution indicator
US7903550B2 (en) 2007-07-27 2011-03-08 Silicon Image, Inc. Bandwidth reservation for data flows in interconnection networks
US8027365B2 (en) * 2007-07-27 2011-09-27 Realnetworks, Inc. System and method for combining media data
US8688788B2 (en) 2007-08-03 2014-04-01 Blackberry Limited System and method for automatically responding to a message sent to a user at an email server
US8103726B2 (en) 2007-08-17 2012-01-24 International Business Machines Corporation Analyzing email content to determine potential intended recipients
US9667545B2 (en) * 2007-09-04 2017-05-30 International Business Machines Corporation Method and system for aggregate bandwidth control
US8090867B2 (en) * 2007-10-19 2012-01-03 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8682336B2 (en) * 2007-10-19 2014-03-25 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US20090103529A1 (en) * 2007-10-19 2009-04-23 Rebelvox, Llc Telecommunication and multimedia management method and apparatus
US8559319B2 (en) 2007-10-19 2013-10-15 Voxer Ip Llc Method and system for real-time synchronization across a distributed services communication network
US8001261B2 (en) * 2007-10-19 2011-08-16 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8699383B2 (en) 2007-10-19 2014-04-15 Voxer Ip Llc Method and apparatus for real-time synchronization of voice communications
US8391312B2 (en) * 2007-10-19 2013-03-05 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8321581B2 (en) * 2007-10-19 2012-11-27 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8380874B2 (en) * 2007-10-19 2013-02-19 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8099512B2 (en) 2007-10-19 2012-01-17 Voxer Ip Llc Method and system for real-time synchronization across a distributed services communication network
US8706907B2 (en) * 2007-10-19 2014-04-22 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8145780B2 (en) * 2007-10-19 2012-03-27 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8699678B2 (en) * 2007-10-19 2014-04-15 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8111713B2 (en) * 2007-10-19 2012-02-07 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
EP2091203A1 (en) 2008-02-12 2009-08-19 Koninklijke KPN N.V. Method and system for transmitting a multimedia stream
US8706092B2 (en) * 2008-01-03 2014-04-22 Apple Inc. Outgoing voice mail recording and playback
US8401582B2 (en) 2008-04-11 2013-03-19 Voxer Ip Llc Time-shifting for push to talk voice communication systems
US11017160B2 (en) 2008-07-03 2021-05-25 Ebay Inc. Systems and methods for publishing and/or sharing media presentations over a network
CN101686383B (zh) * 2008-09-23 2013-05-01 Utc消防和保安美国有限公司 通过网络传输媒体的方法及系统
US8849927B2 (en) 2009-01-30 2014-09-30 Voxer Ip Llc Method for implementing real-time voice messaging on a server node
US8340646B2 (en) 2009-05-01 2012-12-25 T-Mobile Usa, Inc. Direct voicemailing
US20110252083A1 (en) 2010-04-13 2011-10-13 Rebelvox, Llc Apparatus and method for transmitting media using either network efficient protocol or a loss tolerant transmission protocol
US20120114108A1 (en) 2010-09-27 2012-05-10 Voxer Ip Llc Messaging communication application
GB2509323B (en) * 2012-12-28 2015-01-07 Glide Talk Ltd Reduced latency server-mediated audio-video communication
TWI507046B (zh) * 2013-08-02 2015-11-01 Hon Hai Prec Ind Co Ltd 視頻留言系統、終端及實現方法

Also Published As

Publication number Publication date
CN101690094B (zh) 2014-01-15
US8948354B2 (en) 2015-02-03
KR101398254B1 (ko) 2014-05-22
WO2009006101A2 (en) 2009-01-08
CN108134735B (zh) 2021-07-16
EP2151113A2 (en) 2010-02-10
JP2014195255A (ja) 2014-10-09
US9456087B2 (en) 2016-09-27
JP5627045B2 (ja) 2014-11-19
US8121270B2 (en) 2012-02-21
JP2010534872A (ja) 2010-11-11
KR20130052037A (ko) 2013-05-21
AU2008270967B2 (en) 2012-11-15
KR20130052039A (ko) 2013-05-21
CN107948058B (zh) 2021-07-20
KR101527662B1 (ko) 2015-06-09
US20230065310A1 (en) 2023-03-02
US10158591B2 (en) 2018-12-18
US20090003544A1 (en) 2009-01-01
US20220394004A1 (en) 2022-12-08
US20230051915A1 (en) 2023-02-16
CA2837935A1 (en) 2009-01-08
ATE516653T1 (de) 2011-07-15
AU2008270956B2 (en) 2012-04-12
US10129191B2 (en) 2018-11-13
CN108134735A (zh) 2018-06-08
US20180205683A1 (en) 2018-07-19
US20190052590A1 (en) 2019-02-14
US11777883B2 (en) 2023-10-03
US20130058328A1 (en) 2013-03-07
JP2013176086A (ja) 2013-09-05
CN107948058A (zh) 2018-04-20
EP2147536B1 (en) 2011-09-28
US20120219131A1 (en) 2012-08-30
CN101690091A (zh) 2010-03-31
US20090003559A1 (en) 2009-01-01
KR101552365B1 (ko) 2015-09-10
KR20100036220A (ko) 2010-04-07
KR101397231B1 (ko) 2014-05-20
US20090003537A1 (en) 2009-01-01
US20160352666A1 (en) 2016-12-01
US20090003560A1 (en) 2009-01-01
CA2837947C (en) 2014-07-08
WO2009005896A1 (en) 2009-01-08
JP6265495B2 (ja) 2018-01-24
CN101730996A (zh) 2010-06-09
WO2009006101A3 (en) 2009-06-04
US11700219B2 (en) 2023-07-11
US20180219815A1 (en) 2018-08-02
JP2010534956A (ja) 2010-11-11
US9608947B2 (en) 2017-03-28
JP2010534957A (ja) 2010-11-11
CA2692976A1 (en) 2009-01-08
US8345836B2 (en) 2013-01-01
WO2009005882A1 (en) 2009-01-08
AU2008270699A1 (en) 2009-01-08
AU2008270895A1 (en) 2009-01-08
CA2691814A1 (en) 2009-01-08
US8180029B2 (en) 2012-05-15
ATE528901T1 (de) 2011-10-15
CN101690091B (zh) 2014-12-10
US8670531B2 (en) 2014-03-11
US20090003545A1 (en) 2009-01-01
EP2147536A1 (en) 2010-01-27
US20140355488A1 (en) 2014-12-04
CN101690095A (zh) 2010-03-31
CA2837950A1 (en) 2009-01-08
US20090003553A1 (en) 2009-01-01
US8121271B2 (en) 2012-02-21
US8175234B2 (en) 2012-05-08
EP2143250A1 (en) 2010-01-13
US8718244B2 (en) 2014-05-06
CN101690094A (zh) 2010-03-31
US20120275583A1 (en) 2012-11-01
KR20100037118A (ko) 2010-04-08
EP2171971B1 (en) 2012-07-11
AU2008270896A1 (en) 2009-01-08
JP2013211849A (ja) 2013-10-10
CN101690093A (zh) 2010-03-31
US8744050B2 (en) 2014-06-03
US20090103475A1 (en) 2009-04-23
US20170237695A1 (en) 2017-08-17
WO2009005893A1 (en) 2009-01-08
US8107604B2 (en) 2012-01-31
CA2692951A1 (en) 2009-01-08
CN101730996B (zh) 2014-01-15
US20160380929A1 (en) 2016-12-29
JP5529731B2 (ja) 2014-06-25
CN108540437A (zh) 2018-09-14
US10841261B2 (en) 2020-11-17
EP2375686A3 (en) 2013-05-15
US20230047999A1 (en) 2023-02-16
US8565149B2 (en) 2013-10-22
CA2691817A1 (en) 2009-01-08
US10511557B2 (en) 2019-12-17
EP2137923A1 (en) 2009-12-30
US20090003536A1 (en) 2009-01-01
CN101682622B (zh) 2018-01-02
US20200067859A1 (en) 2020-02-27
US20090003563A1 (en) 2009-01-01
DE602008006511D1 (de) 2011-06-09
US20090003247A1 (en) 2009-01-01
US20090003546A1 (en) 2009-01-01
US20210021552A1 (en) 2021-01-21
CA2837950C (en) 2014-09-09
KR20100028118A (ko) 2010-03-11
US20160359776A1 (en) 2016-12-08
CA2691945A1 (en) 2009-01-08
US20090003554A1 (en) 2009-01-01
EP2151113B1 (en) 2011-10-12
US20090003547A1 (en) 2009-01-01
US8693647B2 (en) 2014-04-08
US8130921B2 (en) 2012-03-06
CN101690092B (zh) 2014-01-15
KR101397255B1 (ko) 2014-05-20
EP2080340B1 (en) 2011-04-27
KR20100046158A (ko) 2010-05-06
KR101545793B1 (ko) 2015-08-19
US9621491B2 (en) 2017-04-11
US20120288074A1 (en) 2012-11-15
JP2010534955A (ja) 2010-11-11
US20140189029A1 (en) 2014-07-03
EP2393259A2 (en) 2011-12-07
JP2010532636A (ja) 2010-10-07
EP2080340A1 (en) 2009-07-22
WO2009005885A3 (en) 2009-02-19
JP2010532135A (ja) 2010-09-30
AU2008270967A1 (en) 2009-01-08
CA2691814C (en) 2016-09-13
ATE526768T1 (de) 2011-10-15
US11658929B2 (en) 2023-05-23
ATE527800T1 (de) 2011-10-15
ATE507653T1 (de) 2011-05-15
US8705714B2 (en) 2014-04-22
AU2008270896B2 (en) 2012-11-15
US20120148035A1 (en) 2012-06-14
US20100215158A1 (en) 2010-08-26
WO2009005913A4 (en) 2009-02-26
US10142270B2 (en) 2018-11-27
CN101690093B (zh) 2014-12-10
US20090003558A1 (en) 2009-01-01
AU2008270956A1 (en) 2009-01-08
CA2692928A1 (en) 2009-01-08
JP5871341B2 (ja) 2016-03-01
AU2008270895B2 (en) 2013-03-14
JP2015111844A (ja) 2015-06-18
KR20100046156A (ko) 2010-05-06
US20090003339A1 (en) 2009-01-01
WO2009005914A1 (en) 2009-01-08
EP2171971A1 (en) 2010-04-07
JP2013176087A (ja) 2013-09-05
CN101682622A (zh) 2010-03-24
US8311050B2 (en) 2012-11-13
AU2008270878A1 (en) 2009-01-08
CA2682184A1 (en) 2009-01-08
US9154628B2 (en) 2015-10-06
KR101336527B1 (ko) 2013-12-03
EP2143250B1 (en) 2011-07-13
US11658927B2 (en) 2023-05-23
US20150319308A1 (en) 2015-11-05
US20090003557A1 (en) 2009-01-01
US8687779B2 (en) 2014-04-01
WO2009005913A1 (en) 2009-01-08
US8902749B2 (en) 2014-12-02
EP2375686A2 (en) 2011-10-12
US8762566B2 (en) 2014-06-24
US11146516B2 (en) 2021-10-12
CN101690092A (zh) 2010-03-31
US20100217822A1 (en) 2010-08-26
US8243894B2 (en) 2012-08-14
US20090003340A1 (en) 2009-01-01
US8532270B2 (en) 2013-09-10
CA2837947A1 (en) 2009-01-08
JP2010533394A (ja) 2010-10-21
JP5130360B2 (ja) 2013-01-30
US8526456B2 (en) 2013-09-03
CA2682184C (en) 2014-09-23
AU2008270959A1 (en) 2009-01-08
EP2137923B1 (en) 2011-10-05
US8180030B2 (en) 2012-05-15
CN101690095B (zh) 2014-01-15
JP5666647B2 (ja) 2015-02-12
EP2393259B1 (en) 2016-08-17
US20210409362A1 (en) 2021-12-30
KR20100046157A (ko) 2010-05-06
US20240064119A1 (en) 2024-02-22
AU2008270959B2 (en) 2012-12-20
US9674122B2 (en) 2017-06-06
CA2837935C (en) 2014-09-02
EP2393259A3 (en) 2013-05-15
WO2009005885A2 (en) 2009-01-08
KR101397332B1 (ko) 2014-05-19

Similar Documents

Publication Publication Date Title
US11777883B2 (en) Telecommunication and multimedia management method and apparatus
US8001261B2 (en) Telecommunication and multimedia management method and apparatus
EP2080342B1 (en) Multimedia communications method
AU2013201918B2 (en) Multimedia communications device

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A107 Divisional application of patent
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170224

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180223

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190313

Year of fee payment: 6