JP2007527128A - メデイアストリームの混合 - Google Patents

メデイアストリームの混合 Download PDF

Info

Publication number
JP2007527128A
JP2007527128A JP2006515867A JP2006515867A JP2007527128A JP 2007527128 A JP2007527128 A JP 2007527128A JP 2006515867 A JP2006515867 A JP 2006515867A JP 2006515867 A JP2006515867 A JP 2006515867A JP 2007527128 A JP2007527128 A JP 2007527128A
Authority
JP
Japan
Prior art keywords
media stream
signal
type
combining
communication device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006515867A
Other languages
English (en)
Other versions
JP5026785B2 (ja
JP2007527128A5 (ja
Inventor
ビョルン ノルハンマー，
トビアス リンドクイスト，
Original Assignee
ソニー エリクソン モバイル コミュニケーションズ， エービー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from EP03013877A external-priority patent/EP1489823B1/en
Application filed by ソニー エリクソン モバイル コミュニケーションズ， エービー filed Critical ソニー エリクソン モバイル コミュニケーションズ， エービー
Publication of JP2007527128A publication Critical patent/JP2007527128A/ja
Publication of JP2007527128A5 publication Critical patent/JP2007527128A5/ja
Application granted granted Critical
Publication of JP5026785B2 publication Critical patent/JP5026785B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454—Content or additional data filtering, e.g. blocking advertisements
    • H04N21/4545—Input to filtering algorithms, e.g. filtering a region of the image
    • H04N21/45455—Input to filtering algorithms, e.g. filtering a region of the image applied to a region of the image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725—Cordless telephones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368—Multiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341—Demultiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347—Demultiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N2007/145—Handheld terminals

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephonic Communication Services (AREA)

Abstract

【課題】少なくとも２つのメデイアストリームをリアルタイム合成する。
【解決手段】本発明は第１リアルタイムメデイアストリームと第２メデイアストリームを混合してリアルタイムに同期出力メデイアストリームを提供する方法および携帯通信機器２００に関する。メデイアストリームの混合物の提供は、たとえば多くの魅力ある機能を提供する。本発明はいかに移動体ＶＴ応用技術の利用を拡大するか、また携帯通信機器に使われる時、いかに整合性の問題を扱うことが出来るかに関連する。
【選択図】図１

Description

本発明は、携帯通信機器における少なくとも２つのメデイアストリームのリアルタイム混合に関する。特に、本発明は、リアルタイム送信された出力メデイアストリームを提供するため、少なくとも２つのメデイアストリームをリアルタイム混合する方法および機器に関する。
多くの第３世代携帯端末は、３ＧＰＰ仕様３２４Ｍに基づくビデオ電話（Video Telephony(VT)）アプリケーションが実装されると予測される。このＶＴアプリケーションは、リアルタイム音声及び映像情報を含む通信により、個人と個人との間の接続を可能とする。これらのアプリケーションは、音声と画像情報の両方を含んだ１つの単一映像ストリームの記録及び発生を備える。
もし、携帯通信機器において２つの異なるメデイアストリームを合成することが可能であれば、１つのストリームの音声と他のストリームからの音声とを交換するとか、１つのストリームの画像情報と他のストリームの画像情報とを置き換える等の、多くの魅力ある機能を提供することが可能である。
ＶＴを使用する興味深い方法のひとつに、"show & tell”と呼ばれる使い方がある。これは、音声および画像情報を含む録画されたビデオを再生しているとき、声（音声）がこのストリームに同時に追加される。
さらに、或る消費者は、明らかに不適当な場所で、またはセキュリテイの理由から他人が見ることを許されていない場所で撮影されたことを問題にする。明らかなリアルタイム動画は、たとえば２つの異なる動画の合成であり、その１つは場所を映し、他の１つは消費者を映す。
本発明は、移動体ＶＴアプリケーションの利用をどの様に促進するか、そしてビデオ電話で使われる時に整合性の問題をどの様に取り扱うことが出来るかに関連する。
したがって、少なくとも１つがリアルタイムストリームである２つの別々の入力ストリームに基づいた出力メデイアストリームを提供可能な方法および機器の要求がある。
本発明は、したがって、出力メデイアストリームが第１（リアルタイム）メデイアストリームと第２メデイアストリームの混合物である、携帯通信機器から送信されている前記リアルタイム同期出力メデイアストリームを提供する課題を解決するものである。
これは、携帯通信機器で第１メデイアストリームをリアルタイムに発生し、前記出力メデイアストリームを形成するために、前記第１メデイアストリームと第２メデイアストリームをリアルタイムに合成することを提供することで達成される。
本発明の1つの目的は、第１リアルタイムメデイアストリームと第２メデイアストリームからなるリアルタイム出力メデイアストリームを形成する方法を提供することである。
本発明の第１の側面によれば、この目的は、メデイアストリームが第１型式の信号よりなり、携帯通信機器からの通信セッション中に送信される出力メデイアストリームを形成するための方法であって、
前記携帯通信機器において第１メデイアストリームをリアルタイムに発生し、
前記出力メデイアストリームを形成するために、前記第１メデイアストリームと第２メデイアストリームをリアルタイムに合成する、ステップを備える方法により達成される。 本発明の第２の側面は、前記第１の側面の特徴を含む方法であって、前記出力メデイアストリームは第２型式の信号を備える。
本発明の第３の側面は、前記第１の側面の特徴を含む方法であって、前記出力メデイアストリームを送信するステップをさらに備える。
本発明の第４の側面は、前記第１の側面の特徴を含む方法であって、他の機器との接続を確立するステップをさらに備える。
本発明の第５の側面は、前記第４の側面の特徴を含む方法であって、前記接続は回路スイッチ型接続である。
本発明の第６の側面は、前記第１の側面の特徴を含む方法であって、前記ステップの少なくとも１つは、前記携帯通信機器のユーザからの入力データに依存する。
本発明の第７の側面は、前記第１の側面の特徴を含む方法であって、前記合成するステップは、前記第１メデイアストリームからの第１型式の信号と、前記第２メデイアストリームからの第２型式の信号との合成を備える。
本発明の第８の側面は、前記第１の側面の特徴を含む方法であって、前記合成するステップは、前記第１メデイアストリームからの第１型式の信号と、前記第２メデイアストリームの前記第１型式の信号との合成を備える。
本発明の第９の側面は、前記第８の側面の特徴を含む方法であって、前記合成するステップは、前記第１メデイアストリームからの第２型式の信号と、前記第２メデイアストリームからの前記信号とを合成するステップをさらに備える。
本発明の第１０の側面は、前記第８の側面の特徴を含む方法であって、前記合成するステップは、前記第１メデイアストリームからの信号と、前記第２メデイアストリームからの前記第２型式の信号とを合成するステップをさらに備える。
本発明の第１１の側面は、前記第１０の側面の特徴を含む方法であって、前記合成するステップは、前記第１メデイアストリームからの前記第２型式の信号と、前記第２メデイアストリームからの信号とを合成するステップをさらに備える。
本発明の第１２の側面は、前記第１１の側面の特徴を含む方法であって、前記合成するステップは、前記出力メデイアストリームの中に前記第２メデイアストリームからの同期した信号を提供するために、合成する前に、同じメデイアストリームの他の形式の信号に関連させて、前記第２メデイアストリームの１の型式の信号を遅延するステップをさらに備える。
本発明の第１３の側面は、前記第１０の側面の特徴を含む方法であって、前記合成するステップは、前記第１型式の信号と、前記第２型式の信号を別々に合成するステップをさらに備える。
本発明の第１４の側面は、前記第９の側面または前記第１１の側面の特徴を含む方法であって、前記合成するステップは、前記出力メデイアストリームの中に前記第１メデイアストリームからの同期した信号を提供するために、同じメデイアストリームの他の形式の信号に関連させて、前記出力メデイアストリームの中の１の型式の信号を遅延するステップをさらに備える。
本発明の第１５の側面は、前記第９の側面の特徴を含む方法であって、前記第１型式の信号が音声信号である場合、前記信号を合成するステップは、前記第１型式の信号を重畳するステップをさらに備える。
本発明の第１６の側面は、前記第１５の側面の特徴を含む方法であって、前記重畳するステップは、前記第１メデイアストリームおよび前記第２メデイアストリームからの音声信号の特性の重み付けをするステップをさらに備える。
本発明の第１７の側面は、前記第９の側面の特徴を含む方法であって、前記第１型式の信号が画像信号である場合、前記信号を合成するステップは、前記第１型式の信号を混合するステップをさらに備える。
本発明の第１８の側面は、前記第１７の側面の特徴を含む方法であって、前記混合ステップは、前記第１メデイアストリームおよび前記第２メデイアストリームからの画像信号の特性の重み付けをするステップをさらに備える。
本発明の第１９の側面は、前記第１６の側面の特徴を含む方法であって、前記特性の重み付けをするステップは、前記第２メデイアストリームからの信号の特性に関連させて、前記第１メデイアストリームからの信号の割合を変えるステップを含む。
本発明の第２０の側面は、前記第１９の側面の特徴を含む方法であって、前記特性の重み付けをするステップは、前記携帯通信機器のユーザの入力データに依存する。
本発明の第２１の側面は、前記第１９の側面の特徴を含む方法であって、前記割合を変える前記ステップは、０と１００％との間の範囲の中で各特性を変えるステップを備える。
本発明の他の目的は、第１リアルタイムメデイアストリームと第２メデイアストリームよりなるリアルタイム出力メデイアストリームを形成するための携帯通信機器を提供することである。
本発明の第２２の側面によれば、この目的は、出力メデイアストリームが第１型式の信号を備え、携帯通信機器からの通信セッション中に送信される出力メデイアストリームを形成する携帯通信機器であって、
第１メデイアストリームを発生するために提供される少なくとも１つの発生ユニットと、前記発生ユニットに接続され、前記第１メデイアストリームと第２メデイアストリームをリアルタイムに合成するために提供される第１合成ユニットと、
ユーザ入力に依存して前記発生ユニットおよび前記第１合成ユニットを制御する制御ユニットと、を備える携帯通信機器で達成される。
本発明の第２３の側面は、前記第２２の側面を含む携帯通信機器であって、前記第１合成ユニットが前記第１および第２メデイアストリームの両方の前記第１型式の信号を合成するために提供され、前記出力メデイアストリームが前記第１型式および第２型式の信号を備える携帯通信機器からの通信セッション中に送信される出力メデイアストリームを形成するための携帯通信機器であって、第２合成ユニットと、をさらに備え、前記第２合成ユニットを使用して、前記第１メデイアストリームからの前記第２型式の信号と前記第２メデイアストリームからの前記第２型式の信号を合成する。
本発明の第２４の側面は、前記第２２の側面を含む携帯通信機器であって、前記第２メデイアストリームのための蓄積部を提供するメモリユニットをさらに備える。
本発明の第２５の側面は、前記第２２の側面を含む携帯通信機器であって、コントロールユニットに接続されて、それにより発生ユニットおよび全ての合成ユニットがユーザ入力にしたがって制御される、ユーザ入力を提供するためのユーザ入力インターフェースをさらに備える。
本発明の第２６の側面は、前記第２３の側面を含む携帯通信機器であって、前記出力メデイアストリームの中で、前記同じ第１メデイアストリームからの他の型式の信号に関連させて、前記第１メデイアストリームからの１の型式の信号の同期を提供するためのマルチプレクシングユニット（２２０）をさらに備える。
本発明の第２７の側面は、前記第２３の側面を含む携帯通信機器であって、前記出力メデイアストリームの中で、同期した信号を提供する遅延ユニットをさらに備える。
本発明の第２８の側面は、前記第２７の側面を含む携帯通信機器であって、前記遅延ユニットは、前記第１メデイアストリームと合成する前に、前記第２メデイアストリームからの信号の同期を提供する。
本発明の第２９の側面は、前記第２８の側面を含む携帯通信機器であって、前記遅延ユニットは、前記同じ第２メデイアストリームからの他の型式の信号に関連して、１の型式の信号の同期を提供する。
本発明は、第１リアルタイムメデイアストリームが第２第２メデイアストリームと合成された出力メデイアストリームを提供する。これは、前記２つのメデイアストリームが、たとえば多くの異なる魅力ある機能を提供するために多くの方法で合成される点において特徴を有する。
移動体機器のユーザは、通信相手に別々にビデオカメラ画像を送る代わりに、先立って録画された映像や音声を、先に録画された映像にリアルタイムの声または音声を混合しながら送信することが可能となり、それにより、通信相手に、相手が実際にいる場所とは違う場所にいることの認識を提供できる。そのような効果は、先に録画された映像の中に、ユーザの顔のような動画情報を混合することでさらに強調される。
ビデオ電話の呼び出しを受けた時、移動体映像応答装置を提供するために、呼び出しに対してカメラからのリアルタイムビデオカメラ画像を送らずに、動画または静止画を含み、メモリに蓄積されている先に録画された映像応答メッセージを再生するように決めることが可能である。
会話の途中で、通信機器のユーザは、ＶＴセッションの出力メデイアストリームの中に提供することで、映像または静止画の情報内容を即座に共有することが可能である。これは、すなわち、同時マルチメデイアを可能とする使い方が可能である。
他の例は、ＶＴセッションの立ち上がり時に、先に録画された映像ファイルの送信の使用であって、そこでは、ファイルは通信料金の減額に適する広告を含むことが出来る。
この明細書で、用語（備える／備えている）が使われるときは、その特徴、構造、ステップ、構成物の存在を特定するが、１または１以上の他の特徴、構造、ステップ、構成物、またはそれらのグループの存在を排除するものではない点を強調しておく。
本発明によれば、少なくとも１つがリアルタイムストリームである２つの別々の入力ストリームに基づいた出力メデイアストリームを提供可能な方法および機器を提供することが出来る。
本発明は、携帯通信機器からの通信セッション中に送信される同期した出力メデイアストリームの形成に関する。
本願の好ましい実施例による特徴は、通信機器の３Ｇ−３２４Ｍアプリケーションで得られる。これを達成するために、Ｈ．２４５プロトコルの柔軟性がアップデートされたＳＷ/ＨＷアーキテクチャと共に利用される。
次に、携帯通信機器から送信される同期した出力メデイアストリームをリアルタイムに提供する方法および本発明に係る携帯通信機器のそれぞれを図示する、図１と図２を参照する。
この好ましい実施例によれば、前記方法は携帯通信機器２００と他の通信機器との間で接続を確立する、ステップ１０２で始まるもので、それを使って携帯通信機器のユーザはＶＴ通信セッションを確立することを希望する。これはユーザがユーザ入力インターフェース２０２を介してＶＴセッションを選択することでなされ、この選択に基づき、制御ユニット２０４は送信ユニット２２２に他の機器とのＶＴセッションを設定する。音声および画像情報、すなわち、第１第２型式の信号の両方を有する第１メデイアストリームの発生のステップ１０４は、共に制御ユニット２０４で制御される音声発生ユニット２０６および画像発生ユニット２０８で実行される。これは、画像発生ユニット２０８の中に構成されているカメラで画像を、そして音声発生ユニット２０６の中に有するマイクロフォンで音声を記録することでなされる。
本実施例によれば、第１メデイアストリームは、音声および画像情報の両方で構成される。次に、第２メデイアストリームを提供するステップ１０６は、メモリユニット２１０から前記メデイアストリームを得ることで実行される。またこれは、ユーザ入力に依存した制御ユニットの制御を介してなされる。この好ましい実施例において、このメモリユニットは携帯通信機器２００に含まれて構成された内部メモリである。第２メデイアストリームは混合された音声および画像情報を含むので、このストリームはこれら２つの信号を分離するように分解される。これはデマルチプレックスユニット２１２で実行される。この好ましい実施例によれば、混合するのに好ましいフォーマットを得るために、デマルチプレックスユニット２１２は画像フォーマットのデコーデイングを実行する。好ましいフォーマットは、例えばＹＵＶフォーマットである。このデマルチプレックスユニット２１２は、さらに音声情報を好ましいフォーマットにデコードする。この音声フォーマットは、たとえばＰＣＭフォーマットである。このデマルチプレックスユニット２１２は、合成ユニット２１６および２１８において、同じ型式の情報を合成するステップを助けて音声および／または画像情報のビットレートを変換するために、さらにビットレート変換能力を有する。第１および第２メデイアストリームはこうして音声および画像情報をそれぞれ含んでいるデコードされた分離した型式の信号を含む。
本発明によれば、上記した異なる信号型式の分解およびデコードは異なる量の時間を消耗する。この好ましい実施例においては、通常の場合、画像処理経路は音声処理経路より、より多くの時間を必要とする。第２メデイアストリームから、順次同期した音声および画像情報よりなる出力メデイアストリームを得るために、この第２ストリームからの音声情報は、遅延ユニット２１４での遅延するステップ１０８を受ける。ここでの遅延量は、さらに異なる処理ステップの時間の違いに基づき制御ユニットにより決定される。しかしながら、ここで使われる遅延量は、また第１メデイアストリームの音声と画像情報との間の時間差に依存する。第２メデイアストリームに有効な遅延ユニット２１４は、したがって、出力メデイアストリームに有効なマルチプレックスユニット２２０による引き続く同期の１部分、すなわち第１メデイアストリームの中で、音声と画像情報との間のタイミングの違いによる部分を補償しなければならない。
音声と画像のような分離した形の情報は合成が前提となる。両方のストリームからの音声情報は、ステップ１１０にあるように第１合成ユニット２１６で合成される。第２合成ユニット２１８は、同様にステップ１１２で両ストリームからの画像情報を合成する。音声情報の合成は、第１ストリームの音声情報を第２ストリームの音声情報に重畳することで行われる。この合成はさらに第１ストリームからの音声情報と第２ストリームからの音声情報の特性の重み付けを含む。これは他のストリームからの音声情報の特性に関連させて１つのストリームからの音声情報の特性の変更を網羅する。
本発明の好ましい本実施例によれば、第１合成ユニット２１６は、合成された音声情報をＡＭＲのような好ましいフォーマットへの符号化を含む。
画像情報については、合成ユニット２１８が第１ストリームからの画像情報と第２ストリームからの画像情報をａ合成と呼ばれる処理で合成するが、このａ合成はこの分野の当業者には良く知られており、ここではさらに説明はしない。しかしながら、この画像情報の合成は、第１ストリームおよび第２ストリームからの画像情報の特性の重み付けを含む。第１合成ユニット２１６による音声情報の合成と同様に、第２合成ユニット２１８での特性の重み付けは、他のストリームからの画像情報の特性に関連させて１のストリームからの画像情報の特性の変更を含む。
音声および画像情報の特性の重み付けは、ユーザ入力インターフェース２０２を介してユーザから得られたユーザ入力データに依存する。
さらに、この好ましい実施例によれば、第２合成ユニット２１８は、合成画像情報をＭＰＥＧ−４のような好ましいフォーマットへの符号化を含む。
２つの異なるストリームからの同じ型式の情報を合成するステップは、マルチプレクシングユニット２２０によるステップ１１４の出力メデイアストリームの形成に引き続いて行われる。
マルチプレクシングユニット２２０は、さらに第１メデイアストリームからの２つの型式の情報の間で内部同期を行う、すなわちこのストリームからの音声を画像情報に同期させるために同期能力を含む。この同期では、第１ストリームにおける音声情報と画像情報との時間差が考慮される。しかしながら、また、一方では音声情報が合成ユニットを通過するのに要する時間と、他方では画像情報が合成ユニットを通過するのに要する時間との間の時間差も考慮する。これらの必要とされた期間は、主として合成されるメデイアストリームに音声および／または画像情報が存在することに依存する。
第１メデイアストリームからの情報と、第２ストリームの同期情報を含む出力メデイアストリームが形成されると、合成された合成出力ストリームは、送信ユニット２２２によりステップ１１６でリアルタイム送信されることになる。
図２に示した携帯通信機器を参照すると、制御ユニット２０４は、ユーザ入力データインターフェース２０２からのユーザ入力データを受信した際にこれらを制御するため、全ての他の実行ユニットに接続されている。第１メデイアストリームを発生するステップ、ステップ１０４、第２メデイアストリームの提供、ステップ１０６および音声情報を合成するステップ、ステップ１１０、画像情報の合成およびステップ１１２は、ユーザ入力データを要求する。
さらに、音声または画像情報のいずれか正しい形式の情報を遅延させるため、遅延ユニットにおいて正しい型式の情報であることを前提に遅延を調整するため、第２合成ユニット２１２と制御ユニット２０４との間に帰還信号系が含まれる。
本発明は、たとえば次のように色々な方法で変形することが出来る。
第１メデイアストリームは、ただ画像情報だけ、ただ音声情報だけ、あるいは両方の組み合わせを備えることが可能である。第２メデイアストリームもまた、ただ画像情報だけ、ただ音声情報だけ、あるいは両方の組み合わせを備えることが可能である。第１および第２メデイアストリームのこれら全ての変形例は、組み合わせることが可能である。メモリユニットは、機器の中に固定することも、携帯通信機器に接続または挿入可能なメモリステイックまたは他のメモリユニットのような差し替え可能なユニットとすることも可能である。
画像情報は第１または第２ストリームの中に、動画、または静止画と動画の両方の組み合わせとして提供することが出来る。
第２メデイアストリームの音声情報の処理は、同じストリームの画像情報の処理より時間が掛かるが、これは、同期した情報を含む出力２メデイアストリームを得るために、第２メデイアストリームの画像情報は音声情報との関係において遅延される必要があるからである。
第２メデイアストリームは、さらに多くの異なるコードのいずれかを用いてコード化された音声および画像情報を含む。第１および第２合成ユニットは、さらに重畳された音声情報と合成された画像情報を多くの異なるフォーマットにコード化するコード化能力を有する。
他の実施例によれば、単一のメデイアストリーム発生ユニットからの単一の混合された第１メデイアストリームとして、第１メデイアストリームは提供される。この場合、音声情報と画像情報とを別々に合成するステップの前に、付加的なユニットとしてこの混合されたメデイアストリームを分解するデマルチプレックスユニットが必要である。
他の実現可能な変形例は、この方法のステップを異なる順序で実行することにある。
さらに、２つ以上の異なる型式の情報を持つ出力メデイアストリームを形成するのと同様に、２つ以上のメデイアストリームから出力メデイアストリームを形成することが可能である。さらに、マルチメデイアストリームからの情報を合成することで、出力メデイアストリームを形成することが可能である。
本発明のさらに他の実施例においては、第１および第２リアルタイムメデイアストリームは混合される。この場合、第２メデイアストリームはリアルタイムで携帯通信機器に提供される。この実施例の１例は、たとえば携帯機器の前面に設置されたカメラからの１のリアルタイムメデイアストリームと、たとえば携帯機器の後面に設置された同じカメラからの他のリアルタイムメデイアストリームとを合成することである。異なる、あるいは反対の方向に定められた２つのカメと共に、たとえば観光スポットの前に立って、腕を伸ばして手に携帯機器を保持することは、音声および画像情報を含む自分のメデイアストリームを、自分が現在いる場所、すなわち観光スポットの音声および画像を含む第２メデイアストリームに合成するのを可能とする。このように、たとえば２番目の人を探すことを必要とせず、音声および画像情報を含むリアルタイムストリームに自分自身を含ませるのは簡単であり、便利である。
前記するように、本発明は、第１メデイアストリームを第２メデイアストリームに混合することにより、リアルタイムで出力メデイアストリームを形成する方法および機器である。
メデイアストリームの混合の提供は、たとえば多くの魅力ある機能を提供する。
別に映像カメラ画像を通信相手に送る代わりに、携帯機器のユーザは先に録画された映像に声または音声情報を混合して、先に録画された映像または音声を送信することが可能である。この混合はリアルタイムですぐに実行されるので、受信相手は、ユーザが実際居る所とは異なる、例えば贅沢な休暇リゾート地等の他の場所に居る印象を受けると思う。 ユーザの顔を先に録画された映像に混合するなど、動く画像情報を混合することによって、この効果はさらに強調される。
これは、たとえば、通信相手がセキュリテイの理由からその場所を見ることが許されない場合等の他の状況でも応用できる。
ビデオ電話の呼び出しを受けた時、ユーザは呼び出し相手にカメラからのリアルタイムビデオカメラ画像を送信する代わりに、メモリに蓄積され動画像または静止画像を含む録画された映像応答メッセージを再生するように決めることが可能である。この特徴は、この様に携帯映像応答装置として用いることが出来る。ユーザは生の映像カメラをＯＮとしようとは思わないかも知れないので、ＶＴ呼び出し応答し、しかもまだ呼び出し相手からの写真を受信する可能性がある時、これは非常に有用である。
会話している間、通信機器のユーザはメデイアファイル交換の担い手として映像または静止画像等の内容情報を即時に共有することができ、同時化マルチメデイアを可能とする。
ＶＴセッッションのセットアップ中に宣伝広告を含ますことが可能な録画映像ファイルを送信すれば、減額された通信費用の適格性がある。
本発明は、同封の図面に関連してさらに詳細に説明される。
携帯通信機器から送信されるリアルタイムに同期出力メデイアストリームを提供する方法を示し、前記出力メデイアストリームは第１メデイアストリームと第２メデイアストリームとの混合物である。 図１の方法によって発生される同期出力メデイアストリームを提供する携帯通信機器を描く。

Claims (29)

  1. メデイアストリームが第１型式の信号を備え、携帯通信機器からの通信セッション中に送信されるべき出力メデイアストリームを形成するための方法であって、
    前記携帯通信機器において第１メデイアストリームをリアルタイムに発生し、
    前記出力メデイアストリームを形成するために、前記第１メデイアストリームと第２メデイアストリームをリアルタイムに合成する、ステップを備える方法。
  2. 前記出力メデイアストリームは、第２型式の信号を備える請求項１に記載の方法。
  3. 前記出力メデイアストリームを送信するステップをさらに備える請求項１に記載の方法。
  4. 他の機器との接続を確立するステップをさらに備える請求項１に記載の方法。
  5. 前記接続は、回路スイッチ型接続である請求項４に記載の方法。
  6. 前記ステップの少なくとも１つは、前記携帯通信機器のユーザからの入力データに依存する前記請求項のいずれか１項に記載の方法。
  7. 前記合成するステップは、前記第１メデイアストリームからの第１型式の信号と、前記第２メデイアストリームの第２型式の信号との合成を備える請求項１に記載の方法。
  8. 前記合成するステップは、前記第１メデイアストリームからの第１型式の信号と、前記第２メデイアストリームからの前記第１型式の信号との合成を備える請求項１に記載の方法。
  9. 前記合成するステップは、前記第１メデイアストリームからの第２型式の信号と、前記第２メデイアストリームからの前記信号との合成をさらに備える請求項８に記載の方法。
  10. 前記合成するステップは、前記第１メデイアストリームからの信号と、前記第２メデイアストリームからの前記第２型式の信号との合成をさらに備える請求項８に記載の方法。
  11. 前記合成するステップは、前記第１メデイアストリームからの前記第２型式の信号と、前記第２メデイアストリームからの信号との合成をさらに備える請求項１０に記載の方法。
  12. 前記合成するステップは、
    前記出力メデイアストリームの中に前記第２メデイアストリームからの同期した信号を提供するために、合成する前に、前記同じメデイアストリームの他の形式の信号に関連させて、前記第２メデイアストリームの１の型式の信号を遅延するステップをさらに備える請求項１１に記載の方法。
  13. 前記合成するステップは、前記第１型式の信号と、前記第２型式の信号の別々な合成をさらに備える請求項１０に記載の方法。
  14. 前記合成するステップは、
    前記出力メデイアストリームの中に前記第１メデイアストリームからの同期した信号を提供するために、前記同じメデイアストリームの他の形式の信号に関連させて、前記出力メデイアストリームの中の１の型式の信号の遅延をさらに備える請求項９に記載の方法。
  15. 前記第１型式の信号が音声信号である場合、前記信号を合成するステップは、前記第１型式の信号を重畳するステップをさらに備える請求項９に記載の方法。
  16. 前記重畳するステップは、前記第１メデイアストリームおよび前記第２メデイアストリームからの音声信号の特性の重み付けを備える請求項１５に記載の方法。
  17. 前記第１型式の信号が画像信号である場合、前記信号を合成するステップは、前記第１型式の信号を混合するステップをさらに備える請求項９に記載の方法。
  18. 前記混合ステップは、前記第１メデイアストリームおよび前記第２メデイアストリームからの画像信号の特性の重み付けをさらに備える請求項１７に記載の方法。
  19. 前記特性の重み付けは、前記第２メデイアストリームからの信号の前記特性に関連させて、前記第１メデイアストリームからの信号の割合の変更を含む請求項１６に記載の方法。
  20. 前記特性の重み付けは、前記携帯通信機器のユーザの入力データに依存する請求項１９に記載の方法。
  21. 前記割合の変更は、０と１００％との間の範囲の中で各特性の変更を備える請求項１９に記載の方法。
  22. 出力メデイアストリームが第１型式の信号を備え、携帯通信機器からの通信セッション中に送信されるべき出力メデイアストリームを形成する携帯通信機器であって、
    第１メデイアストリームを発生するために提供される少なくとも１つの発生ユニットと、
    前記発生ユニットに接続され、前記第１メデイアストリームと第２メデイアストリームをリアルタイムに合成するために提供される第１合成ユニットと、
    ユーザ入力に依存して前記発生ユニットおよび前記合成ユニットを制御する制御ユニットと、を備える携帯通信機器。
  23. 前記第１合成ユニットが前記第１および第２メデイアストリームの両方の前記第１型式の信号を合成するために提供されており、
    前記出力メデイアストリームが前記第１型式および第２型式の信号を備える、携帯通信機器からの通信セッション中に送信されるべき出力メデイアストリームを形成するための携帯通信機器であって、
    第２合成ユニットと、をさらに備え、
    前記第２合成ユニットを使用して、前記第１メデイアストリームの前記第２型式の信号と前記第２メデイアストリームの前記第２型式の信号を合成する請求項２２に記載の携帯通信機器。
  24. 前記第２メデイアストリームのための蓄積部を提供するメモリユニットをさらに備える請求項２２に記載の携帯通信機器。
  25. ユーザ入力を提供するためのユーザ入力インターフェースをさらに備える請求項２２に記載の携帯通信機器。
  26. 前記機器は、前記出力メデイアストリームの中で、前記同じ第１メデイアストリームからの他の型式の信号に関連させて、前記第１メデイアストリームからの１の型式の信号の同期を提供するためのマルチプレクシングユニットと、をさらに備える請求項２３に記載の携帯通信機器。
  27. 前記出力メデイアストリームの中で、同期した信号を提供する遅延ユニットをさらに備える請求項２３に記載の携帯通信機器。
  28. 前記遅延ユニットは、前記第１メデイアストリームと合成する前に、前記第２メデイアストリームからの信号の同期を提供する請求項２７に記載の携帯通信機器。
  29. 前記遅延ユニットは、前記同じ第２メデイアストリームからの他の型式の信号に関連して、１の型式の信号の同期を提供する請求項２８に記載の携帯通信機器。
JP2006515867A 2003-06-19 2004-06-09 メディアストリームの混合 Expired - Fee Related JP5026785B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
EP03013877.0 2003-06-19
EP03013877A EP1489823B1 (en) 2003-06-19 2003-06-19 Media stream mixing
US48087403P 2003-06-24 2003-06-24
US60/480,874 2003-06-24
PCT/EP2004/006226 WO2005004450A1 (en) 2003-06-19 2004-06-09 Media stream mixing

Publications (3)

Publication Number Publication Date
JP2007527128A true JP2007527128A (ja) 2007-09-20
JP2007527128A5 JP2007527128A5 (ja) 2010-09-24
JP5026785B2 JP5026785B2 (ja) 2012-09-19

Family

ID=33566313

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006515867A Expired - Fee Related JP5026785B2 (ja) 2003-06-19 2004-06-09 メディアストリームの混合

Country Status (4)

Country Link
US (1) US7907638B2 (ja)
JP (1) JP5026785B2 (ja)
KR (1) KR101130413B1 (ja)
WO (1) WO2005004450A1 (ja)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7092735B2 (en) * 2002-03-22 2006-08-15 Osann Jr Robert Video-voicemail solution for wireless communication devices
US7489925B2 (en) * 2004-07-01 2009-02-10 Scenera Technologies, Llc Method and apparatus for automatically sending a captured image to a phone call participant
EP1631105A1 (en) * 2004-08-25 2006-03-01 Sony Ericsson Mobile Communications AB Electronic equipment for a wireless communication system to transmit and receive information content during ongoing communication
US7376699B2 (en) * 2004-12-02 2008-05-20 Scenera Technologies, Llc System and method for sending an image from a communication device
US20070077784A1 (en) * 2005-08-01 2007-04-05 Universal Electronics Inc. System and method for accessing a user interface via a secondary device
US7697827B2 (en) 2005-10-17 2010-04-13 Konicek Jeffrey C User-friendlier interfaces for a camera
US8204056B2 (en) 2006-03-31 2012-06-19 Verint Americas, Inc. Systems and methods for endpoint recording using a media application server
US7701972B1 (en) 2006-03-31 2010-04-20 Verint Americas Inc. Internet protocol analyzing
KR100810269B1 (ko) * 2006-04-18 2008-03-06 삼성전자주식회사 휴대 단말기 및 그 단말기의 화상 통화 서비스 수행 방법
US7966397B2 (en) 2006-06-30 2011-06-21 Verint Americas Inc. Distributive data capture
US7953750B1 (en) 2006-09-28 2011-05-31 Verint Americas, Inc. Systems and methods for storing and searching data in a customer center environment
US7570755B2 (en) * 2006-09-29 2009-08-04 Verint Americas Inc. Routine communication sessions for recording
US7899178B2 (en) 2006-09-29 2011-03-01 Verint Americas Inc. Recording invocation of communication sessions
US8401155B1 (en) 2008-05-23 2013-03-19 Verint Americas, Inc. Systems and methods for secure recording in a customer center environment
ES2313860B1 (es) * 2008-08-08 2010-03-16 Nilo Garcia Manchado Camara digital y procedimiento asociado.
KR101554643B1 (ko) * 2009-02-17 2015-09-21 삼성전자주식회사 이동통신 단말기에서 화상통화 시 자동으로 이모티콘을 전송하기 위한 장치 및 방법
US11238465B2 (en) 2009-08-26 2022-02-01 Consumeron, Llc System and method for remote acquisition and delivery of goods
US10628835B2 (en) 2011-10-11 2020-04-21 Consumeron, Llc System and method for remote acquisition and deliver of goods
US8874090B2 (en) 2010-04-07 2014-10-28 Apple Inc. Remote control operations in a video conference
TW201615008A (en) * 2014-10-09 2016-04-16 Kuo-Ching Chiang Portable device with recording transform module
US10089793B2 (en) 2016-09-02 2018-10-02 Russell Holmes Systems and methods for providing real-time composite video from multiple source devices featuring augmented reality elements
US9729820B1 (en) 2016-09-02 2017-08-08 Russell Holmes Systems and methods for providing real-time composite video from multiple source devices
US10812700B2 (en) * 2017-11-02 2020-10-20 Arris Enterprises Llc Approach to live multi-camera streaming of events with hand-held cameras

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09247643A (ja) * 1996-03-08 1997-09-19 Ricoh Co Ltd 多地点テレビ会議システム
JPH10285457A (ja) * 1997-04-04 1998-10-23 Sony Corp 編集装置
JP2002027136A (ja) * 2000-07-11 2002-01-25 Haruyuki Azumi 電話用情報重畳装置および電話機
JP2002111998A (ja) * 2000-09-27 2002-04-12 Toshiba Corp 画像合成方法および情報処理装置
JP2002171530A (ja) * 2000-11-30 2002-06-14 Nec Corp スーパーインポーズ機能を備えた再符号化装置および方法
JP2002175069A (ja) * 2000-12-05 2002-06-21 Nec Microsystems Ltd 半透明画像処理装置及び方法
JP2003153079A (ja) * 2001-11-08 2003-05-23 Sony Corp 画像処理装置と画像処理方法

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5202761A (en) * 1984-11-26 1993-04-13 Cooper J Carl Audio synchronization apparatus
JP2651872B2 (ja) * 1989-09-28 1997-09-10 松下電器産業株式会社 Ｃｃｔｖシステム装置
EP0778704A3 (en) * 1991-07-15 1997-08-20 Hitachi Ltd Teleconference module
US5566290A (en) * 1992-04-29 1996-10-15 Canon Kabushiki Kaisha Multi-media device
US5430496A (en) * 1992-04-29 1995-07-04 Canon Kabushiki Kaisha Portable video animation device for creating a real-time animated video by combining a real-time video signal with animation image data
DE69321558T2 (de) * 1992-11-17 1999-04-22 Matsushita Electric Industrial Co., Ltd., Kadoma, Osaka Video- und Audiosignalmultiplex- und -trennvorrichtungen
US5387943A (en) * 1992-12-21 1995-02-07 Tektronix, Inc. Semiautomatic lip sync recovery system
US5689641A (en) * 1993-10-01 1997-11-18 Vicor, Inc. Multimedia collaboration system arrangement for routing compressed AV signal through a participant site without decompressing the AV signal
US5570372A (en) * 1995-11-08 1996-10-29 Siemens Rolm Communications Inc. Multimedia communications with system-dependent adaptive delays
JPH09322078A (ja) * 1996-05-24 1997-12-12 Toko Inc 画像伝送装置
US6088360A (en) * 1996-05-31 2000-07-11 Broadband Networks Corporation Dynamic rate control technique for video multiplexer
US5953049A (en) * 1996-08-02 1999-09-14 Lucent Technologies Inc. Adaptive audio delay control for multimedia conferencing
JP3216534B2 (ja) * 1996-08-29 2001-10-09 三菱電機株式会社 多重化方法
US5822542A (en) * 1996-10-31 1998-10-13 Sensormatic Electronics Corporation Electronic and structural components of an intelligent video information management apparatus
JPH10257008A (ja) * 1997-03-12 1998-09-25 Nec Corp マルチプレクサ
US5982436A (en) * 1997-03-28 1999-11-09 Philips Electronics North America Corp. Method for seamless splicing in a video encoder
US6259957B1 (en) * 1997-04-04 2001-07-10 Cirrus Logic, Inc. Circuits and methods for implementing audio Codecs and systems using the same
US6032130A (en) * 1997-10-22 2000-02-29 Video Road Digital Inc. Multimedia product catalog and electronic purchasing system
US6160570A (en) * 1998-04-20 2000-12-12 U.S. Philips Corporation Digital television system which selects images for display in a video sequence
US6853385B1 (en) * 1999-11-09 2005-02-08 Broadcom Corporation Video, audio and graphics decode, composite and display system
US6731295B1 (en) * 1998-11-09 2004-05-04 Broadcom Corporation Graphics display system with window descriptors
FI109444B (fi) * 1999-01-11 2002-07-31 Nokia Corp Menetelmä ja järjestelmä datansiirtokanavien rinnakkaiskäyttöä varten
US6519283B1 (en) * 1999-01-25 2003-02-11 International Business Machines Corporation Integrated video processing system having multiple video sources and implementing picture-in-picture with on-screen display graphics
JP2000324463A (ja) * 1999-05-12 2000-11-24 Nec Corp テレビ会議システム
KR20020064889A (ko) 1999-10-26 2002-08-10 핑텔 코오포레이션 프로그래머블 기능을 가지는 1 이상의 텔레포니 통신장치를 포함하는 분산형 통신 네트워크
US6323893B1 (en) * 1999-10-27 2001-11-27 Tidenet, Inc. Portable conference center
US6778493B1 (en) * 2000-02-07 2004-08-17 Sharp Laboratories Of America, Inc. Real-time media content synchronization and transmission in packet network apparatus and method
JP4481444B2 (ja) * 2000-06-30 2010-06-16 株式会社東芝 画像符号化装置
FI113602B (fi) * 2000-06-30 2004-05-14 Nokia Corp Menetelmä ja järjestelmä vaihtoehtoisen videodatan järjestämiseksi ja lähettämiseksi videolähetysten katkojen aikana
JP2002064794A (ja) * 2000-08-18 2002-02-28 Sony Corp 多重化装置および方法、画像出力装置および方法、並びに記録媒体
US6912544B1 (en) * 2000-08-31 2005-06-28 Comverse Ltd. System and method for interleaving of material from database and customized audio-visual material
SE517245C2 (sv) * 2000-09-14 2002-05-14 Ericsson Telefon Ab L M Synkronisering av audio- och videosignaler
US7039178B2 (en) * 2000-10-19 2006-05-02 Qwest Communications International Inc. System and method for generating a simultaneous mixed audio output through a single output interface
AU2002230501A1 (en) * 2000-11-27 2002-06-03 Intellocity Usa, Inc. System and method for providing an omnimedia package
US7006154B2 (en) * 2001-02-21 2006-02-28 Edmond Louis Dudkowski Portable system for live television signal editing
JP2002354436A (ja) * 2001-05-29 2002-12-06 Nec Corp テレビ電話装置
US6894715B2 (en) * 2001-06-16 2005-05-17 Eric Harold Henrikson Mixing video signals for an audio and video multimedia conference call
JP2003189168A (ja) * 2001-12-21 2003-07-04 Nec Corp 携帯電話用カメラ
US6906741B2 (en) * 2002-01-29 2005-06-14 Palm, Inc. System for and method of conferencing with a handheld computer using multiple media types
US7092735B2 (en) * 2002-03-22 2006-08-15 Osann Jr Robert Video-voicemail solution for wireless communication devices
US6853398B2 (en) * 2002-06-21 2005-02-08 Hewlett-Packard Development Company, L.P. Method and system for real-time video communication within a virtual environment
US7603414B2 (en) * 2005-09-09 2009-10-13 Outland Research, Llc System, method and computer program product for collaborative background music among portable communication devices

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09247643A (ja) * 1996-03-08 1997-09-19 Ricoh Co Ltd 多地点テレビ会議システム
JPH10285457A (ja) * 1997-04-04 1998-10-23 Sony Corp 編集装置
JP2002027136A (ja) * 2000-07-11 2002-01-25 Haruyuki Azumi 電話用情報重畳装置および電話機
JP2002111998A (ja) * 2000-09-27 2002-04-12 Toshiba Corp 画像合成方法および情報処理装置
JP2002171530A (ja) * 2000-11-30 2002-06-14 Nec Corp スーパーインポーズ機能を備えた再符号化装置および方法
JP2002175069A (ja) * 2000-12-05 2002-06-21 Nec Microsystems Ltd 半透明画像処理装置及び方法
JP2003153079A (ja) * 2001-11-08 2003-05-23 Sony Corp 画像処理装置と画像処理方法

Also Published As

Publication number Publication date
WO2005004450A1 (en) 2005-01-13
KR20060013685A (ko) 2006-02-13
US7907638B2 (en) 2011-03-15
JP5026785B2 (ja) 2012-09-19
KR101130413B1 (ko) 2012-03-27
US20060149399A1 (en) 2006-07-06

Similar Documents

Publication Publication Date Title
JP5026785B2 (ja) メディアストリームの混合
JP2007527128A5 (ja)
US20110261151A1 (en) Video and audio processing method, multipoint control unit and videoconference system
JP2000023132A (ja) データ通信制御装置及びその制御方法、及びデータ通信システム
MX2008002738A (es) Metodo que indica a dispositivo que no realice sincronizacion y que no incluye retraso de sincronizacion en flujos multimedia.
US7425979B2 (en) Communication system
JP4352381B2 (ja) テレビ電話装置
JP2004304601A (ja) Ｔｖ電話装置、ｔｖ電話装置のデータ送受信方法
JP2008288974A (ja) ビデオ会議システム及びビデオ会議装置
JP2010157906A (ja) 映像表示装置
EP1489823B1 (en) Media stream mixing
KR20090090753A (ko) 디코딩된 멀티미디어 비디오 및 오디오 신호를 공유하는이동통신 단말기
JPH0670040A (ja) 多地点テレビ会議システムにおける表示形態変更方式
JP2005130356A (ja) テレビ電話システム及びその通信方法、並びに通信端末
JPH06165173A (ja) 仮想社交界実現システム
KR20080047683A (ko) 휴대용 단말기에서 스트리밍 서비스 전송 방법 및 장치
KR100426127B1 (ko) 동영상 전송시스템
TWI811148B (zh) 基於環景影音的減少延遲的一對多通訊方法與計算機程式產品組
KR20040093297A (ko) 이동 통신 단말기의 화상 통화 내용 저장 장치 및 방법
JP3178509B2 (ja) ステレオ音声テレビ会議装置
KR100238134B1 (ko) 화상전화기의 화면처리회로
JP2001268651A (ja) 通信制御装置、通信装置、通信システム、その方法および提供媒体
JP2023026844A (ja) 録画システム、録画再生装置、画像処理方法
JP4175232B2 (ja) テレビ電話システム及びテレビ電話装置
CN111031274A (zh) 一种在不加入视频会话的前提下观看视频会议的方法

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100507

A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A524

Effective date: 20100802

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20101008

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110128

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20110207

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120621

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150629

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees