CN101401423A - 运动图像存储系统、运动图像存储方法和运动图像存储程序 - Google Patents

运动图像存储系统、运动图像存储方法和运动图像存储程序 Download PDF

Info

Publication number
CN101401423A
CN101401423A CNA2006800539203A CN200680053920A CN101401423A CN 101401423 A CN101401423 A CN 101401423A CN A2006800539203 A CNA2006800539203 A CN A2006800539203A CN 200680053920 A CN200680053920 A CN 200680053920A CN 101401423 A CN101401423 A CN 101401423A
Authority
CN
China
Prior art keywords
data
view data
moving image
terminal installation
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2006800539203A
Other languages
English (en)
Inventor
伊藤博纪
小泽一范
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of CN101401423A publication Critical patent/CN101401423A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334Recording operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/92Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M11/00Telephonic communication systems specially adapted for combination with other electrical systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M11/00Telephonic communication systems specially adapted for combination with other electrical systems
    • H04M11/007Telephonic communication systems specially adapted for combination with other electrical systems with remote control systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/4147PVR [Personal Video Recorder]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227Providing Remote input by a user located remotely from the client device, e.g. at work
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/782Television signal recording using magnetic recording on tape
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M11/00Telephonic communication systems specially adapted for combination with other electrical systems
    • H04M11/08Telephonic communication systems specially adapted for combination with other electrical systems specially adapted for optional reception of entertainment or informative matter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Telephonic Communication Services (AREA)

Abstract

当从终端装置发送开始记录指示或者结束记录指示时,DTMF检测器(106)检测DTMF信号,并且向控制模块(107)提供检测结果。控制模块(107)向图像数据转换器(105)和切换器(108)提供开始记录指示或者结束记录指示。当开始记录指示被接收作为输入时,图像数据转换器(105)将接收图像数据(103)转换为经历了帧内模式编码的图像数据,并将结果提供给切换器(108)。切换器(108)在记录记录指示被接收作为输入时向存储装置(110)提供从图像数据转换器(105)所提供的图像数据,并且从记录已经开始时直到输入结束记录指示,向存储装置(110)提供接收图像数据(103)。

Description

运动图像存储系统、运动图像存储方法和运动图像存储程序
技术领域
本发明涉及一种运动图像存储系统、运动图像存储方法和运动图像存储程序,其用于转换和存储已经作为输入被接收的运动图像。
背景技术
在线路交换网中使用便携终端装置的视频电话服务和运动图像分发服务正在得到广泛使用。其中在线路交换网或者IMS(IP多媒体子系统)/NGN(下一代网络)中从便携终端装置接收的运动图像数据被存储在服务器中并且然后被服务器分发的服务预期会变得广泛普及。
MPEG-4(ISO/IEC14496-2:2003“音频和视频可视对象的信息技术编码——第二部分:可视”)在第三代合作伙伴计划(3GPP)便携终端装置中被广泛地用作运动图像编码方法。
MPEG-4包括:帧内模式(intramode),其中,编码仅仅使用当前帧的图像;以及,帧间模式(intermode),其中,通过参考过去帧的图像来执行编码。在帧内模式中,输入像素进行DCT(离散余弦变换),其是以被称为“宏块”的单位被执行的,其后,DCT系数经历可变长度编码。在帧间模式中,在过去帧的输入像素和解码的像素之间执行运动补偿预测,以找到差分像素。在所述差分像素进行DCT后,运动向量和DCT系数进行可变长度编码。
当存储已经从终端装置发送的运动图像数据时,在运动图像存储装置中存储在从终端装置实时发送的运动图像数据中的指定间隔的数据(例如参见专利文件1)。因为在再现时,对于存储图像的第一帧,不能参考在前帧(leading frame)的图像,因此必须将所述第一帧转换为进行了帧内编码(intramode coding)的数据。
图1是示出了运动图像存储系统的典型配置的示例的框图。在图1所示的运动图像存储系统中,数据接收器901将接收来自终端装置(未示出)的接收数据900。接收数据900包括控制数据902、图像数据903和音频数据904,所述控制数据902是与图像编码相关的信息。控制数据902和图像数据903被应用为图像数据转换器905的输入。图像数据转换器905根据从控制数据902获得的信息将已经接收的图像数据903的第一帧转换为帧内模式帧。转换后的图像数据然后被提供到切换器906。音频数据904被应用为切换器906的输入。
当通过转换指示信号909而被通知了转换的开始时,切换器906将已经进行转换的音频数据904和图像数据应用为数据存储单元908的输入,直到通过转换指示信号909而被通知了转换的结束。
但是,当运动图像存储系统实时地存储从终端装置发送的运动图像时,必须从终端装置向运动图像存储系统发送存储的开始和结束指示。但是,频繁产生下述问题:终端装置的操作员不识别用于指示存储的开始和结束的方法。
专利文件1:JP-A-2002-232847(段落0002-0005,图2)
发明内容
本发明旨在解决上述问题,并且其目的是提供一种运动图像存储系统、运动图像存储方法和运动图像存储程序,用于向终端装置发送与关于存储开始和结束的操作的方法相关的导引图像(guidance image),然后根据来自所述终端装置的指示信号而存储从终端装置实时发送的运动图像。
根据本发明的运动图像存储系统包括:接收器,用于从终端装置接收和提供包含音频数据和图像数据的至少之一的信号;发送器,用于当存储从接收器提供的音频数据和图像数据的至少之一时,向终端装置发送图像、语音或者图像和语音来作为通知存储开始的方法的导引(guidance);检测器,用于检测从终端装置发送的通知信号;以及,转换器,用于使用来自检测器的检测结果来将存储已经开始时的图像数据转换为帧内模式。
在本发明的第一实施例中,接收器从终端装置接收音频数据(例如分组数据)和图像数据(例如分组数据)的至少之一。
在本发明的第二实施例中,接收器从接收自终端装置的信号(例如复用信号)中分离出音频数据和图像数据的至少之一。
运动图像存储系统可以具有同步模块,该同步模块用于按照经转换器转换后的图像数据中的数据量,来调节音频数据和图像数据之间的同步。
运动图像存储系统可以具有控制模块,该控制模块用于实现控制以使得帧内模式图像数据中的代码量是预定值。
运动图像存储系统可以具有控制模块,该控制模块用于控制帧内编码量,以使得经转换器转换后的代码量等于转换前的代码量。
根据本发明,从运动图像存储系统向终端装置提供用于指示存储的开始和结束的方法,以从终端装置发送用于开始和结束运动图像存储系统中的存储的指示,并且根据来自终端装置的指示,从终端装置实时发送的运动图像可以被存储。
附图说明
图1是运动图像存储系统的典型配置示例的框图;
图2是示出了本发明运动图像存储系统的第一实施例的配置的框图;
图3是示出了本发明运动图像存储系统的第二实施例的配置的框图;
图4是示出了本发明运动图像存储系统的第一工作示例的框图;
图5是示出了本发明运动图像存储系统的第二工作示例的框图;
图6A是用于说明本发明中的数据同步调节的说明视图;
图6B是用于说明本发明中的数据同步调节的说明视图;
图7是示出了本发明运动图像存储系统的第三工作示例的框图;
图8是示出了图7所示的图像数据转换器的配置的示例的框图;
图9是示出了本发明运动图像存储系统的第四工作示例的配置示例的框图;
图10是示出了本发明运动图像存储系统的第五工作示例的框图;
图11是示出了图10所示的图像数据转换器的配置示例的框图;
图12是示出了本发明的运动图像存储系统的第六工作示例的框图;
图13是示出了本发明运动图像存储系统的第七工作示例的框图;
图14是示出了本发明运动图像存储系统的第八工作示例的框图;
图15是示出了本发明运动图像存储系统的第九工作示例的框图;以及
图16是示出了本发明运动图像存储系统的第十工作示例的框图。
具体实施方式
接着参见附图说明本发明的实施例。
第一实施例
图2是根据本发明的运动图像存储系统的第一实施例的配置的框图。图2所示的运动图像存储系统1是分组交换网5中的运动图像存储系统。在本实施例中,通过下述方式来确定音频/图像编码中的参数:通过当启动通信时在作为终端装置4的一个示例的便携终端和运动图像存储系统1之间,根据由IETF RFC3261/RFC2327规定的SIP/SDP而执行能力(capability)交换。运动图像存储系统1接着向终端装置4发送导引,该导引提供了发送通知信号的方法,所述通知信号用于指示运动图像存储的开始和结束(存储开始/结束通知方法)。运动图像存储系统1根据从终端装置4接收的通知信号而存储从终端装置4接收的运动图像。另外,基于例如RFC2833的DTMF信号被用作来自终端装置4的指示信号。
图2所示的运动图像存储系统1具有:接收器11,用于从终端装置4接收音频数据和图像数据中的至少之一;发送器14,用于当在存储单元10中存储接收的音频数据和图像数据中的至少之一时,向终端装置4发送导引图像和导引语音中的至少之一,所述导引图像用于提供关于通知例如存储开始的方法的导引,所述导引语音用于提供关于通知例如存储开始的方法的导引;检测器16,用于检测已经从终端装置4发送的通知信号;以及,转换器15,用于使用检测器16的检测结果来将存储已经开始时的图像数据转换为帧内模式。另外,所述导引示出终端装置4中的操作方法。
第二实施例
图3是示出了根据本发明的运动图像存储系统的第二实施例的配置的框图。图3所示的运动图像存储系统2是基于H.324M的运动图像存储系统,所述H.324M是线路交换网6中的ITU-T的标准。在本实施例中,通过下述方式来确定基于H.223的控制/音频/图像数据的复用/分离和音频/图像编码中的参数:通过在通信的开始时间在作为终端装置4的一个示例的便携终端和运动图像存储系统2之间基于H.245而执行能力交换。运动图像存储系统2接着向终端装置4发送导引,用于提供发送通知信号的方法,所述通知信号用于指示运动图像存储的开始和结束。运动图像存储系统2然后根据从终端装置4接收的通知信号而存储从终端装置4接收的运动图像。另外,DTMF信号被用作来自终端装置4的指示信号。
图3所示的运动图像存储系统2具有:接收器21,用于从终端装置4接收音频数据和图像数据中的至少之一;发送器24,用于当在存储单元10中存储接收的音频数据和图像数据中的至少之一时,向终端装置4发送导引图像和导引语音中的至少之一,所述导引图像用于提供关于通知例如存储开始的方法的导引,所述导引语音用于提供关于通知例如存储开始的方法的导引;检测器16,用于检测从终端装置4发送的通知信号;以及,转换器15,用于使用检测器16的检测结果来将存储已经开始时的图像数据转换为帧内模式。另外,所述导引示出终端装置4中的操作方法。
工作示例
第一工作示例
接着参见图4说明根据本发明的运动图像存储系统(运动图像存储装置)的第一工作示例。本工作示例对应于在分组交换网中使用的第一实施例(参见图2)。本工作示例和第二到第五工作示例的每个都是将基于RFC2833的DTMF信号用作来自终端装置的指示信号的示例。
等同于图2所示的接收器11的数据接收器101分析从终端装置(未示出)接收到的所接收分组100,并且作为输出而提供接收控制数据102、接收图像数据103、接收音频数据104和DTMF数据116中的至少之一。接收控制数据102被提供到控制模块107。接收图像数据103被提供到等同于图2中的转换器15的图像数据转换器105和切换器108。接收音频数据104被提供到切换器108。DTMF数据116被提供到等同于图2所示的检测器16的DTMF检测器106。
在通信的开始,控制模块107向数据发送器114(等同于图2所示的发送器14)提供基于SIP/SDP的发送控制数据111,以在所述终端装置和所述运动图像存储装置之间执行呼叫连接和能力交换。在完成能力交换后,控制模块107向数据接收器101提供用于接收接收图像数据103和接收音频数据104的端口号,并且向数据发送器114提供用于发送发送图像数据112和发送音频数据113的端口号。另外,控制模块107向等同于图2所示的存储单元10的存储装置110提供导引运动图像发送指示信号,其示出了所述终端装置中的操作方法。在接收到作为输入的导引运动图像发送指示信号时,存储装置110向数据发送器114提供对应于导引运动图像的发送图像数据112和发送音频数据113。所述导引运动图像包含具有内容“当开始记录时请按下号码‘0’和当结束记录时按下号码‘1’”的语音和图像的至少之一。
数据发送器114将发送控制数据111、发送图像数据112和发送音频数据113的至少之一转换为分组,并且提供发送分组115。
当通过诸如包括计算机的服务器装置之类的装置实现运动图像存储装置时,通过程序以及按照所述程序而执行处理的CPU来实现用于在数据接收器101中分析所接收的分组100的能力,用于在数据发送器114中将数据转换为分组的能力,以及图像数据转换器105、DTMF检测器106和控制模块107。
终端装置通过基于IETF RFC2833的DTMF信号而发送开始记录指示或者结束记录指示。在从终端装置接收到基于IETF RFC2833的DTMF信号来作为开始记录指示或者结束记录指示时,数据接收器101向DTMF检测器106提供DTMF数据116。DTMF检测器106分析已经作为输入而接收的DTMF数据116,并且向控制模块107提供分析结果来作为DTMF信号检测结果。
当DTMF信号检测结果示出开始记录指示时,控制模块107向图像数据转换器105和切换器108提供开始记录指示。当DTMF信号检测结果示出结束记录指示时,控制模块107向图像数据转换器105和切换器108提供结束记录指示。
在输入开始记录指示时,图像数据转换器105将在输入时的接收图像数据103转换为进行了帧内编码的图像数据,并且向切换器108提供结果。为了执行这种处理,图像数据转换器105不断地解码已经作为输入接收的接收图像数据103,并且在接收到作为输入的开始记录指示时,对所解码的图像进行帧内编码。
在输入开始记录指示时,切换器108向存储装置110提供已经进行了帧内编码并且从图像数据转换器105提供的图像数据。从记录已经开始时直到输入结束记录指示,切换器108持续向存储装置110提供接收图像数据103。切换器108还从输入开始记录指示直到输入结束记录指示,向存储装置110提供接收音频数据104。
第二工作示例
接着参见图5说明本发明的第二工作示例。本工作示例对应于在分组交换网中使用的第一实施例(参见图2)。
数据接收器101分析从终端装置接收到的所接收分组100,并且提供接收控制数据102、接收图像数据103、接收音频数据104和DTMF数据116中的至少之一作为输出。接收控制数据102被提供到控制模块107。接收图像数据103被提供到图像数据转换器105和切换器108。接收音频数据104被提供到切换器108。DTMF数据116被提供到DTMF检测器106。
为了在通信开始时在终端装置和运动图像存储系装置之间执行呼叫连接和能力交换,控制模块107向数据发送器114提供基于由IETFRFC3261/RFC2327规定的SIP/SDP的发送控制数据111。在完成能力交换后,控制模块107向数据接收器101提供用于接收接收图像数据103和接收音频数据104的端口号,并且向数据发送器114发送用于发送发送图像数据112和发送音频数据113的端口号。控制模块107还向存储装置110提供导引运动图像发送指示信号,用于示出终端装置中的操作方法。在接收到作为输入的导引运动图像发送指示信号时,存储装置110向数据发送器114提供对应于导引运动图像的发送图像数据112和发送音频数据113。所述导引运动图像包含具有例如“当开始记录时请按下号码‘0’和当结束记录时按下号码‘1’”的内容的语音和图像的至少之一。
数据发送器114将发送控制数据111、发送图像数据112和发送音频数据113的至少之一转换为分组,并且提供所产生的发送分组115。
在从终端装置接收到作为开始记录指示或者结束记录指示的、基于IETF RFC2833的DTMF信号时,数据接收器101向DTMF检测器106提供DTMF数据116。DTMF检测器106分析已经作为输入接收的DTMF数据116,并且向控制模块107提供DTMF信号检测结果。
当DTMF信号检测结果示出开始记录指示时,控制模块107向图像数据转换器105和切换器108提供开始记录指示。当DTMF信号检测结果示出结束记录指示时,控制模块107向图像数据转换器105和切换器108提供结束记录指示。
在输入开始记录指示时,图像数据转换器105将那时的接收图像数据103转换为进行了帧内编码的图像数据,并且向切换器108提供结果。为了执行这种处理,图像数据转换器105不断地解码作为输入被接收的接收图像数据103,并且在接收到开始记录指示时,对所解码的图像进行帧内编码。
在输入开始记录指示时,切换器108向媒体同步模块109提供已经进行了帧内编码并且已经从图像数据转换器105提供的图像数据。从记录已经开始时直到输入结束记录指示,切换器108持续向媒体同步模块109提供接收图像数据103。切换器108从输入开始记录指示直到输入结束记录指示,向媒体同步模块109提供接收音频数据104。
媒体同步模块109将时间信息赋予经转换的音频数据和图像数据,并且将这些数据提供到存储装置110。此时,作为帧内编码的结果,在记录已经开始时的图像数据中的代码量通常大于在转换之前的代码量。因此,当在转换开始时同步图像和语音时,所述图像的显示被延迟。
媒体同步模块109因此通过将如图6A的帧N中所示的音频数据向后平移而进行调节,以获得图像和语音的同步。换句话说,当经图像数据转换器105转换的图像数据中的代码量相对于在转换之前的代码量改变时,媒体同步模块109调节与音频数据的再现定时相关的信息。此时,当对应于在前图像的音频数据的缺少在再现时引起问题时,媒体同步模块109例如插入静默数据,以对应于经历了转换的在前图像数据,如图6B所示。
第三工作示例
接着参见图7来说明本发明的第三工作示例。本工作示例对应于在分组交换网中使用的第一实施例(参见图2)。
数据接收器101分析从终端装置接收的分组100,并且提供接收控制数据102、接收图像数据103、接收音频数据104和DTMF数据116中的至少之一作为输出。接收控制数据102被提供到控制模块107。接收图像数据103被提供到图像数据转换器125和切换器108。接收音频数据104被提供到切换器108。DTMF数据116被提供到DTMF检测器106。
控制模块107向数据发送器114提供基于由IETF RFC3261/RFC2327规定的SIP/SDP的发送控制数据111,以在开始通信时在终端装置和运动图像存储装置之间执行呼叫连接和能力交换。在完成能力交换时,控制模块107向数据接收器101提供用于接收接收图像数据103和接收音频数据104的端口号,并且向数据发送器114提供用于发送发送图像数据112和发送音频数据113的端口号。控制模块107还向存储装置110提供导引运动图像发送指示信号,其示出了终端装置中的操作方法。在接收到作为输入的导引运动图像发送指示信号时,存储装置110向数据发送器114提供对应于导引运动图像的发送图像数据112和发送音频数据113。所述导引运动图像包括例如具有内容“当开始记录时请按下号码‘0’和当结束记录时按下号码‘1’”的语音和图像的至少之一。
数据发送器114将发送控制数据111、发送图像数据112和发送音频数据113的至少之一转换为分组,并且提供发送分组115。
在从终端装置接收到作为开始记录指示或者结束记录指示的、基于IETF RFC2833的DTMF信号时,数据接收器101向DTMF检测器106提供DTMF数据116。DTMF检测器106分析已经作为输入接收的DTMF数据116,并且向控制模块107提供DTMF信号的检测结果。
当DTMF信号检测结果示出开始记录指示时,控制模块107向图像数据转换器125和切换器108提供开始记录指示。当DTMF信号检测结果示出结束记录指示时,控制模块107向图像数据转换器125和切换器108提供结束记录指示。
在作为输入接收到开始记录指示时,图像数据转换器125将那时的接收图像数据103转换为经历了帧内编码的图像数据,并且向切换器108提供结果。为了执行这种处理,图像数据转换器125不断地解码作为输入接收的接收图像数据103,并且在输入开始记录指示时,对所解码的图像进行帧内编码。图像数据转换器125在此实现控制以使得在转换后的图像数据大小变为预定目标值。
图8是示出了图像数据转换器125的配置的框图。如图8所示,图像数据转换器125具有图像解码器701、代码量控制模块705和图像编码器707。
图像解码器701向代码量控制模块705提供:解码时间量化精度702,其是当解码时获得的在解码时的量化精度;以及,经MPEG-4编码的接收图像数据103中的接收代码量703,其是以帧、宏块或者视频分组为单位的,所述视频分组是宏块组。
代码量控制模块705使用解码时间量化精度702、接收代码量703和目标代码量704的至少之一来确定在编码时的量化精度706,并且向图像编码器707提供结果。图像编码器707按照量化精度706来执行量化,以执行图像编码。解码时间量化精度702是当图像解码器701执行解码时获得的参数,并且是当控制编码使得在编码后的代码量接近目标代码量704时的有效信息。
例如,当接收代码量703大于目标代码量704时,代码量控制模块705实现控制以使得编码时间量化精度706比解码时间量化精度702更粗。当即使在编码期间的量化精度706被设置为最粗的水平的情况下代码量704也超过目标的时候,可以通过将在编码期间的DCT系数的较高阶值的几个设置为“0”来减少所提供的代码量。设置目标代码量704防止经图像编码器707编码的图像数据中的代码量的大变化。
图7所示的切换器108在输入开始记录指示时向存储装置110提供已经进行了帧内编码并且已经从图像数据转换器125提供的图像数据。切换器108从记录已经开始时直到输入结束记录指示,向存储装置110持续提供接收图像数据103。切换器108还从输入开始记录指示直到输入结束记录指示,向存储装置110提供接收音频数据104。
第四工作示例
接着参见图9来说明本发明的第四工作示例。本工作示例对应于在分组交换网中使用的第一实施例(参见图2)。
数据接收器101分析已经从终端装置接收的所接收分组100,并且提供接收控制数据102、接收图像数据103、接收音频数据104和DTMF数据116中的至少之一作为输出。接收控制数据102被提供到控制模块107。接收图像数据103被提供到图像数据转换器135和切换器108。接收音频数据104被提供到切换器108。DTMF数据116被提供到DTMF检测器106。
控制模块107向数据发送器114提供基于由IETF RFC3261/RFC2327规定的SIP/SDP的发送控制数据111,以在通信开始时在终端装置和运动图像存储装置之间执行呼叫连接和能力交换。在完成能力交换时,控制模块107向数据接收器101提供用于接收接收图像数据103和接收音频数据104的端口号,并且向数据发送器114提供用于发送发送图像数据112和发送音频数据113的端口号。控制模块107还向存储装置110提供导引运动图像发送指示信号,用于示出终端装置中的操作方法。在接收到作为输入的导引运动图像发送指示信号时,存储装置110向数据发送器114提供对应于导引运动图像的发送图像数据112和发送音频数据113。所述导引运动图像例如包含具有内容“当开始记录时请按下号码‘0’和当结束记录时按下号码‘1’”的语音和图像的至少之一。
数据发送器114将发送控制数据111、发送图像数据112和发送音频数据113的至少之一转换为分组,并且提供发送分组115。
在从终端装置接收到作为开始记录指示或者结束记录指示的、基于IETF RFC2833的DTMF信号时,数据接收器101向DTMF检测器106提供DTMF116。DTMF检测器106分析已经接收的DTMF数据116,并且向控制模块107提供DTMF信号检测结果。
当DTMF信号检测结果示出开始记录指示时,控制模块107向图像数据转换器125和切换器108提供开始记录指示。当DTMF信号检测结果示出结束记录指示时,控制模块107向图像数据转换器125和切换器108提供结束记录指示。
在输入开始记录指示时,图像数据转换器125将此时的接收图像数据103转换为经历了帧内编码的图像数据,并且向切换器108提供结果。为了执行这种处理,图像数据转换器105不断地解码作为输入接收的接收图像数据103,并且当接收到作为输入的开始记录指示时,对所解码的图像进行帧内编码。
像在第三工作示例中那样,图像数据转换器125具有图8的示例中所示的配置。图像数据转换器125因此与第三工作示例的情况类似地工作。
在输入开始记录指示时,切换器108向媒体同步模块109提供已经经历了帧内编码并且已经从图像数据转换器105被提供的图像数据。切换器108从已经开始记录时直到输入结束记录指示,持续向媒体同步模块109提供接收图像数据103。切换器108还从输入开始记录指示直到输入结束记录指示,向媒体同步模块109提供接收音频数据104。
媒体同步模块109将时间信息赋予经转换的音频数据和图像数据,并且向存储装置110提供这些数据。此时,经历了帧内编码的、在记录已经开始时的图像数据中的代码量通常大于转换之前的图像数据中的代码量。因此,如果图像和语音在开始转换时被同步,则图像将以延迟的方式被显示。
媒体同步模块109因此通过下述方式而调节:通过将如图6A的帧N中所示的音频数据向后平移,以使得在图像和语音之间建立同步。此时,如果当再现时,对应于在前图像的音频数据的缺少引起问题,则媒体同步模块109例如插入如图6B所示的静默数据。
第五工作示例
接着参考图10来说明第五工作示例。本工作示例对应于在分组交换网中使用的第一实施例(参见图2)。
数据接收器101分析从终端装置接收的所接收分组100,并且提供作为输出的接收控制数据102、接收图像数据103、接收音频数据104和DTMF数据116的至少之一。接收控制数据102被提供到控制模块107。接收图像数据103被提供到图像数据转换器135和切换器108。接收音频数据104被提供到切换器108。DTMF数据116被提供到DTMF检测器106。
为了在开始通信时在终端装置和运动图像存储装置之间执行呼叫连接和能力交换,控制模块107向数据发送器114提供基于由IETFRFC3261/RFC2327规定的SIP/SDP的发送控制数据111。在完成能力交换时,控制模块107向数据接收器101提供用于接收接收图像数据103和接收音频数据104的端口号,并且向数据发送器114提供用于发送发送图像数据112和发送音频数据113的端口号。控制模块107还向存储装置110提供导引运动图像发送指示信号,用于示出终端装置中的操作方法。在接收到所述导引运动图像发送指示信号时,存储装置110向数据发送器114提供对应于导引运动图像的发送图像数据112和发送音频数据113。所述导引运动图像例如包括具有内容“当开始记录时请按下号码‘0’和当结束记录时按下号码‘1’”的语音和图像的至少之一。
数据发送器114将发送控制数据111、发送图像数据112和发送音频数据113的至少之一转换为分组,并且提供发送分组115。
在从终端装置接收到用于示出开始记录指示或者结束记录指示的、基于IETF RFC2833的DTMF信号时,数据接收器101向DTMF检测器106提供DTMF数据116。DTMF检测器106分析所述DTMF数据116,然后向控制模块107提供DTMF信号检测结果。
当DTMF信号检测结果示出开始记录指示时,控制模块107向图像数据转换器135和切换器108提供开始记录指示。当DTMF信号检测结果示出结束记录指示时,控制模块107向图像数据转换器135和切换器108提供结束记录指示。
在接收到作为输入的开始记录指示时,图像数据转换器135将那时的接收图像数据103转换为经历了帧内编码的图像数据,并且向切换器108提供所述结果。为了执行这种处理,图像数据转换器135不断地解码已经作为输入而接收的接收图像数据103,并且当接收到开始记录指示时,对所解码的图像进行帧内编码。在此,图像数据转换器135实现控制,以使得在转换后的图像数据大小与所接收的图像数据中的代码量相同。
图11是示出了图像数据转换器135的配置的框图。如图11所示,图像数据转换器135包括:图像解码器701、代码量控制模块805和图像编码器707。
图像解码器701向代码量控制模块805提供:解码时间量化精度702和经MPEG-4编码的接收图像数据103中的接收代码量703,其以帧、宏块或者视频分组为单位,所述视频分组为宏块组。解码时间量化精度702是当图像解码器701执行解码时获得的参数,并且是当实现编码控制以使得在编码后的代码量接近接收代码量703时的有效信息。
代码量控制模块805使用解码时间量化精度702和接收代码量703的至少之一来确定编码时间量化精度706,并且向图像编码器707提供结果。代码量控制模块805确定量化精度706,以使得在转换后的代码量(当图像编码器707已经执行编码时的代码量)是与在转换之前的代码量(在图像解码器701执行解码之前的代码量)相同的代码量(允许一定量的误差)。通过这种控制,在图像和语音之间建立同步。
图10所示的切换器108在输入开始记录指示时向存储装置110提供已经经历了帧内编码并且已经从图像数据转换器135提供的图像数据。从记录已经开始时直到输入结束记录指示,切换器108持续向存储装置110提供接收图像数据103。另外,切换器108从输入开始记录指示直到输入结束记录指示,向存储装置110提供接收音频数据104。
第六工作示例
接着参考图12来说明本发明的第六工作示例。本工作示例对应于在线路交换网中使用的第二实施例(参见图3)。本工作示例和第七到第十工作示例考虑其中DTMF信号被用作来自终端装置的指示信号的情况。
对应于图3所示的接收器21的数据分离器201从已经复用和从终端装置接收的接收复用数据200中分离出接收控制数据202、接收图像数据103和接收音频数据104的至少之一。接收控制数据202被提供到控制模块207。接收图像数据103被提供到对应于图3所示的转换器15的图像数据转换器105和切换器108。接收音频数据104被提供到对应于图3所示的检测器16的DTMF检测器206和切换器108。
为了在开始通信时在终端装置和运动图像存储装置之间执行能力交换,控制模块207向对应于图3所示的发送器24的数据复用器214提供基于由ITU-T规定的H.245的发送控制数据211,并且向数据分离器201和数据复用器214提供被包含在接收控制数据202中的与复用相关的能力信息(复用表和在多个AL-SDU大小的复用和分离中使用的参数的最大值)。根据该能力信息,数据分离器201执行接收复用数据200的分离。数据复用器214复用发送控制数据211、发送图像数据112和发送音频数据113的至少之一。
当通过诸如包括计算机的服务器装置之类的装置来实现运动图像存储装置时,通过程序以及按照所述程序而执行处理的CPU来实现用于在数据分离器201中分离数据的能力,用于在数据复用器214中复用数据的能力,以及图像数据转换器105、DTMF检测器206和控制模块207。
在完成能力交换时,控制模块207向对应于图3所示的存储装置10的存储装置110提供导引运动图像发送指示信号,其示出终端装置中的操作方法。在接收到作为输入的导引运动图像发送指示信号时,存储装置110向数据复用器214提供对应于导引运动图像的发送图像数据112和发送音频数据113。所述导引运动图像例如包含具有内容“当开始记录时请按下号码‘0’和当结束记录时按下号码‘1’”的语音和图像的至少之一。
数据复用器214将发送控制数据211、发送图像数据112和发送音频数据113的至少之一复用,并且提供发送复用数据215。
当从终端装置发送开始记录指示或者结束记录指示时,DTMF检测器206通过分析从接收音频数据104获得的音频信号的频率而检测DTMF信号,并且向控制模块207提供DTMF信号检测结果。
当DTMF信号检测结果示出开始记录指示时,控制模块207向图像数据转换器105和切换器108提供开始记录指示。当DTMF信号检测结果示出结束记录指示时,控制模块207向图像数据转换器105和切换器108提供结束记录指示。
在输入开始记录指示时,图像数据转换器105将在此时的接收图像数据103转换为经历了帧内编码的图像数据,并且向切换器108提供结果。为了执行这种处理,图像数据转换器105不断地解码作为输入接收的接收图像数据103,并且在输入开始记录指示时,对所解码的图像进行帧内编码。
切换器108在输入开始记录指示时向存储装置110提供已经经历了帧内编码并且已经从图像数据转换器105提供的图像数据。切换器108从开始记录时直到输入结束记录指示,持续向存储装置110提供接收图像数据103。切换器108还从输入开始记录指示直到输入结束记录指示,向存储装置110提供接收音频数据104。
第七工作示例
接着参考图13而说明本发明的第七工作示例。本工作示例对应于在线路交换网中使用的第二实施例(参见图3)。
数据分离器201从已经复用和从终端装置接收的接收复用数据200中分离出接收控制数据202、接收图像数据103和接收音频数据104的至少之一。接收控制数据202被提供到控制模块207。接收图像数据103被提供到图像数据转换器105和切换器108。接收音频数据104被提供到DTMF检测器206和切换器108。
为了在开始通信时在终端装置和运动图像存储装置之间执行能力交换,控制模块207向数据复用器214提供基于由ITU-T规定的H.245的发送控制数据211,并且向数据分离器201和数据复用器214提供被包含在接收控制数据202中的与复用相关的能力信息(诸如复用表和在多个AL-SDU大小的复用和分离期间使用的参数的最大值)。根据该能力信息,数据分离器201分离接收复用数据200。数据复用器214复用在发送控制数据211、发送图像数据112和发送音频数据113中的至少之一。
在完成能力交换后,控制模块207向存储装置110提供导引运动图像发送指示信号,其用于示出终端装置中的操作方法。当作为输入接收到导引运动图像发送指示信号时,存储装置110向数据复用器214提供对应于所接收的导引运动图像的发送图像数据112和发送音频数据113。所述导引运动图像例如包括具有内容“当开始记录时请按下号码‘0’和当结束记录时按下号码‘1’”的语音和图像的至少之一。
数据复用器214将发送控制数据211、发送图像数据112和发送音频数据113的至少之一复用,并且提供发送复用数据215。
当从终端装置发送开始记录指示或者结束记录指示时,DTMF检测器206分析从接收音频数据104获得的音频信号的频率以检测DTMF信号,并且向控制模块207提供DTMF信号检测结果。
当DTMF信号检测结果示出开始记录指示时,控制模块207向图像数据转换器105和切换器108提供开始记录指示。当DTMF信号检测结果示出结束记录指示时,控制模块207向图像数据转换器105和切换器108提供结束记录指示。
在接收到作为输入的开始记录指示时,图像数据转换器105将在此时的接收图像数据103转换为经历了帧内编码的图像数据,并且向切换器108提供结果。为了执行这种处理,图像数据转换器105不断地解码作为输入接收的接收图像数据103,并且在接收到作为输入的开始记录指示时,对所解码的图像进行帧内编码。
切换器108在输入开始记录指示时向媒体同步模块109提供已经经历帧内编码并且已经从图像数据转换器105提供的图像数据。切换器108从开始记录时直到输入结束记录指示,持续向媒体同步模块109提供接收图像数据103。
媒体同步模块109将时间信息赋予经转换的音频数据和图像数据,并且向存储装置110提供这些数据。此时,已经经历帧内编码的、当开始记录时的图像数据中的代码量通常大于在转换之前的代码量。在这种情况下,在转换开始时同步图像和语音导致被延迟的图像显示。
作为响应,媒体同步模块109通过下述方式来进行调节:通过将如图6A的帧N中所示的音频数据向后平移,以使得在图像和语音之间建立同步。此时,当缺少在前图像的音频数据在再现时引起问题时,媒体同步模块109例如插入了图6B所示的静默数据。
第八工作示例
接着参考图14来说明本发明的第八工作示例。本工作示例对应于在线路交换网中使用的第二实施例(参见图3)。
数据分离器201从已经复用和从终端装置接收的接收复用数据200中分离出接收控制数据202、接收图像数据103、接收音频数据104的至少之一。接收控制数据202被提供到控制模块207。接收图像数据103被提供到图像数据转换器125和切换器108。接收音频数据104被提供到DTMF检测器206和切换器108。
为了在开始通信时在终端装置和运动图像存储装置之间执行能力交换,控制模块207向数据复用器214提供基于由ITU-T规定的H.245的发送控制数据211,并且向数据分离器201和数据复用器214提供被包含在接收控制数据202中的与复用相关的能力信息(复用表和在多个AL-SDU大小的复用和分离期间使用的参数的最大值)。根据该能力信息,数据分离器201执行接收复用数据200的分离。数据复用器214复用发送控制数据211、发送图像数据112和发送音频数据113的至少之一。
在完成能力交换时,控制模块207向存储装置110提供导引运动图像发送指示信号,其示出终端装置中的操作方法。在输入导引运动图像发送指示信号时,存储装置110向数据复用器214提供对应于导引运动图像的发送图像数据112和发送音频数据113。所述导引运动图像例如包含具有内容“当开始记录时请按下号码‘0’和当结束记录时按下号码‘1’”的语音和图像的至少之一。
数据复用器214将发送控制数据211、发送图像数据112和发送音频数据113的至少之一复用,并且提供发送复用数据215作为输出。
当从终端装置发送开始记录指示或者结束记录指示时,DTMF检测器206分析从接收音频数据104获得的音频信号的频率以检测DTMF信号,并且向控制模块207提供DTMF信号检测结果。
当DTMF信号检测结果示出开始记录指示时,控制模块207向图像数据转换器125和切换器108提供开始记录指示。当DTMF信号检测结果示出结束记录指示时,控制模块207向图像数据转换器125和切换器108提供结束记录指示。
在输入开始记录指示时,图像数据转换器125将在此时的接收图像数据103转换为经历了帧内编码的图像数据,并且向切换器108提供结果。为了执行这种处理,图像数据转换器125不断地解码作为输入接收的接收图像数据103,并且在输入开始记录指示时,对所解码的图像进行帧内编码。
像在第三工作示例中那样,图像数据转换器125具有图8所示的配置,并且图像数据转换器125的操作因此类似于第三工作示例的图像数据转换器125的操作。
切换器108在输入开始记录指示时向存储装置110提供已经经历帧内编码并且已经从图像数据转换器125提供的图像数据。切换器108从开始记录时直到输入结束记录指示,持续向存储装置110提供接收图像数据103。切换器108还从输入开始记录指示直到输入结束记录指示,向存储装置110提供接收音频数据104。
第九工作示例
接着参考图15而说明本发明的第九工作示例。本工作示例对应于在线路交换网中使用的第二实施例(参见图3)。
数据分离器201从已经复用和从终端装置接收的接收复用数据200中分离出接收控制数据202、接收图像数据103和接收音频数据104的至少之一。接收控制数据202被提供到控制模块207。接收图像数据103被提供到图像数据转换器125和切换器108。接收音频数据104被提供到DTMF检测器206和切换器108。
为了在开始通信时在终端装置和运动图像存储装置之间执行能力交换,控制模块207向数据复用器214提供基于由ITU-T规定的H.245的发送控制数据211,并且向数据分离器201和数据复用器214提供被包含在接收控制数据202中的与复用相关的能力信息(复用表和在多个AL-SDU大小的复用和分离期间使用的参数的最大值)。根据该能力信息,数据分离器201分离接收复用数据200。数据复用器214复用在发送控制数据211、发送图像数据112和发送音频数据113中的至少之一。
在完成能力交换后,控制模块207向存储装置110提供导引运动图像发送指示信号,其用于示出终端装置中的操作方法。当接收到导引运动图像发送指示信号时,存储装置110向数据复用器214提供对应于导引运动图像的发送图像数据112和发送音频数据113。所述导引运动图像例如包括具有内容“当开始记录时请按下号码‘0’和当结束记录时按下号码‘1’”的语音和图像的至少之一。
数据复用器214将发送控制数据211、发送图像数据112和发送音频数据113的至少之一复用,并且提供发送复用数据215作为输出。
当从终端装置发送开始记录指示或者结束记录指示时,DTMF检测器206分析从接收音频数据104获得的音频信号的频率以检测DTMF信号,并且向控制模块207提供DTMF信号检测结果。
当DTMF信号检测结果示出开始记录指示时,控制模块207向图像数据转换器125和切换器108提供开始记录指示。当DTMF信号检测结果示出结束记录指示时,控制模块207向图像数据转换器125和切换器108提供结束记录指示。
在接收到作为输入的开始记录指示时,图像数据转换器125将在此时的接收图像数据103转换为经历了帧内编码的图像数据,并且向切换器108提供结果。为了执行这种处理,图像数据转换器105不断地解码作为输入接收的接收图像数据103,并且在接收到作为输入的开始记录指示时,对所解码的图像进行帧内编码。
像对于第三工作示例那样,图像数据转换器125具有图8所示的配置,并且图像数据转换器125因此具有与在第三工作示例中相同的操作。
切换器108在输入开始记录指示时向媒体同步模块109提供已经经历帧内编码并且已经从图像数据转换器125提供的图像数据。切换器108从开始记录时直到输入结束记录指示,持续向媒体同步模块109提供接收图像数据103。切换器108还从输入开始记录指示直到输入结束记录指示,向媒体同步模块109提供接收音频数据104。
媒体同步模块109将时间信息赋予经转换的音频数据和图像数据,并且向存储装置110提供这些数据。此时,经历了帧内编码的、当开始记录时的图像数据中的代码量通常大于在转换之前的代码量。结果,当在已经开始转换时同步语音和图像时,图像的显示被延迟。
媒体同步模块109因此通过下述方式来进行调节:通过将如图6A的帧N中所示的音频数据向后平移,以使得在图像和语音之间获得同步。此时,如果缺少对应于在前图像的音频数据在再现时引起问题,则媒体同步模块109例如插入图6B所示的静默数据。
第十工作示例
接着参考图16来说明本发明的第十工作示例。本工作示例对应于在线路交换网中使用的第二实施例(参见图3)。
数据分离器201从已经复用和从终端装置接收的接收复用数据200中分离出接收控制数据202、接收图像数据103、接收音频数据104的至少之一。接收控制数据202被提供到控制模块207。接收图像数据103被提供到图像数据转换器135和切换器108。接收音频数据104被提供到DTMF检测器206和切换器108。
为了在开始通信时在终端装置和运动图像存储装置之间执行能力交换,控制模块207向数据复用器214提供基于由ITU-T规定的H.245的发送控制数据211,并且向数据分离器201和数据复用器214提供被包含在接收控制数据202中的与复用相关的能力信息(复用表和在多个AL-SDU大小的复用和分离期间使用的参数的最大值)。根据该能力信息,数据分离器201执行接收复用数据200的分离。数据复用器214复用发送控制数据211、发送图像数据112和发送音频数据113的至少之一。
在完成能力交换时,控制模块207向存储装置110提供导引运动图像发送指示信号,其示出终端装置中的操作方法。在接收到作为输入的导引运动图像发送指示信号时,存储装置110向数据复用器214提供对应于导引运动图像的发送图像数据112和发送音频数据113。所述导引运动图像例如包含具有内容“当开始记录时请按下号码‘0’和当结束记录时按下号码‘1’”的语音和图像的至少之一。
像在第五工作示例中那样,图像数据转换器135实现控制,以使得在转换后的图像数据的大小与所接收的图像数据中的代码量相同。换句话说,就像第五工作示例的情况那样,图像数据转换器135具有图11所示的配置,并且图像数据转换器135因此具有类似于第五工作示例的情况的操作。
切换器108在输入开始记录指示时向存储装置110提供已经经历帧内编码并且已经从图像数据转换器135提供的图像数据。切换器108从开始记录时直到输入结束记录指示,持续向存储装置110提供接收图像数据103。切换器108还从输入开始记录指示直到输入结束记录指示,向存储装置110提供接收音频数据104。
产业上的使用潜力
本发明理想上被应用于例如当存储和分发从视频电话服务接收的或者从运动图像分发服务接收的运动图像数据时,在服务器中存储从终端装置接收的运动图像数据,所述运动图像分发服务在线路交换网或者分组交换网中使用便携终端。

Claims (11)

1.一种运动图像存储系统,用于存储从终端装置接收到的运动图像,所述运动图像存储系统包括:
接收器,其用于接收包含来自所述终端装置的音频数据和图像数据中的至少之一的信号并且提供该信号作为输出;
发送器,其用于当存储从所述接收器提供的音频数据和图像数据中的至少之一时,向所述终端装置发送图像、语音或者图像和语音来作为通知存储开始的方法的导引;
检测器,其用于检测从所述终端装置发送的通知信号;以及
转换器,其用于使用来自所述检测器的检测结果来将存储已经开始时的图像数据转换为帧内模式。
2.根据权利要求1的运动图像存储系统,其中,所述接收器从所述终端装置接收音频数据和图像数据中的至少之一。
3.根据权利要求1的运动图像存储系统,其中,所述接收器从接收自所述终端装置的信号中分离出音频数据和图像数据中的至少之一。
4.根据权利要求1到3的任一项的运动图像存储系统,还包括同步模块,所述同步模块用于根据经所述转换器转换后的图像数据中的数据量来调节音频数据和图像数据之间的同步。
5.根据权利要求1到4的任一项的运动图像存储系统,还包括控制模块,所述控制模块用于实现控制以使得帧内模式图像数据中的代码量达到预定值。
6.根据权利要求1到4的任一项的运动图像存储系统,还包括控制模块,所述控制模块用于控制帧内编码量,以使得经所述转换器转换后的代码量等于转换前的代码量。
7.根据权利要求1到6的任一项的运动图像存储系统,其中,所述检测器检测作为通信信号从所述终端装置发送的DTMF信号。
8.一种运动图像存储方法,用于存储从终端装置接收到的运动图像,所述运动图像存储方法包括:
接收步骤,用于接收包含来自所述终端装置的音频数据和图像数据中的至少之一的信号并且提供该信号作为输出;
发送步骤,用于当存储所述接收步骤中作为输出而提供的信号中包含的音频数据和图像数据中的至少之一时,向所述终端装置发送图像、语音或者图像和语音,以提供通知存储开始的方法的导引;
检测步骤,用于检测从所述终端装置发送的通知信号;以及
转换步骤,用于使用由所述检测步骤获得的检测结果来将存储已经开始时的图像数据转换为帧内模式。
9.根据权利要求8的运动图像存储方法,其中,所述接收步骤包括从所述终端装置接收音频数据和图像数据中的至少之一。
10.根据权利要求8的运动图像存储方法,其中,所述接收步骤包括从接收自所述终端装置的信号中分离出音频数据和图像数据中的至少之一。
11.一种运动图像存储程序,用于使得属于存储从终端装置接收到的运动图像的运动图像存储装置的计算机执行下述处理:
从所述终端装置接收包含音频数据和图像数据中的至少之一的信号;
当存储所接收的信号中包含的音频数据和图像数据中的至少之一时,向所述终端装置发送图像、语音或者图像和语音,以提供通知存储开始的方法的导引;
检测从所述终端装置发送的通知信号;以及
按照所检测的通知信号来将存储已经开始时的图像数据转换为帧内模式。
CNA2006800539203A 2006-03-27 2006-12-08 运动图像存储系统、运动图像存储方法和运动图像存储程序 Pending CN101401423A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2006086582 2006-03-27
JP086582/2006 2006-03-27

Publications (1)

Publication Number Publication Date
CN101401423A true CN101401423A (zh) 2009-04-01

Family

ID=38540941

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2006800539203A Pending CN101401423A (zh) 2006-03-27 2006-12-08 运动图像存储系统、运动图像存储方法和运动图像存储程序

Country Status (7)

Country Link
US (1) US8237772B2 (zh)
EP (1) EP2012539A4 (zh)
JP (1) JP4662085B2 (zh)
KR (1) KR100972673B1 (zh)
CN (1) CN101401423A (zh)
CA (1) CA2643495A1 (zh)
WO (1) WO2007111006A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101646058B (zh) * 2009-08-25 2012-04-11 中兴通讯股份有限公司 可视电话业务中传送视频、音频或图片的方法和系统
CN102754519A (zh) * 2009-12-11 2012-10-24 韩国电子通信研究院 真实通信终端装置和使用其的真实通信方法

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2943877B1 (fr) * 2009-03-24 2014-04-04 Streamwide Procede et dispositif de stockage d'une partie d'un flux video
JP6056124B2 (ja) * 2011-09-05 2017-01-11 富士ゼロックス株式会社 画像処理装置及び画像処理プログラム
KR101631130B1 (ko) * 2014-09-22 2016-06-17 (주) 코콤 스마트폰을 이용한 인터폰기능 구현시스템 및 방법

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06276427A (ja) 1993-03-23 1994-09-30 Sony Corp 動画像音声制御装置
JP3188081B2 (ja) * 1993-12-01 2001-07-16 松下電器産業株式会社 画像符号化方法および画像符号化装置
DE69422960T2 (de) 1993-12-01 2000-06-15 Matsushita Electric Ind Co Ltd Verfahren und Vorrichtung zum Editieren oder zur Mischung von komprimierten Bildern
JP3300561B2 (ja) * 1995-02-28 2002-07-08 株式会社東芝 可変レート圧縮装置及び可変レート伸長装置
JPH10164556A (ja) * 1996-12-02 1998-06-19 Matsushita Electric Ind Co Ltd デコーダ、エンコーダ、およびビデオ・オン・デマンドシステム
JPH10243399A (ja) 1997-02-25 1998-09-11 Sharp Corp 符号量制御装置及び該符号量制御装置を含む動画像符号化装置
US6339760B1 (en) * 1998-04-28 2002-01-15 Hitachi, Ltd. Method and system for synchronization of decoded audio and video by adding dummy data to compressed audio data
JP2000078531A (ja) * 1998-04-28 2000-03-14 Hitachi Ltd オ―ディオデ―タ編集方法、編集システム
JP2000206994A (ja) * 1999-01-20 2000-07-28 Victor Co Of Japan Ltd 音声符号化装置及び復号化装置
JP4029525B2 (ja) * 1999-08-20 2008-01-09 三菱電機株式会社 動画像符号化装置
JP2001339460A (ja) * 2000-05-26 2001-12-07 Matsushita Electric Ind Co Ltd デジタル送受信装置
JP2002016924A (ja) * 2000-06-27 2002-01-18 Nec Corp トランスコーダ装置およびトランスコード方法
JP3671842B2 (ja) * 2000-12-28 2005-07-13 日本電気株式会社 符号圧縮化/データ変換装置及び符号圧縮化/データ変換方法
JP3857057B2 (ja) * 2001-02-05 2006-12-13 株式会社日立製作所 動画像データの記録再生方法および装置
JP2002300528A (ja) 2001-03-30 2002-10-11 Toshiba Corp ビデオストリーム編集方法及び装置
JP3749216B2 (ja) * 2002-10-31 2006-02-22 三洋電機株式会社 デジタル映像音声記録装置
JP4385317B2 (ja) * 2003-10-31 2009-12-16 日本電気株式会社 テレビ電話装置
JP2005229547A (ja) 2004-02-16 2005-08-25 Hiroyasu Mikabe 録画方法、録画システム、再生方法及び再生システム
US20050232497A1 (en) * 2004-04-15 2005-10-20 Microsoft Corporation High-fidelity transcoding
WO2006016437A1 (ja) * 2004-08-11 2006-02-16 Ginganet Corporation テレビ電話交番システム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101646058B (zh) * 2009-08-25 2012-04-11 中兴通讯股份有限公司 可视电话业务中传送视频、音频或图片的方法和系统
CN102754519A (zh) * 2009-12-11 2012-10-24 韩国电子通信研究院 真实通信终端装置和使用其的真实通信方法

Also Published As

Publication number Publication date
WO2007111006A1 (ja) 2007-10-04
KR20090004988A (ko) 2009-01-12
JPWO2007111006A1 (ja) 2009-08-06
US20090207317A1 (en) 2009-08-20
JP4662085B2 (ja) 2011-03-30
CA2643495A1 (en) 2007-10-04
EP2012539A1 (en) 2009-01-07
EP2012539A4 (en) 2011-05-11
KR100972673B1 (ko) 2010-07-27
US8237772B2 (en) 2012-08-07

Similar Documents

Publication Publication Date Title
CN1910926B (zh) 用于处理视频通信差错的方法和装置
US7653251B2 (en) Method, apparatus, system, and program for switching image coded data
JP2016026426A (ja) 適応可変長符号化
KR20090051042A (ko) 디지털 비디오의 가변 해상도 인코딩 및 디코딩 기법
KR20100122518A (ko) 게이트웨이 장치, 방법 및 컴퓨터 판독가능 기록 매체
EP2317765A1 (en) Video data reception and transmission system and video data processing method for videophone
US20100239001A1 (en) Video streaming system, transcoding device, and video streaming method
KR100922119B1 (ko) 제어 정보의 변환 장치 및 제어 정보의 변환 방법
CN101401423A (zh) 运动图像存储系统、运动图像存储方法和运动图像存储程序
KR100604480B1 (ko) 이동 영상 전화에서 양방향 지연 시간 검증 방법 및 시스템
JP6319970B2 (ja) 画像通信装置およびその制御方法
CN114125448B (zh) 视频编码方法、解码方法及相关装置
JPWO2009013958A1 (ja) マルチメディア提供サービス
JP2002010265A (ja) 送信装置およびその方法と受信装置およびその方法
JP4252017B2 (ja) 符号化ストリーム中継装置、その方法及びプログラム
JPWO2009013959A1 (ja) マルチメディア通信システム、マルチメディア通信装置及び端末
JPWO2009013957A1 (ja) マルチメディア通信システム、マルチメディア通信装置及び端末
JP2006173962A (ja) 画像符号化装置
KR20020033798A (ko) 화상 신호 축적 재생 장치 및 화상 신호 송신 장치
KR100704116B1 (ko) 멀티미디어 서비스를 위한 다중 실시간 인코딩 방법 및 그서버 장치
MX2008010599A (es) Sistema de almacenamiento de imagen movil, metodo de almacenamiento de imagen movil, y programa de almacenamiento de imagen movil
KR100216776B1 (ko) 화상회의시스템에서 비디오 디코딩 장치
JPH10145760A (ja) 画像通信装置
JP2010233238A (ja) 制御情報の変換装置及び制御情報の変換方法
JP2002118850A (ja) 動画像符号化方法、動画像復号化方法、動画像符号化装置および動画像復号化装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20090401