CN102754445A - 内容通信装置、内容加工装置和内容通信系统 - Google Patents
内容通信装置、内容加工装置和内容通信系统 Download PDFInfo
- Publication number
- CN102754445A CN102754445A CN2011800092900A CN201180009290A CN102754445A CN 102754445 A CN102754445 A CN 102754445A CN 2011800092900 A CN2011800092900 A CN 2011800092900A CN 201180009290 A CN201180009290 A CN 201180009290A CN 102754445 A CN102754445 A CN 102754445A
- Authority
- CN
- China
- Prior art keywords
- content
- unit
- shooting
- coded data
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 173
- 230000006854 communication Effects 0.000 title claims abstract description 82
- 238000004891 communication Methods 0.000 title claims abstract description 81
- 239000000203 mixture Substances 0.000 claims abstract description 20
- 239000010410 layer Substances 0.000 claims abstract 5
- 239000012792 core layer Substances 0.000 claims abstract 4
- 230000005540 biological transmission Effects 0.000 claims description 64
- 238000000034 method Methods 0.000 claims description 47
- 230000001360 synchronised effect Effects 0.000 claims description 13
- 238000007906 compression Methods 0.000 claims description 9
- 230000006835 compression Effects 0.000 claims description 9
- 230000033228 biological regulation Effects 0.000 claims description 7
- 239000000284 extract Substances 0.000 claims description 4
- 238000000605 extraction Methods 0.000 claims description 3
- 239000000463 material Substances 0.000 abstract description 260
- 238000005516 engineering process Methods 0.000 abstract description 16
- 238000003384 imaging method Methods 0.000 abstract 7
- 239000002994 raw material Substances 0.000 abstract 3
- 230000009471 action Effects 0.000 description 44
- 230000008569 process Effects 0.000 description 16
- 230000015572 biosynthetic process Effects 0.000 description 15
- 238000003786 synthesis reaction Methods 0.000 description 15
- 230000004044 response Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 11
- 238000006243 chemical reaction Methods 0.000 description 10
- 238000012546 transfer Methods 0.000 description 8
- 238000007726 management method Methods 0.000 description 7
- 238000013144 data compression Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 239000012467 final product Substances 0.000 description 6
- 241001269238 Data Species 0.000 description 3
- 230000002194 synthesizing effect Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 238000007493 shaping process Methods 0.000 description 2
- 238000004904 shortening Methods 0.000 description 2
- 238000010189 synthetic method Methods 0.000 description 2
- 229920002160 Celluloid Polymers 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000002427 irreversible effect Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Studio Devices (AREA)
Abstract
公开了在进行来自拍摄地(拍摄侧)的中继广播的情况下，拍摄侧能够迅速地确认将在拍摄地(拍摄侧)进行的动作被怎样反映为广播内容的技术，根据该技术，拍摄地的内容通信装置通过分层编码，将拍摄内容数据编码为核心层的粗素材内容编码数据和扩展层的广播级素材内容编码数据。粗素材内容编码数据被立即发送到调整台的内容加工装置。内容加工装置对于粗素材内容，实施在实际的广播中进行的编辑加工处理(也可以仅一部分)，将该内容作为调整用内容发回。调整用内容例如是与实际的广播内容相同的构图(与合成信息的位置等相同)，在拍摄地，基于调整用内容，可以进行基于最终的广播内容的调整。
Description
技术领域
本发明涉及用于进行内容数据的编码及传输的内容通信装置和内容加工装置及内容通信系统。
背景技术
随着移动通信的发展，在第3代伙伴计划(3GPP：3rd GenerationPartnership Program(第3代合作伙伴计划))中，特别地在宽范围中提供无线通信业务上，甚至发展到可进行移动性(终端装置的高速移动)支持、宽频带(高吞吐量)数据通信支持等的不仅声音而且影像等的多媒体数据的传输。
在多媒体数据的通信中，通过将声音、影像等作为通信对象的数据编码来传输，从而实现通信路径的频带消耗、通信路径的特性等各种各样的点中的效率化、稳定化。作为这样的数据的编码方法之一，存在分层编码技术。
在分层编码技术中，通过将影像、声音以质量、用途等进行分类，按级(level)进行分层，从而对于作为基础的数据附加的信息被作为可分离的信息块进行编码。通过各个信息块可以单独地发送接收，根据需要进行合成，从而一个编码数据群在各种各样的环境中都可以利用。再有，作为声音的分层编码技术，作为国际上已经使用的方式的先例，可列举下列非专利文献1中记载的技术。
此外，作为传输声音或影像的方法，可列举电视广播等的影像/声音的广播和分发。将这样的广播和分发等中使用的影像/声音的数据称为内容。作为这种内容的收录、中继的方法，有时甚至将内容从远地点传输到对内容进行整形、编辑的广播台等的设备，将该内容与在演播室拍摄的内容合成(或单独中继内容)、切换。例如，在中继目的地拍摄的影像(来自远地点的内容)的画面内，通过将在演播室拍摄的内容使用画中画(Pin P(Picture in Picture))重叠，并且在中继目的地拍摄的影像(来自远地点的内容)中将字符或图形等(一般地称为字幕)重叠(superimpose)，从而将内容合成。
一般地，在将被称为现场直播的、在远地点的拍摄内容实时地广播的情况下，大多也不从拍摄地直接广播，而在远地点的拍摄内容，如果是电视广播，则暂且向电视台的设备等传输，如果是网络分发，则暂且向分发服务器的设备等传输。此外，作为收录内容内的中继等的、最终内容形态即使不是现场直播的情况，也进行内容的中继(对调整台的传输)。
以后，在说明书中，为了使术语尽可能简明，将远地点、中继地点等的内容的拍摄地点称为拍摄地，将用于对内容进行整形、编辑的设备(电视台的编辑装置、转换装置、用于广播、分发等而进行发送的设备、相邻的拍摄演播室(调整台演播室)等)称为调整台，将在从拍摄地至调整台的传输中途对数据进行处理作为内容的地点称为中继台。再有，中继台没有简单地进行数据中继或无线通信的中继的含义，而狭义地为在内容的处理当中进行中继的设备，如果是电视广播，则指被称为转播车的设备或距调整台远的演播室等。该中继台根据需要来配备，不一定必须配备。具体地说，以图10所示的系统结构为前提。
图10是表示一例进行来自远处的拍摄地的中继情况下的广播系统的一般性的结构的图。拍摄地拍摄的影像或声音作为拍摄内容经由中继台被发送到调整台。在调整台中，例如，输出在调整台演播室中可浏览或视听那样的该拍摄内容，并且在拍摄内容的影像中按画中画方式插入调整台演播室的状况，并插入其他的信息(字幕等)，从而生成最终广播的广播内容，通过广播波进行广播。由广播波广播的广播内容，由接收到该广播波的广播接收终端处理，进行影像显示或声音输出。
在将拍摄地拍摄的内容传输到调整台的情况下(特别地，现场直播的情况)，有时需要拍摄地的人确认在调整台中所合成的内容(最终所广播的内容)。例如，如果是电视广播等的中继广播，则在拍摄地中，摄像机、话筒等装置的操作者或作为拍摄对象的演出者(拍摄对象者)需要确认拍摄地拍摄的内容和来自调整台的演播室的信息或BGM(背景音乐(BackGroundMusic))等所合成的内容(最终的广播内容)。
拍摄对象者主要考虑与调整台的演播室的人之间的对话，在最终所广播的内容的定时(timing)的调整中，需要进行自然解说的插入、中继开始的定时的确认、与调整台演播室之间的自然对话的步调的调整、拍摄对象的发声对于BGM等的调整台演播室中的声音之间的重叠的确认等。此外，在最终所广播的内容中，装置的操作者主要需要进行内容的拍摄方法或定时的确认。再有，除了最终的广播内容等的内容之外，拍摄地也有可能接受来自调整台、中继台的指示(这些指示为拍摄时的通信内容，所以不一定被反映在内容中)。
调整台的演播室的人进行命令的定时、内容最终被广播的定时、来自调整台或中继台的指示等对于拍摄地中的定时有诸多延迟而需要这些拍摄地侧的确认。即，拍摄地的操作者或拍摄对象者需要配合最终被广播的内容的定时进行自身动作定时的调整。于是，拍摄地侧的操作者或拍摄对象者需要进行中继开始的定时确认、与演播室之间的自然对话间的步调调整、拍摄对象的发声对于BGM等的调整台演播室中的声音之间的重叠的确认、考虑到字幕、字符信息、合成画面等的构图调整(摄像机的摄像方向的调整、画面内的站立位置的调整)等。
现有技术文献
专利文献
专利文献1：特开2004-357205号公报
专利文献2：特开2005-277950号公报
非专利文献
非专利文献1：ITU-T(International TelecommunicationUnion-Telecommunication sector)标准G.729.1规格书、2006年5月
但是，在中继广播等中，若在拍摄地中用于确认内容(最终被广播的内容)的延迟增大，则视听上难以自然的中继、对话，发生
·来自拍摄地的说话和调整台的演播室的说话有冲突
·调整台插入的BGM或效果音的定时和拍摄地的声音的定时偏移
·调整台插入的字幕、记号、附加信息等的区域和拍摄对象(对象物)重叠
·中继广播的切换定时偏移
·以拍摄地(拍摄对象者)无意图的定时开始广播等不适状况。
拍摄地的操作者或拍摄对象者，例如，可在拍摄地中接收实际的电视广播波，参照该影像进行调整。图11是表示一例现有技术的广播系统中的内容处理的时序图。再有，该时序图着眼于某个时刻中的内容的数据而图示，但实际上，以拍摄内容、广播内容等为代表的数据被逐次传输及处理。
在拍摄地有拍摄用摄像机，拍摄拍摄地的状况。由拍摄用摄像机拍摄的拍摄内容，经过编码处理后(步骤S5001)，发送到调整台(步骤S5002)。在调整台中，在拍摄内容被一次解码后(该处理未图示)，例如通过对调整台演播室内的监视器输出拍摄内容(步骤S5003)，拍摄对该拍摄内容的行动(演播室内的人的反应)(步骤S5004)，将该影像以画中画方式重合在拍摄地的拍摄内容上，或者进行将字幕或其他各种信息重合在拍摄地的拍摄内容上的处理、其他的编码处理等而生成广播内容(步骤S5005)。然后，广播内容通过广播波广播(步骤S5006)，在可接受广播波的广播接收终端(例如，拍摄地的操作者或拍摄对象者可视听的广播接收终端)中，可进行广播内容的视听。在该时刻(从某个动作起时间Tp后)，拍摄地的操作者或拍摄对象者可确认自己进行的动作怎样反映到广播内容上。
拍摄地中的操作者或拍摄对象者能够确认拍摄地拍摄的拍摄内容在实际的广播内容中怎样利用(在实际的广播中怎样地反映)的时间Tp，延迟相当于数据传输或编码处理等时间。即，在拍摄地中的操作者或拍摄对象者进行了任何的动作的情况下，反映了该动作的广播内容在时间Tp后通过广播波而可视听。再有，即使在经过时间Tp前，拍摄地中的操作者或拍摄对象者可通过广播波进行广播内容的视听，该广播内容中包含的拍摄内容是反映了某个动作(反映到步骤S5001中编码后的拍摄内容的动作)之前的动作的内容，不适合作为调整用途的内容。在拍摄地中的操作者或拍摄对象者进行了某个动作的情况下，需要将反映了该动作的内容作为调整用途来利用。
这里，关注于延迟时间时，例如，在电视广播中，在接收日本的模拟广播等的广播波的情况下，能以较低的低延迟进行拍摄地中的内容确认，但在利用数字广播等(在模拟广播终结等情况下不得不利用)情况下，延迟时间增大，难以避免上述不适状况。
此外，不仅数字广播造成的延迟，而且目前吞吐量受到限制的状况(无线IP访问)下的中继场景(scene)也不断增加。低吞吐量环境下，因利用形态带来延迟时间的增大，所以需要充分地考虑低吞吐量环境中的高效的数据传输。
发明内容
本发明用于解决上述课题，其目的在于，提供拍摄侧能够迅速地确认在进行来自拍摄地的中继广播的情况下，将拍摄地(拍摄侧)进行的动作怎样作为广播内容反映的内容通信装置和内容加工装置及内容通信系统。
为了实现上述目的，本发明的内容通信装置，将拍摄地拍摄的拍摄内容数据发送到进行广播内容编辑的内容加工装置，该内容通信装置包括：
拍摄内容获取单元，获取所述拍摄内容数据；
第1编码单元，将所述拍摄内容获取单元获取的所述拍摄内容数据以规定的质量编码而生成第1编码数据；
第1发送单元，对所述内容加工装置逐次发送所述第1编码单元生成的所述第1编码数据；
第2编码单元，将提高所述第1编码数据中包含的影像的质量的附加信息从所述拍摄内容数据提取并编码，生成第2编码数据；以及
第2发送单元，对所述内容加工装置发送所述第2编码单元生成的所述第2编码数据。
根据该结构，在进行来自拍摄地的中继广播的情况下，能从拍摄地向调整台发送用于拍摄侧能够迅速地确认拍摄地(拍摄侧)进行的动作被怎样反映为广播内容的信息。
为了实现上述目的，本发明的内容通信装置，将拍摄地拍摄的拍摄内容数据发送到进行广播内容的编辑的内容加工装置，该内容通信装置包括：
拍摄内容获取单元，获取所述拍摄内容数据；
拍摄内容发送单元，对所述内容加工装置发送所述拍摄内容获取单元获得的所述拍摄内容数据；
调整用内容接收单元，接收在所述内容加工装置中，对于所述拍摄内容进行将其部分或全部反映到实际的广播内容中的编辑并发回来的调整用内容；以及
调整用内容输出单元，输出所述调整用内容，以使所述拍摄地的用户能够确认。
根据该结构，在进行来自拍摄地的中继广播的情况下，能从拍摄地向调整台发送用于拍摄地(拍摄侧)能够迅速地确认拍摄地进行的动作被怎样反映为广播内容的信息。
此外，为了实现上述目的，本发明的内容加工装置，进行广播内容的编辑，该内容加工装置包括：
第1编码数据接收单元，从内容通信装置接收获取了拍摄地拍摄的拍摄内容数据的所述内容通信装置对于所述拍摄内容数据以规定的质量进行编码而生成的第1编码数据；
第1编码数据解码单元，将所述第1编码数据解码；
编辑加工单元，对于所述解码后的第1编码数据进行将其部分或全部反映到实际的广播内容中的编辑；以及
调整用内容发送单元，对所述内容通信装置发送所述编辑加工单元编辑的所述解码后的第1编码数据作为调整用数据。
根据该结构，在进行来自拍摄地的中继广播的情况下，拍摄地(拍摄侧)能够迅速地确认拍摄地进行的动作被怎样反映为广播内容。
此外，为了实现上述目的，本发明的内容加工装置，进行广播内容的编辑，该内容加工装置包括：
拍摄内容数据接收单元，从所述内容通信装置接收拍摄地拍摄的拍摄内容数据；
编辑加工单元，对于所述接收到的拍摄内容数据进行将其部分或全部反映到实际的广播内容中的编辑；以及
调整用内容发送单元，对所述内容通信装置发送所述编辑加工单元编辑的所述拍摄内容数据作为调整用内容。
根据该结构，在进行来自拍摄地的中继广播的情况下，拍摄地(拍摄侧)能够迅速地确认拍摄地进行的动作被怎样反映为广播内容。
此外，为了实现上述目的，本发明的内容通信系统，包括进行广播内容的编辑的内容加工装置、以及将拍摄地拍摄的拍摄内容数据发送到所述内容加工装置的内容通信装置，
所述内容通信装置包括：
拍摄内容获取单元，获取所述拍摄内容数据；
第1编码单元，将所述拍摄内容获取单元获取的所述拍摄内容数据以规定的质量进行编码而生成第1编码数据；
第1发送单元，对所述内容加工装置逐次发送所述第1编码单元生成的所述第1编码数据；
第2编码单元，将提高所述第1编码数据中包含的拍摄的质量的附加信息从所述拍摄内容数据中提取并进行编码，生成第2编码数据；
第2发送单元，对所述内容加工装置发送所述第2编码单元生成的所述第2编码数据；
调整用内容接收单元，接收在所述内容加工装置中，对于所述第1编码数据进行将其部分或全部反映在实际的广播内容中的编辑而发回的调整用内容；以及
调整用内容输出单元，输出所述调整用内容，以使所述拍摄地的用户能够确认，
所述内容加工装置包括：
第1编码数据接收单元，从所述内容通信装置接收所述第1编码数据；
第1编码数据解码单元，将所述第1编码数据解码；
编辑加工单元，对于所述解码后的第1编码数据进行将其部分或全部反映到实际的广播内容中的编辑；
调整用内容发送单元，对所述内容通信装置发送所述编辑加工单元编辑的所述解码后的第1编码数据作为所述调整用内容；
第2编码数据接收单元，从所述内容通信装置接收所述第2编码数据；
第2编码数据解码单元，将所述第2编码数据解码；以及
广播内容输出单元，将在所述解码后的第1编码数据和所述解码后的第2编码数据加法运算所得的内容中由所述编辑加工单元进行了编辑所得的内容、或将所述解码后的第2编码数据反映在所述调整用内容中所得的内容，作为实际广播的广播内容输出。
根据该结构，在进行来自拍摄地的中继广播的情况下，拍摄地(拍摄侧)能够迅速地确认拍摄地进行的动作被怎样反映为广播内容。
此外，为了实现上述目的，本发明的内容通信系统，包括进行广播内容的编辑的内容加工装置、以及将拍摄地拍摄的拍摄内容数据发送到所述内容加工装置的内容通信装置，
所述内容通信装置包括：
拍摄内容获取单元，获取所述拍摄内容数据；
发送单元，对所述内容加工装置发送所述拍摄内容获取单元获取的所述拍摄内容数据；
调整用内容接收单元，接收在所述内容加工装置中，对于所述拍摄内容进行将其部分或全部反映在实际的广播内容中的编辑并发回来的调整用内容；以及
调整用内容输出单元，输出所述调整用内容，以使所述拍摄地的用户能够确认，
所述内容加工装置包括：
拍摄内容数据接收单元，从所述内容通信装置接收所述拍摄内容数据；
编辑加工单元，对于所述接收到的拍摄内容数据进行将其部分或全部反映到实际的广播内容中的编辑；
调整用内容发送单元，对所述内容通信装置发送所述编辑加工单元编辑的所述拍摄内容数据作为所述调整用内容；以及
广播内容输出单元，生成并输出反映了所述编辑加工单元中的编辑内容的广播内容。
根据该结构，在进行来自拍摄地的中继广播的情况下，拍摄地(拍摄侧)能够迅速地确认拍摄地进行的动作被怎样反映为广播内容。
本发明具有上述结构，在进行来自拍摄地的中继广播的情况下，具有拍摄地(拍摄侧)能够迅速地确认拍摄地进行的动作被怎样反映为广播内容的效果。
附图说明
图1表示本发明的第1实施方式的一例广播系统的内容处理的时序图。
图2表示本发明的第2实施方式的一例广播系统的内容处理的时序图。
图3表示本发明的第2实施方式的编码及传输方法的示意性的图像(image)的图。
图4表示本发明的实施方式2的一例拍摄地用内容通信终端的结构的图。
图5表示本发明的实施方式的调整台用内容通信装置的结构的第1例的方框图。
图6表示本发明的实施方式的调整台用内容通信装置的结构的第2例的方框图。
图7表示本发明的实施方式的调整台用内容通信装置的结构的第3例的方框图。
图8表示本发明的第2实施方式的一例拍摄内容编码器的结构的方框图。
图9表示本发明的第2实施方式的一例广播级素材内容解码器及发回内容编码器的结构的方框图。
图10表示一例进行来自远处的拍摄地的中继的情况下的广播系统的一般结构的图。
图11表示一例现有技术的广播系统中的内容处理的时序图。
具体实施方式
以下，参照附图，说明本发明的实施方式。
<本发明的第1实施方式>
首先，说明本发明的第1实施方式。图1是表示本发明的第1实施方式的一例广播系统中的内容处理的时序图。再有，该时序图着眼于某个时刻中的内容的数据来图示，但实际上，以拍摄内容、调整用内容、广播内容等为代表的数据被逐次传输及处理。此外，该时序图包含由调整台直接合成调整台演播室的行动的情况，以及与调整台演播室的响应同步(与响应的内容相配)地合成的情况两者的动作。关于调整用内容传输，可以根据用途来利用上述一方或双方，一般是根据后述的系统结构或广播的形态而利用一方作为广播中使用的内容。
在拍摄地中有拍摄用摄像机，拍摄拍摄地的状况。由拍摄用摄像机拍摄的拍摄内容，在经过了编码处理后(步骤S1001)，发送到调整台(步骤S1002)。在调整台中，在拍摄内容一次解码后(该处理未图示)，例如，对调整台演播室内的监视器输出拍摄内容(步骤S1007)，另一方面，拍摄同时并行获取的调整台演播室的行动(调整台演播室内的人的反应)(步骤S1003)，通过将该影像/声音以画中画方式重叠在拍摄地的拍摄内容上，或者进行将字幕或其他的各种信息重合在拍摄地的拍摄内容上的处理、或进行其他的编码处理等而生成最终内容(用作广播内容的内容)(步骤S1004)。这样生成的最终内容通过广播波来广播(步骤S1006)，利用与广播波不同的通信路径(能够向拍摄地发送内容的传输路径)，将广播内容作为调整用内容从调整台发送到拍摄地(步骤S1005)，拍摄地的操作者或拍摄对象者能够以提前的定时确认包含拍摄了某个动作的拍摄内容的调整用内容(与广播内容同一内容)。此时，调整用内容是包含与广播内容同一内容的内容，但考虑从调整台至拍摄地的通信路径的吞吐量，优选降低调整用内容的数据量，使用处理负荷少的编码并减少延迟。
此外，在调整台演播室的行动(步骤S1008中获取的调整台演播室内的人的反应)与步骤S1001中发送的拍摄内容为同步的内容的情况下，在将步骤S1008中获取的调整台的影像/声音和步骤S1001中从拍摄地接收到的拍摄内容合成并编码后(步骤S1009)，从调整台作为调整用内容(及广播内容)发送(步骤S1010、S1011)。此时，调整用内容是包含与广播内容同一内容的内容，但考虑从调整台至拍摄地的通信路径的吞吐量，优选降低调整用内容的数据量，使用处理负荷少的编码并减少延迟。再有，在附图中，夸大地描绘了步骤S1007及步骤S1008的一来回所需的时间，而实际上调整台和调整台演播室一般是相邻的，步骤S1007及步骤S1008的处理所需的时间被认为很少。
根据现有技术，反映了拍摄地中的某一动作的拍摄内容，包含在步骤S1011中广播的广播内容中，但在本发明的第1实施方式中，在将调整台演播室的行动由调整台直接合成的情况或仅使用拍摄地拍摄的拍摄内容来生成广播内容的情况等中，拍摄地的操作者或拍摄对象者可在时间Ta后视听包含拍摄了某个动作的拍摄内容的调整用内容，此外，在与调整台演播室中的响应同步(与响应的内容相配)合成的情况下，可以在时间Tb后视听包含拍摄了某个动作的拍摄内容的调整用内容。再有，也可以将与调整台演播室中的响应不同步的调整内容、以及与调整台演播室中的响应同步的调整内容双方发回到拍摄地。此外，在一个调整内容内，也可以混合与调整台演播室中的响应同步的部分和不同步的部分。此外，有关调整台演播室对某一动作的反应，可以在时间Tb后视听。即，与现有技术比较，拍摄地的操作者或拍摄对象者可以迅速地确认广播内容。
此外，在图1中，图示在广播内容中包含拍摄了调整台演播室的行动的影像/声音，但例如在直接广播来自拍摄地的拍摄内容(如果为影像，则以整个广播画面广播拍摄内容)的情况下，调整台演播室的影像/声音也不一定必需包含在广播内容中。即，不一定需要步骤S1003、S1007、S1008的内容传输。
如以上那样，根据本发明的第1实施方式，调整台通过立即利用从拍摄地接收到的拍摄内容(特别地，同时并行地获取调整台演播室的影像/声音)而生成广播内容，与现有技术比较，可以迅速地视听在拍摄地中调整用上可利用的内容(反映了拍摄地中的某一动作的拍摄内容)。此外，调整台使用与广播内容不同的通信路径，将与广播内容相同的内容作为调整用内容发回到拍摄地，从而在拍摄地中可以更迅速地视听调整用上可利用的内容。
<本发明的第2实施方式>
下面，说明本发明的第2实施方式。再有，本发明的第2实施方式，通过对于上述第1实施方式在内容的编码方法做改进，可迅速地进行拍摄地中的调整用内容的视听。
根据上述第1实施方式，与现有技术比较，可迅速地进行拍摄地中的调整用内容的视听，但在特定的条件下，有时该效果未充分发挥。作为该条件之一，可列举在拍摄地(或中继台)和调整台之间的通信路径的吞吐量上有限制的情况。
在上述第1实施方式中，有关拍摄地接收来自调整台的调整用内容、或者接收利用广播波的广播内容的任何一个，与利用了现有技术的情况比较，理应可以迅速地视听调整用途的内容。但是，在将广播波中包含的广播内容在调整用上进行视听的情况下(不进行调整用内容的传输的情况)，最终还是会受到广播波的传输及处理的延迟的影响。特别地，在利用数字广播的情况下，该延迟时间变大，有可能作为拍摄地的操作者或拍摄对象者而产生不适状况。再有，如果利用模拟广播，与利用了数字广播的情况相比，则延迟时间变小，但因模拟广播结束而成为无法容易地利用模拟广播的状况，拍摄地(或中继台)及调整台都不得不作为调整用途的特别设备引进利用模拟广播的设备及无线频率等的通信线路。
此外，在上述第1实施方式中，在使用与广播波不同的通信路径，进行调整用内容的传输的情况下，理应不会受到对数字广播潜在的延迟的影响，可进行更迅速的调整用内容的传输。但是，拍摄地或中继台和调整台之间的传输中的中继线路有时通过无线通信，未必构筑一定可获得足够的吞吐量的环境。因此，还产生需要进行从调整台至拍摄地传输的调整用内容的数据压缩，但在低吞吐量的环境下传输与广播内容同一级(level)质量的调整用内容的情况下，需要提高调整用内容的数据压缩率，有可能增加编码及数据压缩上的大的延迟。这样，拍摄地(或中继台)和调整台之间的通信路径的吞吐量、以及用于提高数据压缩率的编码为折衷关系，需要适当地采用效率高的编码方法。
因此，在本发明的第2实施方式中，作为拍摄地和调整台之间的传输的拍摄内容及调整用内容的编码方法，通过应用分层编码技术，实现更高效率的广播系统的构筑。
图2是表示本发明的第2实施方式的一例广播系统的内容处理的时序图。再有，该时序图着眼于某个时刻中的内容的数据来图示，但实际上，以拍摄内容、调整用内容、广播内容等为代表的数据被逐次传输及处理。
在拍摄地中有拍摄用摄像机，拍摄拍摄地的状况。由拍摄用摄像机拍摄的拍摄内容，在经过了编码处理等后(步骤S2001)，发送到调整台(步骤S2002)。
这里，作为来自拍摄地的拍摄内容的编码方法，不是采用在吞吐量低的状态中也跳过高画质和高压缩的帧那样的编码方法，而是通过从拍摄地逐次发送粗素材的可逐次编码的数据，从而重视延迟降低。具体地说，有关拍摄内容的编码方法，应用分层编码方法，将拍摄内容分层为粗素材(核心)层和广播级素材(扩展)层进行编码。粗素材层和广播级素材层可分离，可以分别单独地发送，此外，通过将它们合成，可获得原来的编码数据群(拍摄内容)。再有，在本说明书中，主要说明分层为两个层的情况，但也可以分层为三个以上的层。
粗素材(核心)层进行低像素数、窄频带、单色、非立体声等的可高速编码的编码参数集(set)的编码，进行每帧发送等的高速逐次发送。再有，在高速逐次发送中，分割为每扫描线、每扫描线组(group)、每音素片、每音素片组等的数据发送单位时间短的发送单位。再有，在本说明书中，将粗素材(核心)层所属的编码数据称为粗素材内容编码数据。
另一方面，广播级素材(扩展)层进行高像素数、宽频带、立体声、宽色域彩色等的最终内容所需的参数集的编码，也可以进行还包含了帧间压缩的高压缩编码。再有，需要将最终内容在满足广播、分发时的延迟(从与发回等不同的观点确定的延迟)的范围内编码、发送，优选考虑并设定系统整体的动作或延迟时间。再有，在本说明书中，将广播级素材(扩展)层所属的编码数据称为广播级素材内容编码数据，将粗素材内容编码数据及广播级素材内容编码数据两者解码而进行以确认原来的拍摄内容的解码处理称为广播级素材内容解码，将通过广播级素材内容解码而解码的内容称为广播级素材内容。
图3是表示本发明的第2实施方式的编码及传输方式的示意性的图像的图。在拍摄地，对于某个编码对象数据适用分层编码，对规定的每个处理单位进行粗素材层的高速编码，将生成的粗素材内容编码数据逐次发送到调整台。另一方面，关于广播级素材层，也进行高度的编码，所以粗素材层内容编码数据比对应的粗素材内容被延迟编码，并发送到调整台。再有，广播级素材层与粗素材层不同，不需要逐次发送，例如，考虑传输效率等，也可以进行帧间高压缩编码等。由此，从拍摄地逐次发送通过高速编码生成的粗素材内容编码数据，并且在其后延迟地发送广播级素材内容编码数据。
在调整台中，使用先前达到的粗素材内容编码数据，对于粗素材内容编码数据进行演播室的行动(调整台演播室中的应答)、BGM、效果音、字幕合成、加工的处理等而生成调整用内容(发回内容)(步骤S2004)，发回到拍摄地(步骤S2005)。此时，取决于调整台中的编辑、加工系统，但面对最终内容(用作广播内容的内容)的合成，除了以内容数据级进行以外，也可以以时戳、其他的元数据级进行。即，调整台也可以以容易与稍稍延迟送来的广播级素材内容进行合成的方法，进行粗素材内容编码数据的合成或切换的处理。再有，调整台演播室的影像/声音也以同时并行方式获取(步骤S2003)，反映到调整用内容上，但从调整台演播室至调整台的影像/声音数据也可以同样地通过分层编码而分为粗素材层和广播级素材层。
而且，在调整台中，将以后接收的广播级素材层进一步合成而生成广播/分发用数据，加工成广播/分发用的内容(步骤S2004)，作为广播内容进行广播(步骤S2006)。再有，在电视广播等中，进而也有插入广告内容等作为最终内容的情况，有时广播/分发用的内容作为主内容归档(archive)，进而进行进一步的编辑、代码转换(分发时的格式变换等)，但作为各个调整台的通常的工作流(workflow)的处理部分，可采用任意的处理。
在调整台中，基本上将对于先前到达的粗素材层进行编辑加工所生成的内容作为调整用内容发回到拍摄地，此外，利用通过将先前到达的粗素材层和延迟到达的广播级素材层进行合成而获得的拍摄内容来进行生成最终内容的动作。关于这样的合成的方法，考虑以下几个方法。
例如，通过合成的方法，在合成了原来的粗素材内容层和广播级素材内容层后，可获取调整台演播室中的影像/声音数据等(也可以获取与应答的定时一致的影像/声音数据)进行合成。即，也可以在粗素材层的接收时，编辑加工拍摄地的影像/声音(粗素材)及调整台演播室的影像/声音(也可以是粗素材内容)而生成调整用内容，在广播级素材层的接收时，编辑加工拍摄地的影像/声音(粗素材)、拍摄地的影像/声音(广播级素材)、新获取的调整台演播室的影像/声音而生成最终内容。在图2中，例如，拍摄内容(可以是粗素材内容，或者也可以是与广播级素材合成所得的广播级素材内容)被输出到调整台演播室(步骤S2007)，在调整台获取到包含演播室对该内容的行动的影像/声音数据的时刻(步骤S2008)，生成利用了与应答的定时一致的影像/声音数据的广播内容(步骤S2009)，通过广播波进行广播(步骤S2011)。再有，在附图上，大致描绘了步骤S2007及步骤S2008的一来回所需的时间，而实际上调整台和调整台演播室一般是相邻的，步骤S2007及步骤S2008的处理所需的时间被认为很少。
此外，如果是可分层地向高层重叠的内容，则也可以在粗素材层接收时，编辑加工拍摄地的影像/声音(粗素材)及调整台演播室的影像/声音(粗素材)的各影像/声音而生成调整用内容，在扩展层接收时，将拍摄地的影像(广播级素材)、调整台演播室的影像/声音(广播级素材)加入在调整用内容中，生成最终内容。
再有，拍摄地的操作者或拍摄对象者可按调整用内容的传输(步骤S2012)的定时来视听步骤S2001中发送的演播室对拍摄内容的反应(调整台演播室的行动)。
本发明的第2实施方式，与上述本发明的第1实施方式同样，可以由调整台直接合成来自拍摄地的影像/声音和调整台演播室的行动，来自拍摄地的影像/声音也可以与调整台演播室的响应同步(与响应的内容相配)进行合成。在本发明的第2实施方式中，在由调整台直接合成了调整台演播室的行动的情况或仅使用拍摄地拍摄的拍摄内容而生成广播内容的情况等中，拍摄地的操作者或拍摄对象者可以在时间Tc后视听包含拍摄了某一动作的拍摄内容的调整用内容，此外，在与调整台演播室的响应同步(与响应的内容相配)合成的情况下，可以在时间Td后(在视听步骤S2012中接收到的调整用内容的定时)视听调整台演播室对某一动作的反应。再有，也可以将与调整台演播室的响应不同步的调整内容、以及与调整台演播室中的响应同步的调整内容两者发回拍摄地。此外，在一个调整内容内，也可以混合与调整台演播室中的响应同步的部分和不同步的部分。即，与现有技术比较，拍摄地的操作者或拍摄对象者可以迅速地确认广播内容，而且，与上述本发明的第1实施方式比较，延迟时间也进一步缩短。
再有，在拍摄地和调整台之间的通信路径中可利用任意的传输技术，但例如在利用3GPP线路的情况下，优选以粗素材和广播级素材进行不同的QoS(Quality of Service：服务质量)的设定。具体地说，优选粗素材内容编码数据作为不容许延迟的数据来传输，虽然广播级素材内容的编码数据容许少许的延迟时间，但也能够正确地传输大容量的数据。此外，优选承载、PDN(分组数据网络：Packet Data Network)连接、会话等数据的传输管理也分别进行。
如以上那样，根据本发明的第2实施方式的动作，调整台通过在拍摄地中应用分层编码，立即利用控制发送的分层和定时并发送的拍摄内容中的粗素材内容，生成在拍摄地中调整用上可利用的内容(反映了拍摄地中的某一动作的调整用内容)并发回到拍摄地，在拍摄地中，与现有技术比较，可以迅速地视听。再有，至少有关定时、附加信息、构图等，调整台对于该粗素材内容，进行与其后广播的广播内容相同的编辑加工而作为调整用内容，所以拍摄地可以从调整内容正确并迅速地掌握拍摄内容怎样反映在最终的广播内容上。
接着，说明拍摄地用内容通信终端的结构例子。再有，在以下的说明中，以1台拍摄地用内容通信终端中安装了全部的功能块来图示，但各功能块也可以分散地安装在通过接口连接的多个装置上。
图4是表示本发明的第2实施方式的一例拍摄地用内容通信终端结构的方框图。图4所示的拍摄地用内容通信终端100包括拍摄内容获取单元110、拍摄内容编码单元120、拍摄内容发送单元130、发回内容接收单元140、发回内容解码单元150、发回内容输出单元160。
拍摄内容获取单元110具有取入在拍摄地中拍摄的拍摄内容的功能。在拍摄地用内容通信终端100自身中包括了摄像机、话筒、其他的传感器的情况下，拍摄内容获取单元110取入来自各个装置的信息。再有，取入的信息(影像、声音、其他的数据序列等)可以分别单独地处理，此外，也可以作为统一的多媒体数据一并处理。
此外，在拍摄地用内容通信终端100自身中不包括摄像机、话筒、其他的传感器的情况下，拍摄内容获取单元110通过用于输入必要的信息的接口而将信息取入到拍摄地用内容通信终端100内。作为该情况下的接口，可利用DVI(注册商标)、HDMI(注册商标)、组件/组合(component/composite)、立体声插座、串行等任意的影像、声音、数据接口。
拍摄内容获取单元110将获取的内容输出到拍摄内容编码单元120。再有，如果需要，则在进行了级别、格式变换等后输出到拍摄内容编码单元120。此外，在不需要拍摄内容的编码的情况下(例如，有外部编码、累计传输等多个不同的模式的情况等)，拍摄内容获取单元110也可以将拍摄内容直接传送到拍摄内容发送单元130。
再有，在本发明的第2实施方式中，作为内容/内容编码数据，简单地进行说明，但对每个信息的种类实施多个处理实体、还是一并实施，不过是设计上的差异。此外，在以多个实体并行处理的情况下，也许需要在各实体间进行用于对于经过时间同步的时戳等的信息交换，但通过同步处理系统进行处理、还是将时戳信息附加在各数据序列中来进行最终的内容同步等，有关用于在多个实体间并行处理的同步方法，在本发明的范围以外，可利用任意的同步方法。
此外，拍摄内容编码单元120具有将从拍摄内容获取单元110提供的拍摄内容编码的功能，包括：粗素材内容编码单元121；广播级素材内容编码单元122；分层编码管理单元123。再有，有关拍摄内容编码单元120中的编码(粗素材内容编码单元121及广播级素材内容编码单元122各自中的编码)的方法或质量、参数，优选可由外部或通过通信线路来控制。由拍摄内容编码单元120编码的内容编码数据被输出到拍摄内容发送单元130。
粗素材内容编码单元121具有重视缩短延迟时间而将拍摄内容进行编码的功能。粗素材内容编码单元121以设定的短期间的处理单位(1帧为单位、扫描线为单位、数毫秒为单位等)而将拍摄内容进行编码。优选以至少不取决于后续的信息的方法(例如，帧内压缩或与已处理数据之间的差分码等)进行编码，以在各个单位中，在解码时不必等待后续的处理单位的数据就能够处理。再有，将粗素材内容编码单元121中编码而生成的数据称为粗素材内容编码数据。
此外，作为编码的参数，优选设定粗素材内容编码数据的大小、编码及解码所需的处理时间等，以使与延迟时间关联的参数少。例如，如果是在拍摄地中的构图确认或定时确认中使用的发回内容上利用的目的，则通过重视缩短延迟时间的拍摄内容的编码，与广播级素材比较，也可以使影像的像素数粗大，色域也为单色且声音也可以为非立体声。
这样，通过设为必要最小限度的处理数据单位，可缩短处理时间。但是，分层编码中若其结构上增加分层的单位，则一般地开销增加，此外，若截取的处理单位短，则开销由于处理单位数相对地增加而增加，有造成编码的效率下降等影响的情况。因此，优选短期间的处理单位的设定，从统一的观点来设定，以使整体的处理时间被缩短。
此外，粗素材内容编码单元121编码后的粗素材内容编码数据被逐次传输，所以粗素材内容编码数据在加入了与其他传输有关的开销后，对于一次传输单位(例如，对通信终端的发送周期分配的发送数据量、传输分组的分组大小单位等)，有可能在过多和不足的情况下，与短期间的处理单位不匹配，尽管作为处理单位进行了分割，但实质上都被同时地发送(因为分割为处理单位而可能增加开销)，或者被分割为更小的传输单位(可能估计更低的延迟)。因此，作为整体的设定，优选设为还考虑了传输单位的处理单位，例如，优选短期间的处理单位和传输单位一致，或一方为另一方的增倍。
此外，优选由粗素材内容编码单元121编码的粗素材内容编码数据，每次都从粗素材内容编码单元121转送到拍摄内容发送单元130，以便立即进行发送处理。
此外，粗素材内容编码单元121也可以从分层编码管理单元123接受能够将与对应的分层(广播级素材层)之间的关系性编码的控制(参数的动态的设定、管理信息的附加等)，此外，还可以与广播级素材内容编码单元122之间进行信息的交换。
此外，广播级素材内容编码单元122具有为了生成必要的广播级素材层的信息而以必要的质量及参数将拍摄内容进行编码的功能。再有，若在分层编码中广播级素材内容的层为多层，则对于各个层，编码单元也许是必需的，但在这里，作为一例说明了存在一个广播级素材内容编码单元122的情况。即，根据分层编码中的各层，广播级素材内容编码单元122也可以存在多个。再有，将广播级素材内容编码单元122编码而生成的数据称为广播级素材内容编码数据。
原来的(取入的)影像内容，由于可以认为在粗素材编码单元121中已经对该信息的一部分进行了编码，所以广播级素材内容编码单元122将原来的影像内容和粗素材内容编码单元121中的编码完成的信息之间的差分进行编码即可。广播级素材内容编码单元122例如进行对单色的彩色与亮度信息有关的编码、与对低分辨率影像的高分辨率部分有关的编码、对非立体声的立体声差分的编码、对窄频带声音的扩展频带声音编码、对粗采样数据的差补数据编码等，从而生成广播级素材内容编码数据。
在利用受限的传输频带(吞吐量)的通信路径的情况下，必要的广播级素材的质量、编码中的数据压缩比、处理所需的延迟时间(即使没有达到粗素材内容的要求，也需收容在一定的延迟时间内)相互地具有相关关系，所以广播级素材内容也许有必要进行与编码有关的设定。例如，为了提高数据压缩率，若使用以多个帧的相关为基础来压缩影像的方法(一般地，称为帧间压缩)，则为了集中处理多个帧，全体的数据传输延迟相当于先行数据帧滞留在处理缓冲器中的期间。此外，一般地，由于帧间压缩不可逆(解码时残留帧间的解码误差)，所以在后面的编辑加工作业中在画质劣化等方面造成影响。这样，怎样进行编码作为广播级素材内容编码，取决于内容的用途，所以不一定必须为图3那样的集中了多个帧的分层结构。
从上述方面来说，广播级素材内容编码与粗素材内容编码相比，编码延迟大，此外，数据量也大。以广播级素材内容编码单元123的编码获得的广播级素材内容编码数据(若是集中多个帧编码的编码数据，则以该单位)转送到拍摄内容发送单元130。
此外，广播级素材内容编码单元122也可以从分层编码管理单元123接受能够对与对应的分层(粗素材内容)之间的关系性进行编码的控制(参数的动态的设定、管理信息的附加等)，此外，还可以与粗素材内容编码单元121之间进行信息的交换。
此外，分层编码管理单元123具有对粗素材内容编码单元121及广播级素材内容编码单元122中的各编码进行管理，将各编码中的代码分层，作为一序列的编码数据(分层码)构成的功能。具体地说，分层编码管理单元123具有在将取入的拍摄内容以粗素材内容编码单元121中短期间的处理单位处理时，对与广播级素材内容编码单元122中对应的一个或多个短期间的处理单位之间的对应关系进行管理，附加作为分层编码的结构附加的信息要素(或编码)的功能。再有，有时该功能也称为系统层，分层编码管理单元123将粗素材内容编码单元121及广播级素材内容编码单元122编码过的各编码数据建立关系，此外，有时还进行各个编码单元的控制(参数的动态的设定、管理信息的附加等)，并且进行信息的交换的控制。
此外，拍摄内容发送单元130具有将从拍摄内容编码单元120输出的编码数据发送到调整台(调整台用内容通信装置)的功能，或者具有对于用于传输的通信模块之间的接口(通信机本身连接到拍摄地用内容通信终端100的外部的情况)输出的功能。拍摄内容发送单元130包括：编码数据获取单元131；粗素材内容编码数据发送单元132；广播级素材内容编码数据发送单元133。
编码数据获取单元131具有获取从拍摄内容编码单元120输出的编码数据的功能。此外，编码数据获取单元131具有对于获取的编码数据，将粗素材内容编码数据转送到粗素材内容编码数据发送单元132，将广播级素材内容编码数据转送到广播级素材内容编码数据发送单元133的功能。再有，从缩短延迟时间的观点来说，优选至少不滞留将粗素材内容编码所得的编码数据(粗素材内容编码单元121的编码数据)(如果可能，也不经由临时的缓冲器等)而送到粗素材内容编码数据发送单元132。
此外，粗素材内容编码数据发送单元132具有在编码数据获取单元131获取的编码数据中，将粗素材内容编码数据发送到调整台用内容通信装置的功能。再有，粗素材内容编码数据发送单元132进行的粗素材内容编码数据的通信和广播级素材内容编码数据发送单元133进行的广播级素材内容编码数据的通信，也可以按各自不同的通信方法来发送。即，对于来自粗素材内容编码数据发送单元132的粗素材内容编码数据的发送，优选将缩短延迟时间优先进行处理，例如，作为通信路径，选择延迟时间短的路径(通信模块、接口等)，并且在可进行通信路径的参数设定的情况下(还包括能够对管理通信路径的节点进行QoS参数等的请求的情况等)，进行通信路径设定的处理以将延迟时间设定得短，或者也可以进行与包含其他的编码数据的数据通信不同的通信处理(承载、会话、连接的设定等)。
此外，广播级素材内容编码数据发送单元133具有在编码数据获取单元131获取的编码数据中，将广播级素材内容编码数据发送到调整台用内容通信装置的功能。再有，对于广播级素材内容编码数据，为了能够担负广播(或能够担负与调整台或与调整台的演播室之间的对话、通信)，同样地需要有延迟时间的管理，但与粗素材内容的传输延迟所要求的延迟时间的条件比较，可以在缓和的条件下进行发送处理。
此外，认为广播级素材内容编码数据的数据量与粗素材内容的编码数据的数据量比较变大，认为广播级素材内容编码数据的传输的要求条件(传输差错、分组丢失等的要求条件)比粗素材内容的编码数据严格。再有，相反地，粗素材内容甚至可能抽取部分帧，或者容许某个程度的数据丢失(loss)。因此，对于广播级素材内容的编码数据，优选进行虽然容许少许的延迟时间，但能够正确地传输大容量的数据的通信路径(通信模块、接口等)的选择或参数设定。
再有，由于有可能广播级素材内容处理的数据量大，广播级素材内容编码单元122中的编码本身需要时间，所以实质上优选在通信部分(在广播级素材内容编码数据发送单元133中)能够处理，以将广播级素材内容编码数据从获取至发送为止所需的时间与粗素材内容编码数据发送单元132同样地尽可能缩短延迟时间。
作为其结果，广播级素材内容编码数据发送单元133也可以按与粗素材内容编码数据发送单元132同样的通信设定进行发送，而作为通信的管理，优选在粗素材内容和广播级素材内容上区别管理承载、会话、连接等。
此外，发回内容接收单元140具有接收从调整台用内容通信装置发送来的发回内容的功能。发回内容以与实际的广播内容相同的定时进行调整、编辑加工等，但在清晰度、帧速率、颜色、声音方面，是在满足拍摄现场的必要条件的范围内简化或低速率的内容。再有，除此之外，发回内容接收单元140也可接收控制用的声音(包含影像、其他的数据)等的发回内容以外的数据。作为发回数据以外的数据，例如，可列举表示来自调整台的指示、来自中继台的指示、广播中/除此以外(广告(商业的)的期间、进行来自调整台的演播室或其他的中继目的地的中继的期间)的信号等。发回内容接收单元140接收到的发回内容转送到发回内容解码单元150，而其他的数据具有被转送到处理各种数据的功能(图4中未图示)。
此外，发回内容解码单元150具有进行发回内容接收单元140接收到的发回内容的解码处理的功能。再有，发回内容解码单元150基于调整台用内容通信装置中的编码方法进行发回内容的解码，例如，可能在调整台用内容通信装置中也利用与粗素材内容编码单元121同样的编码方法。发回内容解码单元150解码的发回内容转送到发回内容输出单元160。
此外，发回内容输出单元160具有将发回内容解码单元150解码的发回内容(此外还有，附带在发回内容中处理过的信息等)通过必要的接口等输出的功能。发回内容输出单元160从拍摄地用内容通信终端100中设置的输出用装置(监视器、扬声器、耳机等)、或从拍摄地用内容通信终端100上连接的各种装置中设置的输出用装置、其他的外部接口等中，输出发回内容，以使拍摄地的人(操作者或拍摄对象者)可确认。再有，优选发回内容输出单元160可将发回内容和除此以外的数据、内容区别输出，此外，优选能够根据需要而将它们混合输出。
再有，图4中所图示的拍摄地用内容通信终端100的结构不过是一例。拍摄地用内容通信终端(或通过接口连接的多个装置)以重视延迟方式发送与拍摄内容关联的粗素材内容的可逐次编码的数据，而且，接收及输出对于该粗素材内容进行了与实际的广播内容相同的编辑加工的发回内容(调整用内容)即可。此外，也可以将某个功能块作为其他的功能块的一部分来实现，并且也可以将某个功能块安装在可通过接口连接的其他的外部设备上。
下面，说明调整台用内容通信装置的结构例子。再有，在以下的说明中，以1台拍摄地用内容通信终端中安装了全部的功能块来图示，但各功能块也可以分散地安装在通过接口连接的多个装置上。
图5是表示本发明的实施方式的调整台用内容通信装置的结构的第1例的方框图。图5所示的调整台用内容通信装置200具有拍摄内容接收单元210、调整台内容获取单元220、发回内容生成单元230、编辑加工用接口232、最终内容生成单元240、发回内容输出单元250、最终内容输出单元260。
拍摄内容接收单元210从拍摄地(拍摄地用内容通信终端100)接收编码过的拍摄内容。再有，从拍摄地用内容通信终端100接收粗素材内容编码数据及广播级素材内容编码数据作为拍摄内容，而各个编码数据虽然维持关联性(与来自相同拍摄地用内容通信装置的分层结构对应的多个层的编码数据的附带关联信息等)，但各自作为独立的处理单位来处理。此外，优选在从接收拍摄内容起至解码、其他的处理、最终内容(广播内容)的输出为止的期间，兼有暂时保持接收到的拍摄内容的编码数据的功能。
此外，发回内容生成单元230具有将粗素材内容编码数据解码，利用该解码而生成发回内容的功能，包括拍摄内容输出单元231、粗素材内容解码单元233、发回内容合成单元234、发回内容编码单元235。
拍摄内容输出单元231具有将接收到的拍摄内容(粗素材内容解码单元233解码的粗素材内容)输出(显示)的功能。拍摄内容输出单元231也可以对外部接口输出(监视器等)拍摄内容。再有，根据编辑加工等的调整台中的工作流程，相当于该功能的块也可以放在最终内容生成单元240。
此外，粗素材内容解码单元233具有从接收到的粗素材内容编码数据中，获取粗素材内容的功能。粗素材内容解码单元233例如从编码数据的系统层起进行内容的解码，与时戳或帧号等的表示与广播级素材内容之间的对应关系的信息一起进行解码。粗素材内容解码单元233例如根据来自编辑加工用接口单元232的指示或其他的控制，将解码的粗素材内容转送到拍摄内容输出单元231(以粗素材内容的状态输出的情况)。此外，粗素材内容解码单元233将解码的粗素材内容转送到最终内容生成单元240，还被用于最终内容生成单元240中的最终内容的合成。
此外，发回内容合成单元234具有根据来自编辑加工用接口单元232的指示或其他的控制，使用粗素材内容进行发回内容的合成的功能。再有，对于发回内容也优选使处理延迟或传输延迟小，优选发回内容在编码时以短时间进行处理，并且是作为数据量少的编码数据那样的内容。
再有，发回内容合成单元234根据来自编辑加工用接口单元232的指示或其他的控制，对于粗素材内容进行构图调整等，从而合成发回内容(即，调整用内容)。此外，用于编辑加工的设备为外部连接的形式的情况下，发回内容合成单元234也有仅获取合成完毕的发回内容的情况。这是因为取决于调整台的整体的系统结构，在调整台用内容通信装置200中，包含还有仅存在获取发回内容的功能的实施结构，作为发回内容合成单元234的功能。即，在系统结构上，发回内容合成单元234也有不进行发回内容的合成而可作为仅简单地进行获取动作的发回内容获取单元来实现的情况。
此外，发回内容编码单元235具有将发回内容合成单元234中合成的发回内容编码的功能。发回内容编码单元235将编码的编码数据转送到发回内容输出单元250。再有，发回内容编码单元235也可以根据与粗素材内容解码单元233中解码的粗素材内容编码数据的编码方法同等的编码方法进行编码。
此外，编辑加工用接口单元232是用于进行与其他的调整台的演播室的内容等的切换或合成等的用于控制的接口。编辑加工用接口单元232与内容的时戳等同步地与调整台的其他编辑设备、送出设备协同动作。再有，根据编辑加工等的调整台中的工作流，相当于该功能的块也可以是发回内容生成单元230或最终内容生成单元240，对于该情况的结构，参照图6及图7，后面论述。
此外，最终内容生成单元240具有将广播级素材内容解码，利用该解码内容生成最终内容的功能，包括广播级素材内容解码单元241、分层编码管理单元242、最终内容合成单元243。
广播级素材内容解码单元241具有从接收到的广播级素材内容编码数据(及粗素材内容编码数据)中，获取广播级素材内容的功能。广播级素材内容解码单元241例如从编码数据的系统层起进行内容的解码，与时戳或帧号等的表示与粗素材内容之间的对应关系的信息一起进行解码。广播级素材内容解码单元241根据分层编码管理单元242的信息，通过将分层为粗素材内容的信息合成并进行加法运算，生成解码数据(广播级素材内容)。
此外，分层编码管理单元242具有将粗素材内容和广播级素材内容之间的对应关系进行管理(保持)，并进行控制，以将广播级素材内容以正确的分层结构的组合进行解码的功能。
此外，最终内容合成单元243具有根据来自编辑加工用接口单元232的指示或其他的控制，进行最终内容的合成的功能。再有，最终内容合成单元243根据来自编辑加工用接口单元232的指示或其他的控制，通过进行与在合成发回内容时实行的情况相同的构图调整等，可以使发回内容(即，调整用内容)和最终内容一致。此外，在编辑加工由外部的编辑设备进行的情况下，也有根据来自编辑加工用接口单元232的指示或其他的控制，将广播级素材内容仅转送到最终内容输出单元260即可的情况。
此外，发回内容输出单元250具有将发回内容编码单元235编码过的发回内容的编码数据发送到拍摄地用内容通信终端100的功能。再有，用于向拍摄地用内容通信终端100发送发回内容的传输路径可以是从与从拍摄地用内容通信终端100接收到内容的接口相同的接口(如果是双向通信)，但作为从调整台面向拍摄地的传输路径，从延迟、稳定性等观点来说，优选能够选择更合适的接口。此外，优选也能够适当地设定与QoS等的传输有关的参数设定。
此外，最终内容输出单元260具有将合成的最终内容(根据装置结构，广播级素材内容本身)输出的功能。该最终内容(或假象牙通过外部的编辑设备加工的内容)用作广播内容。
再有，本图5所示的调整台用内容通信装置200，例如是对于将调整台演播室的影像(调整台内容)以画中画方式重合，或者插入了字幕等的影像编辑以外部的编辑设备进行作为前提的结构。即，图5中图示的调整台用内容通信装置200，以外部的编辑设备进行编辑加工，或者编辑加工在发回内容合成单元234或最终内容合成单元243中已完结(不过多和过少地完成)的情况等作为前提。另一方面，在后述的图6或图7中图示的调整台用内容通信装置201、202的其他结构例子中，具有调整台内容获取单元220，可在调整台用内容通信装置200内进行在发回内容或最终内容上合成调整台内容的处理。
此外，图6是表示本发明的实施方式的调整台用内容通信装置结构的第2例的方框图。图6所示的调整台用内容通信装置201具有拍摄内容接收单元210、调整台内容获取单元220、发回内容生成单元230、最终内容生成单元240、发回内容输出单元250、最终内容输出单元260。
再有，调整台内容获取单元220具有获取从拍摄地用内容通信终端100发送来的拍摄内容以外的必要的内容(调整台的演播室的内容等)的功能。在不需要拍摄内容以外的内容的情况、或由外部的装置或发回内容合成单元234、最终内容合成单元243完结(不过多或过少地完成)编辑加工的情况等中，不一定必需设置该调整台内容获取单元220。
图6所示的调整台用内容通信装置201的各块的功能与上述功能基本上相同，大的不同是，拍摄内容输出单元231及编辑加工接口232被纳入在发回内容生成单元230中。即，在图6所示的调整台用内容通信装置201中，从监视器输出粗素材内容，并且通过编辑加工用接口单元232对于粗素材内容完成编辑加工，另一方面，在生成最终内容时，对于由分层编码数据的简单的解码处理所得的广播级素材内容，将对发回内容的编辑加工结果由最终内容合成单元243进行合成。
此外，图7是表示本发明的实施方式的调整台用内容通信装置结构的第3例的方框图。图7所示的调整台用内容通信装置202也同样具有拍摄内容接收单元210、调整台内容获取单元220、发回内容生成单元230、最终内容生成单元240、发回内容输出单元250、最终内容输出单元260，但在拍摄内容输出单元231及编辑加工接口单元232被纳入最终内容生成单元240中，并且由编辑加工接口单元232进行发回内容及最终内容两者的编辑加工方面，与图6所示的调整台用内容通信装置201极大地不同。
即，在图7所示的调整台用内容通信装置202中，一边用监视器等确认与广播级素材内容同等质量的影像，一边通过编辑加工用接口单元232进行粗素材内容或广播级素材内容的编辑加工。此外，在合成了与最终内容的质量同等的广播级素材内容后的定时，也可进行编辑加工，例如，在发回内容中预先仅确定画中画的窗口的配置，在合成最终内容之前，从调整台内容获取单元220获取调整台演播室中的影像数据等并嵌入在画中画的窗口中，从而可合成与应答的定时一致的影像和声音数据。
再有，图5～图7中图示的调整台用内容通信装置200、201、202的结构不过是一例。调整台用内容通信装置(或通过接口连接的多个装置)，将实际的广播内容中实施的编辑加工对于粗素材内容进行合成而生成并发送发回内容，而且，将对于粗素材内容实施的编辑加工在与该粗素材内容对应的最终内容(实际的广播内容)中进行合成即可。此外，也可以将图5～图7中图示的结构组合使用。而且，也可以将某个功能块作为其他功能块的一部分来实现，而且也可以将某个功能块安装在可通过接口连接的其他的外部设备上。
图8是表示本发明的第2实施方式的一例拍摄内容编码器结构的方框图。再有，图8所示的拍摄内容编码器500可配置在图4所示的拍摄地用内容通信终端100内，图8着眼于图示使用分层编码技术从拍摄内容生成粗素材内容编码数据及广播级素材内容编码数据的功能。
图8所示的拍摄内容编码器500具有核心编码器501、核心解码器502、差成分提取器503、扩展编码器504。再有，核心编码器501、核心解码器502、扩展编码器504分别对应于粗素材内容编码器、粗素材内容解码器、广播级素材内容编码器。
输入到拍摄内容编码器500的拍摄内容提供给核心编码器501及差成分提取器503，核心编码器501首先进行拍摄内容的编码，生成粗素材内容编码数据。核心编码器501生成的粗素材内容编码数据供给到核心解码器502，核心解码器502进行所供给的粗素材内容编码数据的解码处理而获得粗素材内容，对差成分提取器503供给粗素材内容。
差成分提取器503提取所供给的拍摄内容和粗素材内容之间的差成分，将该差成分供给到扩展编码器504。扩展编码器504将供给的差成分进行编码而生成广播级素材内容编码数据。然后，核心编码器501获得的粗素材内容编码数据、扩展编码器504获得的广播级素材内容编码数据被分别输出。
再有，作为编码数据的输出及传输的定时，考虑缩短延迟时间，首先，从拍摄内容编码器500输出以在获得了粗素材内容编码数据的时刻立即传输，接着，从拍摄内容编码器500输出在进行了剩余的处理后所得的广播级素材内容编码数据。通过该分层编码，在传输后的解码侧的处理中，在使用了获得的编码数据中的一部分(粗素材内容编码数据)的核心解码器(粗素材内容解码器)的解码中获得粗素材内容，通过在该内容中与使用了剩余的代码(广播级素材内容编码数据)的扩展解码器(广播级素材内容解码器的一部分)的解码所得的成分进行加法运算，从而可以解码原来的拍摄内容，获得广播级素材内容。
图9是表示本发明的第2实施方式的一例广播级素材内容解码器及发回内容编码器的结构的方框图。再有，图9所示的核心解码器601、发回内容编码器602、广播级素材内容解码器610可配置在图5～图7所示的调整台用内容通信装置200、201、202内，图9着眼于图示从粗素材内容编码数据生成粗素材内容的功能、使用分层编码技术从粗素材内容编码数据及广播级素材编码数据生成广播级素材内容的功能、从发回内容生成发回内容编码数据的功能。此外，核心解码器601和核心解码器612具有将粗素材内容编码数据解码的相同功能，也可以通过相同的解码器来实现。
在图9中，若接收分层编码器(图8所示的拍摄内容编码器500)获得的编码数据的一部分(粗素材内容编码数据)，则被立即输入到核心解码器601，在核心解码器601的解码中获得粗素材内容。而且，这样获得的粗素材内容被编辑加工，以可作为调整用内容(发回内容)使用。发回内容由发回内容编码器602编码，编码后的数据(发回内容编码数据)发回到拍摄地用内容通信终端100。再有，发回内容在传输目的地(即，图8所示的拍摄内容编码器500)中不需要高质量，所以能以低速率进行编码。
此外，图9所示的广播级素材内容解码器610具有分层型解码器611、核心解码器612、扩展解码器613、加法器614。
粗素材内容编码数据及广播级素材内容编码数据被输入到仅掌握分层编码数据的系统层的分层型解码器611。然后，通过分层型解码器611的控制(各分层编码数据的对应关系等的管理)，使用全部的编码数据，首先由核心解码器(与粗素材内容解码器等效的解码器)612进行解码而获取粗素材内容，接着由扩展解码器613进行解码而获取相当于与拍摄内容之间的差成分的数据(广播级素材层所属的数据)。然后，这些数据在加法器614中被加法运算，从而获取广播级素材内容。
在本发明的使用形态中，粗素材内容解码器是可以另行地为了生成发回内容而并行或先行地动作的结构，所以可以取代核心解码器，而使用仅简单地进行粗素材内容编码数据的解码处理的粗素材内容解码器的输出。此外，通过将为了生成发回内容而先行解码的粗素材内容(核心解码器601解码的粗素材内容)供给到分层型解码器611、核心解码器612或加法器614，从而在广播级素材内容解码器610中也可进行同样的处理。
再有，在最终内容的生成中，在将粗素材内容编码数据和广播级素材内容编码数据解码(其结果，获得广播级素材内容)，将这样获得的广播级素材内容进行编辑加工所得的内容作为最终内容的情况下，可容易地处理。另一方面，例如，在对于将粗素材内容编码数据解码所得的内容实施编辑加工，而且利用将广播级素材内容编码数据解码所得的数据来获得最终内容的情况下，可能需要特殊的处理或编解码器(codec)。
再有，在上述各实施方式中，以电视广播或网络分发为前提进行了本发明的说明，但本发明的编码方法、发回方法、传输系统等可以适用于其他现有的数据通信技术以及将来发展的各种各样的数据通信技术。特别地，在无论对普通公众或特定成员，正在使手持移动终端的个人在各种各样的场所拍摄的内容进行散发、分发成为可能的数据通信中，作为个人的数据分发方法、中间的分发服务提供方法也可广泛地利用。此外，在仅声音(无线广播等)或仅影像(监视)等内容单一的情况下，显然也可适用本发明。
此外，为了使说明简单，有使用向拍摄地发送、向调整台发送等的表达方式进行本发明的说明的地方，但实际上，在本发明的拍摄地侧通信终端和调整台侧通信装置之间进行通信。此外，在系统结构上，除了拍摄地、调整台以外，有时在中继台中还装载有能够安装各种各样的功能的装置。在这样的情况下，例如，若安装在拍摄地侧通信终端中，则也可以将说明的拍摄内容编码单元及拍摄内容发送单元(例如，作为本发明的核心的分层编码处理及编码数据的发送处理)安装在中继台的装置中，在拍摄地中仅进行发回内容(调整用内容)的接收、解码、显示。
此外，在实际的使用环境中，本发明的装置有可能在发送的中继开始前后也进行动作，但该情况下，尽管拍摄地中的拍摄内容被调整台接收(以及保存等)，而作为发回内容，发回实际上进行广播/分发的内容(即，仅用调整台演播室中的拍摄内容，没有与拍摄内容的合成等)，进行计测中继开始的定时等的调整作业，所以实质上不需要拍摄内容(粗素材内容、以及广播级素材内容)的合成/加工。该情况下，在调整台用内容通信装置中，不进行以粗素材内容为基础的发回内容(进行了粗素材内容的合成、加工的发回内容)的编码，对于调整台的设备输出粗素材内容或广播级素材内容，并且将调整台演播室中的拍摄内容等的发回内容作为输入，将其编码后发回。再有，将这样的动作模式称为空闲(idling)模式。进行上述通常的中继的模式和空闲模式，也可以分别以中继开始/结束的定时来切换。
此外，在上述第2实施方式中，应用分层编码，将粗素材内容和广播级素材内容进行了加法运算所得的内容恰好与拍摄内容一致，但如果拍摄地侧通信终端具有生成粗素材内容并发送到调整台的功能，并且调整台(解码侧)可进行拍摄内容的解码，则也可以进行与分层编码技术不一致的冗余数据编码。例如，在图5所示的拍摄内容编码器500中，扩展编码器504也可以生成包含了与粗素材内容的一部分或全部重复的内容的广播级素材内容编码数据。该情况下，在解码侧中，进行将在广播级素材内容编码数据中重复而包含粗素材内容的一部分或全部的情况作为前提的处理即可。此外，在进行了全部粗素材内容包含在广播级素材内容编码数据中的编码的情况下，拍摄内容编码器500具有核心编码器501、以及将输入的全体拍摄内容编码的编码器(拍摄内容编码器)，立即发送粗素材内容编码数据，延迟地发送将全体拍摄内容编码后的数据即可。
再有，上述实施方式的说明中使用的各功能块通常被作为集成电路的LSI(Large Scale Integration；大规模集成)来实现。这些功能块既可以被单独地集成为一个芯片，也可以包含一部分或全部地被集成为一个芯片。虽然这里称为LSI，但根据集成程度的不同，可以被称为IC(Integrated Circuit；集成电路)、系统LSI、超大LSI(Super LSI)、或特大LSI(Ultra LSI)。
另外，实现集成电路化的方法不限于LSI，也可使用专用电路或通用处理器来实现。也可以利用LSI制造后能够编程的FPGA(Field ProgrammableGate Array，现场可编程门阵列)，或可以利用对LSI内部的电路块(circuit cell)的连接或设定能进行重构的可重构处理器(Reconfigurable Processor)。
再者，随着半导体的技术进步或随之派生的其它技术的出现，如果出现能够替代LSI的集成电路化的新技术，当然可利用该新技术进行功能块的集成化。例如，还存在着适用生物技术等的可能性。
工业实用性
本发明在进行来自拍摄地的中继广播的情况下，具有拍摄侧能够迅速地确认如何将在拍摄地(拍摄侧)进行的动作反映为广播内容的效果，可适用于进行内容数据的编码及传输的技术。
Claims (25)
1.内容通信装置，将拍摄地拍摄的拍摄内容数据发送到进行广播内容编辑的内容加工装置，该内容通信装置包括：
拍摄内容获取单元，获取所述拍摄内容数据；
第1编码单元，将所述拍摄内容获取单元获取的所述拍摄内容数据以规定的质量编码而生成第1编码数据；
第1发送单元，对所述内容加工装置逐次发送所述第1编码单元生成的所述第1编码数据；
第2编码单元，将提高所述第1编码数据中包含的影像的质量的附加信息从所述拍摄内容数据提取并编码，生成第2编码数据；以及
第2发送单元，对所述内容加工装置发送所述第2编码单元生成的所述第2编码数据。
2.权利要求1所述的内容通信装置，所述第1发送单元的所述第1编码数据的通信方法和所述第2发送单元的所述第2编码数据的通信方法分别不同。
3.权利要求2所述的内容通信装置，对与所述第1发送单元的所述第1编码数据的通信有关的所述内容加工装置的通信路径和对与所述第2发送单元的所述第2编码数据的通信有关的所述内容加工装置的通信路径分别不同。
4.权利要求2所述的内容通信装置，对与所述第1发送单元的有关所述第1编码数据的通信有关的所述内容加工装置的QoS设定和对与所述第2发送单元的所述第2编码数据的通信有关的所述内容加工装置的QoS设定分别不同。
5.权利要求1所述的内容通信装置，所述第1编码单元和所述第2编码单元进行所述影像内容数据的分层编码，所述第1编码单元将所述分层编码的核心层的编码数据作为所述第1编码数据生成，所述第2编码单元将所述分层编码的扩展层的编码数据作为所述第2编码数据生成。
6.权利要求5所述的内容通信装置，还包括：
解码单元，将所述第1编码单元生成的所述第1编码数据解码而生成解码数据；以及
差成分提取单元，提取所述拍摄内容获取单元获取的所述拍摄内容数据和所述解码单元生成的所述解码数据之间的差成分而生成差成分数据，
所述第2编码单元将所述差成分提取单元生成的所述差成分数据作为所述分层编码的扩展层的编码数据，生成所述第2编码数据。
7.权利要求1所述的内容通信装置，所述第1编码单元与所述第1发送单元的发送单位相配地生成所述第1编码数据。
8.权利要求7所述的内容通信装置，有关由所述第1编码单元生成的所述第1编码数据的编码单位、以及所述第1发送单元的所述发送单位，一方为另一方的增倍。
9.权利要求1所述的内容通信装置，所述第2编码单元将与所述第1编码单元生成的所述第1编码数据的多个编码单位对应的信息一并编码，生成所述第2编码数据。
10.权利要求9所述的内容通信装置，所述第1编码单元进行每帧压缩的编码，所述第2编码单元进行帧间压缩的编码。
11.权利要求1所述的内容通信装置，所述第1编码单元与在所述拍摄内容中包含的影像的分割单位相配地决定在所述拍摄内容中包含的声音的分割单位，生成所述第1编码数据。
12.权利要求1所述的内容通信装置，还包括：
调整用内容接收单元，接收在所述内容加工装置中，对于所述第1编码数据进行将其部分或全部反映到实际的广播内容中的编辑并发回来的调整用内容；以及
调整用内容输出单元，输出所述调整用内容，以使所述拍摄地的用户能够确认。
13.内容通信装置，将拍摄地拍摄的拍摄内容数据发送到进行广播内容的编辑的内容加工装置，该内容通信装置包括：
拍摄内容获取单元，获取所述拍摄内容数据；
拍摄内容发送单元，对所述内容加工装置发送所述拍摄内容获取单元获得的所述拍摄内容数据；
调整用内容接收单元，接收在所述内容加工装置中，对于所述第1编码数据进行将其部分或全部反映到实际的广播内容中的编辑并发回来的调整用内容；以及
调整用内容输出单元，输出所述调整用内容，以使所述拍摄地的用户能够确认。
14.内容加工装置，进行广播内容的编辑，该内容加工装置包括：
第1编码数据接收单元，从内容通信装置接收获取了拍摄地拍摄的拍摄内容数据的所述内容通信装置对于所述拍摄内容数据以规定的质量进行编码而生成的第1编码数据；
第1编码数据解码单元，将所述第1编码数据解码；
编辑加工单元，对于所述解码后的第1编码数据进行将其部分或全部反映到实际的广播内容中的编辑；以及
调整用内容发送单元，对所述内容通信装置发送所述编辑加工单元编辑的所述解码后的第1编码数据作为调整用数据。
15.权利要求14所述的内容加工装置，还包括：
编码单元，将所述编辑加工单元编辑的所述解码后的第1编码数据用与所述第1编码数据的编码方法相同的方法进行编码而生成所述调整用内容。
16.权利要求14所述的内容加工装置，还包括：
第2编码数据接收单元，从所述拍摄内容数据中提取所述内容通信装置提高在所述第1编码数据中包含的影像的质量的附加信息，从所述内容通信装置接收由编码所述附加信息生成的第2编码数据；以及
第2编码数据解码单元，将所述第2编码数据解码。
17.权利要求16所述的内容加工装置，还包括：
广播内容输出单元，将在所述解码后的第1编码数据和所述解码后的第2编码数据加法运算所得的内容中由所述编辑加工单元进行了编辑所得的内容、或将所述解码后的第2编码数据反映在所述调整用内容中所得的内容，作为实际广播的广播内容输出。
18.权利要求16所述的内容加工装置，还包括：
内容数据获取单元，基于所述第1编码数据解码单元解码后的第1编码数据和所述第2编码数据解码单元解码后的第2编码数据，获取内容；
广播用编辑加工单元，对于所述内容数据获取单元获取的所述内容进行编辑；以及
广播内容输出单元，将所述广播用编辑加工单元编辑后的内容作为实际广播的广播内容输出。
19.权利要求16所述的内容加工装置，所述第1编码数据解码单元和所述第2编码数据解码单元进行分层编码数据的解码，所述第1编码数据解码单元从所述第1编码数据获取所述分层编码的核心层的数据，所述第2编码数据解码单元从所述第2编码数据中获取所述分层编码的扩展层的数据，基于所述核心层的数据及所述扩展层的数据而获取内容。
20.权利要求14所述的内容加工装置，还包括：
外部内容获取单元，获取外部内容，
所述编辑加工单元将已经获取的所述外部内容合成在所述编辑时所述解码后的第1编码数据中。
21.权利要求14所述的内容加工装置，还包括：
外部内容获取单元，获取外部内容；以及
同步控制单元，在所述编辑加工单元中的所述编辑时进行所述外部内容的合成时，使所述拍摄内容数据及所述外部内容同步，
所述编辑加工单元基于所述同步控制单元的同步控制，将所述外部内容合成在所述解码后的第1编码数据中作为所述编辑。
22.权利要求14所述的内容加工装置，还包括：
外部内容获取单元，获取外部内容；以及
外部内容发送单元，对所述内容通信装置发送所述外部内容作为调整用内容，
在实际的广播中使用所述拍摄地拍摄的拍摄内容数据的情况下，所述调整用内容发送单元发送所述调整内容，在实际的广播中未使用所述拍摄地拍摄的拍摄内容数据的情况下，所述外部内容发送单元发送所述调整内容。
23.内容加工装置，进行广播内容的编辑，该内容加工装置包括：
拍摄内容数据接收单元，从所述内容通信装置接收拍摄地拍摄的拍摄内容数据；
编辑加工单元，对于所述接收到的拍摄内容数据进行将其部分或全部反映到实际的广播内容中的编辑；以及
调整用内容发送单元，对所述内容通信装置发送所述编辑加工单元编辑的所述拍摄内容数据作为调整用内容。
24.内容通信系统，包括进行广播内容的编辑的内容加工装置、以及将拍摄地拍摄的拍摄内容数据发送到所述内容加工装置的内容通信装置，
所述内容通信装置包括：
拍摄内容获取单元，获取所述拍摄内容数据；
第1编码单元，将所述拍摄内容获取单元获取的所述拍摄内容数据以规定的质量进行编码而生成第1编码数据；
第1发送单元，对所述内容加工装置逐次发送所述第1编码单元生成的所述第1编码数据；
第2编码单元，将提高所述第1编码数据中包含的影像的质量的附加信息从所述拍摄内容数据中提取并进行编码，生成第2编码数据；
第2发送单元，对所述内容加工装置发送所述第2编码单元生成的所述第2编码数据；
调整用内容接收单元，接收在所述内容加工装置中，对于所述第1编码数据进行将其部分或全部反映在实际的广播内容中的编辑并发回来的调整用内容；以及
调整用内容输出单元，输出所述调整用内容，以使所述拍摄地的用户能够确认，
所述内容加工装置包括：
第1编码数据接收单元，从所述内容通信装置接收所述第1编码数据；
第1编码数据解码单元，将所述第1编码数据解码；
编辑加工单元，对于所述解码后的第1编码数据进行将其反映到实际的广播内容中的编辑；
调整用内容发送单元，对所述内容通信装置发送所述编辑加工单元编辑的所述解码后的第1编码数据作为所述调整用内容；
第2编码数据接收单元，从所述内容通信装置接收所述第2编码数据；
第2编码数据解码单元，将所述第2编码数据解码；以及
广播内容输出单元，将在所述解码后的第1编码数据和所述解码后的第2编码数据加法运算所得的内容中由所述编辑加工单元进行了编辑所得的内容、或将所述解码后的第2编码数据反映在所述调整用内容中所得的内容，作为实际广播的广播内容输出。
25.内容通信系统，包括进行广播内容的编辑的内容加工装置、以及将拍摄地拍摄的拍摄内容数据发送到所述内容加工装置的内容通信装置，
所述内容通信装置包括：
拍摄内容获取单元，获取所述拍摄内容数据；
发送单元，对所述内容加工装置发送所述拍摄内容获取单元获取的所述拍摄内容数据；
调整用内容接收单元，接收在所述内容加工装置中，对于所述拍摄内容进行将其部分或全部反映在实际的广播内容中的编辑并发回来的调整用内容；以及
调整用内容输出单元，输出所述调整用内容，以使所述拍摄地的用户能够确认，
所述内容加工装置包括：
拍摄内容数据接收单元，从所述内容通信装置接收所述拍摄内容数据；
编辑加工单元，对于所述接收到的拍摄内容数据进行将其反映到实际的广播内容中的编辑；
调整用内容发送单元，对所述内容通信装置发送所述编辑加工单元编辑的所述拍摄内容数据作为所述调整用内容；以及
广播内容输出单元，生成并输出反映了所述编辑加工单元中的编辑内容的广播内容。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010-030230 | 2010-02-15 | ||
| JP2010030230 | 2010-02-15 | ||
| PCT/JP2011/000711 WO2011099273A1 (ja) | 2010-02-15 | 2011-02-09 | コンテンツ通信装置及びコンテンツ加工装置並びにコンテンツ通信システム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN102754445A true CN102754445A (zh) | 2012-10-24 |
Family
ID=44367559
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2011800092900A Pending CN102754445A (zh) | 2010-02-15 | 2011-02-09 | 内容通信装置、内容加工装置和内容通信系统 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US20120307913A1 (zh) |
| EP (1) | EP2538671A1 (zh) |
| JP (1) | JP5607084B2 (zh) |
| CN (1) | CN102754445A (zh) |
| WO (1) | WO2011099273A1 (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109417830A (zh) * | 2016-08-08 | 2019-03-01 | 华为技术有限公司 | 数据传输方法、发送端设备及接收端设备 |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130018701A1 (en) * | 2010-08-17 | 2013-01-17 | Matthew Dusig | Capturing and processing data responsive to a task associated with consumer research, survey, or poll |
| JP2013187606A (ja) * | 2012-03-06 | 2013-09-19 | Sony Corp | 撮像装置および画像伝送方法 |
| JP6307856B2 (ja) * | 2013-11-28 | 2018-04-11 | ソニー株式会社 | 送信装置、広色域画像データ送信方法、受信装置、広色域画像データ受信方法およびプログラム |
| JP6355345B2 (ja) * | 2014-01-29 | 2018-07-11 | キヤノン株式会社 | 画像処理装置、画像処理方法、表示装置、表示方法、及び、プログラム |
| JP6994359B2 (ja) * | 2017-11-07 | 2022-01-14 | 株式会社日立国際電気 | 放送伝送システム |
| US20240321319A1 (en) * | 2021-07-07 | 2024-09-26 | Nippon Telegraph And Telephone Corporation | Media synchronization control apparatus, media synchronization control method, and media synchronization control program |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07307711A (ja) * | 1994-05-16 | 1995-11-21 | Nippon Hoso Kyokai <Nhk> | 多重伝送システム |
| US6005633A (en) * | 1996-03-28 | 1999-12-21 | Sony Corporation | Signal transmitting-receiving system |
| US20030223494A1 (en) * | 2002-06-04 | 2003-12-04 | Nobukazu Kurauchi | Image data transmitting apparatus and method and image data reproducing apparatus and method |
| JP2004289718A (ja) * | 2003-03-25 | 2004-10-14 | Nippon Hoso Kyokai <Nhk> | 撮影映像編集方法およびその装置 |
| CN1545322A (zh) * | 1997-03-17 | 2004-11-10 | 松下电器产业株式会社 | 发送和接收动态图像数据的方法及其设备 |
| CN1864409A (zh) * | 2003-10-16 | 2006-11-15 | 日本电气株式会社 | 媒体信号的发送方法、接收方法、发送接收方法以及装置 |
| CN1890972A (zh) * | 2003-11-21 | 2007-01-03 | 日本电气株式会社 | 内容配送及接收装置、内容发送接收系统、内容配送及接收方法、内容配送及接收用程序 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3231493B2 (ja) * | 1993-07-14 | 2001-11-19 | 松下電送システム株式会社 | シート切断装置及びこれを備えたファクシミリ装置 |
| US6104720A (en) * | 1997-04-28 | 2000-08-15 | Intel Corporation | Dynamic communication path selection for data transmission between computers |
| US6798756B1 (en) * | 1997-05-30 | 2004-09-28 | Sony Corporation | Data transmission system and method, and data receiving method and device |
| JP2003209807A (ja) * | 2002-01-10 | 2003-07-25 | Canon Inc | 動画再生方法及び装置 |
| JP4261250B2 (ja) | 2002-06-04 | 2009-04-30 | パナソニック株式会社 | 画像データ伝送装置及び方法、画像データ再生装置及び方法 |
| JP4128438B2 (ja) * | 2002-12-13 | 2008-07-30 | 株式会社リコー | 画像処理装置、プログラム、記憶媒体及び画像編集方法 |
| JP2004289918A (ja) * | 2003-03-20 | 2004-10-14 | Fujitsu Ltd | 電力供給方法 |
| JP4243140B2 (ja) * | 2003-06-11 | 2009-03-25 | 日本放送協会 | データ送信装置、データ送信プログラムおよびデータ受信装置、データ受信プログラムならびにデータ送受信方法 |
| JP4433287B2 (ja) | 2004-03-25 | 2010-03-17 | ソニー株式会社 | 受信装置および方法、並びにプログラム |
| JP2010011287A (ja) * | 2008-06-30 | 2010-01-14 | Panasonic Corp | 映像伝送方法および端末装置 |
-
2011
- 2011-02-09 US US13/576,527 patent/US20120307913A1/en not_active Abandoned
- 2011-02-09 CN CN2011800092900A patent/CN102754445A/zh active Pending
- 2011-02-09 JP JP2011553755A patent/JP5607084B2/ja not_active Expired - Fee Related
- 2011-02-09 EP EP11742023A patent/EP2538671A1/en not_active Withdrawn
- 2011-02-09 WO PCT/JP2011/000711 patent/WO2011099273A1/ja active Application Filing
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07307711A (ja) * | 1994-05-16 | 1995-11-21 | Nippon Hoso Kyokai <Nhk> | 多重伝送システム |
| US6005633A (en) * | 1996-03-28 | 1999-12-21 | Sony Corporation | Signal transmitting-receiving system |
| CN1545322A (zh) * | 1997-03-17 | 2004-11-10 | 松下电器产业株式会社 | 发送和接收动态图像数据的方法及其设备 |
| US20030223494A1 (en) * | 2002-06-04 | 2003-12-04 | Nobukazu Kurauchi | Image data transmitting apparatus and method and image data reproducing apparatus and method |
| JP2004289718A (ja) * | 2003-03-25 | 2004-10-14 | Nippon Hoso Kyokai <Nhk> | 撮影映像編集方法およびその装置 |
| CN1864409A (zh) * | 2003-10-16 | 2006-11-15 | 日本电气株式会社 | 媒体信号的发送方法、接收方法、发送接收方法以及装置 |
| CN1890972A (zh) * | 2003-11-21 | 2007-01-03 | 日本电气株式会社 | 内容配送及接收装置、内容发送接收系统、内容配送及接收方法、内容配送及接收用程序 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109417830A (zh) * | 2016-08-08 | 2019-03-01 | 华为技术有限公司 | 数据传输方法、发送端设备及接收端设备 |
| CN109417830B (zh) * | 2016-08-08 | 2021-10-15 | 华为技术有限公司 | 数据传输方法、发送端设备及接收端设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| JPWO2011099273A1 (ja) | 2013-06-13 |
| WO2011099273A1 (ja) | 2011-08-18 |
| EP2538671A1 (en) | 2012-12-26 |
| US20120307913A1 (en) | 2012-12-06 |
| JP5607084B2 (ja) | 2014-10-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102754445A (zh) | 内容通信装置、内容加工装置和内容通信系统 | |
| CN105306468B (zh) | 一种合成视频数据实时共享的方法及其主播客户端 | |
| CN103650515B (zh) | 无线3d 流式传输服务器 | |
| US8228363B2 (en) | Method and system for conducting continuous presence conferences | |
| CN102281391B (zh) | 摄像机系统、视频选择装置和视频选择方法 | |
| CN103581610B (zh) | 进行不同参与设备的视频会议的方法与系统 | |
| WO2016202887A1 (en) | Providing low & high quality streams | |
| CN101370114A (zh) | 视频及音频处理方法、多点控制单元和视频会议系统 | |
| US9357141B2 (en) | Method and apparatus for remotely controlling a live TV production | |
| WO2011126586A1 (en) | Video content distribution | |
| CN101895718A (zh) | 视频会议系统多画面广播方法及其装置和系统 | |
| US20230319371A1 (en) | Distribution of Multiple Signals of Video Content Independently over a Network | |
| WO2017193830A1 (zh) | 视频切换方法、装置、系统及存储介质 | |
| US20090137243A1 (en) | Mobile communication terminal and signal relay method | |
| KR100874226B1 (ko) | 다시점 화상 및 3차원 오디오 송수신 장치 및 이를 이용한송수신 방법 | |
| KR20170081517A (ko) | 시청자의 참여가 가능한 양방향 방송 제공 서버 및 방법 | |
| JP2003333572A (ja) | 仮想観客形成装置およびその方法、仮想観客形成受信装置およびその方法ならびに仮想観客形成プログラム | |
| Miki et al. | Ready for 8K UHDTV broadcasting in Japan | |
| WO2011099254A1 (ja) | データ処理装置及びデータ符号化装置 | |
| Sakaida et al. | The super hi-vision codec | |
| Hur et al. | Experimental service of 3D TV broadcasting relay in Korea | |
| CN102957893B (zh) | 用于在连续呈现会议中的视频流之间切换的方法和系统 | |
| CN107210041A (zh) | 发送装置、发送方法、接收装置以及接收方法 | |
| US20180160149A1 (en) | System and method for enabling seek in a video recording | |
| KR20180058211A (ko) | 방송 재전송 방법 및 그 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C05 | Deemed withdrawal (patent law before 1993) | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20121024 |