CN102090057A - 数据发送装置、数据发送方法、视听环境控制装置、视听环境控制系统及视听环境控制方法 - Google Patents

数据发送装置、数据发送方法、视听环境控制装置、视听环境控制系统及视听环境控制方法 Download PDF

Info

Publication number
CN102090057A
CN102090057A CN2009801273893A CN200980127389A CN102090057A CN 102090057 A CN102090057 A CN 102090057A CN 2009801273893 A CN2009801273893 A CN 2009801273893A CN 200980127389 A CN200980127389 A CN 200980127389A CN 102090057 A CN102090057 A CN 102090057A
Authority
CN
China
Prior art keywords
data
visual environment
ancillary equipment
audio visual
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2009801273893A
Other languages
English (en)
Inventor
岩波琢也
德毛靖昭
荻泽义昭
伊藤典男
渡部秀一
长谷川伸也
吉井隆司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of CN102090057A publication Critical patent/CN102090057A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4131—Peripherals receiving signals from specially adapted client devices home appliance, e.g. lighting, air conditioning system, metering devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173—End-user applications, e.g. Web browser, game
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8186—Monomedia components thereof involving executable data, e.g. software specially adapted to be executed by a peripheral of the client device, e.g. by a reprogrammable remote control

Abstract

本发明提供一种可根据实际的视听环境中的外围设备的配置分布进行获得强临场感的适当的外围设备控制的数据发送装置、数据发送方法、视听环境控制装置、视听环境控制系统及视听环境控制方法。数据接收装置(20)接收预定的视频数据和/或音频数据、表示配置在虚拟的视听环境空间上的外围设备(照明装置)的配置图案的识别信息、和与配置在该虚拟的视听环境空间中的外围设备对应的照明控制数据，在照明调光数据生成部中，基于识别信息和照明控制数据以及从照明配置信息存储部(25)获取到的实际的视听环境空间中的照明装置(32)的配置信息，生成用于驱动控制实际的照明装置(32)的驱动控制数据。

Description

数据发送装置、数据发送方法、视听环境控制装置、视听环境控制系统及视听环境控制方法
技术领域
本发明涉及数据发送装置、数据发送方法、视听环境控制装置、视听环境控制系统及视听环境控制方法，尤其涉及用于实现临场感强的视频/音频内容的视听的、用于控制用户的视听环境空间中的外围设备的数据发送装置、数据发送方法、视听环境控制装置、视听环境控制系统及视听环境控制方法。
背景技术
近年来，随着视频/音频相关电子技术的迅速进步，推进了显示器的大型化、宽视野化、高清晰化及环绕声系统的提高，可以欣赏具有临场感的视频或音频。例如，在当前正在普及的家庭影院系统中，通过大型显示器、屏幕及多信道音频/音响技术的组合，实现了可得到强临场感的系统。
另外，尤其最近提出的系统不是单独用一个显示装置欣赏视频，而是一种组合多个显示器来视听宽视野的视频的系统、或使显示器显示的视频和照明装置的照明光联动的系统等，并且组合多个媒体来进一步提高临场感的系统得到了广泛的开发。
尤其，在使显示器和照明装置联动来实现强临场感的技术中，即使不使用大型显示器也可以得到强临场感，因此成本或设置空间等的制约少，被寄予了厚望，且备受关注。
根据该技术，通过将设置在视听者房间(视听环境空间)中的多个照明装置的照明光控制为与显示器所显示的视频相应的颜色和强度，从而可带来视听者犹如真实地存在于显示器映射出来的视频空间之中的感觉/效果。使这样的显示器所显示的图像和照明装置的照明光联动的技术，例如已被专利文献1公开。
在其中公开的技术以提供强临场感为目的，因此记载了在与应显示的视频联动地控制多个照明装置的照明系统中根据视频数据的特征量(代表颜色、平均亮度)生成相对于多个照明装置的照明控制数据的方法。具体而言，记载了根据各照明装置的设置位置来检测预先确定的画面区域的视频数据的特征量，并基于该检测出的特征量来生成相对于各照明装置的照明控制数据。
另外，记载了照明控制数据并不限于从视频数据的特征量运算求出的数据，也可使用单独或与视频数据一起经由因特网等传输的数据，或者通过载波传输的数据。
专利文献1：日本特开2001-343900号公报
如上所述，在专利文献1中记载了也可以经由因特网等自外部传输照明控制数据。但是，该照明控制数据是仅仅与预先确定的照明装置的分布(虚拟的视听环境空间中的照明装置的设置位置)对应的照明控制数据，存在无法对每个用户根据千差万别的照明装置的配置分布来进行适当的照明控制的问题。
发明内容
本发明是鉴于上述现有技术的问题点而完成的，其目的在于提供一种可根据实际的视听环境空间中的外围设备的配置分布等进行适当的外围设备的控制的数据发送装置、数据发送方法、视听环境控制装置、视听环境控制方法、视听环境控制系统及视听环境控制方法。
为了解决上述课题，本发明的第1技术方案是发送视频数据和/或音频数据的数据发送装置，该数据发送装置的特征在于，具备：发送单元，其将表示虚拟的视听环境空间中的外围设备的配置图案的识别信息、和对于所述虚拟的视听环境空间中的外围设备的视听环境控制数据附加到所述视频数据和/或音频数据之后进行发送。
本发明的第2技术方案是在根据第1技术方案所述的技术方案中，特征在于，由所述识别信息表示的外围设备的配置图案包括在所述虚拟的视听环境空间中的天花板上设置了外围设备的配置图案。
本发明的第3技术方案是在根据第1技术方案所述的技术方案中，特征在于，由所述识别信息表示的外围设备的配置图案包括在所述虚拟的视听环境空间中的用于显示所述视频数据的视频显示装置的周围左侧设置了外围设备的配置图案。
本发明的第4技术方案是在根据第1技术方案所述的技术方案中，特征在于，由所述识别信息表示的外围设备的配置图案包括在所述虚拟的视听环境空间中的用于显示所述视频数据的视频显示装置的周围右侧设置了外围设备的配置图案。
本发明的第5技术方案是在根据第1技术方案所述的技术方案中，特征在于，由所述识别信息表示的外围设备的配置图案包括在所述虚拟的视听环境空间中的用于显示所述视频数据的视频显示装置的周围后背部设置了外围设备的配置图案。
本发明的第6技术方案是在根据第1至5的任一个技术方案所述的技术方案中，特征在于，所述视听环境控制数据包括位置信息，该位置信息表示构成所述配置图案的外围设备的设置位置。
本发明的第7技术方案是在根据第1至6的任一个技术方案所述的技术方案中，特征在于，所述视听环境控制数据包括位置信息，该位置信息表示构成所述配置图案的外围设备的设置方向。
本发明的第8技术方案是在根据第1至7的任一个技术方案所述的技术方案中，特征在于，所述视听环境控制数据包括表示对于所述外围设备的驱动优先顺序的信息。
本发明的第9技术方案是在根据第1至8的任一个技术方案所述的技术方案中，特征在于，所述视听环境控制数据包括模式信息，该模式信息表示对于所述外围设备的视听环境控制数据的描述方法。
本发明的第10技术方案是在根据第9技术方案所述的技术方案中，特征在于，所述模式信息包括表示通过绝对值来描述对于所述外围设备的驱动控制值的信息。
本发明的第11技术方案是在根据第9技术方案所述的技术方案中，特征在于，所述模式信息包括表示通过与对于被指定的其他外围设备的驱动控制值的差分值来描述对于所述外围设备的驱动控制值的信息。
本发明的第12技术方案是在根据第9技术方案所述的技术方案中，特征在于，所述模式信息包括表示通过与对于被指定的其他外围设备的驱动控制值的比率值来描述对于所述外围设备的驱动控制值的信息。
本发明的第13技术方案是在根据第9技术方案所述的技术方案中，特征在于，所述模式信息包括表示对于所述外围设备的驱动控制值和对于被指定的其他外围设备的驱动控制值相同的信息。
本发明的第14技术方案的数据发送装置，特征在于，具备：保存单元，其与视频数据和/或音频数据相关联地，保存表示虚拟的视听环境空间中的外围设备的配置图案的识别信息、和对于所述虚拟的视听环境空间中的外围设备的视听环境控制数据；以及发送单元，其接收来自外部装置的发送请求，并向所述发送请求源的外部装置发送与预定的视频数据和/或音频数据相关的识别信息和视听环境控制数据。
本发明的第15技术方案是在根据第1至14的任一个技术方案所述的技术方案中，特征在于，所述虚拟的视听环境空间中的外围设备是照明装置。
本发明的第16技术方案是在根据第1至14的任一个技术方案所述的技术方案中，特征在于，所述虚拟的视听环境空间中的外围设备是送风装置。
本发明的第17技术方案的视听环境控制装置，特征在于，具备：接收单元，其接收视频数据和/或音频数据，并且接收表示虚拟的视听环境空间中的外围设备的配置图案的识别信息、和对于所述虚拟的视听环境空间中的外围设备的视听环境控制数据；存储单元，其存储表示实际的视听环境空间中的外围设备的配置图案的设备配置信息；以及驱动控制数据生成单元，其利用由所述接收单元接收到的识别信息和存储在所述存储单元中的设备配置信息，将所述视听环境控制数据变换为用于对所述实际的视听环境空间中的外围设备进行驱动控制的驱动控制数据。
本发明的第18技术方案是在根据第17技术方案所述的技术方案中，特征在于，所述视听环境控制数据包括位置信息，该位置信息表示构成所述配置图案的外围设备的设置位置。
本发明的第19技术方案是在根据第17或18技术方案所述技术方案中，特征在于，所述视听环境控制数据包括位置信息，该位置信息表示构成所述配置图案的外围设备的设置方向。
本发明的第20技术方案是一种视听环境控制系统，具备：根据第17技术方案所述的视听环境控制装置；用于再生所述视频数据和/或音频数据的视频/音频再生装置；以及设置在该视频/音频再生装置的周边的外围设备。
本发明的第21技术方案是发送视频数据和/或音频数据的数据发送方法，特征在于，将表示虚拟的视听环境空间中的外围设备的配置图案的识别信息、和对于所述虚拟的视听环境空间中的外围设备的视听环境控制数据附加到所述视频数据和/或音频数据之后进行发送。
本发明的第22技术方案是一种数据发送方法，与视频数据和/或音频数据相关联地，预先保存表示虚拟的视听环境空间中的外围设备的配置图案的识别信息、和对于所述虚拟的视听环境空间中的外围设备的视听环境控制数据，以及接收来自外部装置的发送请求，并向所述发送请求源的外部装置发送与预定的视频数据和/或音频数据相关的识别信息和视听环境控制数据。
本发明的第23技术方案是一种视听环境控制方法，具有：接收视频数据和/或音频数据的步骤；接收表示虚拟的视听环境空间中的外围设备的配置图案的识别信息、和对于所述虚拟的视听环境空间中的外围设备的视听环境控制数据的步骤；存储表示实际的视听环境空间中的外围设备的配置图案的设备配置信息的步骤；以及利用接收到的所述识别信息和已存储的所述设备配置信息，将所述视听环境控制数据变换为用于对所述实际的视听环境空间中的外围设备进行驱动控制的驱动控制数据的步骤。
(发明效果)
根据本发明，通过对预定的视频和/或音频内容发送表示配置在虚拟的视听环境空间中的外围设备的配置图案的识别信息、和用于控制配置在该虚拟的视听环境空间中的外围设备的视听环境控制数据，从而能够检测视听环境控制数据是假设什么样的视听环境空间中的外围设备的配置图案而生成的，并且由于能够变换到用于对配置在实际的视听环境空间中的外围设备进行驱动控制的驱动控制数据，因此可以进行适当的视听环境空间的控制，由此能够向用户提供得到强临场感的视听环境。
附图说明
图1是表示本发明的一实施方式所涉及的数据发送装置的示意结构例的框图。
图2是表示本发明的实施方式所涉及的识别信息的描述内容的一例的图。
图3是表示视听环境空间中的照明装置的配置的一例的图。
图4是表示视听环境空间的一例的图。
图5是表示视听环境空间中的照明装置的配置的另一例的图。
图6是表示视听环境空间的另一例的图。
图7是表示本发明的一实施方式所涉及的视听环境控制系统的示意结构例的框图。
图8是表示视野的分类的图。
图9是表示照明控制数据的描述内容的一例的图。
图10是表示优先度信息的一例的图。
图11是表示模式信息的一例的图。
图12是表示用XML文件描述了照明控制数据的一例的说明图。
图13是表示与照明控制数据对应的XML架构的说明图。
图14是表示在描述本发明的另一实施方式所涉及的多个照明装置的配置图案及各照明装置的位置之际所参考的表格结构的图。
图15是用于说明照明配置例的图。
图16是表示在描述本发明的另一实施方式所涉及的多个送风机的配置图案及各送风机的位置之际所参考的表格结构的图。
图17是表示用XML文件描述了本发明的另一实施方式所涉及的照明和送风机的配置图案及位置的例子的说明图。
图18是与控制对象照明确定相关的动作流程图。
图19是用于说明照明装置中的光照射方向的一例的图。
图20是表示在描述各外围设备的位置之际所参考的表格的其他结构例的图。
图21是表示本发明的其他实施方式所涉及的外部服务器装置的主要部分示意结构的框图。
图22是表示本发明的其他实施方式所涉及的数据接收装置的主要部分示意结构的框图。
图中：10...数据发送装置；11...数据复用部；12...发送部；20...数据接收装置；21、51...接收部；22、52...数据分离部；23a、23b、53a、53b...延迟产生部；24、56...照明调光数据生成部；25、55...照明配置信息存储部；30、60...视频显示装置；31、61...音频再生装置；32、62...照明装置；40...外部服务器装置；41...接收部；42...照明控制数据保存部；43...发送部；54...接收部；57...发送部。
具体实施方式
以下，关于本发明的实施方式所涉及的数据发送装置、数据发送方法、视听环境控制装置及视听环境控制系统，作为配置在视听环境空间中的外围设备而主要以照明装置为例进行说明，但是只要是控制视听环境的装置，并非限定照明装置，也可应用于空调、送风机、振动装置、芳香产生装置等。
(实施方式1)
图1是表示本发明的一实施方式所涉及的数据发送装置的示意结构例的框图。
本实施方式中的数据发送装置10由数据复用部11及发送部12构成。
所输入的视频数据被压缩编码，并输出到数据复用部11。视频编码可利用ISO/IEC 13818-2(MPEG-2Video)、ISO/IEC 14496-2(MPEG-4 Visual)、ISO/IEC 14496-10(MPEG-4 AVC)等各种各样的压缩方式。
同样地，所输入的音频数据被压缩编码，并输出到数据复用部11。音频编码可利用ISO/IEC 13818-7(MPEG-2 AAC)、ISO/IEC 14496-3(MPEG-4 Audio)等各种各样压缩方式。
而且，识别信息及照明控制数据被压缩编码，并输出到数据复用部11。此外，将在后面详细叙述识别信息及照明控制数据。作为识别信息及照明控制的描述方法，例如使用XML(Extensible Markup Language)形式等。另外，视听环境控制数据的压缩方式可利用ISO/IEC 15938-1(MPEG-7Systems)中的BiM(Binary format for MPEG-7)方式等。或者，也可以不压缩，而是直接以XML形式输出。
被编码后的视频数据、音频数据、识别信息及照明控制数据被数据复用部11复用，并经由发送部12传送或蓄积。作为复用方式，例如可使用ISO/IEC 13818-1(MPEG-2 Systems)中的MPEG-2传输流数据包(TSP)、IP数据包、RTP数据包等。
例如，在使用由MPEG-2规定的传输流数据包(TSP)的情况下，接着描述了由MPEG-2规定的信息的头部，在扩展头部部分描述视听环境控制数据，进而可通过接着扩展头部的有效负载传送视频数据及音频数据。或者，也可以与视频数据或音频数据同样地，通过有效负载传送识别信息及照明控制数据。另外，也可复用视频数据、音频数据、识别信息及照明控制数据的各不相同的数据流来进行传送。
在此，所谓识别信息是指虚拟的视听环境空间中的外围装置的配置图案，在照明装置的情况下，表示配置在视听环境空间中的照明装置的配置图案(在照明装置的情况下，也可以与照明装置的配置地点相关的信息一起包括例如采用什么样的照明方法这样的信息、照明哪里这样的信息、表示照射方向或照射角度等的信息)，图2作为照明装置的配置图案所涉及的识别信息(信道类型ID)的一例，示出定义了照明装置的信道数、每个信道序号的照明装置的配置地点及照明方法的情况。
在图2中，在信道类型ID被设定为“1”的情况下，具备两台照明装置Ch1和Ch2，并且表示Ch1照明(间接照明)视频显示装置(显示器)的背面(周围)、Ch2从天花板照明(直接照明)下方这样的照明配置图案。
图3示出信道类型ID为“1”的情况下所定义的、照明装置32(Ch1和Ch2)相对于显示器30的配置图案，Ch1配置在显示器30的下部，Ch2配置在天花板上。另外，图4示出与信道类型ID为“1”的情况对应的视听环境空间，示出了通过Ch1照明显示器30的背面(周围)，并且通过Ch2从天花板照明空间整体的情况。
另外，在图2中，在信道类型ID被设定为“2”的情况下，具备两台照明装置Ch1和Ch2，表示Ch1照明(间接照明)显示器的背面左侧、Ch2照明(间接照明)显示器的背面右侧这样的照明配置图案。
图5示出信道类型ID为“2”的情况下所定义的、照明装置32(Ch1和Ch2)相对于显示器30的配置图案，Ch1配置在显示器30的左侧，Ch2配置在显示器30的右侧。并且，图6示出与信道类型ID为“2”的情况对应的视听环境空间，示出了通过Ch1照明显示器30的左侧背面，并且通过Ch2照明显示器30的右侧背面。
此外，在图2所示的例子中，可确保8bit(256个)量的识别信息(信道类型ID)，且可定义其他照明配置图案。此外，照明的信道数可以不限于2，当然也可以对一个以上的信道定义该配置图案。
例如，虽然未图示，但是假设照明装置的设置地点与图5所示的情况同样地，在显示器的左右各配置一台、向视听者侧进行直接照明的情况下，例如只要通过信道类型ID“3”定义“信道数2、Ch1：左；直接、Ch2：右；直接”即可。
接着，照明控制数据见后述，照明控制数据构成相对于配置在虚拟的视听环境空间中的照明装置的视听环境控制数据，是用于对构成由识别信息定义的配置图案的各信道的照明装置进行驱动控制的控制数据。
因此，可以说由识别信息示出的照明装置的配置图案表示以生成照明控制数据为前提的视听环境。
并且，照明控制数据是与视频/音频数据联动地提供的，但是也不一定需要按视频数据的每个帧进行附加，也可以按情节上有关联的视频数据的每个场景或镜头进行附加等，隔着适当的间隔定期或不定期地向视频数据附加。
此外，在本实施方式中，采用了在复用视频数据、音频数据、识别信息及照明控制数据四种数据之后作为播放数据而发送的结构，但是复用并不是必须的要件，只要根据需要选择适当的发送方法即可。例如，也可不复用各个数据而个别地进行发送，还可以是复用视频数据和音频数据，并独立地发送识别信息和照明控制数据的情形等。
而且，如后述，针对识别信息和照明控制数据，也可以预先蓄积在可通过因特网等访问的外部服务器装置中，并与视频数据一起复用并发送用于识别该蓄积的识别信息和照明控制数据的URL(Uniform ResourceLocator)等。另外，在通过与视频数据不同的因特网发送识别信息和照明控制数据的情况下，作为对识别信息、照明控制数据与视频数据进行关联的信息，并不限于前述的URL，只要是内容名等能够特定识别信息、照明控制数据与视频数据之间的对应关系的信息即可。
此外，在通过与视频/音频复用数据不同的因特网发送识别信息及照明控制数据的情况下，作为对识别信息、照明控制数据与视频/音频复用数据进行关联的特定信息，并不限于前述的URL，只要是TV-Anytime规格中的CRID(Content Reference ID)、内容名等能够特定视频/音频复用数据与识别信息、照明控制数据之间的对应关系的特定信息即可。
或者，也可以仅将识别信息及照明控制数据记录并分布在其他记录介质中。例如，可以列举如下情况：用Blu-ray Disc、DVD等大容量记录介质分布视频/音频数据，用小型半导体记录介质等分布识别信息及照明控制数据。这种情况下，在记录并分布多个内容之际，也需要能够明确视频/音频数据与识别信息、照明控制数据之间的对应关系的特定信息。
此外，在本实施方式中，将识别信息和照明控制数据作为不同数据而对待，但是，当然也可以以包括两个数据内容的一个数据形式进行描述。
图7是表示本发明的一实施方式所涉及的视听环境控制系统的示意结构例的框图。在图中，20表示数据接收装置，30表示视频显示装置(以下，称作显示器)，31表示音频再生装置，32表示照明装置。
数据接收装置20具备：接收部21、数据分离部22、延迟产生部23a、23b、作为驱动控制数据生成单元的照明调光数据生成部24及作为用于存储设备配置信息的单元的照明配置信息存储部25。
数据接收装置20在接收部21中接收视频数据、音频数据、识别信息及照明控制数据被复用的播放数据，在数据分离部22中，从播放数据中分离视频数据、音频数据、识别信息及照明控制数据。
将在数据分离部22中分离出的视频数据和音频数据与表示该视频数据和音频数据的开始时刻的TC(时间代码)一起发送到延迟产生部23a、23b，并经由延迟产生部23a向视频显示装置30送出视频数据，经由延迟产生部23b向音频再生装置31送出音频数据。另外，将在数据分离部22中分离出的识别信息和照明控制数据发送到照明调光数据生成部24。
照明配置信息存储部25存储在视听者的视听环境空间(实际空间)中所设置的各照明装置32的配置信息，通过照明调光数据生成部24的命令，向照明调光数据生成部24适当发送照明装置32的配置信息。
在此，例如，如图3所示，在视听者的视听环境空间中，在视频显示装置30的周围预先设置两个照明装置32，且照明装置Ch1以落地式进行间接照明、照明装置Ch2以悬挂式进行直接照明的情况下，为了能够根据该设置位置个别控制各照明装置32，需要在照明配置信息存储部25中预先蓄积与照明装置的个数和对视频显示装置30的相对位置及照明方法相关的信息。
因此，例如，只要采用如下构成即可，即，赋予与配置在用户的视听空间中的各个照明装置对应的标识符，照明配置信息存储部25按每个所述标识符以表格形式保持与对视频显示装置30的相对位置及照明方法相关的信息。
在照明调光数据生成部24中，基于由数据分离部22分离出的识别信息和照明控制数据、从照明配置信息存储部25获取到的实际的视听环境空间中的照明装置32的配置信息，近似地获得用于对设置在视听者的实际视听环境空间中的照明装置32进行驱动控制的驱动控制数据(例如，在接收到左和右的照明控制数据，但是在中央只有一个照明装置的情况下，将两个照明控制数据的平均值近似为实际的照明控制数据的情形等)后生成照明调光数据(RGB数据)，并将其输出到照明装置32。
此外，对于发送到照明装置32的照明调光数据而言，需要使输出时刻与视频数据、音频数据一致，因此例如设置有延迟产生部23a、23b，用于使由数据分离部22分离出的视频数据和音频数据延迟在照明调光数据生成部24中向与实际的视听环境对应的照明调光数据的变换所需的时间，与照明调光数据取得同步。
作为照明装置32，例如可使用以一定周期排列了能够独立进行发光控制的R(红)、G(绿)、B(蓝)各种颜色的LED光源的装置，通过这些三个原色的LED光源，射出由期望的颜色、亮度构成的照明光。其中，照明装置32只要是可控制视频显示装置30的周围环境的照明颜色及明亮度的结构即可，并不限于发出如上述的预定颜色的光的LED光源的组合，也可通过白色LED和彩色滤光器构成，或者也可应用白色灯泡或荧光管和彩色滤光器的组合、彩色灯等。而且，也并不限于基于R(红)、G(绿)、B(蓝)各颜色的表现，例如，可利用照明色温(单位：K)来表现。此外，在图7中示出通过RGB数据驱动照明装置32的情况。
另外，视听环境控制系统的数据接收装置20既可以与视频显示装置30和音频再生装置31一体式设置，也可作为不同个体而分别设置。
如上所述，本实施方式中的数据接收装置20基于从外部获取到的识别信息和照明控制数据近似地得到驱动控制数据，从而能够适当控制设置于实际的视听环境空间的照明装置32。
接着，与附图一起说明关于照明装置的视听环境控制数据即照明控制数据。
图9表示照明控制数据的描述内容的一例。具有表示虚拟的视听环境空间中的一个以上的照明装置的配置图案的信道类型ID(识别信息)、表示用于使多个照明装置发光的优先顺序的优先度信息(图10所示)、表示多个照明装置的明亮度或颜色的描述方法的模式信息(图11所示)、意味着在求出多个照明装置的明亮度或颜色之际所参考的参考照明的参考Ch(信道)、照明的明亮度信息、照明色温信息。此外，虽然未图示，但是也可根据需要记载照明方法。此外，在明亮度的表现中，也可以使用坎德拉(Cd)或流明(lm)等，而不是勒克司(lx)。另外，颜色的表现也可以使用XYZ表色系、RGB表色系、YCbCr表色系等，而不是色温。
这些信息都是对于通过照明光演出视频数据的场景的氛围或临场感有用的信息。
在此，如图8所示，畑田等根据视觉功能的动作，将人类的视野分类成辨别视野101、有效视野102、引导视野103、辅助视野104(畑田豊彦，坂田晴夫，日下秀夫，“画面サイズにょる方向感覚誘導効果-大画面にょる臨場感の基礎実験-”，テレビジヨン学会誌，Vol.33，No.5，pp.407-413(1979))。
辨别视野101是可准确感受图形识别等高密度信息的范围，有效视野102是辨别能力比辨别视野101低但仅通过眼球运动就可感受自然信息的范围。另外，引导视野103是只具有能进行表象刺激的存在或简单的识别程度的识别能力，但在判断整体的外界信息时有影响的范围。辅助视野104是只能判别刺的激存在的范围。
但是，现在的高清电视被设计成在覆盖上述中的有效视野102的范围内显示视频。即，在引导视野103和辅助视野104中不显示视频或照明等信息。因此，通过向引导视野103和辅助视野104也照射照明，从而可期待更强的临场感。
例如，在通过前述的图3所示的照明装置的配置实现的图4的视听环境空间中，通过对显示器30的背面进行照明，从而不仅会通过照明覆盖显示器30周围的引导视野和辅助视野而提高临场感，而且还会通过从天花板进行照明，能够实现再现环境光。
而且，在通过前述的图5所示的照明装置的配置实现的图6的视听环境空间中，通过对显示器30的背面进行照明，从而不仅会通过照明覆盖显示器周围的引导视野和辅助视野而提高临场感，还会通过改变显示器30左右的照明的明亮度或颜色，能够再现光的方向性。
图10是表示优先度信息的一例的图。
在此，示出表示用于使多个照明装置发光的优先顺序的信息的例子，例如，将优先度设定为五个等级(低、略低、普通、略高、高)，可以仅照射优先度高的照明。由此，即使在接收侧的照明数或配置地点有限，虚拟视听环境空间中的照明配置图案与实际的视听环境空间中的照明配置状况不同的情况下，通过参考优先度最高的照明的照明值，能够在接收侧实现希望想要使发送侧优先点亮的照明状况。
图11是表示模式信息的一例的图。
在此，具有表示多个照明装置的明亮度或颜色的描述方法的模式信息的例子，示出例如相对于成为基准的参考照明RefID设定其他照明的照明值的描述方法。在模式为“Abs”的情况下，按每个照明装置描述与照明的明亮度或颜色相关的绝对值。在模式为“Rel”的情况下，按每个照明装置描述与相对于参考照明RefID的照明的明亮度或颜色相关的差分值或比率值。在模式为“Equ”的情况下，按每个照明装置描述与参考照明RefID相同的值的Equ。
针对在模式“Abs”下描述多个照明装置的明亮度或颜色的情况下，例如在通过使用模式“Rel”而将周围的照度(单位：lx)比参考照明提升100lx时、或者将色温降低1000K时、或者将周围的照度提升10％时、或者将色温降低20％时，表示多个照明装置的明亮度或颜色的数据量的削减是有效的。而且，针对在模式“Abs”下描述多个照明装置的明亮度或颜色的情况，例如在通过使用模式“Equ”而参考照明与周围的照明的明亮度或颜色为相同值的情况下，表示多个照明装置的明亮度或颜色的数据量的削减是有效的。
图12是用于说明将照明控制数据描述为XML形式的一例的图，图13是表示与照明控制数据对应的XML架构的说明图。
在图12中，由于信道类型ID被描述为2，因此可知该照明控制数据与图2的识别信息中的信道类型ID“2”的配置图案所对应的照明装置的配置相对应，且描述了用于图5所示的照明装置的配置中的照明装置的控制数据。
并且，用于对两台照明装置的照明控制数据的每一个进行识别的信道ID分别为a、b，与该照明控制数据对应的照明装置的Ch序号为“1”、“2”。即，位置信息“1”表示图5所示的照明装置Ch1的属性，位置信息“2”表示照明装置Ch2的属性。
另外，信道ID“a”、“b”的照明控制数据的优先度都为5。信道ID“a”的照明控制数据的照度值为200lx，色温为3000K，信道ID“b”的照明控制数据相对于信道ID“a”的照明控制数据，其照度值为多50lx的250lx，色温由于没有特别记载，因此为相同值的3000K。
此外，关于Rel或Equ等模式信息的参考信道，可通过按每个ControlData附加信道ID来进行参考，但是参考地址并不限于每个ControlData的信道ID，例如可以参考位置信息。
数据接收装置20接收包含在播放数据中的视频数据和/或音频数据、识别信息及照明控制数据，在照明调光数据生成部24中，基于该识别信息和照明控制数据、以及从照明配置信息存储部25获取到的实际的照明装置32的配置信息，生成用于对实际的照明装置32进行驱动控制的驱动控制数据，下面说明该方法。
首先，照明调光数据生成部24对以识别信息示出的虚拟的照明装置的配置图案、和从照明配置信息存储部25获取到的实际的视听环境空间中的照明装置32的配置信息进行比较，如果两者的照明装置的个数、配置地点、照明方法一致，则在无需修正假设虚拟的视听环境空间而生成的照明控制数据的情况下，变换为用于驱动控制实际的照明装置的数据。
另外，在两者的照明装置的个数、配置地点、照明方法不一致的情况下，例如通过比较基于两者各自的照明装置的配置地点和照明方法的被照明地点(墙面、显示器等)的位置或大小、或者照明装置与被照明地点之间的距离、或者光照射方向与被照明地点之间的角度等，利用照明控制数据中的被照明地点的位置或大小接近实际的照明装置的配置的数据，或者计算相对于多个虚拟的照明装置的照明控制数据(例如，照明的明亮度或照明色温)的加权平均值等，能够作为实际的照明装置的照明控制数据来应用。此时，考虑照明控制数据的优先度信息也是有用的，可利用各种变换方法。
例如，在播放数据中包括以信道类型ID“1”表示的配置图案的识别信息和与此相应的照明控制数据，且实际的视听者的视听环境空间是图5所示的照明装置的配置的情况下，即使对以识别信息表示的虚拟的照明装置的配置图案和从照明配置信息存储部25获取到的实际的视听环境空间中的照明装置32的配置信息进行比较，两者的照明装置的个数、配置地点、照明方法也不会一致。
但是，若比较各个被照明地点的位置或大小，则由于虚拟的视听环境空间中的照明装置Ch1对显示器的背面周围进行照明，且该照明地点在实际的视听环境空间中是由照明装置Ch1和Ch2进行的(参考图4、图6)，因此可将照明控制数据中的照明装置Ch1的照明控制数据应用于实际的视听环境空间中的照明装置Ch1、Ch2。
另外，在这些关系相反的情况下，即在虚拟的视听环境空间是信道类型ID“2”所表示的配置图案，且实际的视听者的视听环境空间是图3所示的照明装置的配置的情况下，根据信道类型ID“2”的照明装置Ch1和Ch2的照明控制数据的值，可计算在实际的视听空间的照明装置Ch1中应用的照明控制数据，此时只要将考虑了照明装置Ch1和Ch2的各优先度的照明控制数据的明亮度或色温的加权平均值设为各自的照明控制数据即可。另外，在实际的视听空间的照明装置Ch2中应用的照明控制数据只要应用实际的视听空间中的照明装置Ch1的计算结果即可。
(实施方式2)
参考附图说明本发明的第2实施方式。由于本实施方式中的数据发送装置及数据接收装置的示意结构与图1及图7相同，故省略详细说明。
首先，说明照明装置的例子。图14是表示了在描述多个照明装置的配置图案及各照明装置的位置之际所参考的表格的结构的图。参考表格由表示视听环境空间中的照明装置的配置图案的第一表格(T16)、和表示各照明装置的位置的第二表格(T16a、T16b、T16c、T16d)构成。
数据发送装置10发送表示照明配置图案的值(ChannelTypeID)和表示各照明装置的位置的值(Position)及各照明装置的控制数据。例如，在内容制作者假设照明装置位于显示器的背面及天花板上的环境来发送控制数据的情况下，使用由图14中的表格T16a定义的数据。此时，设ChannelTypeID＝0，在控制背面照明的数据中将Position＝0的数据附加于照明控制数据并加以发送，在控制天花板照明的数据中将Position＝1的数据附加于照明控制数据并加以发送。另外，在内容制作者假设如表格T16c那样具有多信道的照明装置的环境的情况下，设ChannelTypeID＝2，在控制右照明的数据中将Position＝2的数据附加于照明控制数据并加以发送，在控制左照明的数据中将Position＝6的数据附加于照明控制数据并加以发送。在此，照明控制数据是指照明的明亮度或色温、时间信息等控制参数。
而且，也可以根据外部的规格(以后称作“规格A”)或样式(以后称作“样式B”)定义照明位置，此时，在表示配置图案的第一表格T16中记载规格名(规格A)或样式名(样式B)，表示各照明位置的第二表格T16d是基于由各自的规格定义的位置信息确定的。例如，为了发送基于由规格A定义的照明配置的控制数据，设ChannelTypeID＝3，Position的值使用以规格A的定义为基础预先确定出的值。
由此，在本实施方式中，参考作为视听环境空间中的外围设备的、例如表示照明装置的配置图案的第一表格和表示位置的第二表格，确定控制对象照明装置。
通过将经常使用的典型的照明配置图案作为第一及第二表格而预先进行定义，从而视听者可基于配置图案进行照明环境设定(与照明控制数据对应的照明装置的安装等)。另外，由于内容制作者侧也可以基于预先定义的配置图案设计照明控制值，因此能够减轻照明控制数据生成的负担。
由此，通过使用两个表格来定义配置，从而例如在配置类型1虽然规定了显示器和左右照明装置成一条直线的配置(图15(A))，但是即使是同样向左右的配置，在相对于显示器面规定向前方30°的配置(图15(B))的情况下，只要追加定义了新的配置图案(图15(B))的第二表格，并向第一表格追加表示该配置图案的场，就能够在不影响现有定义的情况下进行扩展。
此外，上述Position的附加不是必须的，如果按照预先规定的顺序描述与由ChannelTypeID定义的所有位置相应的控制数据，则可通过事先预先进行确定而省略上述Position的附加。在附加Position的情况下，由于只要描述所需最低限度的控制数据(例如，在表格T16c中，仅传送右照明的控制数据时，只描述Position＝2的控制数据)即可，故可削减数据量。
接着，说明送风机的例子。在送风机的情况下，控制数据为风速(m/s)或旋转数(r/m)等参数。图16是表示在描述多个送风机的配置图案及各送风机的位置之际所参考的表格的结构的图。视听环境空间中的送风机的位置与照明装置的情况相同，由表示配置图案的第一表格(T17)和表示位置的第二表格(T17a、T17b、T17c、T17d)构成。通过采用这样的构成，可在不影响现有定义的情况下进行扩展。
接着，说明照明装置和送风机同时存在的情况。图17是表示用XML文件描述了照明和送风机的配置图案及位置的例子的图。在图17中，省略了时间信息、照明的明亮度或色温、送风机的风速等具体的控制参数的记载。以照明/送风机控制数据单位(Effect要素单位)描述位置(Position)。关于配置图案(ChannelTypeID)，图17(A)是以照明/送风机控制数据单位进行描述的例子。图17(B)是以多个照明/送风机控制数据单位(GroupOfEffect要素单位)进行描述的例子。图17(C)是以整体控制数据(SEM要素)进行描述的例子。在此，将配置图案(ChannelTypeID)及位置(Position)描述为XML属性(Attribute)，但也可以描述为XML要素(element)。另外，也可将ChannelTypeID描述为其他的XML文件并进行参考。
接着，说明数据接收装置20的动作。若数据接收装置20接收表示照明配置图案的ChannelTypeID和表示各照明位置的Position，则参考第一表格及第二表格，确定与控制数据相关联的照明位置。
图18是与照明调光数据生成部24中的控制对象照明确定相关的动作流程图。首先，获取配置图案信息(ChannelTypeID)(步骤S191)，基于第一表格选择用于确定位置信息的第二表格(步骤S192)。接着，获取位置信息(Position)(步骤S193)，基于该位置信息和第二表格，确定与控制数据相关联的照明位置(步骤S194)。接着，获取控制数据(步骤S195)，控制与在步骤S194中确定出的位置对应的设备(步骤S196)。
另外，也可在图14、图16的第二表格或视听环境控制数据中除了描述各外围设备的位置之外，还描述方向(光照射方向、风向)。图19是用于说明照明装置中的光照射方向的一例的图。图19(A)是从上方观察视听空间的图，图19(B)是从水平方向(横向)观察视听空间的图。在该例子中，以连接了地面上的显示器和视听者的线为基准，根据水平方向的第一角度(水平角)和垂直方向的第二角度(垂直角)描述光照射方向。送风机的风向也可同样根据水平角和垂直角进行描述。或者，也可以以从视听者至显示器的法线、或连接了视听者和显示器的中心的线等作为基准。
本实施方式中的配置图案及位置的描述方法并不限于照明或送风机，当然，同样也能够应用于芳香产生装置或效果音产生装置等外围设备中。
(实施方式3)
参考附图说明本发明的第3实施方式。图20是表示在描述各外围设备的位置之际所参考的表格的其他结构例的图。参考表格由规定“左”、“右”、“前”这些位置(Position)的第一表格、和规定可利用的位置一览表和各可利用的位置的详细配置的第二表格构成。图20的第一表格中的Position的定义是一例，也可以将包含在视听环境空间的特定的壁面中的位置统一定义为“左面”、“右面”、“前面”这样的面。例如，也可以将第一表格中的左前、左、左后统一定义为左面，或者将第一表格中的右前、右、右后统一定义为右面。
详细配置既可以记载在第二表格中，也可以如ChannelTypeID＝5或6的情况那样，按照参考外部的定义的方式记载规格名(规格A)或样式名(样式B)。图20的第二表格中的ChannelTypeID的定义是一例，也可定义“可利用所有位置”、“用户定义详细配置”等ChannelTypeID。
另外，在作为向左右的配置而例如想要追加图15(B)所示的配置的情况下，通过在第二表格中，设ChannelTypeID＝7，并追加定义“3：相对于显示器面30°的位置、7：相对于显示器面30°的位置”等，从而能够在不影响现有定义的情况下容易进行扩展。
通过采用上述表格结构，即使是相对于相同位置(例如，第一表格中的左和右)的配置，也可根据视听环境或内容制作者的意图，在第二表格中定义各种图案。
上述表格结构与实施方式2同样地，并不限于照明装置，当然同样也可以应用于送风机、芳香产生装置、效果音产生装置等的外围设备。
(实施方式4)
在上述本发明的实施方式1、2及3中，说明了将识别信息和照明控制数据作为附加数据而附加于播放数据并加以发送的情况，但是在播放数据中未附加附加数据的情况下，通过由外部服务器装置等收发与所视听的视频数据和/或音频数据对应的识别信息和照明控制数据，从而可实现视频数据和/或音频数据再生时的最佳视听环境。
图21是表示本发明的实施方式4所涉及的外部服务器装置的主要部分结构例相同的框图。
本实施方式中的外部服务器装置40相当于本发明的数据发送装置，具备：接收部41，其从数据接收装置侧接收与特定的视频数据和/或音频数据(内容)相关的识别信息和照明控制数据的发送请求；照明控制数据保存部42，其保存每个视频数据和/或音频数据(内容)的识别信息和照明控制数据；以及发送部43，其向请求源的数据接收装置发送接收到发送请求的识别信息和照明控制数据。
在此，保存本实施方式的照明控制数据保存部43中的照明控制数据未图示，但是构成为描述内容制作者等想要的任意数据段(例如，场景或镜头)的开始时间代码，并从发送部43向请求源的数据接收装置与表示视频数据和/或音频数据(数据段)的开始时刻的TC(时间代码)一起发送收到发送请求的视频数据和/或音频数据(内容)的照明控制数据。另外，也可在内容制作者想要的任意数据段(例如，场景或镜头)中附加ID，并从发送部43向请求源的数据接收装置与段的ID一起发送收到发送请求的视频数据和/或音频数据(内容)的照明控制数据。
接着，说明包括接收从外部服务器装置40发送的识别信息和照明控制数据来控制视听环境照明的数据接收装置(相当于本发明的视听环境控制装置)在内的系统结构。
图22是表示本发明的实施方式4所涉及的视听环境控制系统的主要部分结构例的框图。在图中，50表示数据接收装置，60表示视频显示装置，61表示音频再生装置，62表示照明装置。
数据接收装置50具备：接收部51，其接收并解调从传送路径输入的播放数据，并且进行误差修正；以及数据分离部52，其从接收部51的输出数据中分离/提取输出至视频显示装置60的视频数据、输出至音频再生装置61的音频数据的每一个。
另外，数据接收装置50具备：发送部57，其基于来自照明调光数据生成部56的指示，经由通信网络，向外部服务器装置40发送与所显示的视频数据(内容)对应的识别信息和照明控制数据的发送请求；接收部54，其经由通信网络，从外部服务器装置40接收所发送请求的识别信息和照明控制数据。
照明配置信息存储部55存储在视听者的视听环境空间(实际空间)中设置的各照明装置62的配置信息，并且根据照明调光数据生成部56的命令，向照明调光数据生成部24适当地发送照明装置62的配置信息。照明配置信息存储部55与实施方式1的照明配置信息存储部25相同，故省略详细说明。
同样地，照明调光数据生成部56基于从接收部54接收到的识别信息和照明控制数据、及从照明配置信息存储部55获取到的照明装置62的配置信息，生成用于对设置在视听者的实际的视听环境空间中的照明装置62适当地进行控制的照明调光数据(RGB数据)，并将其输出至照明装置32，因为除了进行识别信息和照明控制数据的发送请求之外，与实施方式1中的照明调光数据生成部24相同，故省略说明。
此外，如在前述的实施方式1中所说明的，由于发送给照明装置62的照明调光数据需要使其输出时刻与视频数据、音频数据的输出时刻一致，故例如设有延迟产生部53a、53b，用于使由数据分离部52分离出的视频数据和音频数据延迟在照明调光数据生成部56中向对应于实际的视听环境的照明调光数据转换时所需的时间，获得与照明调光数据的同步。
由此，即使在播放数据中未附加识别信息和照明控制数据的情况下，由于构成为从外部服务器装置获取与视频数据和/或音频数据(节目内容)对应的识别信息和照明控制数据，并基于该识别信息和照明控制数据控制视听环境照明，因此与上述的实施方式1同样地，能够在抑制数据量的增加的同时，在对应于视频制作者意图的任意时刻进行视听环境照明的切换控制，且能够实现最佳的视听环境的照明控制。
如上所述，在上述实施方式1、2、3及4中，由于始终成对发送或接收识别信息(信道类型ID)和照明控制数据，因此可检测照明控制数据是以什么样的虚拟的视听环境空间中的照明装置的配置图案为前提生成的，所以能够与实际的视听环境空间中的照明装置的配置状况一致地，将所述照明控制数据变换成适当照明调光数据。
本发明的数据发送装置、数据发送方法、视听环境控制装置、视听环境控制系统及视听环境控制方法在不脱离上述的本发明的宗旨的范围内，可通过各种实施方式实现。例如，可以将视听环境控制装置设置在视频显示装置内，当然也可以构成基于输入视频数据所包含的各种信息控制外部的照明设备这样的结构。
另外，在上述实施方式中，以照明装置为例说明了配置在虚拟的视听环境空间中的外围设备，但是本发明并不限于照明装置，当然也可以应用在空调、送风机、振动装置、芳香产生装置等会给视听环境带来影响的外围设备中。在这些会给视听环境带来影响的外围设备中应用本发明的情况下，例如只要根据识别信息定义包括风或芳香吹向哪个方向这样的演出效果的输出位置/方向在内的配置图案即可。
此外，在本发明中，视频数据和/或音频数据(内容)并不限于电视广播传送的电视节目所涉及的内容，也可以是保存在Blu-ray Disc或DVD等多媒体中的作品所涉及的内容。即，输入视频数据并不限于接收电视广播而得到的数据，即使在输入由外部再生装置再生的视频数据的情况下，也可应用本发明。

Claims (23)

1.一种数据发送装置，其发送视频数据和/或音频数据，该数据发送装置的特征在于，具备：
发送单元，其将表示虚拟的视听环境空间中的外围设备的配置图案的识别信息、和对于所述虚拟的视听环境空间中的外围设备的视听环境控制数据附加到所述视频数据和/或音频数据之后进行发送。
2.根据权利要求1所述的数据发送装置，其特征在于，
由所述识别信息表示的外围设备的配置图案包括在所述虚拟的视听环境空间中的天花板上设置了外围设备的配置图案。
3.根据权利要求1所述的数据发送装置，其特征在于，
由所述识别信息表示的外围设备的配置图案包括在所述虚拟的视听环境空间中的用于显示所述视频数据的视频显示装置的周围左侧设置了外围设备的配置图案。
4.根据权利要求1所述的数据发送装置，其特征在于，
由所述识别信息表示的外围设备的配置图案包括在所述虚拟的视听环境空间中的用于显示所述视频数据的视频显示装置的周围右侧设置了外围设备的配置图案。
5.根据权利要求1所述的数据发送装置，其特征在于，
由所述识别信息表示的外围设备的配置图案包括在所述虚拟的视听环境空间中的用于显示所述视频数据的视频显示装置的周围后背部设置了外围设备的配置图案。
6.根据权利要求1至5的任一项所述的数据发送装置，其特征在于，
所述视听环境控制数据包括位置信息，该位置信息表示构成所述配置图案的外围设备的设置位置。
7.根据权利要求1至6的任一项所述的数据发送装置，其特征在于，
所述视听环境控制数据包括位置信息，该位置信息表示构成所述配置图案的外围设备的设置方向。
8.根据权利要求1至7的任一项所述的数据发送装置，其特征在于，
所述视听环境控制数据包括表示对于所述外围设备的驱动优先顺序的信息。
9.根据权利要求1至8的任一项所述的数据发送装置，其特征在于，
所述视听环境控制数据包括模式信息，该模式信息表示对于所述外围设备的视听环境控制数据的描述方法。
10.根据权利要求9所述的数据发送装置，其特征在于，
所述模式信息包括表示通过绝对值来描述对于所述外围设备的驱动控制值的信息。
11.根据权利要求9所述的数据发送装置，其特征在于，
所述模式信息包括表示通过与对于被指定的其他外围设备的驱动控制值的差分值来描述对于所述外围设备的驱动控制值的信息。
12.根据权利要求9所述的数据发送装置，其特征在于，
所述模式信息包括表示通过与对于被指定的其他外围设备的驱动控制值的比率值来描述对于所述外围设备的驱动控制值的信息。
13.根据权利要求9所述的数据发送装置，其特征在于，
所述模式信息包括表示对于所述外围设备的驱动控制值和对于被指定的其他外围设备的驱动控制值相同的信息。
14.一种数据发送装置，其特征在于，具备：
保存单元，其与视频数据和/或音频数据相关联地，保存表示虚拟的视听环境空间中的外围设备的配置图案的识别信息、和对于所述虚拟的视听环境空间中的外围设备的视听环境控制数据；以及
发送单元，其接收来自外部装置的发送请求，并向所述发送请求源的外部装置发送与预定的视频数据和/或音频数据相关的识别信息和视听环境控制数据。
15.根据权利要求1至14的任一项所述的数据发送装置，其特征在于，
所述虚拟的视听环境空间中的外围设备是照明装置。
16.根据权利要求1至14的任一项所述的数据发送装置，其特征在于，
所述虚拟的视听环境空间中的外围设备是送风装置。
17.一种视听环境控制装置，其特征在于，具备：
接收单元，其接收视频数据和/或音频数据，并且接收表示虚拟的视听环境空间中的外围设备的配置图案的识别信息、和对于所述虚拟的视听环境空间中的外围设备的视听环境控制数据；
存储单元，其存储表示实际的视听环境空间中的外围设备的配置图案的设备配置信息；以及
驱动控制数据生成单元，其利用由所述接收单元接收到的识别信息和存储在所述存储单元中的设备配置信息，将所述视听环境控制数据变换为用于对所述实际的视听环境空间中的外围设备进行驱动控制的驱动控制数据。
18.根据权利要求17所述的视听环境控制装置，其特征在于，
所述视听环境控制数据包括位置信息，该位置信息表示构成所述配置图案的外围设备的设置位置。
19.根据权利要求17或18所述的数据发送装置，其特征在于，
所述视听环境控制数据包括位置信息，该位置信息表示构成所述配置图案的外围设备的设置方向。
20.一种视听环境控制系统，其特征在于，具备：
根据权利要求17所述的视听环境控制装置；
用于再生所述视频数据和/或音频数据的视频/音频再生装置；以及
设置在该视频/音频再生装置的周边的外围设备。
21.一种数据发送方法，该数据发送方法发送视频数据和/或音频数据，所述数据发送方法的特征在于，
将表示虚拟的视听环境空间中的外围设备的配置图案的识别信息、和对于所述虚拟的视听环境空间中的外围设备的视听环境控制数据附加到所述视频数据和/或音频数据之后进行发送。
22.一种数据发送方法，其特征在于，
与视频数据和/或音频数据相关联地，预先保存表示虚拟的视听环境空间中的外围设备的配置图案的识别信息、和对于所述虚拟的视听环境空间中的外围设备的视听环境控制数据，以及
接收来自外部装置的发送请求，并向所述发送请求源的外部装置发送与预定的视频数据和/或音频数据相关的识别信息和视听环境控制数据。
23.一种视听环境控制方法，其特征在于，具有：
接收视频数据和/或音频数据的步骤；
接收表示虚拟的视听环境空间中的外围设备的配置图案的识别信息、和对于所述虚拟的视听环境空间中的外围设备的视听环境控制数据的步骤；
存储表示实际的视听环境空间中的外围设备的配置图案的设备配置信息的步骤；以及
利用接收到的所述识别信息和已存储的所述设备配置信息，将所述视听环境控制数据变换为用于对所述实际的视听环境空间中的外围设备进行驱动控制的驱动控制数据的步骤。
CN2009801273893A 2008-07-15 2009-07-14 数据发送装置、数据发送方法、视听环境控制装置、视听环境控制系统及视听环境控制方法 Pending CN102090057A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2008183815 2008-07-15
JP2008-183815 2008-07-15
JP2009015373 2009-01-27
JP2009-015373 2009-07-07
PCT/JP2009/062737 WO2010007988A1 (ja) 2008-07-15 2009-07-14 データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法

Publications (1)

Publication Number Publication Date
CN102090057A true CN102090057A (zh) 2011-06-08

Family

ID=41550390

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009801273893A Pending CN102090057A (zh) 2008-07-15 2009-07-14 数据发送装置、数据发送方法、视听环境控制装置、视听环境控制系统及视听环境控制方法

Country Status (7)

Country Link
US (1) US20110190911A1 (zh)
EP (1) EP2315442A1 (zh)
JP (1) JP5092015B2 (zh)
KR (1) KR20110030656A (zh)
CN (1) CN102090057A (zh)
BR (1) BRPI0916465A2 (zh)
WO (1) WO2010007988A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103780915A (zh) * 2012-10-17 2014-05-07 索尼公司 包括环境光效果的视频文件
CN104869342A (zh) * 2015-06-09 2015-08-26 柳州桂通科技股份有限公司 一种多媒体多信息同步重现的方法及其应用

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2514275B1 (en) * 2009-12-17 2015-04-22 Koninklijke Philips N.V. Ambience cinema lighting system
US8878991B2 (en) * 2011-12-07 2014-11-04 Comcast Cable Communications, Llc Dynamic ambient lighting
US11950340B2 (en) 2012-03-13 2024-04-02 View, Inc. Adjusting interior lighting based on dynamic glass tinting
US9638978B2 (en) 2013-02-21 2017-05-02 View, Inc. Control method for tintable windows
US10048561B2 (en) 2013-02-21 2018-08-14 View, Inc. Control method for tintable windows
KR101305249B1 (ko) * 2012-07-12 2013-09-06 씨제이씨지브이 주식회사 다면 상영 시스템
US8928811B2 (en) * 2012-10-17 2015-01-06 Sony Corporation Methods and systems for generating ambient light effects based on video content
US8928812B2 (en) 2012-10-17 2015-01-06 Sony Corporation Ambient light effects based on video via home automation
WO2014111826A2 (en) * 2013-01-17 2014-07-24 Koninklijke Philips N.V. A controllable stimulus system and a method of controlling an audible stimulus and a visual stimulus
TWM459428U (zh) * 2013-03-04 2013-08-11 Gunitech Corp 環境控制裝置及影／音播放裝置
US9380443B2 (en) 2013-03-12 2016-06-28 Comcast Cable Communications, Llc Immersive positioning and paring
US20150312648A1 (en) * 2014-04-23 2015-10-29 Verizon Patent And Licensing Inc. Mobile device controlled dynamic room environment using a cast device
RU2688844C2 (ru) * 2014-05-09 2019-05-22 Вью, Инк. Способ управления тонируемыми окнами
US10595095B2 (en) * 2014-11-19 2020-03-17 Lg Electronics Inc. Method and apparatus for transceiving broadcast signal for viewing environment adjustment
EP3062519A1 (en) * 2015-02-27 2016-08-31 Novabase Digital TV Technologies GmbH Ambient surround information system for a media presentation
DE102015115050B4 (de) * 2015-09-08 2017-07-27 Jörg Köhler Verfahren zur Beleuchtungsgestaltung
CN106422374B (zh) * 2016-11-22 2018-03-13 深圳市环球数码科技有限公司 一种用于数字影院的动态视觉效果增强系统及控制方法
FR3062067B1 (fr) * 2017-01-23 2023-05-12 Reperes Caisson multi sensoriel et dispositif immersif
JP7009068B2 (ja) * 2017-03-01 2022-01-25 任天堂株式会社 照明装置、照明器具及び電子機器
IT201700099120A1 (it) * 2017-09-05 2019-03-05 Salvatore Lamanna Sistema di illuminazione per schermo di qualsiasi tipo
WO2019234028A1 (en) * 2018-06-07 2019-12-12 Signify Holding B.V. Selecting one or more light effects in dependence on a variation in delay
US10932344B2 (en) 2018-10-09 2021-02-23 Rovi Guides, Inc. Systems and methods for emulating an environment created by the outputs of a plurality of devices
US11750745B2 (en) 2020-11-18 2023-09-05 Kelly Properties, Llc Processing and distribution of audio signals in a multi-party conferencing environment

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5883621A (en) * 1996-06-21 1999-03-16 Sony Corporation Device control with topology map in a digital network
US6548967B1 (en) * 1997-08-26 2003-04-15 Color Kinetics, Inc. Universal lighting network methods and systems
US6976267B1 (en) * 1999-04-09 2005-12-13 Sony Corporation Method and apparatus for controlling connections between devices
US7540012B1 (en) * 1999-06-08 2009-05-26 International Business Machines Corporation Video on demand configuring, controlling and maintaining
JP2001078117A (ja) * 1999-09-06 2001-03-23 Matsushita Electric Ind Co Ltd ディジタル放送用受信装置
JP4399087B2 (ja) * 2000-05-31 2010-01-13 パナソニック株式会社 照明システム、映像表示デバイスおよび照明制御方法
US20050275626A1 (en) * 2000-06-21 2005-12-15 Color Kinetics Incorporated Entertainment lighting system
US20020095679A1 (en) * 2001-01-18 2002-07-18 Bonini Robert Nathaniel Method and system providing a digital cinema distribution network having backchannel feedback
DE602005021685D1 (de) * 2004-11-30 2010-07-15 Koninkl Philips Electronics Nv Anzeigesystem
JP4769122B2 (ja) * 2005-05-23 2011-09-07 シャープ株式会社 映像呈示システム
JP2007006281A (ja) * 2005-06-24 2007-01-11 Sony Corp オーディオ・ディスプレイ装置
US20090109340A1 (en) * 2006-04-21 2009-04-30 Sharp Kabushiki Kaisha Data Transmission Device, Data Transmission Method, Audio-Visual Environment Control Device, Audio-Visual Environment Control System, And Audio-Visual Environment Control Method
JP2008005297A (ja) * 2006-06-23 2008-01-10 Fujifilm Corp 画像撮影再生システム
US20110316426A1 (en) * 2006-12-28 2011-12-29 Sharp Kabushiki Kaisha Audio-visual environment control device, audio-visual environment control system and audio-visual environment control method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103780915A (zh) * 2012-10-17 2014-05-07 索尼公司 包括环境光效果的视频文件
CN104869342A (zh) * 2015-06-09 2015-08-26 柳州桂通科技股份有限公司 一种多媒体多信息同步重现的方法及其应用

Also Published As

Publication number Publication date
WO2010007988A1 (ja) 2010-01-21
EP2315442A1 (en) 2011-04-27
BRPI0916465A2 (pt) 2018-02-06
KR20110030656A (ko) 2011-03-23
JP5092015B2 (ja) 2012-12-05
US20110190911A1 (en) 2011-08-04
JPWO2010007988A1 (ja) 2012-01-05

Similar Documents

Publication Publication Date Title
CN102090057A (zh) 数据发送装置、数据发送方法、视听环境控制装置、视听环境控制系统及视听环境控制方法
US11140354B2 (en) Method for generating control information based on characteristic data included in metadata
US20190069375A1 (en) Use of embedded data within multimedia content to control lighting
EP3163894B1 (en) Data output device, data output method, and data generation method
JP6419807B2 (ja) Ｈｄｒメタデータ転送
US9197918B2 (en) Methods and systems for generating ambient light effects based on video content
TWI627627B (zh) 再生裝置、再生方法、及記錄媒體
JP4334470B2 (ja) 周囲光の制御
KR102402370B1 (ko) 원격지 연출 시스템 및 원격지 연출 방법
JP5442643B2 (ja) データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御方法および視聴環境制御システム
KR20110042067A (ko) 데이터 송신 장치, 데이터 수신 장치, 데이터 송신 방법, 데이터 수신 방법 및 시청 환경 제어 방법
KR20090019830A (ko) 비디오를 식별하고 동기화하기 위한 핑거프린트, 장치 및 방법
CN106170985B (zh) 再现方法及再现装置
US20110188832A1 (en) Method and device for realising sensory effects
JP2011259354A (ja) 視聴環境制御システム、送信装置、受信装置
KR20200050449A (ko) 공연연출시스템
KR20200050448A (ko) 공연연출시스템
JP2013255042A (ja) 照明制御装置、表示装置、映像再生装置、照明制御方法、プログラム、および、記録媒体
US11695980B1 (en) Method and system for controlling lighting in a viewing area of a content-presentation device
TWI826400B (zh) 資訊處理裝置、資訊處理方法、記錄媒體、再生裝置、再生方法、及程式

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20110608