CN102598554B - 对感觉装置使用元数据的多媒体应用系统和方法 - Google Patents

对感觉装置使用元数据的多媒体应用系统和方法 Download PDF

Info

Publication number
CN102598554B
CN102598554B CN200980127406.3A CN200980127406A CN102598554B CN 102598554 B CN102598554 B CN 102598554B CN 200980127406 A CN200980127406 A CN 200980127406A CN 102598554 B CN102598554 B CN 102598554B
Authority
CN
China
Prior art keywords
metadata
sensory
information
describes
effect
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN200980127406.3A
Other languages
English (en)
Other versions
CN102598554A (zh
Inventor
曹孟燮
金镇绪
具本琪
李志炯
秋昌佑
金浩原
朴一圭
崔允硕
朴志英
林成宰
黄本祏
朴正喆
金甲基
金相均
朱容秀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Publication of CN102598554A publication Critical patent/CN102598554A/zh
Application granted granted Critical
Publication of CN102598554B publication Critical patent/CN102598554B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/68—Systems specially adapted for using specific information, e.g. geographical or meteorological information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8186—Monomedia components thereof involving executable data, e.g. software specially adapted to be executed by a peripheral of the client device, e.g. by a reprogrammable remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Chemical & Material Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Analytical Chemistry (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • General Health & Medical Sciences (AREA)
  • Neurosurgery (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种多媒体应用系统对感觉装置使用元数据。该系统包括：感觉装置引擎，用于基于感觉效果信息(SEI)、所述感觉装置的用户偏好信息(UPI)和装置能力信息(DCI)来生成用于控制所述感觉装置的感觉装置命令(SDC)，该感觉效果信息(SEI)被生成以用于取决于视频内容、通过使用所述感觉装置来表现感觉效果，该装置能力信息(DCI)指示了所述感觉装置的再现能力；以及感觉装置控制器，用于控制感觉装置以响应于所生成的SDC来执行感觉效果再现。

Description

对感觉装置使用元数据的多媒体应用系统和方法
技术领域
本发明涉及一种用于向用户表现视频内容的技术；且更具体地，涉及一种对感觉装置(sensory device)使用元数据的多媒体应用系统和方法，所述感觉装置适合于在从视频内容制作到最终消费的感觉再现处理期间、根据制作者的意图来提供面向消费者的、高质量多媒体服务。
背景技术
通常，通过使用用于再现视频内容的计算装置或光盘播放器来向用户提供视频内容。在此情况下，可以在诸如致密盘(CD)、数字通用盘(DVD)、或蓝光盘之类的光盘中存储视频内容，并且可以在连接到计算装置的监视器或者连接到光盘播放器的电视上显示所再现的图像信号。
然而，随着对视频内容再现技术进行开发，正在对感觉装置和用于控制所述感觉装置的信号处理系统进行研究，以便在视频再现期间向用户提供更加逼真的图像，所述感觉装置用于取决于视频内容来表现诸如雾、风、温度、气味、光、采光(lighting)、和座椅移动之类的感觉效果。商业上，可得到使用该技术的几种系统。
虽然传统的感觉装置提供了取决于视频内容的几种效果，但是已经仅仅在有限空间中实现。
此外，在查看视频内容时，根据视频内容、通过感觉装置来再现感觉效果。然而，视频内容和感觉装置之间的关联关系可能是不同的。因此，需要与视频内容相关联且具有取决于视频内容而再现感觉效果的能力的感觉装置通过使用在用户场所中装备的消费者电子装置和照明(illuminant)装置来再现在视频内容中设置的感觉效果。
此外，感觉效果仅仅是用于使得用户能够观看更加逼真的视频内容，但是它不能够根据制作者的意图和周围照明来控制色彩印象(color impression)。另外，再现视频内容的用户不能控制视频内容中的所期望的感觉效果。
发明内容
技术问题
考虑到上文，本发明提供了一种对感觉装置使用元数据的多媒体应用系统和方法，所述系统和方法能够取决于视频内容来有效地控制感觉装置(诸如，显示装置的色彩印象和周围照明)。
本发明还提供了一种对感觉装置使用元数据的多媒体应用系统和方法，所述系统和方法使用用于根据视频内容制作者的意图和视频内容来优化显示装置的色彩印象和感觉装置的调整的新元数据格式，并且能够根据视频制作者的意图来提供面向消费者的、高质量多媒体服务。
本发明还提供了一种对感觉装置使用元数据的多媒体应用系统和方法，其能够通过在形成用于取决于视频内容而控制感觉装置的应用系统的元数据的处理中、包括用于利用SEI元数据而有效地控制感觉装置(诸如，显示装置的色彩印象和周围照明)的方法、并且包括基于元数据的内容利用工具，来在从视频内容制作到最终消费的感觉再现处理期间、根据制作者的意图而提供面向消费者的、高质量多媒体服务。
当在视频内容再现中形成用于取决于视频内容而控制感觉装置(诸如，显示装置的色彩印象和周围照明)的多媒体应用系统的元数据时，本发明包括用于有效地控制感觉装置所需的各种信息作为元数据和基于元数据的内容利用工具。相应地，可以将感觉功能(诸如，感觉制作者意图的原始视频的色彩印象等)应用于视频色彩再现，并且视频内容的消费者(用户)可以选择所期望的感觉功能。即，根据本发明，可以提供面向消费者的高质量多媒体服务。
技术方案
根据本发明的一方面，提供了一种对感觉装置使用元数据的多媒体应用系统，该系统包括：感觉装置引擎，用于基于感觉效果信息(SEI)、所述感觉装置的用户偏好信息(UPI)和装置能力信息(DCI)来生成用于控制所述感觉装置的感觉装置命令(SDC)，该感觉效果信息(SEI)被生成以用于取决于视频内容、通过使用所述感觉装置来表现感觉效果，该装置能力信息(DCI)指示了所述感觉装置的再现能力；以及感觉装置控制器，用于控制感觉装置以响应于所生成的SDC来执行感觉效果再现。
根据本发明的另一方面，提供了一种对感觉装置使用元数据的多媒体应 用方法，该方法包括：通过感觉装置引擎来接收感觉效果信息(SEI)，该SEI用于使感觉装置根据视频内容来表现感觉效果；接收所述感觉装置的用户偏好信息(UPI)；接收指示了所述感觉装置的再现能力的装置能力信息(DCI)；基于SEI、UPI和DCI来生成用于控制所述感觉装置的感觉装置命令(SDC)；以及向与用于执行感觉效果再现的感觉装置协作的感觉装置控制器传送该SDC。
有益效果
根据本发明，可能通过使用用于根据视频内容而最优地调整显示装置的色彩印象和周围感觉装置的新元数据格式、在再现视频内容时、根据消费者观看时的视频内容来有效地控制周围感觉装置(诸如，显示装置的色彩印象和周围照明)。因此，可以提供与现有制作者的意图对应的面向消费者的、高质量多媒体服务。
附图说明
根据结合附图而给出的优选实施例的以下描述，本发明的目标和特征将变得明显，其中：
图1是图示了根据本发明实施例的多媒体应用系统的框图；
图2是图示了根据本发明实施例的SEI元数据发生器的框图；
图3是图示了根据本发明实施例的SEI元数据的元素的框图；
图4是图示了根据本发明实施例的图式格式(schema format)中的SEI元数据的图；
图5是图示了根据本发明实施例的在SEI元数据的图式中被提供为基本类型系统中的顶部基本类型的SEI基础类型元数据的元素的框图；
图6是图示了根据本发明实施例的图式格式中的SEI基础类型元数据的图；
图7是图示了根据本发明实施例的效果组(Group of Effects)元数据的元素的框图；
图8是图示了根据本发明实施例的图式格式中的效果组元数据的图；
图9是图示了根据本发明实施例的描述了用于再现风效、以便表现一种感觉效果信息的感觉装置的信息的元数据的元素的框图；
图10是图示了根据本发明实施例的图式格式中的风扇类型(Fan Type) 元数据的结构图；
图11是图示了根据本发明实施例的原始(参考)色彩参数元数据的元素的框图；
图12是图示了根据本发明实施例的以图式格式表现的原始色彩元数据的结构图；
图13是图示了根据本发明实施例的色调再现曲线的元素的框图；
图14是图示了根据本发明实施例的以图式格式表现的色调再现曲线的结构图；
图15是图示了根据本发明实施例的图像转换矩阵的元素的框图；
图16是图示了根据本发明实施例的以图式格式表现的图像转换矩阵的图；
图17是图示了根据本发明实施例的照明光源元数据的元素的框图；
图18是图示了根据本发明实施例的以图式格式表现的照明光源的结构图；
图19是图示了根据本发明实施例的输入装置色域元数据的元素的结构图；
图20是图示了根据本发明实施例的以图式格式表现的输入装置色域元数据的图；
图21是图示了根据本发明实施例的UPI元数据发生器的框图；
图22是图示了根据本发明实施例的UPI元数据的元素的框图；
图23是图示了根据本发明实施例的以图式格式表现的UPI元数据的图；
图24是图示了根据本发明示范实施例的感觉效果偏好信息元数据的元素的图；
图25是图示了根据本发明实施例的以图式格式表现的感觉效果偏好信息元数据的图；
图26是图示了根据本发明实施例的DCI元数据发生器的框图；
图27是图示了根据本发明实施例的DCI元数据的元素的框图；
图28是图示了根据本发明实施例的图式格式中的DCI元数据的图；
图29是图示了根据本发明实施例的装置能力元数据的元素的框图；
图30是图示了根据本发明实施例的以图式格式表现的装置能力元数据的图；
图31是图示了根据本发明实施例的SDC元数据发生器的框图；
图32是图示了根据本发明实施例的元数据的SDC元素的框图；
图33是图示了根据本发明实施例的以图式格式表现的SDC元数据的结构图；
图34图示了根据本发明实施例的一个感觉装置命令的示例，其中在框图中示出描述了用于再现风效的装置的控制命令信息的元数据“设置风扇类型(Set Fan Type)”的元素；
图35是图示了根据本发明示范实施例的以图式格式表现的设置元数据风扇类型的结构图；以及
图36图示了根据本发明实施例的通过在再现广告视频内容时使用元数据来再现感觉效果的多媒体应用服务。
具体实施方式
在下文中，将参考附图来详细地描述本发明的实施例。
图1是图示了根据本发明实施例的多媒体应用系统的框图。
参考图1，多媒体应用系统包括：SEI元数据发生器100，用于生成视频内容的感觉效果信息(SEI)元数据；UPI元数据发生器102，用于生成用户偏好信息(UPI)元数据；DCI元数据发生器104，用于生成装置能力信息(DCI)元数据；SDC元数据发生器106，用于生成感觉装置命令(SDC)元数据；感觉装置引擎108；感觉装置控制器110；和通信信道112。
首先，将简要地描述用于驱动多媒体应用系统的方法。分别由SEI元数据发生器100和UPI元数据发生器102来生成元数据，并且通过通信信道112而将其传递到感觉装置引擎108，以用于解释和控制与感觉装置相关的元数据。感觉装置引擎108通过SDC元数据发生器106来生成SDC元数据，并且将该元数据传递到感觉装置控制器110。感觉装置控制器110通过由感觉装置控制器110控制的感觉装置(例如，显示装置114、照明装置116、发光二极管(LED)装置118、和温度调整装置120中的至少一个)、或者通过根据视频内容控制的感觉装置(例如，风调整装置或气味调整装置)来提供高质量的多媒体服务。
这里，感觉装置引擎108基于从相应的元数据发生器接收的SEI、UPI、和DCI元数据来生成用于感觉装置控制的SDC信息。
例如，感觉装置引擎108将UPI反映到SEI，并且基于DCI来识别关于可用感觉装置的信息，以生成SDC信息。在此情况下，在所生成的SDC中设置由感觉装置控制器110基于所接收的SEI、UPI、和DCI以及感觉装置的控制范围而控制的感觉装置。
SEI元数据发生器100生成描述了由视频内容制作者指定的感觉装置的效果的SEI元数据，UPI元数据发生器102生成描述了与由终端用户偏好的感觉效果再现相关的用户偏好信息的UPI元数据，而DCI元数据发生器104生成描述了用于连接到感觉装置控制器110的感觉装置的装置能力信息的DCI元数据。
即，感觉装置控制器110通过使用DCI元数据发生器104来生成装置能力信息，其中设置控制范围以控制连接到感觉装置控制器110的感觉装置。
感觉装置引擎108接收SEI、UPI和DCI元数据，并且向SDC元数据发生器106传递基于所接收的元数据而构成的、用于控制感觉装置的信息(即，SDC信息)。SDC元数据发生器106生成描述了SDC信息的SDC元数据。
在此情况下，经由通信信道112来执行元数据发生器100、102、和105与感觉装置引擎108之间的数据传送和接收、以及感觉装置引擎108与感觉装置控制器110之间的数据传送和接收。这里，连接在感觉装置引擎108与感觉装置控制器110之间的通信信道112可以是用于使用特定通信协议来通信数据的有线网络，诸如，光缆或LAN(UTP：非屏蔽双绞线)线缆。CDMA、WCDMA、或FDMA、和无线通信(诸如，蓝牙、WIBRO、或无线局域网(LAN))系统可以用于该数据传送和接收。此外，如果任何其它通信系统可以用于数据传送和接收，则可以应用它。
其间，在本发明中，根据使用MPEG-7多媒体描述方案(MDS)和MPEG-21数字项适配(DIA)的标准化格式和结构来描述元数据。
图2是图示了根据本实施例的SEI元数据发生器的框图。
参考图2，SEI元数据发生器100生成描述了由视频内容制作者指定的感觉装置的效果的SEI元数据200。
图3是图示了根据本实施例的SEI元数据的元素的框图。参考图3，SEI元数据200包括：元数据“##其它(##other)”300，描述了可扩展感觉装置的属性信息；和元数据“效果组(Group of Effects)”302，描述了两个或更多感觉效果信息；元数据“单一效果(Single Effect)”304，描述了一个感觉效果信息；以及元数据“参数(Parameters)”306，描述了与感觉效果相关的参数。视频内容制作者产生用于感觉装置的各种感觉效果信息。
图4示出了根据本实施例的以图式格式描述的SEI元数据。以图式格式描述了图3中的SEI元数据200和SEI元数据200的元素。
表1示出了可扩展标记语言(XML)图式格式中的SEI元数据200的描述。
表1
[表1]
[表格]
图5是图示了根据本实施例的在SEI元数据200的图式中被提供为基本类型系统中的顶部基本类型的SEI基础类型元数据的元素的框图。参考图5，SEI基础类型元数据500包括描述了可标识属性信息的元数据id 502。
在图5中，SEI基础类型元数据500用于基本类型的单一效果元数据304(单一效果基础类型(Single Effect Base Type))、基本类型的参数元数据306(参数基础类型(Parameters Base Type))、和基本类型的SDC元数据SDC基础类型，如图3所示。
图6示出了根据本实施例的以图式格式描述的SEI基础类型元数据。以图式格式描述了图5所示的SEI基础类型元数据500和SEI基础类型元数据500的元素。
表2示出了XML图式格式中的SEI基础类型元数据500的描述。
表2
[表2]
[表格]
图7是图示了根据本实施例的效果组元数据的元素的框图。参考图7，效果组元数据302包括描述了用于可扩展感觉装置的属性信息的元数据##其它700(##other)、和描述了一个感觉效果信息的元数据单一效果(SingleEffect)702中的至少两个。
图8示出了根据本实施例的以图式格式描述的效果组元数据，其中以图式格式描述了图7中的效果组元数据302和效果组元数据302的元素。
表3示出了XML图式格式中的效果组元数据302的描述。
表3
[表3]
[表格]
表4示出了以XML图式格式描述的、被提供为基本类型的单一效果元数据304的描述。
表4
[表4]
[表格]
表5示出了以XML图式格式描述的、被提供为基本类型的参数元数据306的描述。
表5
[表5]
[表格]
图9是图示了根据本实施例的描述了用于再现风效以便呈现一个感觉效果信息的装置的信息的元数据风扇类型(Fan Type)900的元素的框图。
参考图9，所述元素包括：元数据方法902，描述了装置的再现方法的属性信息；元数据地区(side)904，描述了用于指示位置信息的属性信息；元数据“速度”906，描述了用于指示再现强度的属性信息；元数据持续时间908，描述了用于指示其中一致地再现视频内容的持续时间的属性信息；元数据vTime 910，描述了用于指示其中可变地再现视频内容的持续时间的属性信息；元数据vDelta 912，描述了用于指示变化的持续时间期间的时间改变的属性信息；元数据vSide 914描述了用于指示变化的样式(pattern)的属性信息；元数据vLower 916，描述了用于指示变化的再现强度的最低值的属性信息；元数据vUpper 918，描述了用于指示变化的再现强度的最高值的属性信息；以及元数据“激活”920，描述了感觉装置的激活的属性信息。
图10示出了根据本实施例的以图式格式描述的风扇类型元数据900，其中以图式格式表现了元数据风扇类型900和元数据风扇类型900的元素。
表6示出了以XML图式格式描述的、被提供为基本类型的元数据风扇类型900的描述。
表6
[表6]
[表格]
此外，在本发明中，可以通过使用作为用于呈现一个感觉效果信息的一个实施例的用于生成以下元数据的方法来表现各种感觉效果信息(诸如，温度、照明、和振动等)，所述元数据通过将单一效果元数据304的描述扩展为元数据风扇类型900来获得。
图11是图示了根据本发明示范实施例的原始(参考)色彩参数元数据的元素的框图。
参考图11，描述了视频内容的原始色彩恢复信息的元数据参考色彩(reference color)参数1100包括：色调再现曲线(tone reproduction curves)1102，描述了示出用于成功色彩恢复的原始色彩显示装置的特性的曲线；转换矩阵1104，描述了用于执行从原始图像的色彩空间到标准色彩空间的图像转换的矩阵；照明1106，描述了原始图像任务空间中的照明光源的类型；输入装置色域1108，描述了原始色彩显示的色域；以及四周亮度(luminance ofsurround)1110，描述了周围的亮度。
在本发明中，尽管将增益偏移伽马(GOG)模型用作色彩空间转换方法，但是它可以使用其它转换模型，诸如多项式转换或PLCC。
图12是图示了根据本实施例的以图式格式描述的原始色彩元数据的图，其中以图式格式表现了参考色彩参数元数据1100和参考色彩参数元数据1100的元素。
表7示出了以XML图式格式描述的参考色彩参数元数据1100的描述。
表7
[表7]
[表格]
图13是图示了根据本实施例的色调再现曲线的元素的框图。 
参考图13，示出了元数据色调再现曲线(tone reproduction curves)1102的元素，该元数据色调再现曲线1102描述了用于示出原始色彩显示装置的特性的曲线。元数据色调再现曲线1102包括：记录(Record)1300元数据，描述了表现用于原始色彩显示装置的每个通道的伽马数据所需的数模转换(DAC)值和RGB值；DAC_Value(DAC值)1302元数据，描述了DAC的值；和RGB_Value(RGB值)1304元数据，描述了每个通道的RGB值。
图14是图示了根据本实施例的以图式格式描述的色调再现曲线的图，其中以图式格式表现了元数据色调再现曲线1102和元数据色调再现曲线1102的元素。
表8示出了XML实例格式中的元数据色调再现曲线1102的示例。
表8
[表8]
[表格]
图15是图示了根据本实施例的图像转换矩阵的元素的框图。
参考图15，示出了元数据转换矩阵1104的元素，该元数据转换矩阵1104描述了用于执行从原始图像的色彩空间到标准色彩空间的图像转换的矩阵。元数据转换矩阵1104包括：RGB_XYZ 1500，描述了用于将RGB色彩空间转换为XYZ色彩空间的矩阵；RGBScalar_Max(RGB标量最大)1502，描述了GOG转换所需的每个通道的RGB标量最大值；Offset_Value(偏移值)1504，描述了原始色彩显示装置的偏移值；Gain_Offset_Gamma(增益偏移伽马)1506，描述了作为GOG转换所需参数的原始色彩显示装置的增益、偏移、和伽马值；和逆矩阵1508，描述了用于将XYZ色彩空间逆转换为RGB色彩空间的矩阵。
图16是图示了根据本实施例的以图式格式描述的图像转换矩阵的图，其中以图式格式表现了转换矩阵元数据1104和转换矩阵元数据1104的元素。
表9示出了以XML实例格式描述的转换矩阵元数据1104的示例。
表9
[表9]
[表格]
图17是图示了根据本实施例的照明光源元数据的元素的框图。
参考图17，示出了元数据照明1106的元素，该元数据照明1106描述了原始图像任务空间中的照明光源的类型。元数据照明1106包括：日光(daylight)1700，描述了CIE标准照明类型；和XY_Value(XY值)1702元数据，描述了根据标准照明类型的白点色度值。
图18是图示了根据本实施例的以图式格式描述的照明光源的图，其中以图式格式表现了照明元数据1106和照明元数据1106的元素。
表10示出了以XML实例格式描述的照明元数据1106的示例。
表10
[表10]
[表格]
图19是图示了根据本实施例的输入装置色域元数据的元素的图。
参考图19，示出了元数据输入装置色域1108的元素，该元数据输入装置色域1108描述了原始色彩显示的色域。元数据输入装置色域元数据1108包括：IDCG_Type(IDCG类型)1900，描述了输入装置的类型；和IDCG_Value(IDCG值)1902元数据，描述了输入装置的最大DAC值中的x、y值。
图20是图示了根据本实施例的以图式格式描述的输入装置色域元数据的图，其中以图式格式表现了元数据输入装置色域1108和元数据输入装置色域1108的元素。
表11示出了以XML实例格式描述的输入装置色域元数据1108的示例。
表11
[表11]
[表格]
图21是图示了根据本实施例的UPI元数据发生器的框图。
参考图21，UPI元数据发生器102生成包括了用于用户偏好信息的元数据信息的UPI元数据2100。
图22是图示了根据本实施例的UPI元数据的元素的框图。
参考图22，元数据UPI 2100包括：元数据个人信息(Personal Info)2200，描述了终端用户的个人信息；和元数据偏好描述(Preference Description)2202，描述了感觉效果偏好信息。
图23是图示了根据本实施例的以图式格式描述的UPI元数据的图，其中以图式格式表现了UPI元数据2100和UPI元数据2100的元素。
表12示出了XML图式格式中的UPI元数据2100的描述。
表12
[表12]
[表格]
图24是图示了根据本实施例的感觉效果偏好信息元数据的元素的图。
参考图24，示出了元数据偏好描述(preference description)2202的元素，该元数据偏好描述2202描述了感觉效果偏好信息。偏好描述元数据2202包括：元数据选择参考色彩(Select Reference Co1or)2400，描述了用户的视频内容的原始色彩恢复的偏好信息；元数据选择调光(Select Dimming)2402，描述了照明调整偏好信息；元数据选择LED(Select LED)2404，描述了周围照明调整偏好信息；元数据选择温度(Select Temperature)2406，描述了温度调整偏好信息；和元数据选择风(Select Wind)2408，描述了用于其它可再现效果的偏好信息。
图25是图示了根据本实施例的以图式格式描述的感觉效果偏好信息元数据的图，其中以图式格式表现了偏好描述元数据2202的元素和偏好描述元数据2202。
表13示出了XML图式格式中的偏好描述元数据2202的描述。
表13
[表13]
[表格]
图26是图示了根据本发明示范实施例的DCI元数据发生器的框图。
参考图26，DCI元数据发生器104生成包括了用于装置能力信息的元数据信息的元数据DCI 2600。
图27是图示了根据本实施例的DCI元数据的元素的框图，其中DCI元数据104包括元数据“装置能力(device capability)”2700，该元数据“装置能力”2700描述了装置再现能力。
图28是图示了根据本实施例的图式格式中的DCI元数据的图，其中以图式格式表现了DCI元数据104和作为DCI元数据104的元素的装置能力2700。
表14示出了XML图式格式中的DCI元数据104的描述。
表14
[表14]
[表格]
图29是图示了根据本实施例的装置能力元数据的元素的框图。
参考图29，示出了元数据装置能力(device capability)2700的元素，该元数据装置能力2700描述了装置的再现能力。在图29中，装置能力元数据2700包括：元数据装置ID(Device ID)2900，描述了装置的唯一标识号属性信息；元数据装置类型(Type OfDevice)2902，描述了用于指示装置类型的属性信息；元数据数目(Number)2904，描述了感觉效果感觉装置的数目；元数据最小等级(Min Level)2906，描述了最小装置能力信息；元数据最大等级(Max Level)2908，描述了最大装置能力信息；和元数据位置2910，描述了装置位置信息。
图30是图示了根据本实施例的以图式格式描述的装置能力元数据的图，其中以图式格式表现了装置能力元数据2700。
表15示出了XML图式格式中的装置能力元数据2700的描述。
表15
[表15]
[表格]
图31是图示了根据本实施例的SDC元数据发生器的框图。
参考图31，SDC元数据发生器106生成具有用于感觉装置命令的元数据信息的SDC元数据3100。
图32是图示了根据本实施例的元数据SDC元素的框图，其中SDC元数据3100包括描述了感觉装置命令的元数据“感觉装置命令(SensoryDeviceCommand)”3200。
图33是图示了根据本实施例的以图式格式描述的SDC元数据的图，其中以图式格式表现了图32所示的SDC元数据3100和SDC元数据3100的元素。
表16示出了XML图式格式中的SDC元数据3100的描述。
表16 [表16]
[表16]
[表格]
表17示出了以XML图式格式描述的、被提供为基本类型的SDC元数据3100的描述。
表17
[表17]
[表格]
图34图示了根据本发明的一个感觉装置命令的示例，其中在框图中示出描述了用于再现风效的装置控制命令信息的元数据设置风扇类型(Set FanType)3400的元素。
参考图34，所述元素包括：元数据“速度”3402，描述了用于指示再现强度的属性信息；元数据“持续时间”3404，描述了用于指示恒定再现时间的属性信息；和元数据“激活(activate)”3406，描述了用于指示感觉装置激活的属性信息。
图35是图示了根据本实施例的以图式格式描述的元数据设置风扇类型(set Fan Type)3400的图，其中以图式格式表现了元数据设置风扇类型3400及其元素。
表18示出了以XML图式格式描述的、被提供为基本类型的元数据设置 风扇类型3400的描述。
表18
[表18]
[表格]
此外，在本发明中，可以通过使用作为用于呈现感觉装置命令的一个实施例的用于生成以下元数据的方法来表现各种感觉装置命令信息(诸如，温度、照明、和振动效果等)，该元数据通过将SDC元数据3100的描述结构扩展为元数据设置风扇类型3400来获得。
即，描述了感觉装置命令信息的元数据“感觉装置命令”3200可以包括用于再现感觉效果的装置的唯一标识信息、用于感觉装置的感觉效果信息、和用于与感觉效果相关的参数信息的元数据。
例如，可以将用于每个感觉装置的类型信息的元数据扩展为用于再现感觉效果的装置的唯一标识信息。可以将元数据(诸如，每个感觉装置的视频内容的原始色彩恢复设置信息、照明再现设置信息、振动设置信息、温度再现设置信息、和再现方向设置信息)包括为每个感觉装置的类型信息元数据的每个元素、或者用于感觉装置的感觉效果信息和与感觉效果相关的参数信息。
图36图示了根据本发明实施例的通过在再现广告视频内容时使用元数据来再现感觉效果的多媒体应用服务，其中广告方法在再现时对用于再现感觉效果的多媒体应用系统和装置使用元数据。
参考图36，以制作者所预期的感觉效果向用户提供由广告制作者产生的广告视频内容3600。制作者产生与原始色彩表达、主要照明、周围照明、和温度对应的SEI元数据200，以使所完成的广告的效果最大化。
表19示出了以XML实例格式描述的、由广告制作者产生的SEI元数据200的示例。
表19
[表19]
[表格]
表19示出了SEI元数据200的XML实例，该SEI元数据200包括用于广播制作者所预期的原始色彩恢复的参数并且描述了主要和周围照明(LED)效果、温度效果、和风效等。
生成多媒体应用格式(MAF)的广告媒体，以传送所完成的广告视频内容3600和对应的SEI元数据200。在本发明中，MAF用于以媒体格式来表达视频内容和元数据，但是它不限于此。经由通信信道112(诸如，因特网或线缆)来向感觉装置引擎108传递MAF格式中的所产生的广告媒体，以向消费者(用户)通知存在用于广播视频内容300的感觉效果。
相应地，广告消费者确定是否应用所传送的广告媒体的感觉效果。在实施例中，可以通过使用用于使得消费者能够选择再现和再现效果的程度的、显示器上的图形用户界面(GUI)来执行该选择。如果消费者期望应用该广告媒体再现效果，则生成UPI元数据2100，并且将其传送到感觉装置引擎108。
表20示出了当消费者应用广告媒体效果时由消费者生成的、以XML实例格式描述的UPI元数据2100。
表20
[表20]
[表格]
表20示出了用于描述广告消费者的感觉效果偏好信息的UPI元数据2100的XML实例，其中全部使用了原始色彩再现、主要照明、周围照明、温度、风调整效果，并且描述了主要照明、温度、和风调整的再现效果的程度。
感觉装置引擎108输入有SEI元数据200、DCI元数据2600、和UPI元数据2100，该SEI元数据200用于再现广告媒体的感觉效果，该DCI元数据2600用于连接到感觉装置控制器110的周围装置(主要照明、周围照明(LED)、和空调器)，而该UPI元数据2100是消费者的感觉效果再现偏好信息，并然后，开始再现广告。
表21示出了以XML实例格式描述的、从感觉装置控制器110生成的感觉效果感觉装置的DCI元数据2600。
表21
[表21]
[表格]
表21示出了DCI元数据2600的XML实例，该DCI元数据2600描述了分别用于调整主要照明和周围照明、温度、以及风的感觉装置的感觉效果再现能力的范围。
在对广告进行再现的时候，由感觉装置引擎108来解释制作者所预期的原始色彩表达、主要照明、周围照明、温度和风SEI元数据。在此情况下，解释DCI元数据2600，以在与制作者所预期的感觉效果对应的装置之中确定当前可用的感觉装置。
然后，基于用户UPI元数据2100来最后地解释用户偏好信息，并将所生成的SDC元数据3100传递到感觉装置控制器110。
表22示出了以XML实例格式描述的、由感觉装置引擎108生成的SDC元数据3100的示例。
表22
[表22]
[表格]
表22示出了向感觉装置控制器110传递的SDC元数据3100的XML实例，该SDC元数据3100描述了原始色彩恢复信息和根据以下感觉效果再现信息的主要照明、周围照明、温度和风调整的再现效果程度，该感觉效果再现信息与消费者所偏好的UPI元数据2100对应地调整。
感觉装置控制器110通过基于SDC元数据310向相应所连接的感觉装置发送控制信号，来朝向消费者再现制作者所预期的感觉效果。相应地，例如，当在广告屏幕上再现具有强烈阳光的凉爽海洋的场景时，在强烈的主要照明、照明为凉爽海洋背景的蓝色周围LED(周围照明)、和从位于消费者背后的空调器吹出的凉风的情况下显示广告制作者所预期的原始色彩印象。在由消费者再现广告媒体的时候，消费者感受到购买所登广告的产品的强烈欲望。
如果消费者不应用广告媒体效果，则再现反映了数字电视的色彩印象信息、而不是广告制作者所预期的显示器的原始色彩的啤酒广告，并且消费者可能不会对该广告做出反应。
表23示出了当消费者不应用广告媒体效果时、以XML实例格式描述的、从消费者生成的UPI元数据2100的示例。
表23
[表23]
[表格]
表23示出了用于描述消费者的感觉效果偏好信息的UPI元数据2100的XML实例，该UPI元数据2100描述了不使用原始色彩再现、主要照明、周围照明、温度、风调整效果。
如上所述，本发明用于通过使用用于根据视频内容而最优地调整显示装置的色彩印象和周围感觉装置的新元数据格式、在再现视频内容时、根据消费者观看时的视频内容来有效地控制周围感觉装置(诸如，显示装置的色彩印象和周围照明)。因此，可以提供与现有制作者的预期对应的面向消费者的、高质量多媒体服务。
尽管已经针对优选实施例而示出并描述了本发明，但是本领域技术人员将理解，可以做出各种改变和修改，而不脱离由以下权利要求限定的本发明的范围。

Claims (16)

1.一种对感觉装置使用元数据的多媒体应用系统，该系统包括：
感觉装置引擎，用于基于感觉效果信息(SEI)、所述感觉装置的用户偏好信息(UPI)和装置能力信息(DCI)来生成用于控制所述感觉装置的感觉装置命令(SDC)，该感觉效果信息(SEI)用于取决于视频内容、通过使用所述感觉装置来表现感觉效果，该装置能力信息(DCI)指示了所述感觉装置的再现能力；以及
感觉装置控制器，用于控制所述感觉装置以响应于所生成的SDC来执行感觉效果再现，
其中所述SEI以可扩展标记语言XML图示格式的元数据来公开，
其中所述SEI元数据包括如下元数据：
元数据“##其它”，用于描述可扩展感觉装置的属性信息；
元数据“效果组”，用于描述两个或更多效果信息；
元数据“单一效果”，用于描述一个感觉效果信息；以及
元数据“参数”，用于描述与感觉效果相关的参数,
其中所述元数据“单一效果”包括用于描述所述视频内容的原始色彩恢复信息的元数据“参考色彩参数”。
2.根据权利要求1的系统，其中所述DCI包括所述感觉装置的再现能力的范围。
3.根据权利要求1的系统，还包括以SEI元数据的图示被提供为顶部基本类型的SEI基础类型元数据“SEI base type metadata”，其中，所述SEI基础类型元数据“SEI base type metadata”被用于基本类型的单一效果元数据“Single Effect Base Type”、基本类型的参数元数据“Parameters Base Type”、和基本类型的SDC元数据“SDC Base Type”。
4.根据权利要求3的系统，其中，所述SEI基础类型元数据包括用于描述可标识属性信息的元数据“id”。
5.根据权利要求1的系统，其中，所述元数据“效果组”包括如下元数据：
用于描述可扩展感觉装置的属性信息的元数据“##其它”、和
用于描述一个感觉效果信息的元数据“单一效果”。
6.根据权利要求1的系统，其中所述元数据“单一效果”包括用于描述再现风效的感觉装置的信息的元数据“风扇类型”，以及
其中，所述元数据“风扇类型”包括如下元数据：
元数据“方法”，描述用于再现风效的感觉装置的再现方法的属性信息，
元数据“地区”，描述用于指示位置信息的属性信息，
元数据“速度”，描述用于指示再现强度的属性信息，
元数据“持续时间”，描述用于指示其中一致地再现所述视频内容的持续时间的属性信息，
元数据“vTime”，描述用于指示其中可变地再现所述视频内容的持续时间的属性信息，
元数据“vDelta”，描述用于指示在变化的持续时间期间的时间改变的属性信息，
元数据“vSide”，描述用于指示变化的样式的属性信息，
元数据“vLower”，描述用于指示变化的再现强度的最低值的属性信息，
元数据“vUpper”，描述用于指示变化的再现强度的最高值的属性信息，以及
元数据“激活”，描述感觉装置的激活的属性信息。
7.根据权利要求1的系统，其中，所述元数据“参考色彩参数”包括如下元数据：
元数据“色调再现曲线”，描述示出用于色彩恢复的原始色彩显示装置的特性的曲线，
元数据“转换矩阵”，描述用于执行从原始图像的色彩空间到标准色彩空间的图像转换的矩阵，
元数据“照明”，描述原始图像任务空间中的照明光源的类型，
元数据“输入装置色域”，描述原始色彩显示的色域，以及
元数据“四周亮度”，描述周围的亮度。
8.根据权利要求7的系统，其中所述元数据“参数”包括描述用于示出原始色彩显示装置的特性的曲线，以及
其中，所述元数据“色调再现曲线”包括如下元数据：
元数据“记录”，描述用于表现原始色彩显示装置的每个通道的伽马数据所需的数模转换(DAC)值和RGB值，
元数据“DAC_Value”，描述所述DAC的值，和
元数据“RGB_Value”，描述每个通道的RGB值。
9.根据权利要求1的系统，其中，所述UPI以可扩展标记语言(XML)图示格式的元数据来公开，以及
其中，所述UPI元数据包括用于描述终端用户的个人信息的元数据“数据个人信息”和用于描述感觉效果偏好信息的元数据“偏好描述”。
10.根据权利要求9的系统，其中，所述元数据“偏好描述”包括如下元数据：
元数据“选择参考色彩”，描述所述视频内容的原始色彩恢复的偏好信息，
元数据“选择调光”，描述照明调整偏好信息，
元数据“选择LED”，描述周围照明调整偏好信息，
元数据“选择温度”，描述温度调整偏好信息，和
元数据“选择风”，描述用于其它可再现效果的偏好信息。
11.根据权利要求1的系统，其中，所述DCI以可扩展标记语言(XML)图示格式的元数据来公开，以及
其中，所述DCI元数据包括用于描述所述感觉装置的装置能力信息的元数据“装置能力”。
12.根据权利要求11的系统，其中，所述元数据“装置能力”包括如下元数据：
元数据“装置ID”，描述所述感觉装置的唯一标识号属性信息，
元数据“装置类型”，描述用于指示装置类型的属性信息，
元数据“数目”，描述感觉效果感觉装置的数目信息，
元数据“最小等级”，描述所述感觉装置的最小装置能力信息，
元数据“最大等级”，描述所述感觉装置的最大装置能力信息，和
元数据“位置”，描述所述感觉装置的装置位置信息。
13.根据权利要求1的系统，其中，所述SDC以可扩展标记语言(XML)图示格式的元数据来公开，以及
其中，所述SDC元数据包括用于描述所述感觉装置命令的元数据“感觉装置命令”。
14.根据权利要求13的系统，其中，所述元数据“感觉装置命令”包括描述用于再现风效的感觉装置的装置控制命令信息的元数据“设置风扇类型”，
其中，所述元数据“设置风扇类型”包括如下元数据：
“速度”，描述用于指示再现强度的属性信息，
“持续时间”，描述用于指示恒定再现时间的属性信息，和
“激活”，描述用于指示感觉装置激活的属性信息。
15.根据权利要求13的系统，其中，所述元数据“感觉装置命令”还包括如下信息中的至少一个：
用于再现感觉效果的感觉装置的唯一标识信息；
用于所述感觉装置的感觉效果信息；和
与感觉效果相关的参数信息。
16.一种用于在对感觉装置使用元数据的多媒体应用系统中再现感觉效果的方法，该方法包括：
通过感觉装置引擎来接收感觉效果信息(SEI)，该SEI用于使感觉装置根据视频内容来表现所述感觉效果；
接收所述感觉装置的用户偏好信息(UPI)；
接收指示所述感觉装置的再现能力的装置能力信息(DCI)；
基于SEI、UPI和DCI来生成用于控制所述感觉装置的感觉装置命令(SDC)；以及
将该SDC传送到感觉装置控制器，所述感觉装置控制器与用于执行感觉效果再现的感觉装置协作，
其中所述SEI以可扩展标记语言XML图示格式的元数据来公开，所述SEI元数据包括如下元数据：
元数据“##其它”，用于描述可扩展感觉装置的属性信息；
元数据“效果组”，用于描述两个或更多效果信息；
元数据“单一效果”，用于描述一个感觉效果信息；以及
元数据“参数”，用于描述与感觉效果相关的参数,
其中所述元数据“单一效果”包括用于描述所述视频内容的原始色彩恢复信息的元数据“参考色彩参数”。
CN200980127406.3A 2008-07-14 2009-06-19 对感觉装置使用元数据的多媒体应用系统和方法 Active CN102598554B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR20080068054 2008-07-14
KR10-2008-0068054 2008-07-14
KR10-2008-0126032 2008-12-11
KR1020080126032A KR101078641B1 (ko) 2008-07-14 2008-12-11 감각 재생 장치에 관계된 메타데이터를 이용한 멀티미디어 응용 시스템 및 방법
PCT/KR2009/003010 WO2010008139A2 (en) 2008-07-14 2009-06-19 Multimedia application system and method using metadata for sensory device

Publications (2)

Publication Number Publication Date
CN102598554A CN102598554A (zh) 2012-07-18
CN102598554B true CN102598554B (zh) 2015-07-01

Family

ID=42086327

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200980127406.3A Active CN102598554B (zh) 2008-07-14 2009-06-19 对感觉装置使用元数据的多媒体应用系统和方法

Country Status (6)

Country Link
US (1) US20110123168A1 (zh)
EP (1) EP2301245A4 (zh)
JP (1) JP5781435B2 (zh)
KR (1) KR101078641B1 (zh)
CN (1) CN102598554B (zh)
WO (1) WO2010008139A2 (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100138700A (ko) * 2009-06-25 2010-12-31 삼성전자주식회사 가상 세계 처리 장치 및 방법
US20110276659A1 (en) * 2010-04-05 2011-11-10 Electronics And Telecommunications Research Institute System and method for providing multimedia service in a communication system
KR101746453B1 (ko) * 2010-04-12 2017-06-13 삼성전자주식회사 실감 효과 처리 시스템 및 방법
RU2444056C1 (ru) 2010-11-01 2012-02-27 Закрытое акционерное общество "Лаборатория Касперского" Система и способ ускорения решения проблем за счет накопления статистической информации
US9049494B2 (en) * 2011-01-31 2015-06-02 Cbs Interactive, Inc. Media playback control
US10013857B2 (en) * 2011-12-21 2018-07-03 Qualcomm Incorporated Using haptic technologies to provide enhanced media experiences
KR101305735B1 (ko) * 2012-06-15 2013-09-06 성균관대학교산학협력단 촉각 효과의 제공 방법 및 장치
KR102071576B1 (ko) * 2012-12-21 2020-03-02 삼성전자주식회사 콘텐트 재생 방법 및 이를 위한 단말
CN105191286B (zh) * 2013-05-21 2018-11-16 索尼公司 使用元数据的用于数字电影照相机的光学处理的后期制作复制
CN103596044A (zh) * 2013-11-22 2014-02-19 深圳创维数字技术股份有限公司 一种视频文件的处理及播放方法、装置及系统
WO2015198716A1 (ja) * 2014-06-24 2015-12-30 ソニー株式会社 情報処理装置及び情報処理方法並びにプログラム
US10739737B2 (en) * 2015-09-25 2020-08-11 Intel Corporation Environment customization
KR102573933B1 (ko) * 2016-10-04 2023-09-05 한국전자통신연구원 기계 학습 기반의 실감 미디어 저작 방법 및 장치
US10942569B2 (en) * 2017-06-26 2021-03-09 SonicSensory, Inc. Systems and methods for multisensory-enhanced audio-visual recordings
GB2588043A (en) * 2018-06-22 2021-04-14 Virtual Album Tech Llc Multi-modal virtual experiences of distributed content
JP7211514B2 (ja) * 2019-07-10 2023-01-24 日本電信電話株式会社 コンテンツ再生装置、コンテンツ再生方法及びコンテンツ再生プログラム
US11317137B2 (en) * 2020-06-18 2022-04-26 Disney Enterprises, Inc. Supplementing entertainment content with ambient lighting
WO2023209837A1 (ja) * 2022-04-27 2023-11-02 三菱電機株式会社 制御装置、制御システム、制御方法、及び制御プログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1454010A (zh) * 2002-04-25 2003-11-05 三星电子株式会社 利用内容描述元数据转换显示装置中色温的方法及其系统
JP2003324402A (ja) * 2002-05-07 2003-11-14 Nippon Hoso Kyokai <Nhk> 外部機器連動型コンテンツ生成装置、その方法及びそのプログラム、外部機器連動型コンテンツ再生装置、その方法及びそのプログラム
CN1525763A (zh) * 2002-12-12 2004-09-01 三星电子株式会社 产生用户偏爱数据的方法和装置及转换色彩的方法和装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6249315B1 (en) * 1997-03-24 2001-06-19 Jack M. Holm Strategy for pictorial digital image processing
EP1499406A1 (en) * 2002-04-22 2005-01-26 Intellocity USA, Inc. Method and apparatus for data receiver and controller
US20060071899A1 (en) * 2002-04-26 2006-04-06 Electrics And Telecommunications Research Insitute Apparatus and method for reducing power consumption by adjusting backlight and adapting visual signal
US20040222954A1 (en) * 2003-04-07 2004-11-11 Lueder Ernst H. Methods and apparatus for a display
US20040257352A1 (en) * 2003-06-18 2004-12-23 Nuelight Corporation Method and apparatus for controlling
US7859494B2 (en) * 2004-01-02 2010-12-28 Samsung Electronics Co., Ltd. Display device and driving method thereof
JP4179262B2 (ja) * 2004-10-06 2008-11-12 ソニー株式会社 情報処理装置および方法、並びにプログラム
US7760908B2 (en) * 2005-03-31 2010-07-20 Honeywell International Inc. Event packaged video sequence
KR100707638B1 (ko) * 2005-04-28 2007-04-13 삼성에스디아이 주식회사 발광 표시장치 및 그의 구동 방법
US20070070069A1 (en) * 2005-09-26 2007-03-29 Supun Samarasekera System and method for enhanced situation awareness and visualization of environments
EP1966753A2 (en) * 2005-12-22 2008-09-10 Koninklijke Philips Electronics N.V. Script synchronization by watermarking
EP2018062A4 (en) * 2006-04-21 2010-08-04 Sharp Kk DATA TRANSMISSION METHOD AND DEVICE, AND AUDIOVISUAL ENVIRONMENT MANAGEMENT DEVICE, SYSTEM AND METHOD

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1454010A (zh) * 2002-04-25 2003-11-05 三星电子株式会社 利用内容描述元数据转换显示装置中色温的方法及其系统
JP2003324402A (ja) * 2002-05-07 2003-11-14 Nippon Hoso Kyokai <Nhk> 外部機器連動型コンテンツ生成装置、その方法及びそのプログラム、外部機器連動型コンテンツ再生装置、その方法及びそのプログラム
CN1525763A (zh) * 2002-12-12 2004-09-01 三星电子株式会社 产生用户偏爱数据的方法和装置及转换色彩的方法和装置

Also Published As

Publication number Publication date
KR101078641B1 (ko) 2011-11-01
JP5781435B2 (ja) 2015-09-24
EP2301245A2 (en) 2011-03-30
EP2301245A4 (en) 2013-07-10
JP2012511837A (ja) 2012-05-24
WO2010008139A2 (en) 2010-01-21
KR20100012013A (ko) 2010-02-04
CN102598554A (zh) 2012-07-18
US20110123168A1 (en) 2011-05-26
WO2010008139A3 (en) 2012-04-12

Similar Documents

Publication Publication Date Title
CN102598554B (zh) 对感觉装置使用元数据的多媒体应用系统和方法
US20110190911A1 (en) Data transmitting apparatus, data transmitting method, audio-visual environment controlling apparatus, audio-visual environment controlling system, and audio-visual environment controlling method
CN100596208C (zh) 环境光脚本命令编码和动态控制环境光源的方法
CN103763456B (zh) 用于图像数据变换的方法和装置
CN103187030B (zh) 图像显示设备和方法、供电设备和方法、内容亮度调整方法
CN1977542B (zh) 利用感知规律提取主色以产生来自视频内容的环境光
CN102783132B (zh) 用于定义颜色状态的装置和方法
CN100584037C (zh) 从通过未渲染颜色空间映射的视频内容中导出的环境光的无闪烁自适应阈值处理方法
CN103491388B (zh) 视频发送器和视频接收器
JP2012524452A (ja) 感覚効果のためのメタデータ提供方法及び装置、感覚効果のためのメタデータが記録されたコンピュータ読み取り可能な記録媒体、感覚再生方法及び装置
CN102282849A (zh) 数据发送装置、数据发送方法、视听环境控制装置、视听环境控制方法以及视听环境控制系统
MX2012009594A (es) Dispositivo de reproduccion de contenido, receptor de television, metodo de reproduccion de contenido, programa de reproduccion de contenido y medio de grabacion.
JP2007510347A (ja) 照明に対する自動表示適合
KR20110111251A (ko) 감각 효과를 위한 메타데이터 제공 방법 및 장치, 감각 효과를 위한 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체, 감각 재생 방법 및 장치
CN105988369B (zh) 一种内容驱动的智能家居控制方法
KR100881723B1 (ko) 미디어 실감 재현을 위한 디바이스 연동/제어 정보 생성장치 및 방법
CN106233743A (zh) 通信装置或通信方法以及计算机程序
CN100559850C (zh) 用于主色提取的方法
US20040174326A1 (en) Illumination service providing method, illumination apparatus, recording medium, and reproduction apparartus
KR102408001B1 (ko) 유기 발광 다이오드 디스플레이 장치 및 그의 동작 방법
WO2020250818A1 (ja) 受信装置、受信方法、送信装置および送信方法
US20230109234A1 (en) Display device
US20090158353A1 (en) System and method for user-customized type media service based on single-media multi-devices
WO2019087775A1 (ja) 再生装置、再生方法、プログラム、および記録媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant