JP5485913B2 - 環境内のムード及びソーシャルセッティングに適した雰囲気を自動生成するためのシステム及び方法 - Google Patents

環境内のムード及びソーシャルセッティングに適した雰囲気を自動生成するためのシステム及び方法 Download PDF

Info

Publication number
JP5485913B2
JP5485913B2 JP2010542716A JP2010542716A JP5485913B2 JP 5485913 B2 JP5485913 B2 JP 5485913B2 JP 2010542716 A JP2010542716 A JP 2010542716A JP 2010542716 A JP2010542716 A JP 2010542716A JP 5485913 B2 JP5485913 B2 JP 5485913B2
Authority
JP
Japan
Prior art keywords
atmosphere
mood
locations
social
sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010542716A
Other languages
English (en)
Other versions
JP2011514541A (ja
Inventor
デ スライス バルテル エム ファン
ロナルドゥス エム アールツ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV, Koninklijke Philips Electronics NV filed Critical Koninklijke Philips NV
Publication of JP2011514541A publication Critical patent/JP2011514541A/ja
Application granted granted Critical
Publication of JP5485913B2 publication Critical patent/JP5485913B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63JDEVICES FOR THEATRES, CIRCUSES, OR THE LIKE; CONJURING APPLIANCES OR THE LIKE
    • A63J17/00Apparatus for performing colour-music
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/105Controlling the light source in response to determined parameters
    • H05B47/115Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/105Controlling the light source in response to determined parameters
    • H05B47/115Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings
    • H05B47/12Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings by detecting audible sound
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/155Coordinated control of two or more light sources
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02BCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
    • Y02B20/00Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
    • Y02B20/40Control techniques providing energy savings, e.g. smart controller or presence detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、部屋等の環境内のムード及びソーシャルセッティングに適した、音楽と組み合わせられた照明雰囲気のような雰囲気の自動生成に関する。
将来の雰囲気生成システムは、高度な照明、音楽再生、電子表示の内容及び場合により匂いでさえも含む複数の雰囲気モダリティの一体制御を提供し、それ故、家、小売店又はホスピタリティ環境等の環境内に複雑な雰囲気を作り出すことを可能にするだろう。研究は、人々がシーンセッティング及び雰囲気生成の必要性を増加させることを示した。特に、ソーシャルイベントに関して、人々は、特定の瞬間でのソーシャルセッティングの状態及びムードに適合する刺激的な雰囲気を好む。解決されるべき重要な問題は、どのようにして雰囲気生成システムを容易に制御するか、及び、どのようにして現在のソーシャルセッティング、ソーシャルアクティビティ及びムードに雰囲気を調節するかである。
本発明の目的は、環境内のムード及びソーシャルセッティングに適した雰囲気を自動的に生成することができる新規なシステム及び方法を提供することにある。
本目的は独立請求項により解決される。他の実施形態は従属請求項により示される。
本発明の基本的概念は、或る環境内の音のオーディオ解析に基づいて、雰囲気生成システムで雰囲気を自動的に生成することにある。バー、ディスコ、店舗等の環境内の音は、現在の環境内のムード及びソーシャルセッティングの指標であり、例えば、笑い声は、楽しいソーシャルセッティング及びムードに対応する。また、ソーシャルセッティング及びムードは環境内の音楽を有し、従って、音楽は本発明による自動的に生成された雰囲気に影響を及ぼす。例えば、人々は、通常、ポピュラー音楽に対してクラシック音楽とは異なる照明を期待する。本発明は、ユーザが、雰囲気、例えば、店舗、バー等の環境内のムード及びソーシャルセッティングに依存して複雑な照明システムで自動的に生成された照明雰囲気の生成及び調節に対処しなくてもよいという利点を与える。本発明との関連で、環境内の雰囲気は、照明、音、像、匂い及び温度等の異なる態様を有することが留意されるべきである。それ故、本発明の雰囲気の自動生成は、照明システム又は照明ユニット、サウンド生成システム、匂い発生器、電子ピクチャディスプレイ及び温度調節システムのような、環境内の雰囲気に影響を及ぼすための全ての技術手段の自動制御を有する。
本発明の一実施形態は、或る環境内のムード及びソーシャルセッティングに適した雰囲気を自動的に生成するためのシステムであって、前記環境から音を受信し、受信した前記音を示すオーディオ信号を生成する音受信ユニットと、前記環境内のムード及びソーシャルセッティングのための前記オーディオ信号を受信及び解析するオーディオ信号処理ユニットと、前記オーディオ信号の解析の結果に基づいて雰囲気を生成するための雰囲気生成システムのための制御信号を自動的に生成する雰囲気生成ユニットとを有する、システムを提供する。
このシステムは、或る環境、例えば部屋内のムード及びソーシャルセッティングに適した雰囲気の快適で自動的な生成を可能にする。これは、如何なるユーザインタラクションをも必要とせず、それ故、しばしば専門的な知識を必要とするような適切な雰囲気を生成及び調節するという複雑な仕事からユーザを解放する。本システムは、例えば、雰囲気生成システムに統合されるべきモジュールとして、又は、雰囲気生成システム、特に、環境内のムード及びソーシャルセッティングに適した雰囲気を生成するために、生成された制御信号を受信してこれらを内部で処理するための雰囲気生成システムの制御信号インタフェースと結合され得るスタンドアロンユニットとして実装されてもよい。
本発明の他の実施形態によれば、オーディオ信号処理ユニットは、受信したオーディオ信号に含まれるオーディオコンテンツを解析し、解析されたオーディオコンテンツを分類するオーディオコンテンツ解析及び分類ユニットを有し得る。オーディオコンテンツの例えばポピュラー又はクラシック音楽、ノイズ又は観衆のノイズ、及び、静寂への分類は、ほとんどの場合において、様々な環境内のムード及びソーシャルセッティングの間で異なる信頼性のある適切な基準として機能する。
オーディオコンテンツ解析及び分類ユニットは、本発明の他の実施形態において、以下の一般的なオーディオ分類、即ち、ポピュラー音楽、クラシック音楽、スピーチ、ノイズ、観衆のノイズ、静寂、笑い声のうち少なくとも1又はそれ以上にオーディオコンテンツを分類する特徴抽出及びオーディオ分類アルゴリズムを有し得る。斯様なアルゴリズムは、ソフトウェア又はハードウェアのいずれかに実行され得る。本アルゴリズムは、オーディオコンテンツから特徴を抽出することを可能にし、これは、異なるオーディオ分類に対して特異なものである。そして、抽出された特徴は、オーディオコンテンツを一般的なオーディオ分類に割り当てるように処理され得る。
本発明の他の実施形態において、特徴抽出及びオーディオ分類アルゴリズムは、一般的なオーディオ分類を下位分類に更に分類することにより分類を詳細化するように更に適合され得る。例えば、本アルゴリズムは、その音楽がジャズ、ロック、レゲエ、フォーク、R&Bであるかどうかを決定するために、最初のステップにおいてポピュラー音楽として分類されたオーディオコンテンツのより多くの特定の解析を実行し得る。これは、自動的に生成された雰囲気を或る環境内のムード及びソーシャルセッティングに良好に適合させることを支援し得る。
オーディオコンテンツ解析及び分類ユニットは、本発明の一実施形態において、存在情報及び/又は言語表現に対してオーディオコンテンツを解析し、解析された存在情報及び/又は言語表現に基づいて環境内のソーシャルムードを分類するように更に適合され得る。例えば、オーディオコンテンツは、笑い声若しくは音声、又は、ユーザにより話された制御コマンドのような或る単語に対して解析され得る。後者は、ユーザにより特定の雰囲気を選択的に生成することを可能にする。例えば、ユーザが大声で話し、"寒い雰囲気"等の制御コマンドを用いるときには、本システムは、このユーザが話したコマンドを受信して解析し、例えば、青色照明を生成するように照明システムを制御し、部屋の温度を低くするように空調システムを制御することにより、"寒い"雰囲気を自動的に生成する。
他の実施形態によれば、雰囲気生成ユニットは、例えば音楽、画像、ビデオのような雰囲気特性及び雰囲気コンテンツに適合したムード分類を含むルックアップテーブルにより、分類されたソーシャルムードに適合する雰囲気に、分類されたソーシャルムードをマッピングするように更に適合され得る。例えば、本システムは、ストレージ、特にデータベースの形式で複雑なルックアップテーブルを含み得る。本システムがソーシャルムードを分類するときには、これは、分類されたソーシャルムードに適合する照明雰囲気を生成するために、入力パラメータとしての分類されたソーシャルムードでデータベースクエリを自動的に実行し、出力としてのデータベースから、照明システムのための制御パラメータのセットを受信し得る。ルックアップテーブルは、ユーザにより、又は、例えばインターネット等のネットワークを介してアップデートを自動的にダウンロードすることにより、生成及び更新され得る。
本発明の他の実施形態において、雰囲気生成ユニットは、以下のシステム、即ち、照明雰囲気を生成するための照明システム、オーディオ、例えばサウンドスケープの再生、音楽トラック又はプレイリスト、即ち音楽トラックの順番付けられたセットを生成するためのオーディオレンダリングシステム、電子画像及びビデオを表示するための電子表示システム、人工的な匂いを生成するための匂い生成システム、温度調節システムのうちの1又はそれ以上を制御することにより、雰囲気を自動的に生成するように更に適合され得る。
本発明の他の実施形態によれば、雰囲気生成ユニットは、音受信ユニットで受信した音のダイナミクスに雰囲気を適合させるように更に適合され得る。これは、環境におけるダイナミックな雰囲気の生成を実行することを可能にする。例えば、本システムは、部屋において話している音の大きさが照明強度を僅かに増大させることにより増大するときには、生成された雰囲気を自動的に変化させ得る。また、本システムは、例えば、話している人に依存して特定の色を生成し得る。これは、例えば、会議の間において、異なる人が話しているときに役立ち得る。斯様なアプリケーションにおいて、本システムは、例えば実際に話している話者を強調するスポットライトの色を自動的に変化させ、その結果、聞き手が異なる話者をより容易に区別することができる。
本発明の他の実施形態によれば、音受信ユニットは、環境内の異なる場所から音を受信し、異なる場所から受信した音を示すオーディオ信号を生成するように更に適合され、オーディオ信号処理ユニットは、環境内の異なる場所でのソーシャルセッティングに関するオーディオ信号を受信して解析するように更に適合され、雰囲気生成ユニットは、異なる場所から受信した音を示す異なるオーディオ信号の解析の結果に基づいて、環境内の異なる場所で異なる雰囲気を生成するための雰囲気生成システムのための制御信号を自動的に生成するように更に適合される。
これは、或る環境内の全体音が受信及び処理されるので、環境のための1つの雰囲気の生成とは異なり、自動的に生成された雰囲気を、環境内の異なる場所により良好に適合させることを可能にする。この実施形態は、局部的な雰囲気、例えば、第1の雰囲気が適切である第1の人が話す第1の場所における第1の雰囲気、及び、第2の雰囲気が適切である第2の人が話す第2の場所における第2の雰囲気の生成を可能にする。
本発明の他の実施形態によれば、本システムは、環境の場所内の人の存在を検出するセンサと、センサ検出された場所内の人の存在の大きさを決定するように適合されるセンサ信号処理ユニットと、人の存在の決定された大きさに基づいて雰囲気を生成するための雰囲気生成システムのための制御信号を自動的に生成するように適合される雰囲気生成ユニットとを有し得る。
本システムに対するこれらの追加のセンサ入力は、ソーシャルセッティング及びムードの検出の性能を向上させるのを支援し、他のセンサは補助入力を提供し得る。例えば、赤外線センサ及びコンピュータ視覚化可能なカメラは、人の存在、人の数及びソーシャルセッティングの検出を向上させる。
本発明の他の実施形態によれば、本システムは、システムの自動雰囲気調節動作を引き起こすために、システムの自動モードを可能にするためのユーザ入力を受信するように適合されたユーザインタフェースを更に有し得る。
それ故、ユーザは、雰囲気生成システムのモードを、或る環境内のムード及びソーシャルセッティングに適した雰囲気の自動生成及び調節に容易にアクティブにすることができる。
ユーザインタフェースは、本発明の他の実施形態において、所望量のバリエーション(どの程度まで雰囲気がソーシャルセッティング及びムードに対して調節されるか)又は所望のダイナミクス(時間に渡る段階的な変化から、1分毎にダイナミックに調節することまで)のような、システムの自動雰囲気調節動作の特定の特性を調節するためのユーザ入力を受信するように適合され得る。
本システムは、本発明の一実施形態によれば、予め規定された雰囲気を生成するために、予め規定された入力を、例えば、ユーザインタフェースを介して、又は、信号として、又は、予め規定された音として受信し、受信した予め規定された入力に対応する予め規定された雰囲気を選択し、雰囲気生成システムのための対応する制御信号を生成するように更に適合され得る。これは、幾つかの固定されたセッティング又はパーソナル嗜好セッティングにより、システムの自動化を支配することを可能にする。例えば、ユーザは、照明システムの場合においては、予め規定された入力をユーザインタフェースを介して入力することにより、"嗜好選択ボタン"を押すことにより、"ユーザ嗜好セッティング"のような特定のコマンドを大声で言うことにより、又は、キーのボタンを押すことに基づき特定のコードを送信する、電子キーのような技術的入力手段を用いることにより、"薄暗いウォームライト"のような予め規定されたセッティングをすぐに選択し得る。また、特徴的な音は、予め規定された入力、例えば掃除機の音として機能し得る。それ故、メイドが部屋を掃除しており、この部屋においてシステムが照明システムを制御するために導入されている場合には、システムは、掃除機の音を予め規定された音として受信し、予め規定された雰囲気"クリーニングのために良好な照明状態"を自動的に選択し得る。それ故、予め規定された入力の処理は、音の場合においては、オーディオ信号処理ユニットで実行され得る。予め規定された入力が、ユーザインタフェースから、又は、例えば電子キーを伴って通信接続を介して受信されるときには、これは、雰囲気生成ユニットを直接的に制御し得る他の入力処理ユニットにより処理され得る。
本発明の他の実施形態によれば、本システムは、例えば袖口又は宝石に取り付けられたタグ等の個人識別手段から信号を受信し、雰囲気を生成するときに、受信した信号を考慮に入れるように更に適合され得る。これは、人々をより正確に区別することを可能にし、例えば、人を検出するだけでなく、検出された人が誰なのかを検出することもできる。識別手段からの信号でその人に関する情報を受信するか、又は、受信した信号により人を識別するいずれかのシステムが設けられ、例えば、信号が人の識別コードを含むときには、システムは、その識別コードで検索可能な人に関する情報を含むデータベースにアクセスし得る。
更に、本発明の一実施形態は、或る環境内のムード及びソーシャルセッティングに適した雰囲気を自動的に生成するための方法であって、前記環境から音を受信し、受信した前記音を示すオーディオ信号を生成するステップと、前記環境におけるソーシャルセッティングのための前記オーディオ信号を受信及び解析するステップと、前記オーディオ信号の解析の結果に基づいて雰囲気を生成するための雰囲気生成システムのための制御信号を自動的に生成するステップとを有する、方法を提供する。
この方法は、例えばメモリに格納され、プロセッサ、例えばオーディオ信号解析のためにプログラムされたデジタル信号プロセッサにより実行され得る、アルゴリズムとして実装される。
本発明の他の実施形態によれば、コンピュータプログラムが提供され、これは、コンピュータにより実行されたときに本発明の前記方法を実行することが可能である。それ故、本発明の方法は、例えば既存の雰囲気生成システム、特に照明システムに適用され、これは、新規な機能で拡張され、例えばダウンロードコネクション又は記録担体を介して供給されるコンピュータプログラムを実行するように適合される。
本発明の他の実施形態によれば、本発明のコンピュータプログラムを格納する記録担体、例えば、CD−ROM、DVD、メモリカード、ディスケット、又は、電子アクセスのためのコンピュータプログラムを格納するのに適した類似のデータが提供され得る。
最後に、本発明の一実施形態は、本発明の方法を実行するためにプログラムされ、コンピュータのサウンドカードに接続されたマイクロフォン等の音受信手段と、雰囲気を生成するための雰囲気生成システムとの通信のためのインタフェースとを有する、コンピュータを提供する。本コンピュータは、例えば、自動的に生成された雰囲気に従って制御信号を生成し、雰囲気生成システムにインタフェースを介して制御信号を出力するために、雰囲気生成システムを制御するように適合されたパーソナルコンピュータ(PC)であり得る。
本発明のこれら及び他の態様は、後述される実施形態から明らかになり、その実施形態を参照して説明されるだろう。
本発明は、例となる実施形態を参照して以下でより詳細に述べられるだろう。しかしながら、本発明は、これらの例となる実施形態に限定されるものではない。
本発明の環境内のムード及びソーシャルセッティングに適した雰囲気を自動的に生成するためのシステムの一実施形態を示す。 図1に示されたシステムのオーディオ信号処理ユニットの一実施形態を示す。 図1に示されたシステムの雰囲気生成ユニットの一実施形態を示す。 図3に示された雰囲気生成ユニットに実装されたルックアップテーブルの位置実施形態を示す。
以下において、機能的に類似又は同一の要素は同一の参照番号を有し得る。
図1は、雰囲気生成システム26を示しており、この雰囲気生成システム26は、特定のソーシャルコンテンツ及びアクティビティに自動的に応答可能であり、環境12において生成された雰囲気を適宜調節することが可能である。本発明の環境12内のムード及びソーシャルセッティングに適した雰囲気を自動的に生成するためのシステム10は、制御信号24により雰囲気生成システム26を制御する。制御信号24は、有線通信リンク又は無線通信リンクのいずれかによりシステム10から雰囲気生成システム26に出力され得る。
環境12は、例えばビル内の部屋である。ビルに、雰囲気生成システム26が部屋内の所望の雰囲気を生成するために導入される。これを実現するために、雰囲気生成システム26は、照明システム32、オーディオレンダリングシステム34、電子ピクチャ及びビデオを表示するための電子ディスプレイシステム36、人工的な匂いを生成するための匂い生成システム、及び/又は、空調システム40を有し得る。照明システム32は、幾つかの半導体照明ユニットを有する複雑な照明システムであり、部屋12内の異なる場所121,122,123で異なる色相、彩度及び明度をもつ照明を生成するように適合され得る。斯様な照明システムに関する一例は、出願人のLivingColorsTMランプである。これは、無線遠隔制御ユニットにより、生成された照明雰囲気の色相、彩度及び明度を調節することを可能にする。オーディオレンダリングシステム34は、マルチチャネルオーディオシステムである。これは、周囲のミュージックサウンドスケープを生成することができる。生成されたサウンドスケープは、ハードディスク等のストレージから、特にネットワーク接続を介して、読み込まれ得る。電子ディスプレイシステム36は、LCD又はプラズマディスプレイパネルのような、1又はそれ以上のフラットパネルディスプレイを有し得る。これは、デジタルフォト又はビデオデータを有するコンピュータ又はビデオプレーヤ等のビデオソースから提供され得る。匂い生成システム38は、香水等の多数の匂いを有する。これは、コンピュータ制御されて散布され得る。空調システム40は、部屋12に導入された、コンピュータ制御された加熱及び換気システムであり得る。全てのシステム32〜40は、コンピュータにより実行され得る雰囲気生成コントローラ30により制御される。コンピュータは、システム10から受信した制御信号24を処理し、制御信号で表わされる部屋12内の雰囲気が生成されるような態様で、異なるシステム32〜40を制御するように構成される。
システム10は、音受信ユニット14を有する。これは、部屋12内の異なる場所121,122,123に配置されたマイクロフォンのアレイと、マイクロフォンからのアナログ電気信号をデジタルオーディオ信号18に変換するためのアナログデジタル変換ユニットとを有する。音受信ユニット14は、更なる音処理に対して必要とされない音部分をキャンセルするために、アナログ又はデジタルフィルタ及び増幅器のような、幾つかの音信号フィルタリング及び処理手段を有する。オーディオ信号18は、更に処理するためのオーディオ信号処理ユニット20に出力される。オーディオ信号処理ユニット20は、より詳細に後述されるような、部屋12内のムード及びソーシャルセッティングのための受信したオーディオ信号を解析する。解析の結果は、信号28として、システム10の雰囲気生成ユニット22に出力される。雰囲気生成ユニット22は、解析結果を含む受信信号28に基づいて雰囲気生成システム26のための制御信号24を生成する。制御信号24を生成するプロセスはより詳細に後述される。システム10は、センサ47、例えば赤外線センサ又はコンピュータ視覚化可能カメラを有し、これは、部屋12の場所123での人の存在を検知し、場所123内又はその近くに配置され得る。センサ47からの信号は、センサ信号処理ユニット48に出力される。センサ信号処理ユニット48は、受信した信号から、検知された場所123における人の存在の大きさを処理する。この大きさは、信号処理ユニット48から、更に処理するためのオーディオ信号処理ユニット20に転送され、ソーシャルセッティングを検出する性能を向上させる。
図2は、オーディオ信号処理ユニット20をより詳細に示している。ユニット20は、オーディオ信号18を解析及び分類するためのオーディオコンテンツ解析及び分類ユニット42を有する。特に2つのタイプの情報がオーディオ解析から収集され得る。これは、部屋内に存在する人の数及びタイプ、話している人の性別及び年齢の推定、並びに、話している音の大きさ、話している速度、話し方(ささやき声、会話、叫び声、歌、鼻歌)、感情(楽しみ、怒り、悲しみ)等の部屋内のソーシャルムードを検出するための言語表現のような、部屋内のムード及びソーシャルセッティングを評価することを可能にする。追加的に、再生される(ライブ)音楽が、雰囲気を生成及び調節するために検出及び分類されてもよい。
解析及び分類を実行するために、オーディオコンテンツ解析及び分類ユニット42は、オーディオ信号18に対して特徴抽出及びオーディオ分類アルゴリズム44を実行する。アルゴリズム44によれば、オーディオ信号処理ユニット20は、それぞれ受信したオーディオ信号18のオーディオコンテンツから特性を抽出する。これは、その後、各オーディオ信号のオーディオコンテンツを分類するために用いられる。アルゴリズムは、2ステップの解析及び分類プロセスを実行し得る。第1のステップにおいて、オーディオコンテンツは、オーディオコンテンツから特徴を抽出して解析することにより、一般的なオーディオ分類のための特性である、ポピュラー音楽、クラシック音楽、音声、ノイズ、観衆のノイズ、静寂及び笑い声のような一般的なオーディオ分類のうち1つに分類され得る。第1のステップは、オーディオコンテンツを粗く分類することを可能にする。そして、第2のステップにおいて、アルゴリズムは、オーディオコンテンツから特徴を更に抽出して解析することにより、粗い分類を絞り込む。例えば、アルゴリズムは、オーディオコンテンツがジャズ、ロック、レゲエ、フォーク、R&B等であるかどうかを決定するために、オーディオコンテンツのより詳細な解析を行うことにより、ポピュラー音楽として第1のステップにおいて分類されたオーディオコンテンツを更に解析する。結果として、分類は、信号28として、雰囲気生成ユニット22に出力される。
また、オーディオ信号処理ユニット20は、センサ信号処理手段48からの追加の入力を受信し、これは、部屋内のソーシャルセッティングの検出を向上させ得る。例えば、オーディオ信号18のオーディオコンテンツの解析及び分類を通じて検出された部屋内の人の数及びタイプのようなソーシャルセッティングは、部屋内に存在する人の数の大きさである、センサ信号処理手段48から受信した追加入力により確認され得る。あるいは、前記追加入力は、部屋12内の特定の場所121,122,123での人の数及びタイプを検出するために用いられてもよい。これは、オーディオコンテンツから検出されるべきであるときには、非常に時間を浪費するか又は高い計算能力を要する。
図3は、雰囲気生成ユニット22をより詳細に示している。雰囲気生成ユニットは、どのタイプの雰囲気特性又は雰囲気コンテンツ成分が特定のソーシャルムードに適合するかについての知識をもつことを必要とする。この知識は、変換ユニット221及び雰囲気コンテンツアクセスユニット222により、雰囲気生成ユニット22において実行される。変換ユニット221は、受信した分類結果を雰囲気特性に変換するように適合され、ムード分類が図4において例として示された色にマッチするルックアップテーブル46を有する。同じことが、音楽ジャンルを示すメタデータ(サービス)が存在するミュージカルコンテンツに対して行われ、例えば、穏やかなムードは、クラシック音楽に適合され、女の子らしいムードは少年バンドに適合する(図4の例となるルックアップテーブルの第3の列参照)。雰囲気特性は、雰囲気コンテンツアクセスユニット222に出力される。雰囲気コンテンツアクセスユニット222は、特に雰囲気生成システム26に対して適した多くの異なる雰囲気を含むデータベースから、対応する雰囲気を生成するために、雰囲気コンテンツ、特に雰囲気生成システム26の種々のシステム32〜40を制御するための制御セットを取得する。雰囲気コンテンツアクセスユニット222は、取得した雰囲気コンテンツを変換ユニット221に出力する。変換ユニット221は、受信した雰囲気コンテンツに対応する制御信号24を生成し、これらの信号24を雰囲気生成システム26に出力する。
要約すると、システム10は、実際には、典型的な例により以下で説明されたように動作する。オーディオ解析ベースのソーシャルムード分類に基づいて、雰囲気生成システムのための制御信号は、雰囲気が自動的に生成されるように生成される。これは、或る環境内のソーシャルセッティングに適合する。例えば、数名の人がしばらくの間ひそひそ話をしている場合には、システム10は、静寂又は神秘的な環境を自動的に生成する。例えば、光を薄暗くし、神秘的な音楽又は"ppssst"サウンドの再生し、及び、暗い顔及び目の画像をTV又はフォトフレームディスプレイに示す。楽しい雰囲気の場合において、人は、大声で笑うか又は歌うときには、システム10は、楽しい音楽の再生、及び、場合により笑みを浮かべるか又は愉快な顔の画像(これは、個人又は家族のフォトコレクションからもたらされ得る)を提示することを含む、この喜びに適したカラフルな雰囲気及び環境を作り出し得る。多くの声が検出された場合には、システム10はこれをパーティ又はレセプションとして解釈し、適切な照明セッティングを生成する。ユーザの視点から、全てのこれらの変更がわずかであり控えめであることが重要である。これらの例において、ダイナミックな雰囲気は、ソーシャルインタラクションを強化すべきである。即ち、これは、これらのソーシャルアクティビティから人の気を散らすべきではない。歌っていることが検出されたときには、システムは、ハミングしている人の合唱団を生成するか、又は、歌の最後に拍手及び喝采を送るディスプレイ上の観衆を示す。
図1において示されるように、システム10は、部屋12の異なる場所121,122,123のそれぞれから受信した幾つかの音161,162,163を処理し得る。これは、異なる音161,162,163のオーディオ解析及び分類に基づいて、異なる場所121,122,123で異なる雰囲気、即ち局所的な雰囲気を生成することを可能にする。例えば、システム10は、人Aが話しているときには特定の色を生成し、人Bが話しているときには異なる色を生成する。マイクロフォンのアレイ又は他の手段を用いて、人の場所を突き止めて、局所的な雰囲気を生成することが可能となる。例えば、最も笑っているか又は最も大声の人は、カラフルな局所的オーラが与えられる。
システム10は、環境12内の音161,162,163に基づいてダイナミックな雰囲気を生成するように適合されてもよい。例えば、人が部屋内で話している場合に、システムは、"会話セッティング"をアクティブにするだけでなく、1又はそれ以上の雰囲気パラメータをその会話の特性に即座に適合させてもよい。例えば、会話の声の大きさが増大するときには、照明強度は僅かに増大し得る。
本発明において提案された機能は、モードとしてユーザにアクセス可能であり、例えば、ユーザは、例えば自動照明調節動作を引き起こすために、雰囲気生成システム、例えば照明システムを"自動"にすることができる。加えて、ユーザは、所望量のバリエーション(どの程度まで、雰囲気がソーシャルセッティング及びムードに調節されるか)又は所望のダイナミクス(時間に渡る段階的な変化から、1分ごとにダイナミックに調節するまで)のような、自動照明調節動作の特性を調節することができる。
短く要約すると、本発明は、ソーシャルセッティング及びソーシャルムード(音の大きさ、速度、話し方、静寂の期間、感情のような言語表現の特性)に関する情報を示す特性のための(1又は複数のマイクロフォンにより取得された)オーディオ信号を解析することを提案する。これらの態様に基づいて、ソーシャルセッティング及びソーシャルムードは分類され、雰囲気生成システムは、分類された"ソーシャルムード"に基づいて雰囲気を生成し得る。必要であれば、音楽又は画像のような特定の雰囲気コンテンツは、(例えば、ユーザコレクション又はダウンロードから)取得され得る。
本発明の機能の少なくとも幾つかは、ハードウェア又はソフトウェアにより実行され得る。ソフトウェアにおける実行の場合において、本発明を実行する1又は複数のアルゴリズムを処理するために1又は複数の標準的なマイクロフォン又はマイクロコントローラが用いられてもよい。
"有する"という用語は、他の要素又はステップを除外するものではなく、単数表記は、複数を除外するものではないことが留意されるべきである。更に、特許請求の範囲における如何なる参照符号も、本発明の範囲を限定するものとして考慮されるべきではない。

Claims (12)

  1. 部屋内のムード及びソーシャルセッティングに適した雰囲気を自動的に生成するためのシステムであって、
    前記部屋内の複数の場所から音を受信し、前記複数の場所のそれぞれから受信した音を示すオーディオ信号を生成する音受信ユニットと、
    前記複数の場所のそれぞれでのムード及びソーシャルセッティングのための前記オーディオ信号を受信及び解析するオーディオ信号処理ユニットと、
    前記複数の場所のそれぞれから受信した音を示す前記オーディオ信号の解析の結果に基づいて、前記複数の場所のそれぞれにおいて局所的な雰囲気を生成するための雰囲気生成システムを制御するための制御信号を自動的に生成する雰囲気生成ユニットとを有する、システム。
  2. 前記雰囲気生成ユニットは、雰囲気特性及び雰囲気コンテンツにマッチしたムード分類を含むルックアップテーブルにより、分類されたソーシャルムードに適合する雰囲気に、分類されたソーシャルムードをマッピングする、請求項に記載のシステム。
  3. 前記雰囲気生成ユニットは、前記音受信ユニットで受信した前記音のダイナミクスに雰囲気を適合させる、請求項1又は請求項2に記載のシステム。
  4. 前記部屋の場所内の人の存在を検出するセンサと、
    センサ検出された前記場所内の人の存在の大きさを決定するセンサ信号処理ユニットと、
    人の存在の決定された前記大きさに基づいて前記雰囲気を生成するための雰囲気生成システムのための制御信号を自動的に生成する雰囲気生成ユニットとを更に有する、請求項1〜のうちいずれか一項に記載のシステム。
  5. 当該システムの自動雰囲気調節動作を引き起こすために、当該システムの自動モードを可能にするためのユーザ入力を受信するユーザインタフェースを更に有する、請求項1〜のうちいずれか一項に記載のシステム。
  6. 前記ユーザインタフェースは、当該システムの前記自動雰囲気調節動作の特定の特性を調節するためのユーザ入力を受信する、請求項に記載のシステム。
  7. 予め規定された雰囲気を生成するために、予め規定された入力を受信し、受信した前記予め規定された入力に対応する前記予め規定された雰囲気を選択し、前記雰囲気生成システムのための対応する制御信号を生成する、請求項1〜のうちいずれか一項に記載のシステム。
  8. 個人識別手段から信号を受信し、前記雰囲気を生成するときに、受信した前記信号を考慮に入れる、請求項1〜のうちいずれか一項に記載のシステム。
  9. 部屋内のムード及びソーシャルセッティングに適した雰囲気を自動的に生成するための方法であって、
    システムによって、前記部屋内の複数の場所から音を受信し、前記複数の場所のそれぞれから受信した音を示すオーディオ信号を生成する第1のステップと、
    前記システムによって、前記複数の場所のそれぞれでのムード及びソーシャルセッティングのための前記オーディオ信号を受信及び解析する第2のステップと、
    前記システムによって、前記複数の場所のそれぞれから受信した音を示す前記オーディオ信号の解析の結果に基づいて、前記複数の場所のそれぞれにおいて局所的な雰囲気を生成するための雰囲気生成システムを制御するための制御信号を自動的に生成する第3のステップとを有する、方法。
  10. コンピュータにより実行されたときに、請求項に記載の方法を実行可能なコンピュータプログラム。
  11. 請求項1に記載のコンピュータプログラムを格納する記録担体。
  12. 請求項に記載の方法を実行するようにプログラムされ、雰囲気生成システムとの通信のためのインタフェースを有する、コンピュータ。
JP2010542716A 2008-01-16 2009-01-13 環境内のムード及びソーシャルセッティングに適した雰囲気を自動生成するためのシステム及び方法 Active JP5485913B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP08100563.9 2008-01-16
EP08100563 2008-01-16
PCT/IB2009/050120 WO2009090600A1 (en) 2008-01-16 2009-01-13 System and method for automatically creating an atmosphere suited to social setting and mood in an environment

Publications (2)

Publication Number Publication Date
JP2011514541A JP2011514541A (ja) 2011-05-06
JP5485913B2 true JP5485913B2 (ja) 2014-05-07

Family

ID=40551940

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010542716A Active JP5485913B2 (ja) 2008-01-16 2009-01-13 環境内のムード及びソーシャルセッティングに適した雰囲気を自動生成するためのシステム及び方法

Country Status (8)

Country Link
US (1) US20110190913A1 (ja)
EP (1) EP2229228B1 (ja)
JP (1) JP5485913B2 (ja)
KR (1) KR101687942B1 (ja)
CN (1) CN101918094B (ja)
RU (1) RU2513772C2 (ja)
TW (1) TW200944277A (ja)
WO (1) WO2009090600A1 (ja)

Families Citing this family (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1989926B1 (en) * 2006-03-01 2020-07-08 Lancaster University Business Enterprises Limited Method and apparatus for signal presentation
KR101114606B1 (ko) * 2009-01-29 2012-03-05 삼성전자주식회사 음악 연동 사진 캐스팅 서비스 시스템 및 그 방법
CN102395410B (zh) * 2009-04-15 2015-12-02 皇家飞利浦电子股份有限公司 用于适应性调节用户环境的方法和系统
US20110015765A1 (en) * 2009-07-15 2011-01-20 Apple Inc. Controlling an audio and visual experience based on an environment
CN102498752B (zh) * 2009-07-29 2015-01-14 皇家飞利浦电子股份有限公司 管理用于气氛产生系统的气氛程序
JPWO2011122522A1 (ja) * 2010-03-30 2013-07-08 日本電気株式会社 感性表現語選択システム、感性表現語選択方法及びプログラム
JP2011221605A (ja) * 2010-04-05 2011-11-04 Sony Corp 情報処理装置、情報処理方法及びプログラム
WO2011158143A1 (en) 2010-06-17 2011-12-22 Koninklijke Philips Electronics N.V. Display and lighting arrangement for a fitting room
JP5860905B2 (ja) * 2011-03-16 2016-02-16 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 息切れの症状評価
WO2013050925A1 (en) 2011-10-07 2013-04-11 Koninklijke Philips Electronics N.V. Adaptive control of ambience settings
JP6143768B2 (ja) 2011-11-07 2017-06-07 フィリップス ライティング ホールディング ビー ヴィ 照明システムをコントロールするための音声を使用したユーザーインターフェイス
JP5682543B2 (ja) * 2011-11-28 2015-03-11 トヨタ自動車株式会社 対話装置、対話方法及び対話プログラム
US20130166042A1 (en) * 2011-12-26 2013-06-27 Hewlett-Packard Development Company, L.P. Media content-based control of ambient environment
CN104285247B (zh) * 2012-05-08 2018-03-23 飞利浦灯具控股公司 用于交互式电子设备的照明应用
US9185780B2 (en) 2012-05-15 2015-11-10 Koninklijke Philips N.V. Lighting controller, lighting system and lighting control method
US9225307B2 (en) 2012-06-28 2015-12-29 Sonos, Inc. Modification of audio responsive to proximity detection
EP3702685A1 (en) 2012-08-28 2020-09-02 Delos Living LLC Environmental control system and method of operation such system
CN102833918B (zh) * 2012-08-30 2015-07-15 四川长虹电器股份有限公司 基于情绪识别的智能照明交互方法
CN105637981A (zh) * 2013-08-19 2016-06-01 飞利浦灯具控股公司 加强可消耗商品的体验
FR3011356A1 (fr) * 2013-09-30 2015-04-03 Fivefive Dispositif et procede de rendu multimedia
KR102149198B1 (ko) 2013-11-25 2020-08-28 엘지전자 주식회사 공기 조화기
CN103794205A (zh) * 2014-01-21 2014-05-14 深圳市中兴移动通信有限公司 自动合成适配音乐的方法及设备
CN103889109B (zh) * 2014-02-17 2016-05-11 武汉阿拉丁科技有限公司 一种情绪控制led灯光颜色和亮度变化的驱动装置
AU2015223112B2 (en) 2014-02-28 2020-07-09 Delos Living Llc Systems, methods and articles for enhancing wellness associated with habitable environments
CA2944458C (en) * 2014-03-31 2022-09-27 Meural Inc. System and method for output display generation based on ambient conditions
US11138443B2 (en) 2014-06-30 2021-10-05 Nec Corporation Guidance processing apparatus and guidance method
US9750116B2 (en) * 2014-07-29 2017-08-29 Lumifi, Inc. Automated and pre-configured set up of light scenes
CN104538027B (zh) * 2014-12-12 2018-07-20 复旦大学 语音社交媒体的情绪传播量化方法及系统
FR3030996A1 (fr) * 2014-12-17 2016-06-24 Awox Dispositif d'illumination, procede d'illumination et procede d'enregistrement d'une sequence lumineuse
CN107251031A (zh) 2015-01-13 2017-10-13 戴尔斯生活有限责任公司 用于监测和增强人体健康的系统、方法和制品
EP3251470A4 (en) * 2015-01-26 2018-08-22 Eventide Inc. Lighting systems and methods
US10768704B2 (en) 2015-03-17 2020-09-08 Whirlwind VR, Inc. System and method for modulating a peripheral device based on an unscripted feed using computer vision
US10031722B1 (en) * 2015-03-17 2018-07-24 Amazon Technologies, Inc. Grouping devices for voice control
US10655951B1 (en) 2015-06-25 2020-05-19 Amazon Technologies, Inc. Determining relative positions of user devices
US20160379638A1 (en) * 2015-06-26 2016-12-29 Amazon Technologies, Inc. Input speech quality matching
US10365620B1 (en) 2015-06-30 2019-07-30 Amazon Technologies, Inc. Interoperability of secondary-device hubs
JP6625365B2 (ja) * 2015-08-04 2019-12-25 株式会社ディーアンドエムホールディングス コンピュータで読み取り可能なプログラム、プレイリスト作成装置、およびワイヤレスオーディオシステム
US20170146963A1 (en) * 2015-11-25 2017-05-25 David Webster System and Method for Setting Moods and Experiences in a Space
WO2017162469A1 (en) 2016-03-22 2017-09-28 Philips Lighting Holding B.V. Enriching audio with lighting
CA3030169A1 (en) 2016-07-21 2018-01-25 Magic Leap, Inc. Technique for controlling virtual image generation system using emotional states of user
DK201600452A1 (en) * 2016-08-01 2018-03-05 Bang & Olufsen As Adaptable audio/visual immersion
US11338107B2 (en) 2016-08-24 2022-05-24 Delos Living Llc Systems, methods and articles for enhancing wellness associated with habitable environments
US10146100B2 (en) 2016-12-12 2018-12-04 Gracenote, Inc. Systems and methods to transform events and/or mood associated with playing media into lighting effects
US10150351B2 (en) * 2017-02-08 2018-12-11 Lp-Research Inc. Machine learning for olfactory mood alteration
CN106804076B (zh) * 2017-02-28 2018-06-08 深圳市喜悦智慧实验室有限公司 一种智能家居的照明系统
US10276190B2 (en) 2017-06-19 2019-04-30 International Business Machines Corporation Sentiment analysis of mental health disorder symptoms
WO2019046580A1 (en) 2017-08-30 2019-03-07 Delos Living Llc SYSTEMS, METHODS AND ARTICLES FOR EVALUATING AND / OR IMPROVING HEALTH AND WELL-BEING
CN108280920A (zh) * 2018-02-02 2018-07-13 成都科木信息技术有限公司 基于ar技术的旅游实景显示系统
US20220292518A1 (en) * 2018-03-16 2022-09-15 Wells Fargo Bank, N.A. Sentiment analysis data retrieval
WO2020011694A1 (en) * 2018-07-09 2020-01-16 Signify Holding B.V. Determining light effects to be rendered simultaneously with a content item
US10764701B2 (en) * 2018-07-30 2020-09-01 Plantronics, Inc. Spatial audio system for playing location-aware dynamic content
CN109243438B (zh) * 2018-08-24 2023-09-26 上海擎感智能科技有限公司 一种车主情绪调节方法、系统及存储介质
WO2020055872A1 (en) 2018-09-14 2020-03-19 Delos Living Llc Systems and methods for air remediation
US11409980B2 (en) * 2018-12-19 2022-08-09 Acoustic Arc International Limited Audio-effect-activated scent generation method and system
WO2020176503A1 (en) 2019-02-26 2020-09-03 Delos Living Llc Method and apparatus for lighting in an office environment
US11898898B2 (en) 2019-03-25 2024-02-13 Delos Living Llc Systems and methods for acoustic monitoring
US11157236B2 (en) 2019-09-20 2021-10-26 Sony Corporation Room correction based on occupancy determination
US11071182B2 (en) 2019-11-27 2021-07-20 Gracenote, Inc. Methods and apparatus to control lighting effects
CN112996194A (zh) * 2019-12-15 2021-06-18 北京地平线机器人技术研发有限公司 一种灯光控制方法及装置
CN218071873U (zh) * 2021-01-19 2022-12-16 深圳市品茂电子科技有限公司 一种环境特征主动传感控制模组
WO2022260395A1 (ko) * 2021-06-07 2022-12-15 엘지전자 주식회사 스마트홈 환경의 무선랜 시스템에서 제어기기가 미디어 데이터를 획득하고 분석하여 피제어기기를 제어하는 방법 및 장치
CN113992865B (zh) * 2021-10-29 2023-08-29 北京中联合超高清协同技术中心有限公司 超高清转播现场的氛围烘托方法、装置及系统
CN114537271A (zh) * 2022-02-09 2022-05-27 广州小鹏汽车科技有限公司 控制方法、车辆和存储介质

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2765308B2 (ja) * 1991-10-30 1998-06-11 松下電器産業株式会社 照明装置
JP2000059876A (ja) * 1998-08-13 2000-02-25 Sony Corp 音響装置およびヘッドホン
US20050275626A1 (en) * 2000-06-21 2005-12-15 Color Kinetics Incorporated Entertainment lighting system
TWI221574B (en) * 2000-09-13 2004-10-01 Agi Inc Sentiment sensing method, perception generation method and device thereof and software
US6909921B1 (en) * 2000-10-19 2005-06-21 Destiny Networks, Inc. Occupancy sensor and method for home automation system
US20030167174A1 (en) * 2002-03-01 2003-09-04 Koninlijke Philips Electronics N.V. Automatic audio recorder-player and operating method therefor
CA2485104A1 (en) * 2002-05-09 2003-11-20 Herman Cardenas Audio network distribution system
GB0211898D0 (en) * 2002-05-23 2002-07-03 Koninkl Philips Electronics Nv Controlling ambient light
JP2004212160A (ja) * 2002-12-27 2004-07-29 Matsushita Electric Ind Co Ltd 経路検索装置及び車輌内環境変化用装置
US7229359B2 (en) * 2003-10-24 2007-06-12 Henry, Schooley & Associates, L.L.C. Continuous water ride
JP2006171133A (ja) * 2004-12-14 2006-06-29 Sony Corp 楽曲データ再構成装置、楽曲データ再構成方法、音楽コンテンツ再生装置および音楽コンテンツ再生方法
CN1703131B (zh) * 2004-12-24 2010-04-14 北京中星微电子有限公司 一种音乐控制发光灯组的亮度和颜色的方法
JP4643640B2 (ja) * 2005-04-13 2011-03-02 株式会社日立製作所 雰囲気制御装置
TWM327001U (en) * 2006-12-28 2008-02-11 Pin Life Co Ltd Apparatus of creating atmosphere
US8325944B1 (en) * 2008-11-07 2012-12-04 Adobe Systems Incorporated Audio mixes for listening environments

Also Published As

Publication number Publication date
US20110190913A1 (en) 2011-08-04
WO2009090600A1 (en) 2009-07-23
RU2010133968A (ru) 2012-02-27
CN101918094B (zh) 2013-01-02
TW200944277A (en) 2009-11-01
EP2229228B1 (en) 2014-07-16
JP2011514541A (ja) 2011-05-06
RU2513772C2 (ru) 2014-04-20
KR101687942B1 (ko) 2017-01-02
KR20100114081A (ko) 2010-10-22
EP2229228A1 (en) 2010-09-22
CN101918094A (zh) 2010-12-15

Similar Documents

Publication Publication Date Title
JP5485913B2 (ja) 環境内のムード及びソーシャルセッティングに適した雰囲気を自動生成するためのシステム及び方法
JP6504165B2 (ja) 情報処理装置及び情報処理方法並びにプログラム
CN114223028A (zh) 具有命令关键词调节的网络麦克风设备
EP2376207B1 (en) Method and system for generating data for controlling a system for rendering at least one signal
US20190018644A1 (en) Soundsharing capabilities application
US20190104593A1 (en) Enriching audio with lighting
CN101536609A (zh) 响应音频信号控制光
JP2010020133A (ja) 再生装置、表示方法および表示プログラム
JP7453712B2 (ja) オーディオ再生方法、装置、コンピュータ可読記憶媒体及び電子機器
JP5166549B2 (ja) 照明雰囲気に関連付けられている音を自動的に生成するシステム及び方法
JP6921345B1 (ja) 照明シーンに基づいてメディアコンテンツを選択するための方法及びコントローラ
KR100672404B1 (ko) 사용자 맞춤 서비스 제공 시스템 및 그 제어방법
US11930328B2 (en) Operation modes, audio layering, and dedicated controls for targeted audio experiences
JP7037909B2 (ja) 端末装置、音声出力プログラム、サーバ、音声出力システム、及び音声出力方法
KR20160051350A (ko) 사물인터넷 기반의 스마트 음향장치
CN113424659B (zh) 增强用户对光场景的识别
Seppänen Production of an audiobook: recording, editing and mastering
WO2024125478A1 (zh) 音频呈现方法和设备
US20240103799A1 (en) Immersive audio experiences based on visual content or objects
KR20230078372A (ko) 전자 장치 및 그 동작 방법
CN114385850A (zh) 音乐播放控制方法及系统
WO2023225448A2 (en) Generating digital media based on blockchain data
JP2004286784A (ja) 自動演奏装置および自動演奏プログラム
KR20230107042A (ko) 전자 장치 및 그 동작 방법
JP2007087559A (ja) 記録再生装置、記録再生装置の制御方法及び記録再生装置の制御プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120111

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130424

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130523

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130823

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130917

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131217

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140121

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140220

R150 Certificate of patent or registration of utility model

Ref document number: 5485913

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250