JP5322941B2 - プログラマブルマルチメディアコントローラのためのプログラミング環境及びメタデータ管理 - Google Patents

プログラマブルマルチメディアコントローラのためのプログラミング環境及びメタデータ管理 Download PDF

Info

Publication number
JP5322941B2
JP5322941B2 JP2009528288A JP2009528288A JP5322941B2 JP 5322941 B2 JP5322941 B2 JP 5322941B2 JP 2009528288 A JP2009528288 A JP 2009528288A JP 2009528288 A JP2009528288 A JP 2009528288A JP 5322941 B2 JP5322941 B2 JP 5322941B2
Authority
JP
Japan
Prior art keywords
components
component
programmable
programming environment
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009528288A
Other languages
English (en)
Other versions
JP2010504030A (ja
Inventor
シルヴァ，マイケル，シー
マドンナ，ロバート，ピー
キックライター，ケビン，シー
ボンチェック，ブライアン，エス
ベンベヌティ，デビッド，エム
ジャコブソン，アーサー，エー
シポロー，ニコラス
シールズ，ジェラルド，ダブリュー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Savant Systems Inc
Original Assignee
Savant Systems Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Savant Systems Inc filed Critical Savant Systems Inc
Publication of JP2010504030A publication Critical patent/JP2010504030A/ja
Application granted granted Critical
Publication of JP5322941B2 publication Critical patent/JP5322941B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D23/00—Control of temperature
    • G05D23/19—Control of temperature characterised by the use of electric means
    • G05D23/1917—Control of temperature characterised by the use of electric means using digital means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2807—Exchanging configuration information on appliance services in a home automation network
    • H04L12/2809—Exchanging configuration information on appliance services in a home automation network indicating that an appliance service is present in a home automation network
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G06F15/177—Initialisation or configuration control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0803—Configuration setting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/22—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks comprising specially adapted graphical user interfaces [GUI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/085—Retrieval of network configuration; Tracking network configuration history
    • H04L41/0853—Retrieval of network configuration; Tracking network configuration history by actively collecting configuration information or by backing up configuration information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/20—Network management software packages

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Automation & Control Theory (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Stored Programmes (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Programmable Controllers (AREA)
  • Selective Calling Equipment (AREA)

Description

本発明は、一般にマルチメディア及び通信分野に関するものであり、特に、広範なオーディオ装置、ビデオ装置、電気通信装置、データ通信装置、及びその他の装置との接続やかかる装置の制御及び管理を行うことができる、家庭用、商用、プロフェッショナルオーディオ又はビデオ用、放送又は映画スタジオ用、セキュリティ用、オートメーション用、又はその他の用途のための、プログラマブルマルチメディアコントローラに関するものである。
・関連出願
本出願は、2005年12月20日付けで出願した「System and Method for a Programmable Multimedia Controller」と題する同時係属中の出願第11/314,664号、及び2005年12月20日付けで出願した「Programmable Multimedia Controller With Programmable Services」と題する同時係属中の出願第11/314,112号に関連するものであり、その両方とも本出願人に譲渡されている。
・背景情報
家庭用電化製品の商業的な提供は、電子ハードウェアの低コスト化及び新たなメディアの導入に応じて劇的に拡張された。例えば、たった数年で、コンパクトディスク（CD）技術は、最適な音楽記録媒体としてレコード又は磁気テープに大きくとって代わったが、次いでMP3技術に取って代わられることとなった。同様に、ディジタル多用途ディスク（DVD）技術が、最適なビデオ記録媒体としてビデオテープに大きく取って代わる一方、ディジタルカメラがフィルムカメラに事実上取って代わった。新しい技術及びメディアの出現、及びそれに対応する最新の進歩に基づく製品の消費者による需要は、メーカーに新製品を急速に導入させるものとなる。その結果として、膨大な数の製品タイプ及びモデルが市場に浸透することとなった。
多くの消費者にとって存続する長期にわたる１つの問題が、一般に別個に販売され及び統合化されたシステムの一部ではない様々な電子装置の相互接続に伴う複雑さである。例えば、消費者は、異なるメーカーにより製造されたオーディオレシーバ、ケーブルTVボックス、テレビ、DVDプレーヤ、及びサラウンドサウンドシステムを取得する場合がある。１グループのコンポーネントを一連のケーブルにより相互接続するという基本的な問題は、多くのユーザにとって挑戦であり、様々な動作及び機能モードを十分に理解し正しく使用すれば、それらコンポーネントを共に最良な状態で動作させて最も楽しめるエンターテイメント経験を生じさせることが可能となることは言うまでもない。
異種のコンポーネントを統合させるための（全てではないが）殆どの従来の手法に関するもう１つの長期にわたる問題は、高級コンピュータ言語で書かれたソフトウェアで動作する何らかのタイプの中央コントローラが使用されることである。高級コンピュータ言語は、幾つかの問題を呈するものである。第１に、メーカーはソースコードをユーザに対して利用可能とすることがないことはほぼ確実であり、このため、システムのカスタマイズを望むユーザがそのカスタマイズを行うことが事実上妨げられる。第２に、該ソースコードが利用可能となった場合であっても、ユーザの大多数は、ソースコードを書き又は修正するための技術的な専門知識、時間、又は意向を有していない。第３に、メーカーによる新しい装置の導入は、かかる装置との互換性を中央コントローラに持たせるためのソースコードの修正をほぼ確実に必要とする。
更に別の長期にわたる問題は、家庭用電化製品の制御インタフェイスに関する広く採用される工業規格が存在しないことである。メーカーは様々な通信プロトコルを組み込み、その殆どは事実上独自に所有するものであり、如何なる規格にも準拠せず、極めて詳細なソースコードで実施されるものである。この規格の欠如は、広範な家庭用電化製品が共に動作して十分な技術的専門知識を有さない平均的なユーザにより管理することが可能となるようにかかる家庭用電化製品を統合し中央制御するための態様を大幅に複雑化させる。
要するに、本発明は、広範なオーディオ装置、ビデオ装置、電気通信装置、データ通信装置、又はその他の装置との接続やかかる装置の制御又は管理を行うことができる、汎用コンピュータに基づくマルチメディアコントローラを提供する。本発明の一態様によれば、グラフィカルユーザインタフェイスに基づくコンフィギュレーションツールが、マルチメディアコントローラと相互接続され又は相互作用すべき多数のコンポーネント又は装置を有する高度に複雑なシステムさえも構成する単純で概略的な方法を提供する。
該コンフィギュレーションツールは、コンポーネントプロファイルのライブラリへのアクセスを有する。コンポーネントプロファイルは典型的には、コンポーネントの物理的特性、コンポーネントのコンフィギュレーション、コンポーネントが認識する一組のコマンド、並びにコンポーネントが実行することができる機能のうちの少なくとも幾つかを記述するものとなる。一実施形態では、指定されたウェブサイト又はオンラインサービスへのオンラインアクセスを介してコンポーネントライブラリを更新することが可能である。
コンフィギュレーションツールを使用して、ユーザ、販売業者、設置者、又はその他の者は、該コンポーネントライブラリから関心のあるコンポーネントを選択（典型的にはドラッグ・アンド・ドロップ）する。これに応じて、各コンポーネント及びそのコネクタの写真又はその他のイメージ（物理的コンポーネント上に現れるコネクタ名を含む）が表示される。多数のコンポーネントが選択されると、コンフィギュレーションツールは、色分けを用いてコンポーネント間の考え得る接続を図式的及び視覚的に示す。例えば、１つのコンポーネントのオーディオ出力コネクタを他のコンポーネントの互換性のあるオーディオ入力コネクタと同じ色で強調表示することが可能である。コンフィギュレーションツールはまた、関心のあるコネクタを選択し該コネクタにとって許容され又は許容されない接続に関する情報を表示するために使用することが可能である。
表示されているコンポーネントに対話的に働きかけて、ユーザは、コンポーネント間の所望の接続を図式的に「描画」する。所望の接続が指定されると、全てのコンポーネント及び接続情報がコンフィギュレーションコンパイラへ供給される。該コンフィギュレーションコンパイラは、該指定されたコンポーネント及びコンフィギュレーションに基づいてマルチメディアコントローラが提供することができるサービスのリストを生成する。ユーザは、所望のサービスを選択すると共に、個人的な嗜好に合うように様々なサービスをカスタマイズすることが可能である。
コンフィギュレーションツールはまた、設置者のための詳細な配線又は設置指示、コンポーネントの概要、注文及び請求のための資材の明細、コンフィギュレーションの指示、サードパーティ機器に関する情報（レシーバの入力割当の設定等）、ユーザのメモ、配線のためのプリントラベル、及びその他の情報を含む、出力レポートを生成することが可能である。
本発明の別の態様によれば、コンフィギュレーションツール及びグラフィカルユーザインタフェイスを使用して、タッチスクリーン式リモート制御手段を含むプログラマブルマルチメディアコントローラと接続する個々のコンポーネント又は装置を構成することが可能である。
本発明の別の態様によれば、マルチメディアコントローラは、（特にCD及びMP3を含む）様々なメディアタイプと共に働くことができるメタデータ管理設備を含む。一実施形態では、該メタデータ管理設備は、マルチメディアコントローラ内で利用できるメタデータを自動的に収集し、新しいメディアの存在を自動的に検出し、それからメタデータを自動的に収集し、及びウェブリソースにアクセスして更なる関連するメタデータを探し出すことが可能である。マルチメディアコントローラの一部である汎用コンピュータに関連するファイルシステムを利用することにより、メタデータ管理設備は、照会に良く適した構造でメタデータを格納する。更に、メタデータ管理設備は、マルチメディアコントローラと接続することができる全てのタイプのユーザリモートコントローラに対してメタデータを利用可能とする。
本発明の更に別の態様によれば、マルチメディアコントローラに対するユーザインタフェイスの外観及び機能をユーザがカスタマイズすることを可能にするグラフィカルプログラミング環境が提供される。該グラフィカルプログラミング環境は、アプリケーションプログラミングインタフェイス（API）を介してアクセスすることができるラジオボタンその他のグラフィカルコントロールのライブラリを含む。該APIを介して、ユーザは、ユーザインタフェイスからラジオボタン又はコントロールを追加し又は削除し、並びに該ボタン又はコントロールの外観、機能、又はその他の属性を修正することが可能である。
【００１４】
【図１】本発明の実例となる実施形態による、複数の装置と相互接続されたプログラマブルマルチメディアコントローラのブロック図である。
【図２】図１のマルチメディアコントローラの高レベルハードウェアアーキテクチャを示す概略的なブロック図である。
【図３】図１のシステムの高レベルソフトウェアアーキテクチャを示す概略的なブロック図である。
【図４】ユーザが図３のコンフィギュレーションツールを用いてシステム構成を生成することができるグラフィカルプログラミング環境を示すスクリーンショットである。
【図５】コンフィギュレーションツールと共に使用されるコンポーネントライブラリのスクリーンショットである。
【図６】コンフィギュレーションツールを用いて生成された二部屋構成のスクリーンショットである。
【図６Ａ】 コンフィギュレーションツールを用いて生成された二部屋構成のスクリーンショットの１／２である。
【図６Ｂ】 コンフィギュレーションツールを用いて生成された二部屋構成のスクリーンショットの残りの１／２である。
【図６Ｃ】ユーザがコンポーネントに関する詳細情報を見ること又はコンポーネントのカスタマイズ又はコンフィギュレーションを行うことを可能にするコンポーネントインスペクタのスクリーンショットである。
【図７】図６Ａ及び図６Ｂのコンフィギュレーションのためのコンフィギュレーション編集を示すスクリーンショットである。
【図８】ユーザがサービスをカスタマイズすることを可能にするツールを示すスクリーンショットである。
【図９】図１のプログラマブルマルチメディアコントローラに組み込むことが可能なメタデータ管理設備の機能ブロック図である。
【図１０】ユーザがコンフィギュレーションツールを使用してコンポーネントのコンフィギュレーションを生成し又はユーザインタフェイスの外観若しくはユーザプロファイルを修正することを可能にする図４のグラフィカルプログラミング環境を示すスクリーンショットである。
【図１１】図１のプログラマブルマルチメディアコントローラのためのグラフィカルユーザインタフェイスを規定し表示するために使用されるソフトウェアの高レベルアーキテクチャを示すフローチャートである。
【図１２】図１のプログラマブルマルチメディアコントローラのためのグラフィカルユーザインタフェイスを実施するために使用される一連のパッチを示すグラフィカルプログラミング環境である。
【図１３】「再生」機能を実行するためのボタンのグラフィカルにプログラミングすることが可能な属性を示すスクリーンショットである。
【発明を実施するための形態】
図１は、本発明の実例となる実施形態による、複数の装置に相互接続されたプログラマブルマルチメディアコントローラ100のブロック図である。該用語「プログラマブルマルチメディアコントローラ」は、オーディオ装置、ビデオ装置、電話装置、データ装置、セキュリティ装置、モータ駆動式装置、リレー駆動式装置、及び／又はその他のタイプの電子装置といった様々な電子装置を制御し、それら装置間でデータを交換し、及び／又はそれら装置と相互に動作することができる装置として、広範に解釈されるべきである。これらの装置と相互作用することにより、該プログラマブルマルチメディアコントローラは、統合化されたマルチメディアコントロールソリューションを実施することが可能である。
実例となる実施形態では、プログラマブルマルチメディアコントローラ100は、広範なオーディオ／ビデオコンポーネント（例えば、コンパクトディスク（CD）プレーヤ105、ディジタル多用途ディスク（DVD）プレーヤ110、オーディオ／ビデオレシーバ115、テレビ120、パーソナルメディアプレーヤ125、スピーカ122、マイク123、及び／又はビデオカメラ124）に接続される。該プログラマブルマルチメディアコントローラはまた、電話網130及び電話ハンドセット132等の電話装置に接続することが可能である。該電話網130は、公衆交換電話網（PSTN）、総合ディジタル通信網（ISDN）、又はその他の通信網とすることが可能である。
更に、プログラマブルマルチメディアコントローラは、様々な照明及び／又はホームオートメーションシステム135と相互に通信することが可能である。これらの装置は、Pico Electronicsにより開発されたX10プロトコル、SmartHome, Inc.により開発されたINSTEON（登録商標）プロトコル、CEBus工業審議会により管理されているCEBus規格、又はその他の周知のホームオートメーション又はコントロールプロトコルを介して動作することが可能である。同様に、該コントローラは、モータ及び／又はリレー駆動式装置137（例えば、冷暖房空調（HVAC）システム、潅漑システム、自動シェード又はブラインドシステム、電子ドアロック、又はその他のタイプの装置を含む）に接続することが可能である。
インターネット140等のコンピュータネットワークがマルチメディアコントローラに接続される。更に、パーソナルコンピュータ（PC）145、ビデオゲームシステム150、ホームレコーディング機器165、又はその他の装置を接続することも可能である。更に、該コントローラの機能を管理し及び／又は該コントローラに接続された装置を制御するために、１つ又は２つ以上のリモートコントロールユニット170を配設することが可能である。かかるリモートコントロールユニットは、有線ネットワーク接続、赤外線リンク、無線周波数リンク、Bluetooth（登録商標）リンク、ZigBee（登録商標）リンク、又はその他の適当なデータコネクションを介してコントローラと相互接続することが可能である。かかるリモートコントロールユニットの例は、タッチスクリーンリモコン112、（電気機械式のものとすることが可能な）シンプルリモコン114、及びMP3プレーヤその他の装置116を含む。
図２は、プログラマブルマルチメディアコントローラの高レベルハードウェアアーキテクチャを示す概略的なブロック図である。図示の様々なコンポーネントは、該コントローラの「マザーボード」上に配置され、又はバックプレーン（図示せず）により相互接続された複数のカード上に配置される。マイクロコントローラ210は、システムの全般的な動作を管理する。この実例となる実施形態では、マイクロコントローラは、Freescale Semiconductor Inc.から入手可能な32ビットモデルMCF5234マイクロコントローラである。該マイクロコントローラ210は、バス218を介してオーディオスイッチ215及びビデオスイッチ220に接続される。該オーディオスイッチ215及びビデオスイッチ220は好適には、多数の接続を同時に切り換えることが可能なクロスポイントスイッチである。しかし、ディジタル信号を切り換えることができる多数の他のタイプのスイッチ（例えば時分割多重（TDM）スイッチ）を採用することが可能である。
ミッドプレーン235は、前記スイッチその他の装置を様々な入力及び出力モジュール（例えば、HDMI付きディジタルビデオ入力モジュール600、HDMI付きビデオ出力モジュール1000、ディジタルオーディオ入力モジュール400、及びディジタルオーディオ出力モジュール900）へ相互接続する。該ミッドプレーン235は更に、10BaseT、100BaseT、又はギガバイトEthernet信号の交換を可能にするEthernetスイッチ230に接続される。該Ethernetスイッチ230は、Ethernetポート232及び処理サブシステム240をマイクロコントローラ210へ相互接続する。一実施形態では、該処理サブシステム240は、冗長動作及び／又は負荷平衡を提供する複数のスモールフォームファクタの汎用パーソナルコンピュータを含む。実施形態によっては、該処理サブシステム240は、例えばディジタルメディアを記憶するための拡張記憶容量を提供するために前記パーソナルコンピュータの外部に１つ又は２つ以上の記憶装置を含むことが可能である。
また、複数のUSB（Universal Serial Bus）ポート242が、前記処理サブシステム240との相互接続のためにUSBハブ243へ相互接続される。メモリカードインタフェイス225もまた前記USBハブ243へ接続することが可能である。該インタフェイスは、１つ又は２つ以上の周知のメモリカードフォーマット（例えば、CompactFlash（登録商標）カード、メモリスティック（登録商標）カード、セキュアディジタル（登録商標）（SD）カード、又はその他のフォーマット）を許容するものである。USBスイッチ244は、存在し得る多数の処理コンポーネント間でUSBリンクを切り換えるために採用される。同様に、複数のIEEE1394（FireWire（登録商標））ポート246が、IEEE1394ハブ247及びIEEE1394スイッチ248に相互接続される。
マイクロコントローラ210は更に、比較的低データ転送速度の装置に対するシリアル通信インタフェイスを提供するSPI（Serial Peripheral Interface）及びI2C（Iter-Integrated Circuit）分配回路250に接続される。該SPI／I2Cコントローラ250は前記ミッドプレーン235へ接続され、これにより前記マイクロコントローラ210から前記プログラマブルマルチメディアコントローラ100内の前記モジュールその他の装置へ制御コマンドが提供される。SPI／I2Cコントローラ250からの更なる接続は、システムの温度特性を管理しオーバーヒートを防止する、ファンコントローラ251、温度センサ252、及び電源管理回路253等の装置へ提供される。
前記マイクロコントローラ210はまた、外部装置との相互接続を可能にする、赤外線インタフェイス260、RS232インタフェイス265、及びRFインタフェイス267へ接続される。かかる相互作用は、プログラマブルマルチメディアコントローラ100が外部装置を制御することを可能にする。更に、該インタフェイスは、プログラマブルマルチメディアコントローラ100自体の動作を制御する制御信号を受信することが可能である。様々な他のインタフェイス（Wi-Fi（登録商標）、Bluetooth、ZigBee、及びその他の有線及び無線インタフェイスを含む）を該マルチメディアコントローラ100と共に使用することが可能であることが明らかに意図されている。
更に、１つ又は２つ以上のビデオゲームシステム、ビデオカメラ、コンピュータ、カラオケ機、又はその他の装置を相互接続するための補助オーディオ／ビデオポート700が配設される。PSTN又はプライベートネットワーク及び電話ハンドセットへ接続するために電話インタフェイス270が配設される。更に、照明、ホームオートメーション、及びモータ及び／又はリレー駆動式装置と通信するために装置制御インタフェイス275が配設される。以下で一層詳細に説明するように、複数のプログラマブルマルチメディアコントローラを共にリンクさせて拡張システムを形成するための拡張ポート280が配設される。最後に、フロントパネルディスプレイ1150は、状態、コンフィギュレーション、及び／又はその他の情報をユーザへ提示することを可能にする。一実施形態では、該フロントパネルディスプレイは、システムに接続された任意の入力ソースから発せられたビデオデータを表示することができ、これにより、該ディスプレイ上でビデオコンテンツをプレビューすることが可能となる。別の実施形態では、前記フロントパネルディスプレイ1150はタッチスクリーンを含み、ユーザは該スクリーン上のアイコンを選択することにより制御の選択を入力することが可能である。
図３は、コントローラ100の高レベルソフトウェアアーキテクチャのブロック図である。該ソフトウェアアーキテクチャは、システムコントロールプレーン302、ユーザインタフェイス（UI）プレーン304、コントロールアプリケーションプログラミングインタフェイス（API）アクセス306、サービスプレーン308、メディアプレーン310、コンポーネントコントロールプレーン312、及びコンフィギュレーション・セットアッププレーン314を含む、一連のプレーンとして編成されている。
システムコントロールプレーン302は、システムマネージャ316、システムランチャ318、冗長マネージャ320、ウェブサーバ322、タッチスクリーン／PDAサーバ324、リモートシステムアクセスマネージャ326、及びシステムログ328の機能を含む。サービスプレーン308は、Automatorランタイム334を含むサービスコントローラ332の機能を含む。サービスプレーン308はまた、Macディスプレイコントローラ336、オンスクリーンディスプレイ（OSD）アプリケーション338、サードパーティアプリケーション340、Macアプリケション342、及びオーディオ／ビデオコンポーネントコントローラ344の機能を含む。Automatorランタイム334を介して、サービスコントローラ332は、アプリケーション間制御を可能にするAppleScriptをサポートするiTunes、iChat、iPhoto、及びiDVDMacアプリケションを制御することが可能である。同様に、Automatorランタイム334を介して、サービスコントローラ332は、AppleScriptをサポートする他のサードパーティアプリケーションを制御することが可能である。
メディアプレーン310は、全てのサポートされる形式（すなわち、DVI、Ethernet、FireWire、USB等）でMac入出力（I/O）の機能を含む。コンポーネントコントロールプレーン312は、オーディオ／ビデオコンポーネント348を制御する機能を含む。
コンフィギュレーション／セットアッププレーン314は、ユーザコンフィギュレーションツール350、コンフィギュレーションコンパイラ352、ユーザサービスコントロールアプリケーション354、ワークフロージェネレータ356、及びサービスコントロールワークフローブラウザ／サーチエンジン／カスタマイゼーションアプリケーション358の機能を含む。コンフィギュレーション／セットアッププレーン314はまた、システムコンフィギュレーション360、Automatorワークフロー362、サービス定義364、コンポーネントプロファイル366、及びMacセッティング368を含む幾つかのタイプの情報をUIプレーン304及びサービスプレーン308へ送る。上記引用の同時係属中の出願第11/314,112号に記載されているように、好適な実施形態では、システムコンフィギュレーション360、Automatorワークフロー362、サービス定義364、及びコンポーネントプロファイル366を表現するためにXMLファイルが使用される。
コントロールAPIアクセス306は、ウェブ対応型装置、RFリモートコントロール式装置、タッチスクリーン、PDA、又は携帯電話の使用を選択することができるユーザがマルチメディアコントローラ100を制御することを可能にするAPIを責務とするものである。UIプレーン304は、マルチメディアコントローラ100に対するユーザインタフェイスについて機能上の責務を負うものである。サービスプレーン308は、上述したようなサービスを実施するための機能上の責務を負うものである。Automatorランタイム334は、ユーザからのリクエスト又はコマンドを受容してそれらを特定のサービスのためのワークフローにマッピングする責務を負うものである。
メディアプレーン310は、Mac I/O並びにマルチメディアコントローラ100によりサポートされるその他の内部及び外部通信インタフェイスに関する機能上の責務を負うものである。コンポーネントコントロールプレーン312は、マルチメディアコントローラ100と接続することができるオーディオ又はビデオコンポーネントの動作を制御するための機能上の責務を負うものである。コンフィギュレーション／セットアッププレーン314は、ユーザがマルチメディアコントローラ100を設定すること、サービスを選択し、生成し、又は修正すること、及びコンポーネントプロファイルを選択し、生成し、又は修正することを可能にするための機能上の責務を負うものである。
図４は、ユーザがコンフィギュレーションツール350を使用してシステムコンフィギュレーションの生成を開始する態様を示すスクリーンショットである。グラフィカルプログラミング環境400においてスクリーン上に表示されるのは、コンフィギュレーションワークスペース402、ゾーンマップ404、及びツールバー406である。「Rosie」という名前が付され符号410が付されたアイコンは、プログラマブルマルチメディアコントローラ100（図１）を表している。「部屋１」という名前が付され符号412が付されたアイコンは、コンフィギュレーション内の第１ゾーンを表しており、該第１ゾーンは１つ又は２つ以上の部屋を物理的に含むことが可能である。
コンフィギュレーションの作成を開始するために、ユーザは、「パレット表示」ボタンをクリックする。図５に示すように、このアクションにより、コンポーネントライブラリ500内のコンポーネントを表すアイコンのパレットが現れることになる。この例では、コンポーネントライブラリ500内には、複数のモデルのフラットパネルテレビ502、ディジタルサラウンドレシーバ504、HDMIスイッチャ506、及び多数の他のコンポーネントが利用可能となる。ユーザは、単純にコンポーネントライブラリ500からゾーンマップ404内の所望のゾーンへアイコンをドラッグ・アンド・ドロップすることが可能である。このため、一連のかかるドラッグ・アンド・ドロップを介して、ユーザは、該ユーザ自身が特定のゾーンに設置したいコンポーネントの全てを指定することが可能である。そのプロセスを迅速に処理するために、ユーザは、メニュー508にアクセスして特定のタイプのコンポーネント（例えば、レシーバ、DVDプレーヤ、スピーカ、ケーブルTVコンバータ等）のみを表示させることが可能であり、又はメニュー510にアクセスして特定のメーカーにより製造されたコンポーネントのみを表示させることが可能である。
ユーザがゾーンマップ404内にコンポーネントをドラッグ・アンド・ドロップした後に、それらのコンポーネントは、該ゾーンマップ404からワークスペース402内へとドラッグ・アンド・ドロップされる。各コンポーネントがワークスペース402内にドロップされると、図６Ａ及び図６Ｂに示すようなボックスが現れる。例えば、ボックス602は、グラフィカルプログラミング環境400内のプログラマブルマルチメディアコントローラ100を表している。同様に、ボックス604は、フラットパネルテレビを表している。図示のように、各ボックスは、対応する物理的なコンポーネントの写真その他のイメージを含み、これにより、便利な視覚的基準がユーザに提供される。更に、各ボックスは、対応するコンポーネントに存在する全ての入力、出力、及び制御ポートを識別するテキスト及びグラフィクスを含む。該テキストはまた、各入力、出力、及び制御ポートについての信号タイプ、コネクタタイプ、及びその他の関連情報を識別する。前記グラフィクスは、物理的なコンポーネント上に現れる色と一致する色分けを含む。
ユーザによるコンフィギュレーションを支援するために提供される別の助力は、コンポーネントインスペクタツールである。図６Ａ及び図６Ｂに示すように、ユーザは、ゾーンマップ404内の関心のあるコンポーネントを選択し、次いで「インスペクタ表示」という名前が付され符号614が付されたボタンをクリックすることが可能である。これに応じて、図６Ｃに示すスクリーン616が現れることになる。メニュー618は、選択されたコンポーネントの入力、出力、制御ポート、及びその他の特徴に関する詳細な情報をユーザが検査することを可能にする。スクリーン616を介して、ユーザはまた、選択されたコンポーネントのコンフィギュレーション（すなわち、プログラマブルマルチメディアコントローラやプログラマブル入出力スロット等を有するモジュール式レシーバといったコンフィギュレーションを必要とするコンポーネントについて）又はカスタマイズを行うことが可能である。
マウスを使用して、ユーザは、ワークスペース402内に現れているボックス（コンポーネント）間の接続を「描画」する。かかる接続は、アンプ608の出力と一組のサラウンドスピーカ610との間の接続を表すライン606等のラインとして現れる。ユーザが接続を行うことができる別の方法は、（ボックス内に表示されている）コネクタ上を右クリックして、如何なるタイプのコネクタが直接に又は変換を介して互換性を有するか並びに互換性のないものかについての情報を表示するポップアップメニューをオープンさせ、次いで、該メニューから所望の接続を選択する、というものである。
ユーザは、符号616が付された「レポート作成」ボタンをクリックすることが可能である。このアクションは、内在するソフトウェアに出力レポートを生成させ、該出力レポートは、特定のコンフィギュレーションのための詳細な配線指示、該コンフィギュレーションにおけるコンポーネントの概要、特別な指示、及びユーザにより入力されたメモ等を含むことが可能である。該出力レポートは、部品表、配線チェックリスト、及び取付指示書として働くことが可能である。
ユーザは、必要な接続を完成させると、「編集」ボタン612上をクリックする。このアクションは、内在するソフトウェアに、指定されたコンフィギュレーションの自動解析を行わせて、該コンフィギュレーションが実行することができる「サービス」（実現されるサービス）を識別させ、及び該コンフィギュレーションを修正した場合に利用可能となる他のサービスを識別させる。本書で用いる「サービス」並びに「リソース」及び「リクエスト」に関する一層詳細な説明については、同時係属中の出願第11/314,112号を参照されたい。
図７に示すように、実現されるサービス700のリストがユーザに対して表示される。マウスで選択された際に、実現されるサービスの説明がパネル704内に現れる。ユーザは、チェックボックス702を使用して任意の実現されるサービスをディセーブルにすることが可能である。パネル706は、選択されたサービスに関連するリソースの全てを表示する。「非実現表示」ボタン708をクリックすることにより、ユーザは、指定されたコンフィギュレーションが修正された場合に提供される可能性のある「実現されないサービス」を見ることが可能である。実現されないサービスの参照は、コンフィギュレーションをデバッグするため及びコンポーネントの使用及び所与の一組のコンポーネントに関するユーザ・エクスペリエンスを最適化するためのツールとして有用なものである。
ユーザは、コンフィギュレーション及びカスタマイゼーションに満足すると、「生成」ボタン710をクリックする。このアクションは、内在するソフトウェアに、プログラマブルマルチメディアコントローラ100のための実際のシステムコンフィギュレーションを生成させ、及び図８に示すようなスクリーンを表示させる。図８に示すように、実現されるサービス「TVサービス」に関連するリクエストがパネル800内に表示される。パネル800内で、ユーザは、リクエストを追加し又は削除することにより、実現されるサービスをカスタマイズすることが可能である。
上記の利用に加えて、グラフィカルプログラミング環境400及びコンフィギュレーションツール350を使用して、プログラマブルマルチメディアコントローラ100と接続する個々のコンポーネント又は装置のコンフィギュレーションを行うことが可能である。図１０に示すように、例えば、本出願人により販売されているタッチスクリーンリモコン1000をコンポーネントライブラリ500（図５）内に含めることが可能である。ゾーンマップ404内にドラッグ・アンド・ドロップすると、コンフィギュレーションツール350を使用して、ユーザインタフェイスの外観（すなわちテーマ及びスキン）及びユーザプロファイルを含むかかるタッチスクリーンに固有のオプションのコンフィギュレーションを行うことが可能となる。ユーザプロファイルに関する詳細な情報は、同時係属中の出願第11/314,112号に見出すことができる。
本発明の別の態様によれば、プログラマブルマルチメディアコントローラ100は、該コントローラ100内のメタデータ並びに該コントローラ100に接続されているユーザリモートコントロールに対するメタデータの収集、編集、及び配布を行うためのメタデータ管理設備を含むことが可能である。図９は、メタデータ管理設備900の機能ブロック図である。メタデータマネージャ902は、コントローラインタフェイス902から受信したメタデータに関するリクエストに対する応答、データマネージャ902又はコンテンツソースマネージャ916からの新しいメタデータの受信、及びストレージマネージャ910に対する新しいメタデータの送信を含む、幾つかの機能を責務とするものである。
データウォッチャ908は、新しいメディアの導入のために全ての考え得るメディアソースを監視することを責務とする。例えば、データウォッチャ908は、プログラマブルマルチメディアコントローラ100に接続されたCDプレーヤに対する新しいCDの装填、該コントローラ100に対するMP3プレーヤの接続、該コントローラ100内へのサムドライブの挿入等を検出する。
データウォッチャ908は、新しいメディアの存在を検出すると、データマネージャ904への通知を生成する。データマネージャ904は、かかる通知に応じて、該新しいメディアのファイルタイプ、ファイルパス（適用可能な場合）、及び物理的ソースに関する情報を当初に包含するメディアオブジェクトを生成する。データマネージャ904は、次いで、該メディアオブジェクトを、検出されたメディアのタイプ（例えばMP3）に対応するデータインタプリタ906へ転送する。データインタプリタ906は、新しいメディアソースから可能な限り多くのメタデータを抽出するよう機能する。例えば、MP3ファイルの場合には、データインタプリタ906は、ファイルの一部であるID3タグから可能な限り多くのメタデータを収集することが可能である。抽出された全てのデータが１つのオブジェクト内にカプセル化されてデータマネージャ904へ返され、該データマネージャ904が該オブジェクトをメタデータマネージャ902へ転送する。
多くの場合、データウォッチャ908により検出された新しいメディアソースは、特定のソング又はアルバムについて存在するメタデータの全ては含んでいないことになる。存在しないメタデータを捕捉するために、メタデータマネージャ902がコンテンツソースマネージャ916に対してリクエストを発行し、次いで該コンテンツソースマネージャ916が、プログラマブルマルチメディアコントローラ100の外部にある１つ又は２つ以上のコンテンツソース914にアクセスすることが可能である。コンテンツソース914は、インターネットその他のネットワークを介してアクセスすることができるウェブサイトその他のリモート情報ソースとすることが可能である。コンテンツソースマネージャ916が捕捉する追加のメタデータはメタデータマネージャ902へ返され、最終的にはストレージマネージャ910へ送られて記憶される。
ストレージマネージャ910は、メタデータマネージャ902から受信したクエリ又はメッセージに応じてメタデータの格納、読み出し、更新、又は削除を行う全責務を負うものである。同時係属中の出願第11/314,664号で詳細に説明されているように、プログラマブルマルチメディアコントローラ100が、Apple Computer, Inc.製のMacコンピュータを含む一実施形態では、ストレージマネージャ910は、スタブファイルを含むデータベースとして実施することが可能である。かかるファイルは、Spotlight（Mac OS X に含まれるメタデータサーチエンジン）を使用して非常に効率良く索引付け及び照会を行うことが可能なものである。
コントローラインタフェイス912は、メタデータマネージャ902とタッチスクリーンリモートコントローラ112（図１）等のユーザコントローラとの間の通信を責務とするものである。コントローラインタフェイス912はまた、全てのユーザコントローラが殆どの現在のメタデータと確実にアクセスできるようにすることを責務とするものである。これは、Mac OS X の一部であるrsync（同期機能）を使用することにより達成することが可能である。
本発明の別の態様によれば、プログラマブルマルチメディアコントローラ100と共に使用するためのグラフィカルユーザインタフェイスは、該インタフェイスの外観、機能、又はその他の属性を容易に変更することを可能にするソフトウェアアーキテクチャに基づくものとなる。図１１は、グラフィカルユーザインタフェイスのためのソフトウェアアーキテクチャ1100を示している。プログラマブルマルチメディアコントローラ100内にMacコンピュータが含まれる一好適実施形態では、Mac OS X に含まれるAdobe Photoshop（登録商標）ソフトウェアを使用してファイル1102が作成される。Photoshopファイル1102は、好適には、図１３に示すスクリーンのように、グラフィカルユーザインタフェイスの各エレメント又はスクリーン毎に作成され、又はユーザインタフェイス全体を含むまで他の何らかの都合の良い単位で作成される。
各Photoshopファイル1102は、好適には「グループ」及び「レイヤー」に編成された、グラフィカルユーザインタフェイスの各エレメントの外観、機能、及びその他の属性を規定する情報を含む。該ファイル1102内の情報は、とりわけ、メモ、ラベル、テキスト・ツー・スピーチ・コマンド、ラジオボタンその他のユーザコントロールの異なる状態（例えば、イネーブル状態、押下状態、マウスオーバー状態）に対応するグラフィクス、表示テキスト、フォントサイズ、色、サウンドエフェクト、及びボタン／コントロールタイプを含むことが可能である。
ファイル1102は、典型的にはハードディスクドライブ等の不揮発性メディアに記憶され、Quartz Composer（Mac OS X 内に含まれるソフトウェアの一部）及びQuartz Composer構成をロードするランタイム環境により読み出される（1104）。Quartz Composerは、Photoshopファイル1102をパースするよう機能し、これにより、ファイル全体について並びに各ラジオボタンその他のコントロール毎に埋め込まれているグループ及びレイヤーの全てが抽出される。
Quartz Composerの「パッチ」は、抽出された情報にアクセスし、及び「出力ポート」と呼ばれるQuartz Composer機能を使用して適当なコマンド及び情報をパッチからコントロールAPIアクセス306（図３）及びユーザインタフェイス（UI）サーバ330へ送る。この構成は、Quartz Composer構成の作者が多数のレイヤーのグラフィクス並びにファイル1102に格納されているあらゆる他の情報への直接アクセスすることを可能にするため、強力なプログラミング能力を提供するものとなる。別の言い方をすれば、ファイル1102に含まれている情報を単純に変更することにより、作者は、広く入手できる一般的なソフトウェアを使用して、該ファイルにより表されるグラフィカルユーザインタフェイスのあらゆる側面を容易且つ迅速に構成し、修正し、又はカスタマイズすることが可能である。
出力ポートを介してパッチから受信したコマンド及び情報に応じて、コントロールAPIアクセス306及びUIサーバ330は、適当なコマンド及び情報をサービスコントローラ332（図３）へ発行する。次いで、サービスコントローラ332は、外部コンポーネント1106へ適当なコマンドを発行して、ユーザが指示したあらゆるアクションをグラフィカルユーザインタフェイスを介して実行する。
図１２は、一連のQuartz Composerパッチのオンスクリーンディスプレイ1200を示している。Photoshopファイル1102は、「Import」パッチ1202の入力へ送られる。Importパッチ1202は、複数の出力を生成し、該出力のうちの１つは、抽出されたPhotoshopファイル（outputPSfile）及びファイル1102内に存在する全てのボタン名（outputAllButtonNames）である。該抽出されたPhotoshopファイルは４つのLayerFromFileパッチ1204へ送られる。パッチ1204の各々の多数の出力は、それぞれ、４つのStructure Key Memberパッチ1206へ送られる。
パッチ1206のうちの１つからの出力はSay Textパッチ1210へ送られ、該パッチ1210は、テキスト・ツー・スピーチ機能を実行する。同様に、別のパッチ1206からの出力がSend Service Request to SVCパッチ1212へ送られ、該パッチ1212は、適当なコマンド及びデータをサービスコントローラ332へ送ることを責務とする。３つ目のパッチ1206の出力は、Image With Stringパッチ1214へ送られ、該パッチ1214は、（ファイル1102から抽出された）テキストを表示用のイメージへと変換する。残りのパッチ1206の出力はDisplayパッチ1216へ送られ、該パッチ1216は、ラジオボタンの表示を責務とするものである。
図１３は、グラフィカルプログラミング環境1300のスクリーンショットであり、この場合には、オーディオ又はビデオコンポーネントのためのグラフィカルユーザインタフェイス1302が示されている。該環境1300の領域1304内に、「Play」ボタン1306の機能及び属性のプログラム可能な「レイヤー」が示されている。実行時に、ボタン1306に対応するPhotoshopファイルがロードされ、Quartz Composerパッチが「Command」レイヤーをリクエストし、その結果、関連するオーディオ又はビデオコンポーネントが再生するよう命令されることになる。
上記説明は、本開示の特定の実施形態に関するものであった。しかし、それら説明した実施形態に対して他の変形及び修正を加えてそれらの利点の一部又は全部を達成することが可能であることは明らかである。更に、上記の手順又は処理は、ハードウェア、プログラム命令を有するコンピュータにより読み出し可能な媒体として実施されたソフトウェア、ファームウェア、又はそれらの組み合わせで実施することが可能である。このため、請求項の目的は、全てのかかる変形及び修正の全てを本発明の真の思想及び範囲に含まれるものとしてカバーすることにある。

Claims (10)

  1. プログラマブルマルチメディアコントローラを含むシステムを構成する方法であって、
    グラフィカルプログラミング環境を配設し、
    システムに包含させるために利用することができるコンポーネントのライブラリを表示し、該コンポーネントの少なくとも１つが、該コンポーネントの能力に関する情報を含む関連するコンポーネントプロファイルを有しており、及び前記コンポーネントの少なくとも１つが、対応する物理的コンポーネントの表示されたイメージによって表され、
    前記グラフィカルプログラミング環境を使用して、システムに包含させるための複数のコンポーネントを選択し、該選択されたコンポーネントが該グラフィカルプログラミング環境のワークスペース内に配置され、
    前記グラフィカルプログラミング環境を使用して、該選択されたコンポーネントと前記プログラマブルマルチメディアコントローラとの間に前記ワークスペース内で接続を描画することにより、前記選択されたコンポーネントを所望のシステム構成でプログラマブルマルチメディアコントローラに相互接続し、
    前記所望のシステム構成を解析して、前記プログラマブルマルチメディアコントローラが該所望のシステム構成に関してサポートすることができる実現されるプログラマブルサービスを識別し、該解析ステップが、前記ワークスペース内の前記選択されたコンポーネント及び前記描画された接続を考慮して前記実現されるプログラマブルサービスを識別し、
    該実現されるプログラマブルサービスのリストをユーザに対して表示する、
    という各ステップを含む、プログラマブルマルチメディアコントローラを含むシステムを構成する方法。
  2. 前記グラフィカルプログラミング環境において、前記ライブラリ内の前記コンポーネントの少なくとも１つが、対応する物理的コンポーネントにより提供される入力、出力、及び制御ポートの表示により表される、請求項１に記載の方法。
  3. 前記グラフィカルプログラミング環境において、前記ライブラリ内の前記コンポーネントの少なくとも１つが、前記入力、出力、及び制御ポートの各々に対応する信号タイプ及びコネクタタイプの表示により表される、請求項２に記載の方法。
  4. 前記ライブラリ内のユーザにより選択されたタイプのコンポーネントが前記グラフィカルプログラミング環境内に表示される、請求項１に記載の方法。
  5. 前記グラフィカルプログラミング環境内の検査のために前記ライブラリ内の前記コンポーネントのうちの１つを選択するステップを更に含み、該検査が、該選択されたコンポーネントの能力に関する所定の情報にアクセスするためのものである、請求項１に記載の方法。
  6. 前記システム内に包含させるために選択された１つ又は２つ以上のコンポーネントについてコンポーネント構成を前記グラフィカルプログラミング環境を使用して指定する更なるステップを含む、請求項１に記載の方法。
  7. ユーザが前記実現されるプログラマブルサービスのうちの１つ又は２つ以上を選択的にディセーブルにする、請求項１に記載の方法。
  8. 配線指示を含むレポートを前記所望のシステム構成を使用して生成する更なるステップを含む、請求項１に記載の方法。
  9. 修正されたシステム構成に関して前記プログラマブルマルチメディアコントローラがサポートすることができる実現されないプログラマブルサービスを前記所望のシステム構成を使用して表示する更なるステップを含む、請求項１に記載の方法。
  10. 前記所望のシステム構成を修正することにより１つ又は２つ以上の実現されないプログラマブルサービスを実現されるプログラマブルサービスにする更なるステップを含む、請求項９に記載の方法。
JP2009528288A 2006-09-13 2007-09-13 プログラマブルマルチメディアコントローラのためのプログラミング環境及びメタデータ管理 Active JP5322941B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/520,215 US7930644B2 (en) 2006-09-13 2006-09-13 Programming environment and metadata management for programmable multimedia controller
US11/520,215 2006-09-13
PCT/US2007/019912 WO2008033453A2 (en) 2006-09-13 2007-09-13 Programming environment and metadata management for programmable multimedia controller

Publications (2)

Publication Number Publication Date
JP2010504030A JP2010504030A (ja) 2010-02-04
JP5322941B2 true JP5322941B2 (ja) 2013-10-23

Family

ID=39103195

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009528288A Active JP5322941B2 (ja) 2006-09-13 2007-09-13 プログラマブルマルチメディアコントローラのためのプログラミング環境及びメタデータ管理

Country Status (14)

Country Link
US (4) US7930644B2 (ja)
EP (1) EP2064883B1 (ja)
JP (1) JP5322941B2 (ja)
KR (1) KR101368133B1 (ja)
CN (1) CN101573969B (ja)
AU (1) AU2007294756B2 (ja)
BR (1) BRPI0716782A2 (ja)
CA (1) CA2663167C (ja)
ES (1) ES2518996T3 (ja)
IL (1) IL197559A (ja)
MX (1) MX2009002783A (ja)
NZ (1) NZ575441A (ja)
RU (1) RU2453069C2 (ja)
WO (1) WO2008033453A2 (ja)

Families Citing this family (104)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11244545B2 (en) 2004-03-16 2022-02-08 Icontrol Networks, Inc. Cross-client sensor user interface in an integrated security network
US11343380B2 (en) 2004-03-16 2022-05-24 Icontrol Networks, Inc. Premises system automation
US11190578B2 (en) 2008-08-11 2021-11-30 Icontrol Networks, Inc. Integrated cloud system with lightweight gateway for premises automation
US10237237B2 (en) 2007-06-12 2019-03-19 Icontrol Networks, Inc. Communication protocols in integrated systems
US10721087B2 (en) 2005-03-16 2020-07-21 Icontrol Networks, Inc. Method for networked touchscreen with integrated interfaces
US20170118037A1 (en) 2008-08-11 2017-04-27 Icontrol Networks, Inc. Integrated cloud system for premises automation
US11582065B2 (en) 2007-06-12 2023-02-14 Icontrol Networks, Inc. Systems and methods for device communication
US9729342B2 (en) 2010-12-20 2017-08-08 Icontrol Networks, Inc. Defining and implementing sensor triggered response rules
US11916870B2 (en) 2004-03-16 2024-02-27 Icontrol Networks, Inc. Gateway registry methods and systems
US11811845B2 (en) 2004-03-16 2023-11-07 Icontrol Networks, Inc. Communication protocols over internet protocol (IP) networks
US11368429B2 (en) 2004-03-16 2022-06-21 Icontrol Networks, Inc. Premises management configuration and control
US12063220B2 (en) 2004-03-16 2024-08-13 Icontrol Networks, Inc. Communication protocols in integrated systems
GB2428821B (en) 2004-03-16 2008-06-04 Icontrol Networks Inc Premises management system
US11615697B2 (en) 2005-03-16 2023-03-28 Icontrol Networks, Inc. Premise management systems and methods
US20120324566A1 (en) 2005-03-16 2012-12-20 Marc Baum Takeover Processes In Security Network Integrated With Premise Security System
US11700142B2 (en) 2005-03-16 2023-07-11 Icontrol Networks, Inc. Security network integrating security system and network devices
US10999254B2 (en) 2005-03-16 2021-05-04 Icontrol Networks, Inc. System for data routing in networks
US20110128378A1 (en) 2005-03-16 2011-06-02 Reza Raji Modular Electronic Display Platform
US12063221B2 (en) 2006-06-12 2024-08-13 Icontrol Networks, Inc. Activation of gateway device
US7930644B2 (en) 2006-09-13 2011-04-19 Savant Systems, Llc Programming environment and metadata management for programmable multimedia controller
US9569587B2 (en) 2006-12-29 2017-02-14 Kip Prod Pi Lp Multi-services application gateway and system employing the same
US11783925B2 (en) 2006-12-29 2023-10-10 Kip Prod P1 Lp Multi-services application gateway and system employing the same
US20170344703A1 (en) 2006-12-29 2017-11-30 Kip Prod P1 Lp Multi-services application gateway and system employing the same
WO2008085205A2 (en) 2006-12-29 2008-07-17 Prodea Systems, Inc. System and method for providing network support services and premises gateway support infrastructure
US9602880B2 (en) 2006-12-29 2017-03-21 Kip Prod P1 Lp Display inserts, overlays, and graphical user interfaces for multimedia systems
US11316688B2 (en) 2006-12-29 2022-04-26 Kip Prod P1 Lp Multi-services application gateway and system employing the same
US11706279B2 (en) 2007-01-24 2023-07-18 Icontrol Networks, Inc. Methods and systems for data communication
US7633385B2 (en) 2007-02-28 2009-12-15 Ucontrol, Inc. Method and system for communicating with and controlling an alarm system from a remote server
US8451986B2 (en) 2007-04-23 2013-05-28 Icontrol Networks, Inc. Method and system for automatically providing alternate network access for telecommunications
KR20080095722A (ko) * 2007-04-24 2008-10-29 삼성전자주식회사 인액티브 정보 제공방법 및 이를 적용한 영상기기
US8316309B2 (en) * 2007-05-31 2012-11-20 International Business Machines Corporation User-created metadata for managing interface resources on a user interface
US11601810B2 (en) 2007-06-12 2023-03-07 Icontrol Networks, Inc. Communication protocols in integrated systems
US11646907B2 (en) 2007-06-12 2023-05-09 Icontrol Networks, Inc. Communication protocols in integrated systems
US11237714B2 (en) 2007-06-12 2022-02-01 Control Networks, Inc. Control system user interface
US11212192B2 (en) 2007-06-12 2021-12-28 Icontrol Networks, Inc. Communication protocols in integrated systems
US12003387B2 (en) 2012-06-27 2024-06-04 Comcast Cable Communications, Llc Control system user interface
US11316753B2 (en) * 2007-06-12 2022-04-26 Icontrol Networks, Inc. Communication protocols in integrated systems
US11218878B2 (en) 2007-06-12 2022-01-04 Icontrol Networks, Inc. Communication protocols in integrated systems
US10223903B2 (en) 2010-09-28 2019-03-05 Icontrol Networks, Inc. Integrated security system with parallel processing architecture
US11831462B2 (en) 2007-08-24 2023-11-28 Icontrol Networks, Inc. Controlling data routing in premises management systems
ES2529553T3 (es) 2007-09-05 2015-02-23 Savant Systems Llc Sistema y procedimiento expandible de control de multimedios
US7954133B2 (en) * 2007-10-22 2011-05-31 Sony Ericsson Mobile Communications Ab Digital living network alliance (DLNA) enabled portable electronic devices, DLNA management consoles and related methods of operating DLNA enabled portable electronic devices
US11916928B2 (en) 2008-01-24 2024-02-27 Icontrol Networks, Inc. Communication protocols over internet protocol (IP) networks
US7859137B2 (en) 2008-05-09 2010-12-28 Tap.Tv, Inc. Scalable switch device and system
US20090308543A1 (en) * 2008-06-13 2009-12-17 Lawrence Kates Motorized window shade system and mount
US20170185278A1 (en) 2008-08-11 2017-06-29 Icontrol Networks, Inc. Automation system user interface
US11792036B2 (en) 2008-08-11 2023-10-17 Icontrol Networks, Inc. Mobile premises automation platform
EP2154826B1 (de) * 2008-08-11 2012-12-19 Deutsche Telekom AG Verfahren zur Bereitstellung von Diensten in einer telekommunikativen Netzinfrastruktur
US11729255B2 (en) 2008-08-11 2023-08-15 Icontrol Networks, Inc. Integrated cloud system with lightweight gateway for premises automation
US11758026B2 (en) 2008-08-11 2023-09-12 Icontrol Networks, Inc. Virtual device systems and methods
US10157172B2 (en) * 2008-08-27 2018-12-18 International Business Machines Corporation Property dependency visualization
US11061375B2 (en) * 2010-04-06 2021-07-13 Connie R. Masters Irrigation controller and system
US8565904B2 (en) 2009-09-03 2013-10-22 Bruce Allen Bragg Irrigation controller and system integrating no-watering restrictions and an empirically-derived evapotranspiration local characteristic curve
US8638211B2 (en) 2009-04-30 2014-01-28 Icontrol Networks, Inc. Configurable controller and interface for home SMA, phone and multimedia
US20120005693A1 (en) * 2010-01-08 2012-01-05 Cypress Semiconductor Corporation Development, Programming, and Debugging Environment
US10775960B2 (en) 2009-06-03 2020-09-15 Savant Systems, Inc. User generated virtual room-based user interface
NZ596852A (en) * 2009-06-03 2013-03-28 Savant Systems Llc Virtual room-based light fixture and device control
US10613704B2 (en) 2009-06-03 2020-04-07 Savant Systems, Llc Small screen virtual room-based user interface
US20100318916A1 (en) * 2009-06-11 2010-12-16 David Wilkins System and method for generating multimedia presentations
US8938675B2 (en) * 2009-06-16 2015-01-20 Harman International Industries, Incorporated System for automated generation of audio/video control interfaces
KR101196410B1 (ko) * 2009-07-07 2012-11-01 삼성전자주식회사 Ｔｖ 설치타입에 기초한 자동 환경 설정방법 및 이를 적용한 ｔｖ
US8880586B2 (en) * 2010-04-08 2014-11-04 Microsoft Corporation Metadata subscription registry
US9661428B2 (en) * 2010-08-17 2017-05-23 Harman International Industries, Inc. System for configuration and management of live sound system
JP2012049868A (ja) 2010-08-27 2012-03-08 On Semiconductor Trading Ltd スイッチ回路
JP2012054694A (ja) * 2010-08-31 2012-03-15 On Semiconductor Trading Ltd 双方向スイッチおよびそれを用いたスイッチ回路
US8719581B2 (en) 2010-09-22 2014-05-06 Savant Systems, Llc Programmable multimedia controller with flexible user access and shared device configurations
US8836467B1 (en) 2010-09-28 2014-09-16 Icontrol Networks, Inc. Method, system and apparatus for automated reporting of account and sensor zone information to a central station
WO2012051460A2 (en) * 2010-10-15 2012-04-19 Gridspeak Corporation Systems and methods for automated availability and/or outage management
US11750414B2 (en) 2010-12-16 2023-09-05 Icontrol Networks, Inc. Bidirectional security sensor communication for a premises security system
US9147337B2 (en) 2010-12-17 2015-09-29 Icontrol Networks, Inc. Method and system for logging security event data
US8914724B2 (en) * 2011-04-06 2014-12-16 Savant Systems, Llc Method and apparatus for creating and modifying graphical schedules
US8938312B2 (en) * 2011-04-18 2015-01-20 Sonos, Inc. Smart line-in processing
US9042556B2 (en) 2011-07-19 2015-05-26 Sonos, Inc Shaping sound responsive to speaker orientation
CA2847532A1 (en) 2011-09-02 2013-03-07 Vu LAM Systems and methods for processing software application metadata associated with a software application
US11755510B2 (en) 2011-11-08 2023-09-12 Seagate Technology Llc Data detection and device optimization
US20130191781A1 (en) * 2012-01-20 2013-07-25 Microsoft Corporation Displaying and interacting with touch contextual user interface
US9928562B2 (en) 2012-01-20 2018-03-27 Microsoft Technology Licensing, Llc Touch mode and input type recognition
US8972858B2 (en) * 2012-04-19 2015-03-03 Savant Systems, Llc Configuration interface for a programmable multimedia controller
US9182954B2 (en) * 2012-07-27 2015-11-10 Microsoft Technology Licensing, Llc Web browser having user-configurable address bar button
FR2994625B1 (fr) * 2012-08-20 2014-08-08 Ifeelsmart Telecommande intelligente pour televiseur numerique
KR101365614B1 (ko) * 2012-08-23 2014-03-12 엘지전자 주식회사 외부 전자 디바이스와 커넥티트된 멀티미디어 디바이스 및 그 제어 방법
US11405463B2 (en) 2014-03-03 2022-08-02 Icontrol Networks, Inc. Media content management
US9876652B2 (en) 2014-05-20 2018-01-23 Savant Systems, Llc Automatic configuration of control device user interface in a home automation system
US10042336B2 (en) * 2014-09-09 2018-08-07 Savant Systems, Llc User-defined scenes for home automation
US10678204B2 (en) * 2014-09-30 2020-06-09 Honeywell International Inc. Universal analog cell for connecting the inputs and outputs of devices
CN104571011A (zh) * 2014-11-27 2015-04-29 魏晓慧 嵌入式多媒体控制系统
AU2015361316B2 (en) * 2014-12-11 2019-07-04 Bitdefender Ipr Management Ltd Systems and methods for securing network endpoints
CN104483865B (zh) * 2014-12-26 2017-11-10 小米科技有限责任公司 智能硬件设备的安装实现方法及装置
US10116601B2 (en) * 2015-02-06 2018-10-30 Jamdeo Canada Ltd. Methods and devices for display device notifications
CN104852967B (zh) 2015-04-21 2018-03-27 小米科技有限责任公司 图片共享方法及装置
US11209972B2 (en) 2015-09-02 2021-12-28 D&M Holdings, Inc. Combined tablet screen drag-and-drop interface
US11113022B2 (en) * 2015-05-12 2021-09-07 D&M Holdings, Inc. Method, system and interface for controlling a subwoofer in a networked audio system
US10042339B2 (en) * 2015-10-05 2018-08-07 Savant Systems, Llc Cloud-synchronized architecture for a home automation system
US20180004393A1 (en) 2016-07-01 2018-01-04 Autodesk, Inc. Three dimensional visual programming interface for a network of devices
CN107481491B (zh) * 2016-07-20 2019-09-20 宝沃汽车（中国）有限公司 电器的控制系统及移动终端
US10405041B2 (en) * 2016-11-28 2019-09-03 Rovi Guides, Inc. Systems and methods for predictive spoiler prevention in media assets based on user behavior
CN108235144B (zh) * 2016-12-22 2021-02-19 阿里巴巴（中国）有限公司 播放内容获取方法、装置及计算设备
US10776887B2 (en) * 2017-02-07 2020-09-15 Enseo, Inc. System and method for making reservations in a hospitality establishment
USD862512S1 (en) * 2017-08-28 2019-10-08 Siemens Healthcare Gmbh Display screen or portion thereof with a graphical user interface
US10860339B2 (en) * 2018-08-03 2020-12-08 Dell Products L.P. Autonomous creation of new microservices and modification of existing microservices
US11408626B2 (en) * 2019-01-11 2022-08-09 Johnson Controls Tyco IP Holdings LLP Central plant control system with dynamic computation reduction
US11863343B2 (en) 2019-02-14 2024-01-02 Savant Systems, Inc. Multi-role devices for automation environments
US11172111B2 (en) 2019-07-29 2021-11-09 Honeywell International Inc. Devices and methods for security camera installation planning
CN114651221A (zh) 2019-09-11 2022-06-21 萨万特系统公司 用于家庭自动化系统的基于三维虚拟房间的用户接口

Family Cites Families (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0920207B2 (en) 1992-12-09 2006-09-27 Sedna Patent Services, LLC Interactive terminal for television delivery system
JPH0879847A (ja) * 1994-09-05 1996-03-22 Hitachi Ltd 情報システム及び該システムを構成するａｖ機器及びリモコン操作装置
JP3560078B2 (ja) 1995-02-06 2004-09-02 ソニー株式会社 電子機器制御装置、電子機器制御方法、および電子機器制御システム
US6469633B1 (en) 1997-01-06 2002-10-22 Openglobe Inc. Remote control of electronic devices
US6313880B1 (en) * 1997-04-03 2001-11-06 Sony Corporation Display with one or more display windows and placement dependent cursor and function control
WO1998059478A1 (en) * 1997-06-25 1998-12-30 Samsung Electronics Co., Ltd. Programming tool for home networks
US6421069B1 (en) 1997-07-31 2002-07-16 Sony Corporation Method and apparatus for including self-describing information within devices
US6266098B1 (en) 1997-10-22 2001-07-24 Matsushita Electric Corporation Of America Function presentation and selection using a rotatable function menu
US6061602A (en) * 1998-06-23 2000-05-09 Creative Lifestyles, Inc. Method and apparatus for developing application software for home automation system
US8098140B1 (en) * 2000-07-13 2012-01-17 Universal Electronics Inc. Customizable and upgradable devices and methods related thereto
US7831930B2 (en) 2001-11-20 2010-11-09 Universal Electronics Inc. System and method for displaying a user interface for a remote control application
WO2000017737A1 (en) 1998-09-17 2000-03-30 Koninklijke Philips Electronics N.V. Remote control device with location dependent interface
JP2000197162A (ja) 1998-12-28 2000-07-14 Toshiba Corp リモ―トコントロ―ル装置
RU2237275C2 (ru) 1999-02-18 2004-09-27 Ситрикс Системз, Инк. Сервер и способ (варианты) определения программного окружения клиентского узла в сети с архитектурой клиент/сервер
US6910068B2 (en) 1999-06-11 2005-06-21 Microsoft Corporation XML-based template language for devices and services
US6526581B1 (en) 1999-08-03 2003-02-25 Ucentric Holdings, Llc Multi-service in-home network with an open interface
EP1133188A3 (en) * 2000-02-23 2004-11-24 Sony Corporation Information processing apparatus, network system, recording medium
WO2003005195A2 (en) 2001-07-03 2003-01-16 Imagine Broadband Limited Broadband communications
US7367028B2 (en) * 2001-08-14 2008-04-29 National Instruments Corporation Graphically deploying programs on devices in a system
EP1425745A2 (en) 2001-08-27 2004-06-09 Gracenote, Inc. Playlist generation, delivery and navigation
US20030088852A1 (en) 2001-11-07 2003-05-08 Lone Wolf Technologies Corporation. Visual network operating system and methods
JP2003198871A (ja) 2001-12-25 2003-07-11 Matsushita Electric Ind Co Ltd 家電機器制御システム及び方法並びにそのシステムに用いられるリモコン装置及び家電機器
EP1355485A1 (en) 2002-04-18 2003-10-22 Deutsche Thomson-Brandt Gmbh Method for generating a user interface on a HAVi device for the control of a Non-HAVi device
US20040031019A1 (en) * 2002-05-20 2004-02-12 Richard Lamanna Debugger for a graphical programming environment
EP1506632A1 (en) 2002-05-22 2005-02-16 Josef J. J. Helmes Multimedia interaction system
US20050021470A1 (en) * 2002-06-25 2005-01-27 Bose Corporation Intelligent music track selection
DE10235517A1 (de) 2002-08-05 2004-03-04 Siemens Ag Werkzeug und Verfahren zum Projektieren, Auslegen oder Programmieren einer Anlage
US20040054789A1 (en) 2002-09-12 2004-03-18 International Business Machines Corporation Pervasive home network portal
CN1501267B (zh) 2002-09-20 2010-05-12 富士施乐株式会社 链接信息制作设备、链接信息制作方法及文件处理系统
US7234115B1 (en) * 2002-09-26 2007-06-19 Home Director, Inc. Home entertainment system and method
AU2003286722A1 (en) 2002-10-28 2004-05-25 Gracenote, Inc. Personal audio recording system
JP2004194011A (ja) * 2002-12-11 2004-07-08 Canon Inc リモート操作制御システム、リモート制御装置、リモート操作方法、プログラム、及び記憶媒体
JP4419393B2 (ja) * 2003-01-15 2010-02-24 パナソニック株式会社 情報表示装置及び情報処理装置
US7486294B2 (en) 2003-03-27 2009-02-03 Microsoft Corporation Vector graphics element-based model, application programming interface, and markup language
US20040260407A1 (en) * 2003-04-08 2004-12-23 William Wimsatt Home automation control architecture
KR100493895B1 (ko) 2003-04-17 2005-06-10 삼성전자주식회사 협업 서비스를 위한 홈 네트워크 시스템 및 방법
JPWO2004095293A1 (ja) * 2003-04-24 2006-07-13 三菱電機株式会社 映像情報システム、およびモジュールユニット
US20040267914A1 (en) 2003-06-30 2004-12-30 Roe Bryan Y. Method, apparatus and system for creating efficient UPnP control points
US20080126936A1 (en) 2003-08-21 2008-05-29 Gary Williams Electronic/software multimedia library control system and methods of use thereof
JP2005122271A (ja) 2003-10-14 2005-05-12 Sony Ericsson Mobilecommunications Japan Inc 携帯型電子装置
US20050125564A1 (en) 2003-12-04 2005-06-09 Matsushita Electric Industrial Co., Ltd. Profiling service for the automatic service discovery and control middleware frameworks
WO2005109907A2 (en) 2004-04-30 2005-11-17 Vulcan Inc. Maintaining a graphical user interface state that is based on a selected time
US20070005597A1 (en) * 2004-11-23 2007-01-04 Williams Charles K Name classifier algorithm
JP4617894B2 (ja) * 2005-01-18 2011-01-26 船井電機株式会社 入力切替え装置およびテレビジョン装置
JP2006227135A (ja) 2005-02-16 2006-08-31 Sharp Corp 遠隔操作装置、遠隔操作方法、及び遠隔操作プログラム
US8117588B2 (en) * 2005-08-18 2012-02-14 National Instruments Corporation Spatial iteration node for a graphical program
EP1934828A4 (en) * 2005-08-19 2008-10-08 Gracenote Inc METHOD AND SYSTEM FOR MANAGING THE OPERATION OF A REPRODUCTION DEVICE
US9063739B2 (en) * 2005-09-07 2015-06-23 Open Invention Network, Llc Method and computer program for device configuration
US9153125B2 (en) 2005-12-20 2015-10-06 Savant Systems, Llc Programmable multimedia controller with programmable services
US20070143801A1 (en) 2005-12-20 2007-06-21 Madonna Robert P System and method for a programmable multimedia controller
US8219923B2 (en) * 2006-03-10 2012-07-10 National Instruments Corporation Automatic generation of documentation for specified systems
US7930644B2 (en) 2006-09-13 2011-04-19 Savant Systems, Llc Programming environment and metadata management for programmable multimedia controller
WO2011149558A2 (en) 2010-05-28 2011-12-01 Abelow Daniel H Reality alternate

Also Published As

Publication number Publication date
EP2064883A2 (en) 2009-06-03
AU2007294756B2 (en) 2011-06-16
CA2663167C (en) 2015-04-21
EP2064883B1 (en) 2014-07-23
RU2009112044A (ru) 2010-10-20
US10261529B2 (en) 2019-04-16
ES2518996T3 (es) 2014-11-06
WO2008033453A3 (en) 2008-06-26
US20150192940A1 (en) 2015-07-09
US20080127063A1 (en) 2008-05-29
JP2010504030A (ja) 2010-02-04
US20110167348A1 (en) 2011-07-07
US20190235539A1 (en) 2019-08-01
IL197559A0 (en) 2009-12-24
US10962996B2 (en) 2021-03-30
WO2008033453A2 (en) 2008-03-20
KR20090075690A (ko) 2009-07-08
CN101573969B (zh) 2015-05-20
US8997011B2 (en) 2015-03-31
IL197559A (en) 2015-01-29
CN101573969A (zh) 2009-11-04
AU2007294756A1 (en) 2008-03-20
US7930644B2 (en) 2011-04-19
MX2009002783A (es) 2009-04-15
KR101368133B1 (ko) 2014-03-06
RU2453069C2 (ru) 2012-06-10
CA2663167A1 (en) 2008-03-20
BRPI0716782A2 (pt) 2014-11-11
NZ575441A (en) 2012-03-30

Similar Documents

Publication Publication Date Title
JP5322941B2 (ja) プログラマブルマルチメディアコントローラのためのプログラミング環境及びメタデータ管理
JP5128491B2 (ja) 統合化されたマルチメディア、エンターテイメント、通信、及び制御システム、並びに該システムにより実行されるプログラム可能なサービスの生成方法
CA2870620C (en) Configuration interface for a programmable multimedia controller
US20090055760A1 (en) System and method for creating a user interface
US20080288618A1 (en) Networked Device Control Architecture
TW594601B (en) Fully functional remote control editor and emulator

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100816

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120731

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120731

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121024

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20121127

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130327

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20130604

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130702

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130716

R150 Certificate of patent or registration of utility model

Ref document number: 5322941

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250