JP5834151B2 - ユニバーサルプラグアンドプレイに基づくビデオ監視を実現する方法、装置及びシステム - Google Patents

ユニバーサルプラグアンドプレイに基づくビデオ監視を実現する方法、装置及びシステム Download PDF

Info

Publication number
JP5834151B2
JP5834151B2 JP2014557986A JP2014557986A JP5834151B2 JP 5834151 B2 JP5834151 B2 JP 5834151B2 JP 2014557986 A JP2014557986 A JP 2014557986A JP 2014557986 A JP2014557986 A JP 2014557986A JP 5834151 B2 JP5834151 B2 JP 5834151B2
Authority
JP
Japan
Prior art keywords
dmc
improved
function
acquisition request
video stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014557986A
Other languages
English (en)
Other versions
JP2015513731A (ja
Inventor
ワン、ミンハオ
リウ、チャンレイ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Publication of JP2015513731A publication Critical patent/JP2015513731A/ja
Application granted granted Critical
Publication of JP5834151B2 publication Critical patent/JP5834151B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2807Exchanging configuration information on appliance services in a home automation network
    • H04L12/2812Exchanging configuration information on appliance services in a home automation network describing content present in a home automation network, e.g. audio video content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46Interconnection of networks
    • H04L12/4633Interconnection of networks using encapsulation techniques, e.g. tunneling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1069Session establishment or de-establishment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/2847Home automation networks characterised by the type of home appliance used
    • H04L2012/2849Audio/video appliances
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0084Digital still camera

Description

本発明は、ホームネットワークにおけるユニバーサルプラグアンドプレイ(UPnP:Universal Plug and Play)技術に関し、特にUPnPに基づくビデオ監視を実現する方法、装置及びシステムに関する。
ホームネットワークとは、ホーム制御ネットワークとマルチメディア情報ネットワークを一体に統合させたホーム情報化プラットフォームであり、ホームの範囲内で情報装置、通信装置、娯楽装置などの装置の相互接続及び管理を実現し、データとマルチメディア情報が共有されるシステムを構成する。ホームネットワークにおいてUPnPアーキテクチャを用いて各装置間の接続を実現する。
UPnPアーキテクチャは、インターネット(Internet)の関連プロトコル及び技術に基づいて、装置間の通信プロトコルを定義し、主に、ネットワーク接続アーキテクチャを確立するネットワーク通信プロトロル(TCP/IP:Transmission Control Protocol/Internet Protocol)とハイパーテキスト転送プロトコル(HTTP:Hyper Text Transport Protocol)を含み、提供されるサービスが拡張可能マークアップ言語(XML:Extensible Markup Language)で説明される。
UPnPにおける装置は、デジタルメディアサーバ(DMS: Digital Media Server)、デジタルメディア制御(DMC:Digital Media Control)、メディアレンダラー(DMR:Digital Media Renderer)の3つの機能に分けることができ、DMS機能、DMC機能又はDMR機能を持つモジュールを装置にインストールすることで、それに応じてDMS装置、DMC装置とDMR装置とすることができる。DMS装置は、接続管理サービス(CMS:Connection Manager Service)を利用してDMC装置とDMS装置と接続を確立し、コンテンツディレクトリサービス(CDS:Content Directory Service)を利用して記憶されたメディアデータを管理し、オーディオ及びビデオ伝送サービス(AVT:AV Transport)を利用してDMS装置とDMC装置の間のメディアデータの伝送を制御することに用いられる。DMC装置は、UPnPアーキテクチャにおけるDMS装置とDMR装置を管理し、DMS装置及び/又はDMR装置がシステムにログイン/ログアウトする場合、自身に保存されたデバイスリストをリアルタイムに更新し、DMS装置に保存されたメディアデータのフォーマットに基づいてDMR装置に指定して再生し、且つ再生プロセスを制御することに用いられる。DMR装置は、DMC装置の制御によって、DMS装置から提供されたメディアデータのフォーマットに従ってメディアデータを再生することに用いられる。
しかし、上記のスキームにおいて、UPnPに撮影装置の制御について定義されたルールがないので、現在、UPnPに撮影装置をDMS装置として制御することができず、リアルタイムのビデオ監視機能を提供することができない。
これを鑑みて、本発明の目的は、撮影装置の制御を定義するルールを増加し、UPnPアーキテクチャにおいてリアルタイムビデオ監視機能を提供する、UPnPに基づくビデオ監視を実現する方法、装置及びシステムを提供することにある。
上記目的を達成するために、本発明の技術的なスキームは、以下のように実現される。
本発明に係るUPnPに基づくビデオ監視を実現する方法は、
撮影装置が、改良されたDMS機能を保存するステップと、
前記撮影装置が、DMC装置から送信されたビデオストリーム取得要求を受信して、改良されたDMS機能を利用してビデオストリーム取得要求を解析して撮影を開始するステップとを含む。
上記のスキームにおいて、前記改良されたDMS機能は、既存のDMS機能と、撮影装置への制御コマンドを解析するルールとを含む。
ここで、撮影装置への制御コマンドを解析する前記ルールは、シンプルオブジェクトアクセスプロトコル(SOAP:Simple Object Access Protocol)フォーマットに従ってビデオストリーム取得要求を解析し、XMLフォーマットに従って、前記撮影装置のカメラへの回転コマンドを解析するものである。
上記のスキームにおいて、前記撮影装置が、DMC装置から送信されたビデオストリーム取得要求を受信する前に、当該方法は、撮影装置がDMC装置から送信された撮影装置検索メッセージを受信した場合、対応するDMC装置に撮影装置検索メッセージに対する応答メッセージを返すステップをさらに含む。
上記のスキームにおいて、撮影を開始した後、当該方法は、撮影装置が、DMC装置から送信された前記撮影装置のカメラへの回転コマンドに応じてカメラの角度を調整するステップをさらに含む。
上記のスキームにおいて、前記撮影装置が、DMC装置から送信されたビデオストリーム取得要求を受信する前に、当該方法は、DMC装置が、改良されたDMC機能を保存するステップと、前記DMC装置が、改良されたDMC機能を利用してビデオストリーム取得要求を書き込んで、ビデオストリーム取得要求を撮影装置に送信するステップとを含む。
上記のスキームにおいて、前記改良されたDMC機能は、既存のDMC機能と撮影装置への制御コマンドを書き込むルールを含む。
撮影装置への制御コマンドを書き込む前記ルールは、SOAPフォーマットに従ってビデオストリーム取得要求を書き込み、及びXMLフォーマットに従って前記撮影装置のカメラへの回転コマンドを書き込むものである。
上記のスキームにおいて、前記DMC装置が、改良されたDMC機能を利用してビデオストリーム取得要求を書き込む前に、当該方法は、DMC装置が撮影装置に撮影装置検索メッセージを送信し、撮影装置から送信された撮影装置検索メッセージに対する応答メッセージを受信するステップをさらに含む。
上記のスキームにおいて、ビデオストリーム取得要求を撮影装置に送信した後、当該方法は、撮影装置が回転機能をサポートする場合、DMC装置が、撮影装置に、前記撮影装置のカメラへの回転コマンドを送信するステップをさらに含む。
本発明に係るUPnPに基づくビデオ監視を実現する方法は、
DMC装置が、改良されたDMC機能を保存するステップと、
前記DMC装置が、改良されたDMC機能を利用してビデオストリーム取得要求を書き込み、ビデオストリーム取得要求を撮影装置に送信するステップをさらに含む。
上記のスキームにおいて、前記改良されたDMC機能は、既存のDMC機能と、撮影装置への制御コマンドを書き込むルールを含む。
撮影装置への制御コマンドを書き込む前記ルールは、SOAPフォーマットに従って前記撮影装置のビデオストリーム取得要求を書き込み、及びXMLフォーマットに従ってカメラへの回転コマンドを書き込むものである。
上記のスキームにおいて、前記DMC装置が、改良されたDMC機能を利用してビデオストリーム取得要求を書き込む前に、当該方法は、DMC装置が撮影装置に撮影装置検索メッセージを送信し、撮影装置から送信された撮影装置検索メッセージに対する応答メッセージを受信するステップをさらに含む。
上記のスキームにおいて、ビデオストリーム取得要求を撮影装置に送信した後に、当該方法は、撮影装置が回転機能をサポートする場合、DMC装置が撮影装置に前記撮影装置のカメラへの回転コマンドを送信するステップをさらに含む。
また、本発明に係るUPnPに基づくビデオ監視を実現するシステムは、
改良されたDMC機能を保存し、DMC装置から送信されたビデオストリーム取得要求を受信して、改良されたDMC機能を利用してビデオストリーム取得要求を解析して撮影を開始することに用いられる撮影装置と、
改良されたDMC機能を保存し、改良されたDMC機能を利用してビデオストリーム取得要求を書き込み、ビデオストリーム取得要求を撮影装置に送信することに用いられるDMC装置とを備える。
また、本発明に係る撮影装置は、
改良されたDMC機能を保存し、改良されたDMS機能を利用してDMC装置から送信されたビデオストリーム取得要求を解析し、当該コマンドに従って撮影を開始するように撮影装置に通知することに用いられる改良されたDMS機能モジュールと、
改良されたDMS機能モジュールから送信された撮影開始通知に応じて、撮影を開始することに用いられる撮影機能モジュールと、を備える。
上記のスキームにおいて、前記改良されたDMS機能モジュールは、具体的に、既存のDMS機能及び撮影装置への制御コマンドを解析するルールを保存することに用いられ、ここで、撮影装置への制御コマンドを解析する前記ルールは、SOAPフォーマットに従ってビデオストリーム取得要求を解析し、XMLフォーマットに従って前記撮影装置のカメラへの回転コマンドを解析するものである。
上記のスキームにおいて、前記改良されたDMS機能モジュールは、さらに、DMC装置から送信された撮影装置検索メッセージを受信した場合、対応するDMC装置に撮影装置検索メッセージに対する応答メッセージを返すことに用いられる。
上記のスキームにおいて、前記改良されたDMS機能モジュールは、さらに、DMC装置から送信されたカメラへの回転コマンドに応じて、カメラの角度を調整するように撮影制御モジュールに通知することに用いられる。
それに応じて、前記撮影制御モジュールは、さらに、改良されたDMS機能モジュールから送信されたカメラへの角度調整通知を受信し、通知に応じてカメラを調整することに用いられる。
また、本発明に係るDMC装置は、改良されたDMC機能を保存し、改良されたDMC機能を利用してビデオストリーム取得要求を書き込み、ビデオストリーム取得要求を撮影装置に送信することに用いられる改良されたDMC機能モジュールを備える。
上記のスキームにおいて、前記改良されたDMC機能モジュールは、具体的に、既存のDMC機能と撮影装置への制御コマンドを書き込むルールを保存することに用いられる。ここで、撮影装置への制御コマンドを書き込む前記ルールは、SOAPフォーマットに従ってビデオストリーム取得要求を書き込み、及びXMLフォーマットに従って前記撮影装置のカメラへの回転コマンドを書き込むものである。
上記のスキームにおいて、前記改良されたDMC機能モジュールは、具体的に、撮影装置に撮影装置検索メッセージを送信し、そして撮影装置から送信された撮影装置検索メッセージに対する応答メッセージを受信することに用いられる。
上記のスキームにおいて、前記改良されたDMC機能モジュールは、具体的に撮影装置が回転機能をサポートする場合、撮影装置にカメラへの回転コマンドを送信することに用いられる。
本発明に係るUPnPに基づくビデオ監視を実現する方法、装置及びシステムでは、それぞれ撮影装置とDMC装置に、改良されたDMS機能と改良されたDMC機能を予め設定することにより、DMC装置が撮影装置への制御コマンドを書き込むことができ、撮影装置が撮影装置への制御コマンドを解析することができ、さらに撮影装置がDMC装置から送信されたビデオストリーム取得要求を受信して撮影を開始し、このようにして、UPnPアーキテクチャにおいてリアルタイムのビデオ監視機能を提供することを実現できる。
本発明に係るUPnPに基づくビデオ監視を実現する方法における撮影装置の処理プロセスを示す図である。 本発明に係るUPnPに基づくビデオ監視を実現する方法におけるDMC装置の処理プロセスを示す図である。 本発明に係るUPnPに基づくビデオ監視を実現するシステムの構成構造を示す図である。
本発明の基本的な考えは、撮影装置が改良されたDMS機能を保存し、DMC装置が、改良されたDMC機能を保存し、前記DMC装置が、改良されたDMC機能を利用してビデオストリーム取得要求を書き込み、ビデオストリーム取得要求を撮影装置に送信し、前記撮影装置が、メディア制御DMC装置から送信されたビデオストリーム取得要求を受信し、改良されたDMS機能を利用してビデオストリーム取得要求を解析して撮影を開始するものである。
以下、図面及び具体的な実施形態を参照して本発明をさらに詳しく説明する。
本発明に係るUPnPに基づくビデオ監視を実現する方法における撮影装置の処理プロセスは、図1に示すように、以下のステップを含む。
ステップ101:撮影装置は、改良されたDMS機能を保存する。
ここで、前記撮影装置は、現在の既存のWi−Fi機能を持つ撮影装置である。
前記改良されたDMS機能は、従来技術に規定されたすべてのDMS機能及び撮影装置への制御コマンドを解析するルールを含み、前記従来技術に規定されたすべてのDMS機能の提供方法は、従来技術であるので、ここで繰り返して説明しない。
撮影装置への制御コマンドを解析する前記ルールは、SOAPフォーマットに従ってビデオストリーム取得要求を解析すること、及びXMLフォーマットに従ってカメラへの回転コマンドを解析することを含む。ここで、前記解析方式は、いずれも従来技術の規定に従って行うので、ここで繰り返して説明しない。
ステップ102:撮影装置が、ホームネットワークにログインした後、改良されたDMS機能を利用して、受信されたDMC装置からの情報を解析し、DMC装置から送信されたビデオストリーム取得要求を受信したかどうかを判定し、受信した場合、ステップ103を実行し、受信しなかった場合、処理プロセスを終了する。
具体的には、撮影装置が、ホームネットワークにログインした後、改良されたDMS機能を利用して、受信されたDMC装置からの情報を解析し、DMC装置から送信された撮影装置検索メッセージを受信したかどうかを判定する。撮影装置検索メッセージを受信した場合、撮影装置が、まず対応するDMC装置に撮影装置検索メッセージに対する応答メッセージを返し、次にDMC装置から送信されたビデオストリーム取得要求を受信したかどうかを判定し、受信した場合、ステップ103を実行し、受信しなかった場合、撮影装置検索メッセージを受信したかどうかを判定し続け、DMC装置から送信された撮影装置検索メッセージを受信しなかった場合、DMC装置から送信された撮影装置検索メッセージを受信したかどうかを判定し続ける。
ここで、ホームネットワークへのログインは、従来技術に規定されたDMS機能に従って操作することであり、撮影装置が起動して、ホームネットワークにログインした場合、動的ホスト構成プロトコル(DHCP:Dynamic Host Configuration Protocol)に基づいてホームネットワークにおけるDHCPサーバからインターネットプロトコル(IP:Internet Protocol)アドレスを取得することを含むことができる。前記撮影装置検索メッセージは、送信側装置のIPアドレス、メッセージタイプ、応答待ち時間と検索ターゲット(ST:Search Target)を含み、ここで、STフィールドに検索すべき装置が説明され、前記撮影装置検索メッセージの書き込み方法及び読み取り方法はいずれも従来技術におけるシンプルサービス発見プロトコル(SSDP:Simple Services Discovery Protocol)の規定に従うので、ここで繰り返して説明しない。
対応するDMC装置に撮影装置検索メッセージに対する応答メッセージを返すことは、従来技術に規定されたDMS機能に従って操作することであり、撮影装置が、受信された撮影装置検索メッセージにおけるSTフィールドに基づいて、自身に保存された装置説明情報と比較して、同じである場合、撮影装置の自身説明情報の統一リソースロケータ(URL:Uniform Resource Locator)アドレスが含まれる応答メッセージを対応するDMC装置に返し、同じではない場合、処理プロセスを終了することを含むことができる。前記対応するDMC装置は、撮影装置検索メッセージにおける送信端末IPアドレスに基づいて確定されるものである。
ステップ103:撮影装置が、撮影を開始し、ビデオデータをリアルタイムにキャッシュし、応答メッセージを対応するDMC装置に送信する。
具体的には、撮影装置が、撮影を開始した後、撮影されたビデオをリアルタイムに符号化して圧縮して指定パスにキャッシュし、ビデオデータがキャッシュされたパスに対応するURLアドレスをビデオストリーム取得要求に対する応答メッセージとして対応するDMC装置に送信する。
ここで、前記指定パスは、ユーザが実際の状況に応じて予め設定されたフォルダであってよく、例えばルートディレクトリ下のものであってよい。前記符号化圧縮は、撮影されたビデオをYUVフォーマットからH263フォーマットに変換することであり、変換方法は、従来技術であるので、ここで繰り返して説明しない。前記応答メッセージの書き込みフォーマットは、HTTPにおけるPOSTであり、具体的な書き込み方法は、従来技術であるので、ここで繰り返して説明しない。
ステップ104:撮影装置が、リアルタイムビデオデータをDMC装置に伝送する。
ここで、前記伝送は、従来技術におけるDMS機能の規定に従って行われ、撮影装置がDMC装置から送信されたビデオデータ伝送要求を受信して、指定パスにキャッシュされたリアルタイムビデオデータをDMC装置に送信することであってよい。
上記のステップ104が完了した後、撮影装置が、接続終止コマンドを受信したかどうかをリアルタイムに判定し、受信した場合、ビデオ伝送を停止し、カメラを閉じて、キャッシュされたビデオデータをクリアし、受信しなかった場合、ステップ104を実行し続ける。
また、ステップ104が完了した後、撮影装置が回転可能なカメラである場合、受信されたカメラへの回転コマンドに応じてカメラの角度を調整することができ、撮影装置がカメラへの回転コマンドを受信したかどうかを判定し、受信した場合、カメラへの回転コマンドに応じてカメラの角度を調整し、受信しなかった場合、ステップ104を実行し続けることを含む。
ここで、前記カメラへの回転コマンドは、カメラを回転させる方向、角度を含み、書き込み方法は、UPnP技術に規定されたXMLフォーマットを使用するので、ここで繰り返して説明しない。
本発明に係るUPnPに基づくビデオ監視を実現する方法におけるDMC装置の処理プロセスは、図2に示すように、以下のステップを含む。
ステップ201:DMC装置は、改良されたDMC機能を保存する。
ここで、前記改良されたDMC機能は、従来技術に規定されたすべてのDMC機能、及び撮影装置への制御コマンドを書き込むルールを含む。前記従来技術に規定されたすべてのDMC機能提供方法は、従来技術であるので、ここで繰り返して説明しない。
カマラ装置への制御コマンドを書き込むルールは、SOAPフォーマットに従ってビデオストリーム取得要求を書き込むこと、及びXMLフォーマットに従ってカメラへの回転コマンドを書き込むことを含む。書き込み方式は、従来技術の規定に従って行うことであるので、ここで繰り返して説明しない。
ステップ202:DMC装置が、ホームネットワークにログインして、撮影装置にビデオストリーム取得要求を送信する。
具体的には、DMC装置が、ホームネットワークにログインした後、撮影装置を使用する必要がある場合、ホームネットワークにおけるすべての装置に撮影装置検索メッセージを送信し、DMC装置が受信された撮影装置検索メッセージに対する応答メッセージにおけるURLアドレスに基づいて対応する装置説明情報を取得し、取得された装置説明情報に基づいて撮影装置を選択し、DMC装置が選択された撮影装置にビデオストリーム取得要求を送信する。
ここで、撮影装置検索メッセージを送信すること、及び取得された装置説明情報に基づいて撮影装置を選択することは、いずれも従来技術におけるDMC機能の規定に従って操作され、ここで繰り返して説明しない。
ステップ203:DMC装置が、撮影装置から送信されたURLアドレスを用いて対応する撮影装置からビデオデータを抽出し、再生する。
ここで、撮影装置から送信されたURLアドレスを用いて対応する撮影装置からビデオデータを抽出し、再生することは、従来技術であり、ここで繰り返して説明しない。
ビデオデータを再生することは、従来技術に従ってDMR機能を持つ装置を選択して再生することであって、ここで繰り返して説明しない。
また、DMC装置が、受信された装置説明情報に基づいて、撮影装置が回転機能をサポートするかどうかを判定し、サポートする場合、ステップ203が完了した後に、ユーザの選択によって、撮影装置にカメラへの回転コマンドを送信することができる。それに、DMC装置は、ユーザがリアルタイムビデオ監視を見る必要がない場合に、撮影装置に接続終止コマンドを送信する。
本発明に係るUPnPに基づくビデオ監視を実現するシステムは、図3に示すように、撮影装置31とDMC装置32とを備える。
撮影装置31は、改良されたDMC機能を保存し、DMC装置32から送信されたビデオストリーム取得要求を受信して、改良されたDMS機能を利用してビデオストリーム取得要求を解析して撮影を開始することに用いられる。
DMC装置32は、改良されたDMC機能を保存し、改良されたDMC機能を利用してビデオストリーム取得要求を書き込み、ビデオストリーム取得要求を撮影装置31に送信することに用いられる。
前記撮影装置31は、現在の既存のWi−Fi機能を持つ撮影装置である。
前記撮影装置31は、具体的に、従来技術に規定されたすべてのDMS機能及び増加された、撮影装置31への制御コマンドを解析するルールを、改良されたDMS機能として保存することに用いられる。
前記DMC装置32は、具体的に従来技術に規定されたすべてのDMC機能、及び増加された、撮影装置31への制御コマンドを書き込むルールを、改良されたDMC機能として保存することに用いられる。
前記撮影装置31は、さらに、ホームネットワークにログインして、DMC装置32から送信されたビデオストリーム取得要求を受信したかどうかを判定し、受信した場合、撮影を開始し、ビデオデータをリアルタイムにキャッシュし、受信しなかった場合、操作しないことに用いられる。それに応じて、前記DMC装置32は、さらに、ホームネットワークにログインして、撮影装置31にビデオストリーム取得要求を送信することに用いられる。
前記撮影装置31は、具体的に、ホームネットワークにログインして、DMC装置32から送信された撮影装置検索メッセージを受信したかどうかを判定し、撮影装置検索メッセージを受信した場合、まず対応するDMC装置32に撮影装置検索メッセージに対する応答メッセージを返し、次に、DMC装置32から送信されたビデオストリーム取得要求を受信したかどうかを判定し、受信した場合、撮影を開始し、ビデオデータをリアルタイムにキャッシュし、受信しなかった場合、操作せず、撮影装置検索メッセージを受信しなかった場合、撮影装置検索メッセージを受信したかどうかを判定し続けることに用いられる。
それに応じて、前記DMC装置32は、具体的に、ホームネットワークにログインした後、撮影装置31を使用する必要がある場合、ホームネットワークにおけるすべての装置に撮影装置検索メッセージを送信し、受信された撮影装置検索メッセージにおけるURLアドレスに基づいて対応する装置説明情報を取得し、取得された装置説明情報に基づいて撮影装置31を選択し、選択された撮影装置31にビデオストリーム取得要求を送信することに用いられる。
前記撮影装置31は、具体的に、撮影を開始して、撮影されたビデオをリアルタイムに符号化して圧縮させて指定パスにキャッシュし、ビデオデータがキャッシュされたパスに対応するURLアドレスをビデオストリーム取得要求に対する応答メッセージとして対応するDMC装置32に送信する。それに応じて、前記DMC装置32は、さらに、撮影装置31から送信されたビデオストリーム取得要求に対する応答メッセージを受信することに用いられる。
前記DMC装置32は、さらに、ビデオストリーム取得要求に対する応答メッセージにおけるURLアドレスに基づいて撮影装置31からリアルタイムビデオデータを抽出し、指定された再生ツールを使用してビデオデータを再生することに用いられる。それに応じて、前記撮影装置31は、具体的に、DMC装置32にリアルタイムビデオデータを伝送することに用いられる。
前記DMC装置32は、さらに、受信された装置説明情報に基づいて、撮影装置31が回転機能をサポートするかどうかを判定することに用いられ、サポートする場合、ユーザの選択によって、撮影装置31にカメラへの回転コマンドを送信することができる。それに応じて、前記撮影装置31は、さらに撮影する時にカメラへの回転コマンドを受信したかどうかを判定し、受信した場合、カメラへの回転コマンドに応じてカメラの角度を調整し、受信しなかった場合、撮影を維持し続けることに用いられる。
前記DMC装置32は、さらに、ユーザがリアルタイムビデオデータを見る必要がない場合、撮影装置31に接続終止コマンドを送信することに用いられる。それに応じて、前記撮影装置31は、さらに、撮影する時に接続終止コマンドを受信したかどうかをリアルタイムに判定し、受信した場合、ビデオ伝送を停止し、カメラを閉じて、キャッシュされたビデオデータをクリアし、受信しなかった場合、撮影を維持し続けることに用いられる。
前記撮影装置31は、改良されたDMS機能モジュール311と撮影機能モジュール312とを含む。
ここで、改良されたDMS機能モジュール311は、改良されたDMS機能を保存し、改良されたDMS機能を利用してDMC装置32から送信されたビデオストリーム取得要求を解析し、当該コマンドに従って撮像を開始するように撮像機能モジュール312に通知することに用いられる。
撮像機能モジュール312は、改良されたDMS機能モジュール311から送信された撮像開始通知に応じて、撮像を開始することに用いられる。
前記撮像機能モジュール312は、Wi−Fi機能、及び従来技術において撮像装置31で提供可能な撮像機能を持っている。
前記改良されたDMS機能モジュール311は、具体的に、従来技術に規定されたすべてのDMS機能、及び増加された、撮影装置31への制御コマンドを解析するルールを、改良されたDMS機能として保存することに用いられる。
前記改良されたDMS機能モジュール311は、さらに、ホームネットワークにログインして、DMC装置32から送信されたビデオストリーム取得要求を受信したかどうかを判定し、受信した場合、撮影を開始するように撮影機能モジュール312に通知し、受信しなかった場合、操作しないことに用いられる。
前記改良されたDMS機能モジュール311は、具体的に、ホームネットワークにログインして、DMC装置32から送信された撮影装置検索メッセージを受信したかどうかを判定し、撮影装置検索メッセージを受信した場合、まず対応するDMC装置32に撮影装置検索メッセージに対する応答メッセージを返し、次にDMC装置32から送信されたビデオストリーム取得要求を受信したかどうかを判定し、受信した場合、撮影を開始するように撮影機能モジュール312に通知し、受信しなかった場合、操作せず、撮影装置検索メッセージを受信しなかった場合、撮影装置検索メッセージを受信したかどうかを判定し続けることに用いられる。
前記撮影機能モジュール312は、さらに、撮影を開始して、撮影されたビデオをリアルタイムに符号化して圧縮させて指定パスにキャッシュし、ビデオデータがキャッシュされるパスに対応するURLアドレスを改良されたDMS機能モジュール311に送信することに用いられる。それに応じて、前記改良されたDMS機能モジュール311は、さらに、撮影機能モジュール312から送信されたURLアドレスを受信し、当該URLアドレスをビデオストリーム取得要求に対する応答メッセージとして対応するDMC装置32に送信することに用いられる。
改良されたDMS機能モジュール311は、さらに、撮影機能モジュール312からリアルタイムビデオデータを抽出してDMC装置32に送信することに用いられる。
前記改良されたDMS機能モジュール311は、さらに、カメラへの回転コマンドを受信したかどうかを判定し、受信した場合、カメラへの回転コマンドを解析し、カメラへの回転コマンドに応じてカメラの角度を調整するように撮影機能モジュール312に通知し、受信しなかった場合、操作しないことに用いられる。それに応じて、前記撮影機能モジュール312は、さらに、改良されたDMS機能モジュール311から送信された、カメラの角度調整通知を受信し、自身のカメラを制御して角度を調整することに用いられる。
前記改良されたDMS機能モジュール311は、さらに、接続終止コマンドを受信したかどうかを判定し、受信した場合、ビデオ伝送を停止し、カメラを閉じてビデオデータをクリアするように撮影機能モジュール312に通知し、受信しなかった場合、操作しないことに用いられる。それに応じて、前記撮影機能モジュール312は、さらに、改良されたDMS機能モジュール311から送信された、カメラを閉じてキャッシュされたビデオデータをクリアする通知を受信することに用いられる。
前記DMC装置32は、改良されたDMC機能を保存し、改良されたDMC機能を利用してビデオストリーム取得要求を書き込んで撮影装置31に送信することに用いられる改良されたDMC機能モジュール321を備える。
前記改良されたDMC機能モジュール321は、具体的に、従来技術に規定されたすべてのDMC機能、及び増加された、撮影装置31への制御コマンドを書き込むルールを改良されたDMC機能として保存することに用いられる。
前記改良されたDMC機能モジュール321は、具体的に、ホームネットワークにログインした後、撮影装置31を使用する必要がある場合、ホームネットワークにおけるすべての装置に撮影装置検索メッセージを送信し、受信された撮影装置検索メッセージに対する応答メッセージにおけるURLアドレスに基づいて対応する装置説明情報を取得し、取得された装置説明情報に基づいて撮影装置31を選択し、選択された撮影装置31にビデオストリーム取得要求を送信することに用いられる。
前記改良されたDMC機能モジュール321は、さらに、撮影装置31から送信されたビデオストリーム取得要求に対する応答メッセージを受信し、ビデオストリーム取得要求に対する応答メッセージにおけるURLアドレスに基づいて撮影装置31からリアルタイムビデオデータを抽出し、指定された再生ツールを使用してビデオデータを再生することに用いられる。
前記改良されたDMC機能モジュール321は、さらに、受信された装置説明情報に基づいて撮影装置31が回転機能をサポートするかどうかを判定し、サポートする場合、ユーザの選択によって、撮影装置31にカメラへの回転コマンドを送信することができることに用いられる。
前記改良されたDMC機能モジュール321は、さらに、ユーザがリアルタイムビデオ監視を見る必要がない場合、撮影装置31に接続終止コマンドを送信することに用いられる。
前記改良されたDMC機能モジュールは、ハードウェアモジュールとして携帯電話、タブレットPCなどの端末にインストールされることができ、携帯電話又はタブレットPCに改良されたDMC機能を持たせると、携帯電話又はタブレットPCがDMC装置になる。
上記は、本発明の好ましい実施形態だけであるが、本発明の保護範囲を限定することに用いられるものではない。

Claims (13)

  1. ユニバーサルプラグアンドプレイ(UPnP)に基づくビデオ監視を実現する方法であって、
    撮影装置が、改良されたデジタルメディアサービス(DMS)機能を保存するステップと、
    前記撮影装置が、デジタルメディア制御(DMC)装置から送信されたビデオストリーム取得要求を受信して、改良されたDMS機能を利用して、前記ビデオストリーム取得要求を解析して取得した後、撮影を開始するステップとを含み、
    前記撮影装置が、前記DMC装置から送信された前記ビデオストリーム取得要求を受信する前に、当該方法は、前記撮影装置が、前記DMC装置から送信された撮影装置検索メッセージを受信した場合、対応するDMC装置に前記撮影装置検索メッセージに対する応答メッセージを返すステップをさらに含む
    ことを特徴とする方法。
  2. 前記改良されたDMS機能は、既存のDMS機能と、前記撮影装置への制御コマンドを解析するルールとを含み、
    ここで、前記撮影装置への制御コマンドを解析する前記ルールは、シンプルオブジェクトアクセスプロトコル(SOAP)フォーマットに従って前記ビデオストリーム取得要求を解析し、拡張可能マークアップ言語(XML)フォーマットに従って前記撮影装置のカメラへの回転コマンドを解析するものであることを特徴とする
    請求項1に記載の方法。
  3. 撮影を開始した後、当該方法は、前記撮影装置が、前記DMC装置から送信された前記撮影装置のカメラへの回転コマンドに応じて前記カメラの角度を調整するステップをさらに含むことを特徴とする
    請求項1に記載の方法。
  4. 前記撮影装置が、前記DMC装置から送信された前記ビデオストリーム取得要求を受信する前に、当該方法は、前記DMC装置が、前記改良されたDMC機能を保存するステップと、前記DMC装置が、改良されたDMC機能を利用してビデオストリーム取得要求を書き込んで、前記ビデオストリーム取得要求を前記撮影装置に送信するステップとを含むことを特徴とする
    請求項1に記載の方法。
  5. 前記改良されたDMC機能は、既存のDMC機能と、前記撮影装置への制御コマンドを書き込むルールを含み、
    前記撮影装置への制御コマンドを書き込む前記ルールは、SOAPフォーマットに従って前記ビデオストリーム取得要求を書き込み、XMLフォーマットに従って、前記撮影装置のカメラへの回転コマンドを書き込むものであることを特徴とする
    請求項4に記載の方法。
  6. 前記DMC装置が、改良されたDMC機能を利用してビデオストリーム取得要求を書き込む前に、当該方法は、前記DMC装置が前記撮影装置に撮影装置検索メッセージを送信し、前記撮影装置から送信された前記撮影装置検索メッセージに対する応答メッセージを受信するステップをさらに含むことを特徴とする
    請求項4に記載の方法。
  7. 前記ビデオストリーム取得要求を前記撮影装置に送信した後、当該方法は、前記撮影装置が回転機能をサポートする場合、前記DMC装置が、前記撮影装置に、前記撮影装置のカメラへの回転コマンドを送信するステップをさらに含むことを特徴とする
    請求項4に記載の方法。
  8. 撮影装置であって、
    改良されたDMS機能を保存し、改良されたDMS機能を利用してDMC装置から送信されたビデオストリーム取得要求を解析し、当該要求に従って撮影を開始するように前記撮影装置に通知することに用いられる改良されたDMS機能モジュールと、
    改良されたDMS機能モジュールから送信された撮影開始通知に応じて、撮影を開始することに用いられる撮影機能モジュールと、を備え、
    前記改良されたDMS機能モジュールは、さらに、前記DMC装置から送信された撮影装置検索メッセージを受信した場合、対応するDMC装置に撮影装置検索メッセージに対する応答メッセージを返すことに用いられる
    ことを特徴とする撮影装置。
  9. 前記改良されたDMS機能モジュールは、具体的には、既存のDMS機能及び前記撮影装置への制御コマンドを解析するルールを保存することに用いられ、ここで、前記撮影装置への制御コマンドを解析する前記ルールは、SOAPフォーマットに従ってビデオストリーム取得要求を解析し、XMLフォーマットに従って前記撮影装置のカメラへの回転コマンドを解析するものであることを特徴とする
    請求項8に記載の撮影装置。
  10. 前記改良されたDMS機能モジュールは、さらに、前記DMC装置から送信された前記撮影装置のカメラへの回転コマンドに応じて、前記カメラの角度を調整するように撮影制御モジュールに通知することに用いられ、
    それに応じて、前記撮影制御モジュールは、さらに、改良されたDMS機能モジュールから送信されたカメラへの角度調整通知を受信し、通知に応じてカメラを調整することに用いられることを特徴とする
    請求項8に記載の撮影装置。
  11. DMC装置であって、
    改良されたDMC機能を保存し、改良されたDMC機能を利用してビデオストリーム取得要求を書き込み、ビデオストリーム取得要求を撮影装置に送信することに用いられる改良されたDMC機能モジュールを備え、
    前記改良されたDMC機能モジュールは、具体的に、前記撮影装置に撮影装置検索メッセージを送信し、そして前記撮影装置から送信された前記撮影装置検索メッセージに対する応答メッセージを受信することに用いられる
    ことを特徴とするDMC装置。
  12. 前記改良されたDMC機能モジュールは、具体的には、既存のDMC機能と撮影装置への制御コマンドを書き込むルールを保存することに用いられ、ここで、前記撮影装置への制御コマンドを書き込む前記ルールは、SOAPフォーマットに従ってビデオストリーム取得要求を書き込み、及びXMLフォーマットに従って前記撮影装置のカメラへの回転コマンドを書き込むものであることを特徴とする
    請求項11に記載のDMC装置。
  13. 前記改良されたDMC機能モジュールは、具体的には、前記撮影装置が回転機能をサポートする場合、前記撮影装置にカメラへの回転コマンドを送信することに用いられることを特徴とする
    請求項11に記載のDMC装置。
JP2014557986A 2012-02-24 2013-02-21 ユニバーサルプラグアンドプレイに基づくビデオ監視を実現する方法、装置及びシステム Active JP5834151B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201210044252.5A CN103297666B (zh) 2012-02-24 2012-02-24 基于通用即插即用实现视频监控的方法、装置及系统
CN201210044252.5 2012-02-24
PCT/CN2013/071746 WO2013123888A1 (zh) 2012-02-24 2013-02-21 基于通用即插即用实现视频监控的方法、装置及系统

Publications (2)

Publication Number Publication Date
JP2015513731A JP2015513731A (ja) 2015-05-14
JP5834151B2 true JP5834151B2 (ja) 2015-12-16

Family

ID=49005011

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014557986A Active JP5834151B2 (ja) 2012-02-24 2013-02-21 ユニバーサルプラグアンドプレイに基づくビデオ監視を実現する方法、装置及びシステム

Country Status (5)

Country Link
US (1) US20150049208A1 (ja)
EP (1) EP2819384A4 (ja)
JP (1) JP5834151B2 (ja)
CN (1) CN103297666B (ja)
WO (1) WO2013123888A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105049735B (zh) * 2015-09-14 2017-12-01 北京奇虎科技有限公司 网络摄像头的控制方法及装置
CN107965350A (zh) * 2017-12-21 2018-04-27 天地(常州)自动化股份有限公司 一种煤矿安全监控系统传感器自动识别、即插即用方法
CN115361581B (zh) * 2022-08-17 2023-11-24 杭州华橙软件技术有限公司 媒体流的传输方法及装置、存储介质、电子装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6646676B1 (en) * 2000-05-17 2003-11-11 Mitsubishi Electric Research Laboratories, Inc. Networked surveillance and control system
US6798344B2 (en) * 2002-07-08 2004-09-28 James Otis Faulkner Security alarm system and method with realtime streaming video
US20070070210A1 (en) * 2003-04-11 2007-03-29 Piccionelli Gregory A Video production with selectable camera angles
US20070157267A1 (en) * 2005-12-30 2007-07-05 Intel Corporation Techniques to improve time seek operations
JP4914171B2 (ja) * 2006-10-16 2012-04-11 キヤノン株式会社 撮像装置の制御方法及びカメラシステム
CN101166163B (zh) * 2006-10-18 2010-07-07 浙江工业大学 基于手机远程控制的安全智能家庭网关
CN101184063B (zh) * 2007-10-11 2010-12-15 华为技术有限公司 控制非通用即插即用UPnP设备的方法、装置及其系统
EP2264968A1 (en) * 2009-06-16 2010-12-22 Thomson Licensing Method and apparatus for UPnP device access control
ES2498746T3 (es) * 2009-06-30 2014-09-25 Orange Procedimiento de comando de una entidad de una red distante a partir de una red local
CN101635818A (zh) * 2009-08-26 2010-01-27 中兴通讯股份有限公司 一种监控信息传输的方法及系统
JP5327810B2 (ja) * 2010-01-06 2013-10-30 株式会社Kddi研究所 ホームネットワークにおけるコンテンツ再生方法及びシステム
US9210233B2 (en) * 2010-01-26 2015-12-08 Flipps Media Ad System for sending internet based content to a media device through a mobile phone
JP5679675B2 (ja) * 2010-02-23 2015-03-04 キヤノン株式会社 コンテンツ提供装置、コンテンツ提供装置の処理方法、プログラム
CN101924758B (zh) * 2010-07-28 2015-01-28 中兴通讯股份有限公司 一种媒体服务器及其提供服务的方法
CN101980508B (zh) * 2010-11-01 2013-05-15 深圳市鼎盛威电子有限公司 网络监控系统上的网络自适应运行模式
CN102143172B (zh) * 2011-03-21 2014-10-29 杭州华三通信技术有限公司 一种视频数据的传输方法和设备
CN202657204U (zh) * 2012-04-26 2013-01-09 天津新河船舶重工有限责任公司 船体超大型总组段找正定位用横移顶推装置
CN102657204A (zh) * 2012-05-11 2012-09-12 湖南农业大学 一种增效杀虫剂组合物

Also Published As

Publication number Publication date
CN103297666A (zh) 2013-09-11
US20150049208A1 (en) 2015-02-19
JP2015513731A (ja) 2015-05-14
CN103297666B (zh) 2018-07-31
WO2013123888A1 (zh) 2013-08-29
EP2819384A1 (en) 2014-12-31
EP2819384A4 (en) 2015-03-04

Similar Documents

Publication Publication Date Title
US20170353647A1 (en) Method and Apparatus for Live Capture Image-Live Streaming Camera
US10142381B2 (en) System and method for scalable cloud services
EP3025317B1 (en) System and method for scalable video cloud services
CN102571726B (zh) 多媒体数据共享的方法、系统及状态判定服务器
US10979674B2 (en) Cloud-based segregated video storage and retrieval for improved network scalability and throughput
CN103647954B (zh) 基于3g信道与智能终端的移动视频监控系统
US20130286211A1 (en) Method and apparatus for live capture image-live streaming camera utilizing personal portable device
US20140043424A1 (en) Video calling using a remote camera device to stream video to a local endpoint host acting as a proxy
US11621986B2 (en) Peer-to-peer media streaming from an edge data storage device to a browser
KR101821123B1 (ko) 웹브라우저 상에서 미디어 스트림을 재생하는 방법 및 장치
WO2017092338A1 (zh) 一种数据传输的方法和装置
CN101212654A (zh) 一种网络视频监控系统及其数据获取方法
KR101260167B1 (ko) 다채널 영상 분배 방법 및 장치, 이를 이용한 영상 관제 시스템
JP2014512716A (ja) 遠隔制御スタジオ・カメラ・システム
CN107770564B (zh) 远程采集音视频数据的方法及装置
WO2014183540A1 (zh) 一种视频监控的内容适配方法、系统及中心服务器、装置
US20210203887A1 (en) Cloud-based segregated video storage and retrieval for improved network scalability and throughput
WO2024032566A1 (zh) 无人机图传方法、系统及计算机可读存储介质
JP5834151B2 (ja) ユニバーサルプラグアンドプレイに基づくビデオ監視を実現する方法、装置及びシステム
CN107547517B (zh) 音视频节目录制方法和网络设备及计算机装置
CN103581607B (zh) 使用远程摄像机设备将视频流传递到本地端点主机的方法
KR20080055423A (ko) 실시간 인터넷 프로토콜 기반의 감시 시스템에서 범용인터페이스를 이용한 카메라의 제어 방법 및 장치
TWI648984B (zh) 多媒體串流系統及方法
KR101837980B1 (ko) 이기종 영상제공장치를 포함하는 영상통합중계 및 활용시스템과 그의 제어방법
TW202147833A (zh) 遠端即時影像支援系統與方法

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150515

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150814

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150925

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151016

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151030

R150 Certificate of patent or registration of utility model

Ref document number: 5834151

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250