JP2002344961A - 画面構成方法、画面構成装置、及び画像表示システム - Google Patents

画面構成方法、画面構成装置、及び画像表示システム

Info

Publication number
JP2002344961A
JP2002344961A JP2001143661A JP2001143661A JP2002344961A JP 2002344961 A JP2002344961 A JP 2002344961A JP 2001143661 A JP2001143661 A JP 2001143661A JP 2001143661 A JP2001143661 A JP 2001143661A JP 2002344961 A JP2002344961 A JP 2002344961A
Authority
JP
Japan
Prior art keywords
screen
list
imaging
screen configuration
video display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001143661A
Other languages
English (en)
Other versions
JP2002344961A5 (ja
JP4780854B2 (ja
Inventor
Kouichirou Tanaka
宏一良 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2001143661A priority Critical patent/JP4780854B2/ja
Priority to US09/861,128 priority patent/US7034864B2/en
Publication of JP2002344961A publication Critical patent/JP2002344961A/ja
Priority to US11/326,720 priority patent/US7683933B2/en
Publication of JP2002344961A5 publication Critical patent/JP2002344961A5/ja
Application granted granted Critical
Publication of JP4780854B2 publication Critical patent/JP4780854B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)

Abstract

(57)【要約】 【課題】 一般のエンドユーザーが専用のソフトウェア
ツールをインストールすることなく、用途に適した映像
表示画面を簡単に低コストで作成できるようにするこ
と。 【解決手段】 接続された1以上の撮像装置のうち、任
意の撮像装置から得られる映像を表示するための画面を
構成する画面構成方法は、画面パターンの一覧を外部装
置に出力する工程(S102)と、前記接続された撮像
装置の一覧を前記外部装置に出力する工程(S106)
と、前記外部装置から、画面パターンのいずれか1つを
示す情報を受信する工程(S104)と、前記外部装置
から、前記撮像装置の少なくともいずれか1つを示す情
報を受信する工程(S108)と、前記外部装置から受
信した画面パターン及び撮像装置の情報に基づいて、映
像表示画面を作成する工程(S110)と、前記作成し
た映像表示画面を記憶する工程(S110)とを有す
る。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、画面構成方法、画
面構成装置、及び画像表示システムに関し、更に詳しく
は、ネットワークに接続された複数のカメラの中から任
意のカメラの画像を表示する画面を作成する画面構成方
法、画面構成装置、及び画像表示システムに関する。
【0002】
【従来の技術】ビデオカメラを用いた監視システムは、
用途やカメラの台数などにより、最適なレイアウトの監
視端末が要求される。
【0003】この種の監視システムでは、古くは、カメ
ラのアナログ映像信号をそのままビデオモニタに表示す
るため、映像はモニタの物理的な配置で決められた。ま
た、カメラに対して各種操作を行なう操作パネルのレイ
アウトは、製造時のスイッチの物理的な配置で決められ
た。
【0004】近年になり、コンピュータのGUI(グラ
フィカルユーザーインターフェース)を利用した監視シ
ステムでは、コンピュータ画面上に操作パネルおよび映
像モニタをグラフィカルに描画し、マウスなどのポイン
ティングデバイスでこれを操作する。このため、プログ
ラムやスクリプトの修正によって映像の表示スタイルや
操作パネルのレイアウト等の画面構成を変更することが
できる。
【0005】
【発明が解決しようとする課題】しかしながら、従来の
この種の画像表示装置では、画面構成を変更するために
は、専門のプログラム技術者がプログラムやスクリプト
あるいはページ記述を修正する必要があるため、一般の
エンドユーザーが簡単に画面構成を変更することができ
なかった。
【0006】このため、用途に適した画面構成の監視シ
ステムを導入するためには、専門のプログラム技術者に
作業を依頼するコストが生じていた。
【0007】あるいは、この種の作業を支援する専用の
ソフトウェアツールをコンピュータにインストールして
使用していた。
【0008】本発明は上記問題点を鑑みてなされたもの
であり、一般のエンドユーザーが専用のソフトウェアツ
ールをインストールすることなく、用途に適した映像表
示画面を簡単に低コストで作成することができる画像表
示方法、画像表示装置、及び画像表示システムを提供す
ることを目的とする。
【0009】
【課題を解決するための手段】上記目的を達成するため
に、接続された1以上の撮像装置のうち、任意の撮像装
置から得られる映像を表示するための画面を構成する本
発明の画面構成方法は、画面パターンの一覧を外部装置
に出力する工程と、前記接続された撮像装置の一覧を前
記外部装置に出力する工程と、前記外部装置から、画面
パターンのいずれか1つを示す情報を受信する工程と、
前記外部装置から、前記撮像装置の少なくともいずれか
1つを示す情報を受信する工程と、前記外部装置から受
信した画面パターン及び撮像装置の情報に基づいて、映
像表示画面を作成する工程と、前記作成した映像表示画
面を記憶する工程とを有する。
【0010】または、接続された1以上の撮像装置のう
ち、任意の撮像装置から得られる映像を表示するための
画面を構成する本発明の画面構成方法は、画面構成装置
から情報処理装置に対して、画面パターンの一覧を要求
する工程と、前記要求に応じて、画面パターンの一覧を
前記情報処理装置から前記画面構成装置に出力する工程
と、前記画面構成装置において、前記画面パターンの一
覧を表示する工程と、前記表示された前記画面パターン
の一覧から、画面パターンのいずれか1つを選択する工
程と、前記画面構成装置から前記情報処理装置へ、前記
選択された画面パターンを示す情報を送信する工程と、
前記画面構成装置から前記情報処理装置に対して、接続
された撮像装置の一覧を要求する工程と、前記要求に応
じて、接続された撮像装置の一覧を前記情報処理装置か
ら前記画面構成装置に出力する工程と、前記画面構成装
置において、前記撮像装置の一覧を表示する工程と、前
記表示された前記撮像装置の一覧から、少なくとも1つ
の撮像装置を選択する工程と、前記画面構成装置から前
記情報処理装置へ、前記選択された撮像装置を示す情報
を送信する工程と、前記送信された画面パターン及び撮
像装置の情報に基づいて、前記情報処理装置において映
像表示画面を作成する工程と、前記作成した映像表示画
面を前記情報処理装置に記憶する工程とを有する。
【0011】また、上記目的を達成するために、接続さ
れた1以上の撮像装置のうち、任意の撮像装置から得ら
れる映像の表示を行うための画面を構成する本発明の画
面構成装置は、画面パターンの一覧を保持する手段と、
前記接続された撮像装置の一覧を保持する手段と、前記
画面パターンの一覧及び前記撮像装置の一覧を外部装置
に出力する送信手段と、前記外部装置から、画面パター
ンのいずれか1つを示す情報及び前記撮像装置の少なく
ともいずれか1つを示す情報を受信する受信手段と、前
記外部装置から受信した画面パターン及び撮像装置の情
報に基づいて、映像表示画面を作成する画面生成手段
と、前記作成した映像表示画面を記憶する手段とを有す
る。
【0012】また、本発明の画像表示システムは、上記
画面構成装置、前記1以上の撮像装置と、1以上の外部
装置と、1以上の表示装置とを含み、前記各外部装置
は、前記画像パターン及び前記撮像装置の一覧を前記画
面構成装置に対して要求する手段と、前記画像パターン
及び前記撮像装置の一覧を表示する表示手段と、前記表
示手段に表示された前記画像パターン及び前記撮像装置
の一覧から、前記画像パターンのいずれか1つ及び少な
くとも1つの撮像装置を選択する選択手段と、前記選択
手段により選択した画像パターン及び撮像装置を示す情
報を送信する送信手段とを有する。
【0013】
【発明の実施の形態】以下、添付図面を参照して本発明
の好適な実施の形態を詳細に説明する。
【0014】1はパン・チルト・ズームを制御可能なカ
メラ、2はカメラ1から入力される映像をデジタル化
し、Motion−JPEG形式に圧縮してネットワー
クに送信するネットワークカメラアダプタである。ま
た、ネットワークカメラアダプタ2は逆にネットワーク
から受信した制御コマンドに基づいてシリアル通信でカ
メラ1を制御する。3はインターネットプロトコルを通
すネットワークである。カメラ1とネットワークカメラ
アダプタ2の組(「カメラステーション」と呼ぶ。)が
ネットワーク3に複数組接続される。カメラ1およびネ
ットワークアタプタ2は、異なる種類のものが混在して
いてもよい。
【0015】また、ネットワークアダプタ2はUniversa
l Plug and Play(UPnP)などのネットワーク機器
自動検出プロトコルに対応していることが望ましい。
【0016】4はパーソナルコンピュータを利用したモ
ニタリングステーションである。モニタリングステーシ
ョン4はネットワーク3を通してネットワークカメラア
ダプタ2からの映像を受信し、復号化し、表示する。ま
た、モニタリングステーション4はマウスやジョイステ
ィック、キーボード等の操作に応じてネットワークカメ
ラアダプタ2に対し、パン・チルト・ズームなどのカメ
ラ制御コマンドを送信する。モニタリングステーション
4もネットワーク3に複数接続される。
【0017】5はパーソナルコンピュータを利用した管
理クライアント、6はパーソナルコンピュータを利用し
た管理サービスサーバーである。管理サービスサーバー
6はネットワーク3に接続されるカメラステーションの
名前やネットワークアドレス、種類などの情報を管理
し、管理データをXML形式で保存する。また、管理サ
ービスサーバー6はモニタリングステーション4に表示
するモニタリング画面を設計し、画面スタイルデータを
XSL形式で、映像の配置等のデータおよびカメラ配置
図(カメラマップ)のデータをXML形式で保存する。
なお、これらのデータ構成については、図4を参照して
詳細に後述する。
【0018】管理サービスサーバー6ではWebサーバ
ーが動作しており、インターネット等のネットワークを
通して、モニタリングシステムの管理サービスを提供す
る。管理クライアント5はWebブラウザを利用して管
理サービスサーバー6にアクセスし、サービスを利用す
ることができる。サービスを利用するに当たって、管理
クライアント5は特別なソフトウェアをインストールす
る必要が無く、一般のモニタリング管理者が簡単にモニ
タリング画面を作成したり、システムの管理をすること
ができる。
【0019】なお、モニタリングステーション4と管理
クライアント5を一台のパーソナルコンピュータを兼用
して構成してもよい。
【0020】図2は、本実施の形態におけるモニタリン
グステーション4の画面(モニタリング画面)の一例を
示す図である。21はカメラの映像を表示する映像ビュ
ーア、22はカメラマップを表示するマップビューア、
23、24、25はそれぞれカメラのパン、チルト、ズ
ーム制御をするためのスクロールバーである。26及び
28はカメラマップ上のカメラを示すカメラアイコン、
27及び29はカメラの撮影方向と撮影範囲を示すスコ
ープアイコンである。カメラアイコン26または28を
クリックしてカメラを切り替えることにより所望のカメ
ラから得られる映像を表示することができる。また、ス
コープアイコン27をマウスで操作することによって
も、カメラをパン、チルト、ズーム制御することができ
る。
【0021】これらの操作ボタンの他にも、逆光補正や
プリセット選択、スナップショット(静止画像キャプチ
ャ指示)、パノラマ表示などの操作部を設けることもで
きる。
【0022】図3はモニタリングステーション、管理ク
ライアントおよび管理サービスサーバーに利用される一
般的なパーソナルコンピュータの構成図である。
【0023】31は全体を統括制御するCPU、32は
主記憶部(RAM)、33はフロッピー(登録商標)デ
ィスクおよびCD−ROMなどの取り外し可能な外部記
憶装置、34はハードディスクなどの二次記憶装置、3
5はポインティングデバイスとして機能するマウス、3
6はキーボード、37はネットワークインタフェース、
38はビデオボード、39はモニタである。
【0024】図4はモニタリングステーション4で用い
られるソフトウェアおよびデータの構成図であり、上述
の通り、データは管理サービスサーバー6により生成・
更新され、格納される。
【0025】41はスタイル指定言語XSLで記述され
たスタイルシートファイルを、データ記述言語XMLで
記述されたデータファイルに適用して表示できるWeb
ブラウザである。Webブラウザ41はまた、Java
やActiveX形式のプラグインプログラムやECM
AScript形式のスクリプトプログラムを実行でき
る。
【0026】42はモニタリング画面全体の表示スタイ
ルと操作応答を記述したメインスタイルシートファイ
ル、43はマップビューア22の表示スタイルと操作応
答をXSL形式およびECMAScript形式で記述
したマップビューアスタイルシートファイル、44は映
像ビューア21の表示スタイルと操作応答を記述した映
像ビューアスタイルシートファイルである。各スタイル
シートファイルはモニタリングの用途や利用業務形態ご
とに数種類用意される。
【0027】また、45はモニタリング画面全体の表示
オプションデータを記述したメインデータファイル、4
6はマップビューア22用のカメラ配置データを記述し
たマップデータファイル、47は映像ビューアの表示オ
プションデータを記述した映像ビューアデータファイ
ル、48は全カメラステーションの管理データやリンク
データを記述したカメラリストデータファイルである。
【0028】49はActiveX形式あるいはJav
a applet形式の映像表示プログラム部品、41
0はカメラマップ上に描画されるビットマップのイメー
ジデータファイルである。
【0029】メインデータファイル45には、メインス
タイルシートファイル42がリンクでスタイル指定され
ている。また、マップデータファイル46をマップデー
タとして使用するためのリンク指定と、カメラリストデ
ータファイル48をカメラリストデータとして使用する
ためのリンク指定が記述されている。
【0030】マップデータファイル46には、マップビ
ューアスタイルシートファイル43がリンクでスタイル
として指定されている。また、メインデータファイル4
5でリンク指定されているカメラリストデータファイル
48のデータを参照するための参照指定が記述されてい
る。
【0031】カメラリストデータファイル48には、ネ
ットワーク3に接続されるカメラごとにカメラステーシ
ョンの名前やネットワークアドレス、種類などの管理デ
ータや、使用すべき映像ビューアスタイルシートファイ
ル44へのリンク指定が記述されている。
【0032】映像ビューアスタイルシートファイル44
には、使用する映像表示プログラム部品49のリンク指
定が記述されている。
【0033】図5はWebブラウザ41がモニタリング
画面を生成する処理を示すフローチャートである。
【0034】Webブラウザ41は最初にメインデータ
ファイル45を管理サービスサーバー6から取得し読み
込む(ステップS51)。
【0035】次に、リンクでスタイル指定されているメ
インスタイルシートファイル42を管理サービスサーバ
ー6から取得し読み込む(ステップS52)。次に、メ
インスタイルシートファイル42を解析し、XSL形式
で記述されている変換指定に従って、メインデータファ
イル45を解析し、モニタリング画面の生成を開始する
(ステップS54)。
【0036】この生成過程でまず、リンク指定されたカ
メラリストデータファイル48を管理サービスサーバー
6から取得して読み込む(ステップS55)。
【0037】次に、まずリンク指定されたマップデータ
ファイル46をカメラマップとして表示するために管理
サービスサーバー6から取得して読み込む(ステップS
56)。次に、マップデータファイル46にリンクでス
タイル指定されているマップビューアスタイルシートフ
ァイル43を管理サービスサーバー6から取得し読み込
む(ステップS57)。次に、マップビューアスタイル
シートファイル43を解析し、XSL形式で記述されて
いる変換指定に従って、マップデータファイル46を解
析し、マップビューア画面の生成を開始する(ステップ
S58)。
【0038】この過程で、まずマップデータファイル4
6に記述された背景ビットマップファイルのリンク指定
やカメラアイコンの表示位置指定をもとに、必要に応じ
て管理サービスサーバー6からビットマップファイル4
10を取得し読み込んで、マップの基本描画を行う(ス
テップS59)。次に、マップデータファイル46に記
述されたカメラIDに相当するカメラの名前等を、参照
指定されているカメラリストデータファイル48のデー
タ中から検索して、マップ上に表示する(ステップS5
10)。
【0039】図6はWebブラウザ41が映像ビューア
21を生成する処理を示すフローチャートである。
【0040】ユーザーがマップビューア22上のカメラ
アイコン26または28をマウスでクリックすると、マ
ップビューアスタイルシートファイル43に記述された
対応するカメラのスクリプト関数演算を実行する(ステ
ップS61)。さらに、メインスタイルシートファイル
42に記述されたスクリプト関数演算を実行する(ステ
ップS62)。
【0041】この過程でまず、クリックしたカメラアイ
コンのカメラIDに相当するカメラに適した映像ビュー
アスタイルシートファイル44のリンク指定を、カメラ
リストデータファイル48のデータ中から検索し、映像
ビューアスタイルシートファイル44を管理サービスサ
ーバー6から取得し読み込む(ステップS63)。次
に、映像ビューアデータファイル47を管理サービスサ
ーバー6から取得し読み込む(ステップS64)。次
に、映像ビューアスタイルシートファイル44を解析
し、XSL形式で記述されている変換指定に従って、映
像ビューアデータファイル47を解析し、映像ビューア
画面の生成を開始する(ステップS65)。
【0042】そして、映像ビューアスタイルシートファ
イル44に記述されたリンク指定に従い、映像表示プロ
グラム部品49を管理サービスサーバー6から取得し読
み込む(ステップS66)。次に、表示するカメラのカ
メラIDに対応する、例えばTCP/IPアドレスなど
の接続情報をカメラリストデータファイル48のデータ
中から検索する(ステップS67)。次に、検索した接
続情報を指定して映像表示プログラム部品の実行を開始
する(ステップS68)。この過程で映像表示プログラ
ム部品はカメラステーションとTCP/IP接続し、カ
メラの映像を取得して表示する(ステップS69)。
【0043】以上説明したように、本実施の形態におい
ては、管理サービスサーバー6上に記憶された各種スタ
イルシートファイルやデータファイルをもとに、Web
ブラウザ41が起動時に、あるいは操作に応じて動的に
モニタリング画面を生成し表示する。
【0044】このため、例えばスタイルシートファイル
を交換するだけで、モニタリング画面の表示スタイルを
変更することができる。また、データファイルを変更す
るだけで、異なるカメラ配置や構成に対しても、同一表
示スタイルのモニタリング画面を生成することができ
る。
【0045】次に、図4に示す管理サービスサーバー6
におけるデータの生成・更新について説明する。
【0046】図7は管理サービスサーバー6のソフトウ
ェアおよびデータの構成図である。
【0047】71はネットワーク3に接続されるカメラ
ステーションの名前、識別番号、ネットワークアドレス
(接続情報)、種類などの情報リストを管理するカメラ
管理ツールである。カメラ管理ツール71は情報をカメ
ラリストデータファイル48に書き出して、保存する。
【0048】72はカメラマップを編集するマップエデ
ィタである。マップエディタ72はマップ上のカメラア
イコンの位置や背景ビットマップについて編集し、それ
らの情報をマップデータファイル46に書き出して、保
存する。
【0049】73はウィザード式に質問を順次提示して
モニタリング画面を自動構成するモニタリングウィザー
ドである。モニタリングウィザード73は構成結果をメ
インデータファイル45および映像ビューアデータファ
イル47に書き出して、保存する。
【0050】図8はカメラ管理ツール71に管理クライ
アント5からWebブラウザでアクセスした時の画面の
一例を示す図である。
【0051】図8において、81は登録されているカメ
ラステーションの情報をリスト表示するリスト表示部、
82は新規にカメラステーション情報を追加登録するた
めの追加ボタン、83はカメラステーションの名前を変
更するための名前変更ボタン、84はカメラステーショ
ンの登録を削除するための削除ボタン、85はUniversa
l Plug and Play(UPnP)などのネットワーク機器自動検
出プロトコルによりネットワークに接続したカメラステ
ーションを自動検出する自動検出ボタンである。追加ボ
タン82が押されると、カメラを追加するための画面が
表示される。
【0052】図9はカメラの追加を行うための画面の一
例を示す図である。121はカメラステーションのネッ
トワークアドレスを入力する入力部、122はカメラス
テーションの名前を入力する入力部である。123は入
力処理を完了する完了ボタンである。適切なネットワー
クアドレスと名前が入力された状態で完了ボタン123
が押されると、管理クライアント5は、ネットワークア
ドレスと名前を管理サービスサーバー6に送信する。管
理サービスサーバー6はこれを受信すると、カメラステ
ーションの一覧に新しいカメラを追加する。
【0053】また、図8に示す自動検出ボタン85が押
された場合、管理クライアント5は、カメラ管理ツール
71の画面表示プログラムに埋め込まれたスクリプト記
述に従って、カメラステーションを自動検出し、XML
形式のデバイス情報ファイルを取得する。そして、その
デバイス情報ファイルを管理サービスサーバー6に転送
する。管理サービスサーバー6はこれを受信すると、カ
メラリストデータファイル48に新しいカメラステーシ
ョンを追加する。
【0054】図10はモニタリングウィザード73(図
7)に管理クライアント5からWebブラウザでアクセ
スした時の画面の一例を示す図である。91は次の質問
へ進む「次へ」ボタン、92は直前の質問へ戻る「戻
る」ボタン、93はモニタリングウィザードを中止する
キャンセルボタンである。94aと94bはモニタリン
グ画面の種類と形式の一覧を表示し、ひとつを選択させ
るリストである。
【0055】図11はモニタリングウィザード73の動
作フローを示す図である。
【0056】まず、管理クライアント5がモニタリング
ウィザードの第一画面(画面の種類の一覧表示)にアク
セスし、画面を要求する(ステップS101)。管理サ
ービスサーバー6は要求に応えてモニタリング画面の種
類と形式の一覧画面を送信する(ステップS102)。
管理クライアント5は画面の一覧を受信し、表示する
(ステップS103)。次に、管理クライアント5はユ
ーザーが選択した画面の種類を示すIDを管理サービス
サーバー6に送信する(ステップS104)。管理サー
ビスサーバー6は、送信されたIDを受信し(ステップ
S105)、カメラステーションの一覧を送信する(ス
テップS106)。
【0057】次に、管理クライアント5はカメラステー
ションの一覧を受信し、表示する(ステップS10
7)。次に、管理クライアント5はユーザーが選択した
カメラステーションを示すIDを管理サービスサーバー
6に送信する(ステップS108)。次に、管理サービ
スサーバー6はカメラステーションのIDを受信し(ス
テップS109)、最後に、画面の種類IDとカメラス
テーションIDから、メインデータファイル43、映像
ビューアデータファイル47および必要に応じマップデ
ータファイル46を生成して、保存する(ステップS1
10)。このとき、メインデータファイル43には、ス
テップS102で選択された基本スタイルに対応するメ
インスタイルシートファイル42へのリンクをスタイル
指定として書き込む。
【0058】以上のようにして作成されたモニタリング
画面は、管理サービスサーバ6にアクセスすることで、
管理クライアント5またはモニタリングステーション4
からモニタリング画面一覧の画面で随時確認することが
できる。
【0059】図12はモニタリング画面一覧を示す画面
例を示す図である。管理クライアント5またはモニタリ
ングステーション4がモニタリング画面一覧にアクセス
すると、管理サービスサーバー6は一覧を送信し、管理
クライアント5またはモニタリングステーション4がこ
れを表示する。130はモニタリング画面の一覧リス
ト、131は新たにモニタリング画面を作成するために
モニタリングウィザードを起動する新規作成ボタン、1
32は作成済みのモニタリング画面を削除するための削
除ボタン、133はモニタリング画面を実際に表示して
利用するための表示ボタン、134は作成済みのモニタ
リング画面を再度変更するための編集ボタンである。
【0060】ここで表示ボタン133が押されると、管
理クライアント5またはモニタリングステーション4は
選択されたモニタリング画面のIDを管理サービスサー
バー6に送信し、モニタリング画面を要求する。管理サ
ービスサーバー6はこのIDを受信し、要求されたモニ
タリング画面に対応するメインデータファイル43を管
理クライアント5またはモニタリングステーション4に
送信する。管理クライアント5またはモニタリングステ
ーション4はこれを受信し、図5及び図6を参照して先
に説明したフローと同様にしてモニタリング画面を生
成、表示、実行する。
【0061】図13は、モニタリング画面の基本スタイ
ルの選択肢の例を示す図である。
【0062】111は図2でも示した、フロア型カメラ
マップ+映像型のスタイル、112は広域型カメラマッ
プ+映像型のスタイル、113はカメラリスト+映像型
のスタイル、114はフロアマップ+4映像固定表示型
のスタイル、115は4映像固定表示型のスタイル、1
16は6映像固定表示型のスタイル、117は1映像フ
ルスクリーン型のスタイル、118は目次画面+映像型
のスタイルである。なお、本発明は図13に示すスタイ
ルに限るものでは無く、様々な形態のスタイルが可能で
あることはいうまでもない。
【0063】なお、上記実施の形態においては、管理ク
ライアント5がモニタリング画面の作成を行うものとし
て説明したが、モニタリングステーション4からも行え
るように構成できることは言うまでもない。
【0064】また、特定のクライアント(上記実施の形
態では管理クライアント5)のみにモニタリング画面を
作成、編集、削除する権限を与える場合には、例えば、
権限を与えようとする管理クライアントを管理サービス
サーバ6に予め登録したり、パスワードにより管理サー
ビスサーバ6に接続するクライアントを分類するなど、
公知の方法を用いることができる。
【0065】
【他の実施形態】本発明の目的は、前述した実施形態の
機能を実現するソフトウェアのプログラムコードを記録
した記憶媒体(または記録媒体)を、システムあるいは
装置に供給し、そのシステムあるいは装置のコンピュー
タ(またはCPUやMPU)が記憶媒体に格納されたプ
ログラムコードを読み出し実行することによっても、達
成されることは言うまでもない。この場合、記憶媒体か
ら読み出されたプログラムコード自体が前述した実施形
態の機能を実現することになり、そのプログラムコード
を記憶した記憶媒体は本発明を構成することになる。ま
た、コンピュータが読み出したプログラムコードを実行
することにより、前述した実施形態の機能が実現される
だけでなく、そのプログラムコードの指示に基づき、コ
ンピュータ上で稼働しているオペレーティングシステム
(OS)などが実際の処理の一部または全部を行い、そ
の処理によって前述した実施形態の機能が実現される場
合も含まれることは言うまでもない。ここでプログラム
コードを記憶する記憶媒体としては、例えば、フロッピ
ーディスク、ハードディスク、ROM、RAM、磁気テ
ープ、不揮発性のメモリカード、CD−ROM、CD−
R、DVD、光ディスク、光磁気ディスク、MOなどが
考えられる。
【0066】さらに、記憶媒体から読み出されたプログ
ラムコードが、コンピュータに挿入された機能拡張カー
ドやコンピュータに接続された機能拡張ユニットに備わ
るメモリに書込まれた後、そのプログラムコードの指示
に基づき、その機能拡張カードや機能拡張ユニットに備
わるCPUなどが実際の処理の一部または全部を行い、
その処理によって前述した実施形態の機能が実現される
場合も含まれることは言うまでもない。
【0067】本発明を上記記憶媒体に適用する場合、そ
の記憶媒体には、先に説明した図5及び図6および/ま
たは図11に示すフローチャートに対応するプログラム
コードが格納されることになる。
【0068】
【発明の効果】以上のように、本発明によれば、一般の
エンドユーザーが専用のソフトウェアツールをインスト
ールすることなく、用途に適した映像表示画面を簡単に
低コストで作成することができる。
【図面の簡単な説明】
【図1】本発明の実施の形態における遠隔モニタリング
システムの構成図である。
【図2】モニタリングステーションの画面(モニタリン
グ画面)の一例を示す図である。
【図3】パーソナルコンピュータの構成を示すブロック
図である。
【図4】本発明の実施の形態におけるモニタリングステ
ーションで用いられるソフトウェアおよびデータの構成
図である。
【図5】本発明の実施の形態におけるWebブラウザが
モニタリング画面を生成する処理を示すフローチャート
である。
【図6】本発明の実施の形態におけるWebブラウザが
映像ビューアを生成する処理を示すフローチャートであ
る。
【図7】本発明の実施の形態における管理サービスサー
バで用いられるソフトウェアおよびデータの構成図であ
る。
【図8】本発明の実施の形態におけるカメラ管理ツール
にアクセスした場合の画面の一例を示す図である。
【図9】本発明の実施の形態におけるカメラ追加のため
の画面の一例を示す図である。
【図10】本発明の実施の形態におけるモニタリングウ
ィザードの画面の一例を示す図である。
【図11】本発明の実施の形態におけるモニタリングウ
ィザードの動作を示すフローチャートである。
【図12】本発明の実施の形態におけるモニタリング画
面一覧を示す画面例を示す図である。
【図13】本発明の実施の形態におけるモニタリング画
面の基本スタイルの選択肢の例を示す図である。
【符号の説明】
1 カメラ 2 ネットワークアダプタ 3 ネットワーク 4 モニタリングステーション 5 管理ステーション、管理クライアント 6 サーバー、管理サービスサーバー
───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5C054 AA02 CA04 CE15 CE16 CF05 CH01 DA06 EA01 EA03 EA05 EA07 ED07 FA09 FE16 FE19 GB11 GB16 GB18 HA18 HA19 5E501 AB15 AC15 AC32 BA03 CB02 CB09 CB14 CC16 DA15 EA34 FA03 FA13 FA14 FA23 5K048 AA04 EB02 EB15 FB10 FC01 HA01 HA21

Claims (36)

    【特許請求の範囲】
  1. 【請求項1】 接続された1以上の撮像装置のうち、任
    意の撮像装置から得られる映像を表示するための画面を
    構成する画面構成方法であって、 画面パターンの一覧を外部装置に出力する工程と、 前記接続された撮像装置の一覧を前記外部装置に出力す
    る工程と、 前記外部装置から、画面パターンのいずれか1つを示す
    情報を受信する工程と、 前記外部装置から、前記撮像装置の少なくともいずれか
    1つを示す情報を受信する工程と、 前記外部装置から受信した画面パターン及び撮像装置の
    情報に基づいて、映像表示画面を作成する工程と、 前記作成した映像表示画面を記憶する工程とを有するこ
    とを特徴とする画面構成方法。
  2. 【請求項2】 記憶した1以上の映像表示画面の一覧を
    外部装置に送信する工程と、 前記外部装置から、映像表示画面のいずれか1つを示す
    情報を受信する工程と、 前記情報が示す映像表示画面の生成に必要なデータを前
    記外部装置に送信する工程とを更に有することを特徴と
    する請求項1に記載の画面構成方法。
  3. 【請求項3】 前記外部装置から、前記撮像装置の一覧
    に追加する撮像装置の情報を受信する工程と、 前記受信した撮像装置の情報を前記撮像装置の一覧に追
    加する工程とを更に有し、 前記撮像装置の一覧には、新規に撮像装置を追加するた
    めに必要な情報が付帯されていることを特徴とする請求
    項1又は2に記載の画面構成方法。
  4. 【請求項4】 接続された1以上の撮像装置のうち、任
    意の撮像装置から得られる映像を表示するための画面を
    構成する画面構成方法であって、 画面構成装置から情報処理装置に対して、画面パターン
    の一覧を要求する工程と、 前記要求に応じて、画面パターンの一覧を前記情報処理
    装置から前記画面構成装置に出力する工程と、 前記画面構成装置において、前記画面パターンの一覧を
    表示する工程と、 前記表示された前記画面パターンの一覧から、画面パタ
    ーンのいずれか1つを選択する工程と、 前記画面構成装置から前記情報処理装置へ、前記選択さ
    れた画面パターンを示す情報を送信する工程と、 前記画面構成装置から前記情報処理装置に対して、接続
    された撮像装置の一覧を要求する工程と、 前記要求に応じて、接続された撮像装置の一覧を前記情
    報処理装置から前記画面構成装置に出力する工程と、 前記画面構成装置において、前記撮像装置の一覧を表示
    する工程と、 前記表示された前記撮像装置の一覧から、少なくとも1
    つの撮像装置を選択する工程と、 前記画面構成装置から前記情報処理装置へ、前記選択さ
    れた撮像装置を示す情報を送信する工程と、 前記送信された画面パターン及び撮像装置の情報に基づ
    いて、前記情報処理装置において映像表示画面を作成す
    る工程と、 前記作成した映像表示画面を前記情報処理装置に記憶す
    る工程とを有することを特徴とする画面構成方法。
  5. 【請求項5】 前記情報処理装置から、記憶した1以上
    の映像表示画面の一覧を前記画面構成装置に出力する工
    程と、 前記送信された映像表示画面の一覧を前記画面構成装置
    で表示する工程と、 前記表示された映像表示画面の一覧から、1つの映像表
    示画面を選択する工程と、 前記画面構成装置から前記情報処理装置へ、前記選択さ
    れた映像表示画面を示す情報を送信する工程と、 前記情報処理装置から前記画面構成装置へ、前記選択さ
    れた映像表示画面の生成に必要なデータを送信する工程
    と、 前記画面構成装置において、前記送信されたデータを用
    いて、映像表示画面を生成する工程とを更に有すること
    を特徴とする請求項4に記載の画面構成方法。
  6. 【請求項6】 前記画面構成装置において、新規に撮像
    装置を追加するための画面を表示する工程と、 前記画面構成装置から前記情報処理装置へ、前記撮像装
    置の一覧に追加する撮像装置の情報を送信する工程と、 前記追加する撮像装置の情報を前記撮像装置の一覧に追
    加する工程とを更に有し、 前記撮像装置の一覧には、新規に撮像装置を追加するた
    めの画面を表示するために必要な情報が付帯されている
    ことを特徴とする請求項4又は5に記載の画面構成方
    法。
  7. 【請求項7】 前記撮像装置はパン、チルト、ズーム、
    画質の内の少なくとも1つを含む撮像方法の機能を制御
    可能であり、前記映像表示画面は、前記機能を制御する
    ための表示を含むことを特徴とする請求項1乃至6のい
    ずれかに記載の画面構成方法。
  8. 【請求項8】 前記画面パターンは、カメラの配置を示
    す地図表示パターンを含むことを特徴とする請求項1乃
    至7のいずれかに記載の画面構成方法。
  9. 【請求項9】 前記撮像装置は、ネットワークカメラサ
    ーバ装置を介してネットワークに接続されることを特徴
    とする請求項1乃至8のいずれかに記載の画面構成方
    法。
  10. 【請求項10】 前記撮像装置は、ネットワークインタ
    ーフェースを備えることを特徴とする請求項1乃至9の
    いずれかに記載の画面構成方法。
  11. 【請求項11】 前記撮像装置は、ネットワーク機器自
    動被検出手段を有し、 前記画面構成方法は前記ネットワークに接続された撮像
    装置を検出する自動検出工程を更に有し、 前記自動検出工程及び前記ネットワーク機器自動被検出
    手段は、UPnP(Universal Plug and Play)仕様に
    基づくことを特徴とする請求項10に記載の画面構成方
    法。
  12. 【請求項12】 前記撮像装置の一覧に追加する撮像装
    置の情報は、当該撮像装置のネットワークアドレスを含
    むことを特徴とする請求項3又は6に記載の画面構成方
    法。
  13. 【請求項13】 前記外部装置は、ネットワークを介し
    て接続されていることを特徴とする請求項1乃至12の
    いずれかに記載の画面構成方法。
  14. 【請求項14】 前記画面パターンの一覧、前記撮像装
    置の一覧、及び前記映像表示画面は、インターネットプ
    ロトコルに準拠したフォーマットで記述されていること
    を特徴とする請求項1乃至13のいずれかに記載の画面
    構成方法。
  15. 【請求項15】 前記画面パターンの一覧、前記撮像装
    置の一覧、及び前記映像表示画面は、Webブラウザに
    よりブラウズ可能なフォーマットで記述されていること
    を特徴とする請求項1乃至14のいずれかに記載の画面
    構成方法。
  16. 【請求項16】 前記画面パターン及び撮像装置の一覧
    は、XML(eXtensible Markup Language)で記述され
    ていることを特徴とする請求項1乃至15のいずれかに
    記載の画面構成方法。
  17. 【請求項17】 前記映像表示画面は、XSL(eXtens
    ible Stylesheet Language)で記述されていることを特
    徴とする請求項1乃至16のいずれかに記載の画面構成
    方法。
  18. 【請求項18】 接続された1以上の撮像装置のうち、
    任意の撮像装置から得られる映像の表示を行うための画
    面を構成する画面構成装置であって、 画面パターンの一覧を保持する手段と、 前記接続された撮像装置の一覧を保持する手段と、 前記画面パターンの一覧及び前記撮像装置の一覧を外部
    装置に出力する送信手段と、 前記外部装置から、画面パターンのいずれか1つを示す
    情報及び前記撮像装置の少なくともいずれか1つを示す
    情報を受信する受信手段と、 前記外部装置から受信した画面パターン及び撮像装置の
    情報に基づいて、映像表示画面を作成する画面生成手段
    と、 前記作成した映像表示画面を記憶する手段とを有するこ
    とを特徴とする画面構成装置。
  19. 【請求項19】 記憶した1以上の映像表示画面の一覧
    を前記送信手段により外部装置に送信し、 前記外部装置から、映像表示画面のいずれか1つを示す
    情報を前記受信手段により受信し、 前記情報が示す映像表示画面の生成に必要なデータを前
    記送信手段により前記外部装置に送信することを特徴と
    する請求項18に記載の画面構成装置。
  20. 【請求項20】 前記外部装置から、前記撮像装置の一
    覧に追加する撮像装置の情報を前記受信手段により受信
    し、 前記受信した撮像装置の情報を前記撮像装置の一覧に追
    加する手段を更に有し、 前記撮像装置の一覧には、新規に撮像装置を追加するた
    めに必要な情報が付帯されていることを特徴とする請求
    項18又は19に記載の画面構成装置。
  21. 【請求項21】 前記撮像装置はパン、チルト、ズー
    ム、画質の内の少なくとも1つを含む撮像方法の機能を
    制御可能であり、前記映像表示画面は、前記機能を制御
    するための表示を含むことを特徴とする請求項18乃至
    20のいずれかに記載の画面構成装置。
  22. 【請求項22】 前記画面パターンは、カメラの配置を
    示す地図表示パターンを含むことを特徴とする請求項1
    8乃至21のいずれかに記載の画面構成装置。
  23. 【請求項23】 前記撮像装置は、ネットワークカメラ
    サーバ装置を介してネットワークに接続されることを特
    徴とする請求項18乃至22のいずれかに記載の画面構
    成装置。
  24. 【請求項24】 前記撮像装置は、ネットワークインタ
    ーフェースを備えることを特徴とする請求項18乃至2
    3のいずれかに記載の画面構成装置。
  25. 【請求項25】 前記撮像装置は、ネットワーク機器自
    動被検出手段を有し、 前記画面構成装置は前記ネットワークに接続された撮像
    装置を検出するネットワーク機器自動検出手段を更に有
    し、 前記自動検出被検出手段及び前記ネットワーク機器自動
    検出手段は、UPnP(Universal Plug and Play)仕
    様に基づくことを特徴とする請求項24に記載の画面構
    成装置。
  26. 【請求項26】 前記撮像装置の一覧に追加する撮像装
    置の情報は、当該撮像装置のネットワークアドレスを含
    むことを特徴とする請求項20に記載の画面構成装置。
  27. 【請求項27】 前記外部装置は、ネットワークを介し
    て接続されていることを特徴とする請求項18乃至26
    のいずれかに記載の画面構成装置。
  28. 【請求項28】 前記画面パターンの一覧、前記撮像装
    置の一覧、及び前記映像表示画面は、インターネットプ
    ロトコルに準拠したフォーマットで記述されていること
    を特徴とする請求項18乃至27のいずれかに記載の画
    面構成装置。
  29. 【請求項29】 前記画面パターンの一覧、前記撮像装
    置の一覧、及び前記映像表示画面は、Webブラウザに
    よりブラウズ可能なフォーマットで記述されていること
    を特徴とする請求項18乃至28のいずれかに記載の画
    面構成装置。
  30. 【請求項30】 前記画面パターン及び撮像装置の一覧
    は、XML(eXtensible Markup Language)で記述され
    ていることを特徴とする請求項18乃至29のいずれか
    に記載の画面構成装置。
  31. 【請求項31】 前記映像表示画面は、XSL(eXtens
    ible Stylesheet Language)で記述されていることを特
    徴とする請求項18乃至30のいずれかに記載の画面構
    成装置。
  32. 【請求項32】 請求項18乃至31のいずれかに記載
    の画面構成装置と、前記1以上の撮像装置と、1以上の
    外部装置と、1以上の表示装置とを含む画像表示システ
    ムであって、前記各外部装置は、 前記画像パターン及び前記撮像装置の一覧を前記画面構
    成装置に対して要求する手段と、 前記画像パターン及び前記撮像装置の一覧を表示する表
    示手段と、 前記表示手段に表示された前記画像パターン及び前記撮
    像装置の一覧から、前記画像パターンのいずれか1つ及
    び少なくとも1つの撮像装置を選択する選択手段と、 前記選択手段により選択した画像パターン及び撮像装置
    を示す情報を送信する送信手段とを有することを特徴と
    する画像表示システム。
  33. 【請求項33】 前記画面構成装置と、前記1以上の撮
    像装置と、前記1以上の外部装置と、前記1以上の表示
    装置とは、ネットワークを介して接続されていることを
    特徴とする請求項32に記載の画像表示システム。
  34. 【請求項34】 請求項1乃至17のいずれかに記載の
    画面構成方法を実現するためのプログラムコードを有す
    る情報処理装置が実行可能なプログラム。
  35. 【請求項35】 情報処理装置が実行可能なプログラム
    であって、前記プログラムを実行した情報処理装置を、
    請求項18乃至31のいずれかに記載の画面構成装置と
    して機能させることを特徴とするプログラム。
  36. 【請求項36】 請求項34又は35に記載のプログラ
    ムを記憶した記憶媒体。
JP2001143661A 2000-05-19 2001-05-14 画面構成方法及び画面構成装置 Expired - Lifetime JP4780854B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2001143661A JP4780854B2 (ja) 2001-05-14 2001-05-14 画面構成方法及び画面構成装置
US09/861,128 US7034864B2 (en) 2000-05-19 2001-05-18 Image display apparatus, image display system, and image display method
US11/326,720 US7683933B2 (en) 2000-05-19 2006-01-06 Image display apparatus, image display system, and image display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001143661A JP4780854B2 (ja) 2001-05-14 2001-05-14 画面構成方法及び画面構成装置

Publications (3)

Publication Number Publication Date
JP2002344961A true JP2002344961A (ja) 2002-11-29
JP2002344961A5 JP2002344961A5 (ja) 2008-06-26
JP4780854B2 JP4780854B2 (ja) 2011-09-28

Family

ID=18989769

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001143661A Expired - Lifetime JP4780854B2 (ja) 2000-05-19 2001-05-14 画面構成方法及び画面構成装置

Country Status (1)

Country Link
JP (1) JP4780854B2 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006260162A (ja) * 2005-03-17 2006-09-28 Hitachi Kokusai Electric Inc 情報伝送システム
JP2006345489A (ja) * 2005-05-10 2006-12-21 Canon Inc 画像再生装置及び画像再生方法
JP2008199416A (ja) * 2007-02-14 2008-08-28 Matsushita Electric Works Ltd 遠隔監視システム
JP2009017312A (ja) * 2007-07-05 2009-01-22 Canon Marketing Japan Inc 画像データ表示指示装置及び画像データ表示制御装置
US8106964B2 (en) 2005-05-10 2012-01-31 Canon Kabushiki Kaisha Image reproduction apparatus and image reproduction method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000050240A (ja) * 1998-07-29 2000-02-18 Rhythm Watch Co Ltd 監視カメラユニット
JP2000222275A (ja) * 1999-01-29 2000-08-11 Internatl Business Mach Corp <Ibm> ウェブ・ペ―ジ・コンテンツ調整方法、システムおよび記憶媒体
JP2000276493A (ja) * 1999-01-29 2000-10-06 Canon Inc 電子的にアクセスできるリソースのブラウジング方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000050240A (ja) * 1998-07-29 2000-02-18 Rhythm Watch Co Ltd 監視カメラユニット
JP2000222275A (ja) * 1999-01-29 2000-08-11 Internatl Business Mach Corp <Ibm> ウェブ・ペ―ジ・コンテンツ調整方法、システムおよび記憶媒体
JP2000276493A (ja) * 1999-01-29 2000-10-06 Canon Inc 電子的にアクセスできるリソースのブラウジング方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006260162A (ja) * 2005-03-17 2006-09-28 Hitachi Kokusai Electric Inc 情報伝送システム
JP2006345489A (ja) * 2005-05-10 2006-12-21 Canon Inc 画像再生装置及び画像再生方法
US8106964B2 (en) 2005-05-10 2012-01-31 Canon Kabushiki Kaisha Image reproduction apparatus and image reproduction method
JP2008199416A (ja) * 2007-02-14 2008-08-28 Matsushita Electric Works Ltd 遠隔監視システム
JP2009017312A (ja) * 2007-07-05 2009-01-22 Canon Marketing Japan Inc 画像データ表示指示装置及び画像データ表示制御装置

Also Published As

Publication number Publication date
JP4780854B2 (ja) 2011-09-28

Similar Documents

Publication Publication Date Title
US7034864B2 (en) Image display apparatus, image display system, and image display method
JP3787404B2 (ja) カメラ制御システム及びその制御方法
US6973200B1 (en) Image processing apparatus, image processing method, and storage medium
JP4532610B2 (ja) カメラ制御システムおよびその方法およびその動作処理を実行するプログラムを記憶した記憶媒体
JP4235300B2 (ja) 通信システム
CN100568215C (zh) 网络投影仪界面系统
US8860821B2 (en) System and method for accessing and utilizing ancillary data with an electronic camera device
RU2295755C2 (ru) Система управления сетью, способ отображения и программа
JP2008117019A (ja) 会議情報管理装置、会議再生装置、設備管理装置、会議システム及びプログラム
KR102198847B1 (ko) 사용자 맞춤형 웹기반 프로그램 작화 시스템
JP2012064207A (ja) ホスト装置及びホスト装置のコンテンツ表示方法
JP5140553B2 (ja) 情報処理装置及びこれを含む画像形成システム
JP2002344961A (ja) 画面構成方法、画面構成装置、及び画像表示システム
JP3937469B2 (ja) 情報処理システム及びその方法及び装置
JP2001333421A (ja) 画像表示装置、画像表示システム、及び画像表示方法
JP2000099136A (ja) ネットワーク制御装置、機器制御装置、及び、ネットワークシステム
JP2002247539A (ja) ネットワークプロジェクタ装置
KR101966548B1 (ko) 다수의 이질적인 센서 네트워크 플랫폼을 위한 센서 메타 데이터 생성 시스템
JP5084699B2 (ja) 情報処理装置及びこれを含む画像形成システム
JP5140552B2 (ja) 情報処理装置及びこれを含む画像形成システム
JP2001333418A (ja) 画像表示装置及び方法
JP2007156712A (ja) 情報処理装置及びその制御方法、プログラム
JP2002010245A (ja) 画像処理装置及び画像処理方法及び記憶媒体
JPH10260953A (ja) オーサリング装置
JP2008148162A (ja) 情報処理装置及びその制御方法、プログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080513

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080513

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110201

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110304

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110427

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110701

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110705

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140715

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4780854

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140715

Year of fee payment: 3

EXPY Cancellation because of completion of term