JP2002077881A - Image pickup and processing device and monitoring system - Google Patents

Image pickup and processing device and monitoring system

Info

Publication number
JP2002077881A
JP2002077881A JP2000264298A JP2000264298A JP2002077881A JP 2002077881 A JP2002077881 A JP 2002077881A JP 2000264298 A JP2000264298 A JP 2000264298A JP 2000264298 A JP2000264298 A JP 2000264298A JP 2002077881 A JP2002077881 A JP 2002077881A
Authority
JP
Japan
Prior art keywords
video information
unit
transmission
memory means
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000264298A
Other languages
Japanese (ja)
Inventor
Shigeru Omori
茂 大森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2000264298A priority Critical patent/JP2002077881A/en
Publication of JP2002077881A publication Critical patent/JP2002077881A/en
Pending legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To provide a transmitting capability to an image pickup system. SOLUTION: The image pickup and processing device has an imaging section 34, an image compressing section for compressing the image information which is picked up by the imaging section 34, a memory means for storing the compressed image information, a transmission and reception processing section 40 for transmitting the image information stored in the memory means, and a transmitting and receiving means 39. When the device is accessed from outside or the set time arrives, the image information stored in the memory means is read out and is delivered. Since the image pickup and processing device is provided with the transmission processing means which can be connected to a network circuit, there is no need to provide a terminal or the like which can be connected to the internet separately from the image pickup and processing device. Also, a network between the image pickup and processing device and a monitoring device can be easily established only by connecting the image pickup and processing device to a phone line or the like.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】この発明は、監視システムお
よびこの監視システムに適用して好適な撮像処理装置に
関する。詳しくは、被写体を撮像する撮像部およびその
処理系の他に、外部とアクセスできる機能を付加するこ
とで、専用回線などを敷設することなく、その映像情報
などを外部に転送できるようにしたものであり、さらに
遠隔よりその映像を監視できるようにしたものである。
[0001] 1. Field of the Invention [0002] The present invention relates to a monitoring system and an image processing apparatus suitable for application to the monitoring system. In detail, in addition to an imaging unit that captures the subject and its processing system, a function that allows access to the outside has been added so that video information etc. can be transferred to the outside without laying a dedicated line etc. In addition, the video can be monitored remotely.

【0002】[0002]

【従来の技術】公共施設や、企業の窓口などには出入り
する中に不審者がいないかどうかを監視する監視システ
ムが導入されている場合が多い。この監視システムは、
周知のように専用の監視カメラと監視装置とで構成さ
れ、監視カメラと監視室に設置された監視モニタを含め
た監視装置との間は、専用線で接続されている。
2. Description of the Related Art In many cases, a monitoring system for monitoring whether there is any suspicious person while entering or leaving a public facility or a window of a company is introduced. This monitoring system
As is well known, it is composed of a dedicated monitoring camera and a monitoring device, and the monitoring camera and a monitoring device including a monitoring monitor installed in a monitoring room are connected by a dedicated line.

【0003】監視を外部に委託するときには、警備会社
と監視カメラとの間は専用線や公衆回線を使用して接続
されている。
When outsourcing surveillance, a security company and a surveillance camera are connected using a dedicated line or a public line.

【0004】警備会社が直接監視していない監視システ
ムの場合(個人商店の防犯システムなど)には、専用線
などの代わりにVTRなどの記録手段が備えられ、この
記録手段に防犯カメラで捉えた大量の映像情報を保存す
るようにしている。
[0004] In the case of a surveillance system that is not directly monitored by a security company (such as a security system for a private store), a recording means such as a VTR is provided instead of a dedicated line, and the recording means uses a security camera. A large amount of video information is stored.

【0005】[0005]

【発明が解決しようとする課題】このような監視システ
ムにあっては、監視カメラと監視装置との間を専用線で
接続する必要があるから、既存の建物にこの監視システ
ムを導入する場合、監視カメラと監視室との間が離れて
いるようなときには、専用線の敷設工事が面倒である。
In such a surveillance system, since it is necessary to connect a surveillance camera and a surveillance device with a dedicated line, when this surveillance system is introduced into an existing building, When the surveillance camera and the surveillance room are far apart, the laying of a dedicated line is troublesome.

【0006】警備会社に委託するようなときには、警備
会社との間に、専用線や公衆回線を利用した回線網を設
置しなければならず、多額の工事費用を負担する必要が
あった。
When entrusted to a security company, a line network using a dedicated line or a public line must be set up with the security company, and a large amount of construction cost has to be paid.

【0007】商店などに設置される防犯カメラを使用し
た設備でも、専用線の代わりに容量の大きな記録手段を
備えなければならず、設備の初期投資は相当なものであ
る。このように従来の監視システムでは、何れもの専用
線敷設に伴う工事費や、設備投資が重荷になると言った
問題を有していた。
[0007] Even equipment using a security camera installed in a store or the like must be provided with a large-capacity recording means instead of a dedicated line, and the initial investment of the equipment is considerable. As described above, the conventional monitoring system has a problem in that the construction cost and the capital investment associated with laying any dedicated line are burdensome.

【0008】そこで、この発明はこのような従来の課題
を解決したものであって、特にインターネットなどのネ
ットワーク回線を巧みに利用することで、安価に構築で
きる監視システムおよびそれに使用できる撮像処理装置
を提案するものである。
Accordingly, the present invention has solved such a conventional problem. In particular, a surveillance system which can be constructed at a low cost by skillfully utilizing a network line such as the Internet and an image processing apparatus which can be used for the surveillance system have been proposed. It is a suggestion.

【0009】[0009]

【課題を解決するための手段】上述の課題を解決するた
め、請求項1に記載したこの発明に係る撮像処理装置で
は、撮像部と、この撮像部で撮像された映像情報を圧縮
する映像圧縮部と、圧縮された映像情報を保存するメモ
リ手段と、このメモリ手段に保存された映像情報を送受
信処理する送受信処理部と、送受信手段とを有し、外部
からアクセスがあったときか、設定時刻になったとき
に、上記メモリ手段に保存されている上記映像情報を読
み出して送信するようにしたことを特徴とする。
In order to solve the above-mentioned problems, an image processing apparatus according to the first aspect of the present invention includes an image pickup section and a video compression section for compressing image information picked up by the image pickup section. , A memory means for storing the compressed video information, a transmission / reception processing unit for transmitting and receiving the video information stored in the memory means, and a transmission / reception means, for setting whether there is an external access. At the time, the video information stored in the memory means is read and transmitted.

【0010】請求項5に記載したこの発明に係る監視シ
ステムでは、不審者を監視するための撮像部を備えた撮
像処理装置と、この撮像処理装置がネットワーク回線を
介して接続される、ブラウズ機能を備えた監視装置とで
監視システムが構築され、上記撮像処理装置には、撮像
部と、この撮像部で撮像された映像情報を圧縮する映像
圧縮部と、圧縮された映像情報を保存するメモリ手段
と、このメモリ手段に保存された映像情報を送受信処理
する送受信処理部と、送受信手段とを有し、上記監視装
置からアクセスがあったときか、設定時刻になったとき
に、上記メモリ手段に保存されている上記映像情報を読
み出して、上記ネットワーク回線を介して上記監視装置
側に送信し、監視装置側のモニタで上記映像情報を再現
できるようにしたことを特徴とする。
According to a fifth aspect of the present invention, there is provided a surveillance system, comprising: an imaging processing apparatus having an imaging unit for monitoring a suspicious person; and a browsing function, wherein the imaging processing apparatus is connected via a network line. A monitoring system is configured with the monitoring device including the imaging device, the imaging processing device includes an imaging unit, a video compression unit that compresses video information captured by the imaging unit, and a memory that stores the compressed video information. Means, a transmission / reception processing unit for transmitting / receiving video information stored in the memory means, and a transmission / reception means, wherein when the monitoring device is accessed or when a set time comes, the memory means The video information stored in the monitor is read out and transmitted to the monitoring device via the network line so that the video information can be reproduced on the monitor of the monitoring device. The features.

【0011】この発明では、撮像系と、撮像した映像情
報をネットワーク回線などに転送できる送受信処理系と
をそれぞれ備えることで、既存の電話回線やインターネ
ット回線を利用して映像情報の伝送を行えるようにした
ものである。
According to the present invention, by providing an imaging system and a transmission / reception processing system capable of transferring captured video information to a network line or the like, video information can be transmitted using an existing telephone line or Internet line. It was made.

【0012】映像情報は決まった時間に監視装置側に転
送するように構成することもできれば、インターネット
を介して監視装置側からアクセス(リモートアクセス)
して映像情報を取得することもできる。
The video information can be transmitted to the monitoring device at a fixed time, or can be accessed from the monitoring device via the Internet (remote access).
To acquire video information.

【0013】こうすれば、既存の電話回線などを利用す
ることで監視装置側と接続できるので、監視カメラとし
て機能する撮像部がどのような場所に設置されようと
も、撮像部が入っている撮像処理装置を電話回線と接続
するだけで、撮像情報を監視装置側に送信できる。その
ため、監視システムとしては専用線などの設備が不要に
なると共に、遠隔地からの監視が容易になる。撮像処理
装置側には大容量の記録手段などを備える必要もない。
したがって業務用、家庭用を問わず種々の監視システム
に適用できる。
[0013] With this configuration, since the connection to the monitoring device can be made by using the existing telephone line or the like, no matter where the imaging unit that functions as the surveillance camera is installed, the imaging unit that contains the imaging unit The imaging information can be transmitted to the monitoring device only by connecting the processing device to the telephone line. As a result, equipment such as a dedicated line is not required as a monitoring system, and monitoring from a remote place becomes easy. There is no need to provide a large-capacity recording unit or the like on the imaging processing device side.
Therefore, the present invention can be applied to various monitoring systems irrespective of business use or home use.

【0014】[0014]

【発明の実施の形態】続いて、この発明に係る撮像処理
装置および監視システムの一実施形態を図面を参照して
詳細に説明する。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Next, an embodiment of an imaging processing apparatus and a monitoring system according to the present invention will be described in detail with reference to the drawings.

【0015】この発明ではインターネットなどのネット
ワーク回線を通して監視装置と、監視カメラ側である撮
像処理装置とが接続されている。撮像処理装置とネット
ワーク回線とは通常電話回線などの一般公衆回線によっ
て接続される場合が多い。
In the present invention, the monitoring device and the imaging processing device on the side of the monitoring camera are connected through a network line such as the Internet. The imaging processing device and the network line are often connected by a general public line such as a telephone line.

【0016】したがってこの発明に係る監視システム1
0の実施の形態では図1に示すように、ネットワーク回
線例えばインターネット12を介して、監視装置14側
と撮像処理装置である端末装置16側とが相互に接続さ
れた形態を採る。この監視システム10が警備会社に属
するものであるときには、監視装置14は警備会社側に
備えられる設備であり、複数台の監視装置14a、14
b、・・・が備えられる場合がある。
Therefore, the monitoring system 1 according to the present invention
In the embodiment of FIG. 1, as shown in FIG. 1, the monitoring device 14 and the terminal device 16 which is an image processing device are connected to each other via a network line such as the Internet 12. When the monitoring system 10 belongs to a security company, the monitoring device 14 is equipment provided on the security company side, and a plurality of monitoring devices 14a, 14
.. may be provided.

【0017】端末装置16はそれぞれ契約者側に備えら
れることになり、例えば家庭用防犯システムとして契約
されているときには、複数の端末装置16a、16b、
・・・・はそれぞれの家庭内に設置された防犯カメラと
なる。防犯カメラの設置場所は玄関口であったり、門扉
近くであったり、その設置場所は問わない。
The terminal device 16 is provided on the contractor side. For example, when a contract is made as a home security system, a plurality of terminal devices 16a, 16b,
... are security cameras installed in each home. The security camera can be installed at the entrance, near the gate, or anywhere.

【0018】監視装置14は、単一でも、図示するよう
に複数でもかまわない。複数設置するときにはそれぞれ
が複数の端末装置16を監視できるように構成すること
もできれば、エリアごとに監視エリアを定めてもよい。
なお、監視装置14をサーバ側とすると、端末装置16
はクライアント側となる。
The monitoring device 14 may be single or plural as shown. When a plurality of terminals 16 are installed, each terminal 16 may be monitored, or a monitoring area may be defined for each area.
When the monitoring device 14 is on the server side, the terminal device 16
Is on the client side.

【0019】監視装置14および端末装置16をそれぞ
れインターネット12に接続するときには、例えば監視
装置14側は専用線で、端末装置16側は回線接続業者
(プロバイダー)(図示はしない)を介して接続するよ
うに構成することになる。
When the monitoring device 14 and the terminal device 16 are connected to the Internet 12, for example, the monitoring device 14 is connected to a dedicated line, and the terminal device 16 is connected via a line connection provider (provider) (not shown). It will be configured as follows.

【0020】続いて、監視装置14および端末装置であ
る撮像処理装置16の実施の形態を図2以下を参照して
説明する。
Next, an embodiment of the monitoring device 14 and the imaging processing device 16 as a terminal device will be described with reference to FIG.

【0021】図2は監視装置14側の実施の形態であ
る。インターネット12とのアクセスを前提とするサー
バであるから、周知のようにHTML(Hyper Text Mar
kup Language)形式で記述された情報をHTTP(Hype
r Text Transfer Protocol)プロトコルでやり取りする
ためのWWWサーバ(World Wide Web Server)20を
始めとして、ドメイン名をIP(Internet Protocol)
アドレスに変換するためのDNS(Domain Name Syste
m)サーバ21,電子メールを送受信するときに使用す
るMail(メール)サーバ22やファイル転送プロトコル
であるFTPサーバ(File Transfer Protocol)23な
どが装備されている。
FIG. 2 shows an embodiment on the monitoring device 14 side. Since the server is assumed to access the Internet 12, it is well known that HTML (Hyper Text Mar
kup Language) information in HTTP (Hype
r WWW server (World Wide Web Server) 20 for exchanging by the Text Transfer Protocol (Protocol), and domain name to IP (Internet Protocol)
DNS (Domain Name System)
m) A server 21, a Mail server 22 used when sending and receiving electronic mail, an FTP server (File Transfer Protocol) 23 which is a file transfer protocol, and the like are provided.

【0022】さらに、データベースサーバ24が設けら
れ、ここには警備会社と契約している企業や家庭などい
わゆる取引先サイト側の情報(IPアドレス、契約者の
氏名、住所、契約内容、電話番号など)が蓄積されてい
る。また、外部から取得した情報などはメモリ手段27
に蓄積される。メモリ手段27としては、容量の大きな
ハードディスク装置などを使用することができる。
Further, a database server 24 is provided, which stores information (IP address, contractor's name, address, contract details, telephone number, etc.) on a so-called business partner site such as a company or home contracting with a security company. ) Is accumulated. The information and the like obtained from outside are stored in the memory unit 27.
Is accumulated in As the memory unit 27, a hard disk device having a large capacity can be used.

【0023】WWWサーバ20にはブラウズ機能も搭載
され、契約者側の撮像処理装置16を個々にアクセスし
て、映像情報などを閲覧し、閲覧した映像情報などを転
送することもできるようになされている。またこのWW
Wサーバ20としては、イントラネットでも使用できる
ようにするため、ネットワーク上で使用される基本ソフ
ト(例えばWindows NT(登録商標))にWW
Wサーバ機能を備えたWebアプリケーションサーバ
{例えばマイクロソフト社製のIIS(Internet Infor
mation Server)}サーバが使用される。このIISサ
ーバ機能の中には、サーバ認証やデータの暗号化などを
行うプログラムが格納されている。さらにモニタ25が
備えられる他、モデム26によってインターネット12
への接続を行えるようにしている。
The WWW server 20 is also provided with a browse function, so that the imaging processing devices 16 on the contractor side can be individually accessed to browse video information and the like, and transfer the browsed video information and the like. ing. Also this WW
As the W server 20, basic software (for example, Windows NT (registered trademark)) used on the network is set to WW so that it can be used on an intranet.
Web application server with W server function {for example, IIS (Internet Infor
mation Server)} Server is used. The IIS server function stores a program for performing server authentication, data encryption, and the like. Further, a monitor 25 is provided, and a modem 26
To be able to connect to

【0024】以上のような機能を搭載することによっ
て、監視装置14側では、契約している撮像処理装置1
6側からのインターネット12を介してアクセスがあれ
ば、これに応答し、撮像処理装置16側に蓄積された情
報(映像や音声情報など)の転送処理要求であるような
ときには、監視装置14側のメモリ手段27にその情報
を撮像処理装置16側に与えられた認証コード(IDコ
ード)などと共にファイル化して蓄積することができ
る。
By installing the above-described functions, the monitoring apparatus 14 side can execute the contracted imaging processing apparatus 1
If there is an access from the Internet 6 through the Internet 12, it responds to the request, and if the request is to transfer information (video, audio information, etc.) stored in the imaging processor 16, the monitoring device 14 The information can be stored in a file with the authentication code (ID code) or the like given to the imaging processing device 16 in the memory means 27.

【0025】そして、監視装置14側からは特定の撮像
処理装置16をアクセスすることができ、このアクセス
によって撮像処理装置16側に蓄積された上述したと同
様な情報を閲覧し、必要ならばその情報をインターネッ
ト12を介して取得してメモリ手段27に格納すること
ができる。格納した情報はモニタ25で表示したり、監
視装置14側に設けられたスピーカ(図示はしない)で
再生することで、情報の内容を分析することができる。
この分析結果によって、正常、異常を判別でき、異常事
態であるときにはその発生時刻を、取得した情報から知
ることができるため、適切な処置を実行できる。
Then, a specific imaging processing device 16 can be accessed from the monitoring device 14 side, and the same information as described above stored in the imaging processing device 16 side can be browsed by this access, and the necessary information can be accessed if necessary. Information can be obtained via the Internet 12 and stored in the memory means 27. The stored information can be analyzed on the monitor 25 or reproduced by a speaker (not shown) provided on the monitoring device 14 side to analyze the content of the information.
Based on the result of the analysis, it is possible to determine whether the state is normal or abnormal, and when the state is abnormal, the occurrence time can be known from the acquired information, so that appropriate measures can be taken.

【0026】図3は端末装置である撮像処理装置16の
実施の形態を示すもので、被写体32はレンズ系33を
介して撮像部34に導かれて被写体像が撮像される。撮
像処理装置16が監視用であるときには、被写体は間欠
的に撮像されることになる。撮像部34としてはCCD
などの固体撮像素子を使用することができる。撮像部3
4からの映像信号(この実施の形態では間欠撮像である
ので静止画像信号)は映像処理部35に供給されて、こ
の例では輝度信号Yと一対の色信号Cr、Cbとが生成
されると共に、圧縮処理される。これら映像情報は送受
信処理部40に供給されて、送受信処理部40側に設け
られたメモリ手段46(図4参照)に保存される。
FIG. 3 shows an embodiment of the image pickup processing device 16 as a terminal device. A subject 32 is guided to an image pickup section 34 via a lens system 33, and a subject image is picked up. When the imaging processor 16 is for monitoring, the subject is intermittently imaged. CCD as the imaging unit 34
For example, a solid-state imaging device such as a solid-state imaging device can be used. Imaging unit 3
4 (still image signal in this embodiment because of intermittent imaging) is supplied to a video processing unit 35, and in this example, a luminance signal Y and a pair of color signals Cr and Cb are generated and , And are compressed. These pieces of video information are supplied to the transmission / reception processing unit 40 and stored in a memory unit 46 (see FIG. 4) provided on the transmission / reception processing unit 40 side.

【0027】同様に、マイク36で集音された音声信号
も音声処理部37に供給されて、圧縮処理されると共
に、送受信処理部40に供給されて保存される。
Similarly, the audio signal collected by the microphone 36 is also supplied to the audio processing unit 37, where it is subjected to compression processing, and is also supplied to the transmission / reception processing unit 40 and stored.

【0028】送受信処理部40は通信機能を備えたWe
bサーバ若しくはコンピュータ(パソコン)で構成さ
れ、またこの送受信処理部40に関連して小型のモニタ
38が接続され、必要に応じて撮像アングルなどをこの
モニタ38を介して調整できるようになされている。し
たがってこのモニタ38は液晶などを使用したカメラ本
体に設けられたビューファインダであってもよい。送受
信処理部40にはさらにモデム39が接続され、外部回
線との接続を可能にしている。したがって電話回線にモ
デム39を接続するだけでインターネット12との接続
が完了するから、専用線を敷設したりする煩わしさを一
掃できる。
The transmission / reception processing unit 40 is a Web having a communication function.
b. It is composed of a server or a computer (personal computer), and a small monitor 38 is connected in connection with the transmission / reception processing unit 40 so that an imaging angle and the like can be adjusted through the monitor 38 as necessary. . Therefore, the monitor 38 may be a viewfinder provided on a camera body using a liquid crystal or the like. A modem 39 is further connected to the transmission / reception processing unit 40 to enable connection with an external line. Therefore, the connection to the Internet 12 is completed only by connecting the modem 39 to the telephone line, so that the trouble of laying a dedicated line can be eliminated.

【0029】図4は送受信処理部40の実施の形態を示
すもので、この実施の形態では送受信処理部40に、送
受信処理機能としてWebサーバ機能を搭載した場合で
ある。この例では、インターネット12との双方向通信
を可能にするため、インターネットサーバと同様なハー
ド構成となされ、したがってブラウズ機能を有したWW
Wサーバ42の他に,DNSサーバ43,Mailサーバ4
4,FTPサーバ45を有する。
FIG. 4 shows an embodiment of the transmission / reception processing unit 40. In this embodiment, the transmission / reception processing unit 40 is provided with a Web server function as a transmission / reception processing function. In this example, in order to enable two-way communication with the Internet 12, a hardware configuration similar to that of an Internet server is used, and therefore, a WW having a browse function is provided.
DNS server 43, Mail server 4 in addition to W server 42
4, an FTP server 45 is provided.

【0030】この他に、撮像部34で撮像した映像情報
やマイク36で得られた音声情報などを蓄積するための
メモリ手段46が設けられる。メモリ手段46に蓄積さ
れた映像情報などは圧縮処理されたものであり、しかも
後述するように定期的に、又は不定期に読み出されるた
め、読み出された後の情報はこのメモリ手段46に保存
しておく必要はない。そのためメモリ手段46としては
余り大きな容量のものは必要ない。数G〜数10Gバイ
ト程度あれば十分である。したがってこのメモリ手段4
6としては小型で扁平なハードディスク装置(HDD)
などを使用することができる。
In addition, there is provided a memory means 46 for storing video information picked up by the image pickup section 34, audio information obtained by the microphone 36, and the like. The video information and the like stored in the memory means 46 are those subjected to compression processing, and are read out periodically or irregularly as described later, so that the read information is stored in the memory means 46. You don't have to. Therefore, the memory means 46 does not need to have a very large capacity. About several G to several tens G bytes are sufficient. Therefore, this memory means 4
6 is a small and flat hard disk drive (HDD)
Etc. can be used.

【0031】送受信処理部40に接続される映像処理部
35には上述したように映像圧縮部47が設けられてい
るが、取り扱うべき撮像信号が静止画像信号であるとき
には、JPEG(Joint Photographic Experts Group)
などの映像圧縮技術を利用して圧縮処理できる。もちろ
ん、動画入力をも考慮した場合にはMPEG2(Moving
Picture Experts Group2)などによって圧縮処理する
ことができる。音声処理部37に設けられた音声圧縮部
48でも、オーディオ用として規格化されたMPEG2
オーディオ処理技術を利用して圧縮処理できる。
The video processing unit 35 connected to the transmission / reception processing unit 40 is provided with the video compression unit 47 as described above. When the image signal to be handled is a still image signal, the JPEG (Joint Photographic Experts Group) is used. )
Compression processing using video compression techniques such as Of course, when moving image input is also considered, MPEG2 (Moving
The compression processing can be performed by Picture Experts Group 2) or the like. The audio compression unit 48 provided in the audio processing unit 37 also performs MPEG2 standardization for audio.
Compression processing can be performed using audio processing technology.

【0032】WWWサーバ42にはリモートアクセス用
のソフトウエアが搭載され、インターネット12を介し
てアクセスされたとき、必要な情報を閲覧したり、必要
な情報を送信できるようになされている。
The WWW server 42 is equipped with software for remote access, so that when accessed via the Internet 12, necessary information can be browsed and required information can be transmitted.

【0033】送受信処理部40にこのようなWWWサー
バ機能を搭載するのではなく、極く普通のパーソナルコ
ンピュータ機能のみを搭載するだけでも、この発明を実
現できる。図5がその場合の実施の形態を示す送受信処
理部40の構成である。
The present invention can be realized by mounting only a very ordinary personal computer function instead of mounting such a WWW server function in the transmission / reception processing section 40. FIG. 5 shows the configuration of the transmission / reception processing unit 40 showing the embodiment in that case.

【0034】したがって送受信処理部35,37,モデ
ム39、モニタ38などの他に、この場合には、パーソ
ナルコンピュータ(パソコン)本体50および圧縮処理
された映像や音声情報を蓄積するためのメモリ手段46
が設けられる。
Therefore, in this case, in addition to the transmission / reception processing units 35 and 37, the modem 39, the monitor 38, etc., in this case, a personal computer (personal computer) body 50 and a memory means 46 for storing compressed video and audio information.
Is provided.

【0035】さらにリモートアクセス用のソフトウエア
を格納したメモリ手段(ROMなど)51が設けられ
る。このリモートアクセス用のソフトウエアを利用する
ことで、メモリ手段46に蓄積された映像情報などを遠
隔より制御して取得することができる。
Further, a memory means (ROM or the like) 51 storing software for remote access is provided. By using this remote access software, the video information and the like stored in the memory means 46 can be remotely controlled and acquired.

【0036】以上のように構成された撮像処理装置16
およびこれを使用した監視システムの処理例を図6以下
を参照して詳細に説明する。
The imaging processor 16 configured as described above
A processing example of a monitoring system using the same will be described in detail with reference to FIG.

【0037】図6は撮像処理装置16側で被写体像を定
期的に撮してこれを蓄積する処理例であって、設定時間
(1分ごと、10分ごと、・・・)になると、自動的に
被写体の撮像処理が行われ(ステップ61,62)、撮
像した映像および音声は必要な信号形態に変換されたの
ち、圧縮処理される(ステップ63)。圧縮された映像
および音声情報は順次メモリ手段46に蓄積される(ス
テップ64)。メモリ手段46に映像情報などを蓄積す
るとき、同時に認証用IDや撮像年月日などを記録する
ことで、何時の時点で撮像されたものであるかを特定で
きる。蓄積された映像情報などが監視装置14側で分析
される。
FIG. 6 shows an example of processing in which the image of the subject is periodically taken by the image pickup processing unit 16 and stored, and when the set time (every 1 minute, every 10 minutes,. The subject is image-processed (steps 61 and 62), and the captured video and audio are converted into necessary signal forms and then compressed (step 63). The compressed video and audio information is sequentially stored in the memory means 46 (step 64). When the video information and the like are stored in the memory means 46, by recording the authentication ID and the imaging date at the same time, it is possible to specify at what point in time the image was captured. The stored video information and the like are analyzed on the monitoring device 14 side.

【0038】上述した実施の形態では、撮像処理および
圧縮、蓄積処理が定期的に行われ、撮像した順にメモリ
手段46に蓄積するようにしている。これに対して、例
えば監視装置14側からの指令に基づいて撮像部34を
制御することで、撮像処理を不定期に行うこともでき
る。この場合にはメモリ手段46にその映像情報などを
蓄積する必要はない。それは、監視装置14側でその映
像情報などをリアルタイムで監視できると共に、必要に
応じて監視装置14側のメモリ手段27にその映像情報
などを蓄積することができるからである。
In the above-described embodiment, the imaging process, the compression process, and the accumulation process are performed periodically, and the images are accumulated in the memory unit 46 in the order of imaging. On the other hand, for example, by controlling the imaging unit 34 based on a command from the monitoring device 14 side, the imaging process can be performed irregularly. In this case, there is no need to store the video information or the like in the memory means 46. This is because the video information and the like can be monitored in real time on the monitoring device 14 side, and the video information and the like can be stored in the memory unit 27 of the monitoring device 14 as needed.

【0039】監視装置14側ではこの撮像内容を分析す
ることで、撮像場所の正常、異常状態を正確に把握でき
る。
The monitoring device 14 analyzes the contents of the image pickup, so that the normal or abnormal state of the image pickup place can be accurately grasped.

【0040】図7は撮像処理装置16側において蓄積さ
れた情報を、監視装置14側に自動的に転送する処理例
を示す。
FIG. 7 shows an example of processing for automatically transferring the information stored in the imaging processing device 16 to the monitoring device 14.

【0041】同図のように設定時刻になると回線接続処
理を行い、インターネット12を介して監視装置14と
の間のネット接続を行う(ステップ71,72)。例え
ば、1日数回(例えば朝、昼、晩)設定時刻を設定した
り、数時間ごとのように時間を設定することができる。
もちろん、次の撮像が開始される直前に、その都度回線
の接続処理を行うようにしてもよい。
At the set time, a line connection process is performed as shown in the figure, and a network connection with the monitoring device 14 is made via the Internet 12 (steps 71 and 72). For example, a set time can be set several times a day (for example, morning, noon, evening), or time can be set every few hours.
Needless to say, the line connection processing may be performed each time immediately before the next imaging is started.

【0042】回線接続処理が終了すると、回線接続処理
を行う直前までメモリ手段46に蓄積された映像情報な
どが、リモートアクセス機能を利用して読み出される
(ステップ73)。読み出された映像情報などはバッフ
ァを介して一時的に保存するか、直接監視装置14側に
送信するための送信処理が行われる(ステップ74)。
この送信処理は蓄積された全ての映像情報などの送信が
終了するまで実行され(ステップ75)、全ての情報の
送信が終了すると、回線切断処理がなされて通常の撮像
待機状態となる(ステップ76)。
When the line connection processing is completed, the video information and the like stored in the memory means 46 are read out using the remote access function until immediately before the line connection processing is performed (step 73). The read video information or the like is temporarily stored via a buffer, or a transmission process for directly transmitting the video information to the monitoring device 14 is performed (step 74).
This transmission processing is executed until the transmission of all the stored video information and the like is completed (step 75). When the transmission of all the information is completed, the line disconnection processing is performed and a normal imaging standby state is set (step 76). ).

【0043】図7に示す実施の形態は、あくまでも撮像
処理装置16側で自動的に映像情報などを監視装置14
側に転送するような処理例であるが、図8に示す実施の
形態は監視装置14側で映像情報などを取得するように
した例である。
In the embodiment shown in FIG. 7, the image processing device 16 automatically monitors the video information and the like.
8 is an example in which video information or the like is acquired on the monitoring device 14 side.

【0044】この場合には監視装置14側では自動的に
若しくは手動でインターネット12を介して撮像処理装
置16側にアクセスする。このアクセスによって撮像処
理装置16側のリモートアクセス用ソフトウエアが作動
して映像情報などの自動転送処理が開始される。
In this case, the monitoring device 14 automatically or manually accesses the imaging processing device 16 via the Internet 12. With this access, the remote access software of the imaging processing device 16 operates to start the automatic transfer processing of the video information and the like.

【0045】したがって撮像処理装置16側でこのリモ
ートアクセス用ソフトウエアが起動した状態のときに、
監視装置14側から映像や音声情報の転送要求があると
(ステップ81)、メモリ手段46から必要とする映像
や音声情報が読み出される(ステップ82)。
Therefore, when the remote access software is activated on the imaging processing device 16 side,
When there is a transfer request for video and audio information from the monitoring device 14 (step 81), the required video and audio information is read from the memory means 46 (step 82).

【0046】読み出された映像や音声情報(ファイル情
報)は監視装置14側に自動転送され(ステップ8
3)、要求された全ての映像や音声情報の転送が終了す
るまでこの自動転送処理が続行される(ステップ8
4)。
The read video and audio information (file information) is automatically transferred to the monitoring device 14 (step 8).
3) The automatic transfer process is continued until all the requested video and audio information has been transferred (step 8).
4).

【0047】監視装置14側では取得した映像や音声情
報を一旦メモリ手段27に蓄積されると共に、蓄積され
た情報がモニタ25に再現されて情報の分析が行われ
る。室内や玄関先あるいはフロントなどの撮像エリアで
の映像が正常かどうかを判断する。その結果、異常事態
であると判断したときは、係員を現場に急行させるか、
所轄官庁への連絡が行われることになる。
The monitoring device 14 temporarily stores the acquired video and audio information in the memory means 27, and reproduces the stored information on the monitor 25 to analyze the information. It is determined whether or not the image in the imaging area such as the room, the entrance, or the front is normal. As a result, when it is determined that an abnormal situation has occurred, the staff must be rushed to the site,
Contact will be made to the competent authority.

【0048】このように、電話回線やインターネットを
利用することで、防犯カメラと監視装置との間を専用線
で結ぶような手間が省ける。つまり防犯カメラに撮像機
能のみならず、インターネットとの接続を行うことがで
きる送受信処理機能を追加することで、既存の回線を巧
みに利用した監視システムを構築できる。
As described above, by using the telephone line or the Internet, the trouble of connecting the security camera and the monitoring device with a dedicated line can be omitted. In other words, by adding not only an imaging function to the security camera but also a transmission / reception processing function capable of connecting to the Internet, a surveillance system that skillfully utilizes an existing line can be constructed.

【0049】上述した実施の形態では、この発明を防犯
カメラなどの監視システムに適用したが、撮像系と、イ
ンターネットへの送受信処理系とを備えた撮像処理装置
を使用することで、物流監視、製品監視など様々な分野
での適用が考えられる。
In the above-described embodiment, the present invention is applied to a monitoring system such as a security camera. However, by using an imaging processing device having an imaging system and a transmission / reception processing system to the Internet, it is possible to monitor physical distribution, It can be applied in various fields such as product monitoring.

【0050】[0050]

【発明の効果】以上説明したようにこの発明に係る撮像
処理装置では、撮像系の他に、撮像した映像情報などを
送受信処理する送受信処理系を設けたものである。また
この発明に係る監視システムでは、この撮像処理装置と
監視装置とをネットワーク回線で接続できるようにした
ものである。
As described above, in the imaging processing apparatus according to the present invention, in addition to the imaging system, a transmission / reception processing system for performing transmission / reception processing of captured video information and the like is provided. In the monitoring system according to the present invention, the imaging processing device and the monitoring device can be connected via a network line.

【0051】これによれば、撮像処理装置にネットワー
ク回線と接続できる送受信処理部が設けられているの
で、撮像処理装置とは別にインターネット接続可能な端
末装置などを用意する必要がない。また撮像処理装置を
電話回線などに接続するだけで監視装置との間でネット
ワークを簡単に構築できる。そのため、従来のように専
用線を用いて建物の中に敷設したりする手間を省くこと
ができる。また、ネットワークに接続されていれば、地
域や、取引数を問わず撮像処理装置の情報を発信した
り、取得したりすることができる特徴を有する。
According to this, since the transmission / reception processing unit that can be connected to the network line is provided in the imaging processing device, it is not necessary to prepare a terminal device or the like that can be connected to the Internet separately from the imaging processing device. In addition, a network can be easily established with the monitoring device simply by connecting the imaging processing device to a telephone line or the like. Therefore, it is possible to save the labor of laying in a building using a dedicated line as in the related art. In addition, if it is connected to a network, it has the feature that information on the image processing device can be transmitted and obtained regardless of the region or the number of transactions.

【0052】したがってこの発明は多数の顧客を管理す
る必要がある防犯システムなどの監視システムに適用し
て極めて好適である。
Therefore, the present invention is very suitable for application to a monitoring system such as a security system which needs to manage a large number of customers.

【図面の簡単な説明】[Brief description of the drawings]

【図1】この発明に係る監視システムの実施の形態を示
す説明図である。
FIG. 1 is an explanatory diagram showing an embodiment of a monitoring system according to the present invention.

【図2】監視装置の実施の形態を示す要部の系統図であ
る。
FIG. 2 is a system diagram of a main part showing an embodiment of a monitoring device.

【図3】撮像処理装置の実施の形態を示す要部の系統図
である。
FIG. 3 is a system diagram of a main part showing an embodiment of an imaging processing device.

【図4】送受信処理部の実施の形態を示す要部の系統図
である。
FIG. 4 is a system diagram of a main part showing an embodiment of a transmission / reception processing unit.

【図5】送受信処理部の他の実施の形態を示す要部の系
統図である。
FIG. 5 is a system diagram of a main part showing another embodiment of a transmission / reception processing unit.

【図6】撮像および蓄積処理例を示すフローチャートで
ある。
FIG. 6 is a flowchart illustrating an example of imaging and accumulation processing.

【図7】送受信処理例を示すフローチャートである(そ
の1)。
FIG. 7 is a flowchart illustrating an example of transmission / reception processing (part 1).

【図8】送受信処理例を示すフローチャートである(そ
の2)。
FIG. 8 is a flowchart illustrating an example of transmission / reception processing (part 2).

【符号の説明】[Explanation of symbols]

10・・・監視システム、12・・・インターネット、
14・・・環視装置、16・・・撮像処理装置、34・
・・撮像部、35・・・映像処理部、37・・・音声処
理部、40・・・送受信処理部、39・・・モデム、3
8・・・モニタ、42・・・WWWサーバ、50・・・
パーソナルコンピュータ
10: Monitoring system, 12: Internet,
14 · · · ringing device, 16 · · · imaging processing device, 34 ·
..Imaging unit, 35 ... Video processing unit, 37 ... Audio processing unit, 40 ... Transmission / reception processing unit, 39 ... Modem, 3
8 ... monitor, 42 ... WWW server, 50 ...
Personal computer

───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5C022 AA01 AB65 AC42 AC69 AC72 AC75 5C053 FA11 GB36 GB38 LA01 LA11 LA14 5C054 AA01 CC02 DA08 GB02 GD03 GD09 HA02 HA18 5C064 BA07 BB10 BC10 BC18 BC20 BC25 BD01 BD07 BD10  ──────────────────────────────────────────────────続 き Continued on the front page F term (reference) 5C022 AA01 AB65 AC42 AC69 AC72 AC75 5C053 FA11 GB36 GB38 LA01 LA11 LA14 5C054 AA01 CC02 DA08 GB02 GD03 GD09 HA02 HA18 5C064 BA07 BB10 BC10 BC18 BC20 BC25 BD01 BD07 BD10

Claims (8)

【特許請求の範囲】[Claims] 【請求項1】 撮像部と、 この撮像部で撮像された映像情報を圧縮する映像圧縮部
と、 圧縮された映像情報を保存するメモリ手段と、 このメモリ手段に保存された映像情報を送受信処理する
送受信処理部と、 送受信手段とを有し、 外部からアクセスがあったときか、設定時刻になったと
きに、上記メモリ手段に保存されている上記映像情報を
読み出して送信するようにしたことを特徴とする撮像処
理装置。
An image pickup unit, a video compression unit for compressing video information captured by the image capture unit, a memory unit for storing the compressed video information, and a transmission / reception process for the video information stored in the memory unit. A transmission / reception processing unit for transmitting and receiving the video information stored in the memory means when there is access from outside or at a set time. An imaging processing device characterized by the above-mentioned.
【請求項2】 上記映像圧縮部の他に、音声信号を圧縮
する音声圧縮部が設けられ、圧縮された音声情報が上記
メモリ手段に保存されるようにしたことを特徴とする請
求項1記載の撮像処理装置。
2. The apparatus according to claim 1, further comprising an audio compression section for compressing an audio signal, in addition to said video compression section, wherein the compressed audio information is stored in said memory means. Imaging processing device.
【請求項3】 上記送受信処理部には、インターネット
サーバが備えられ、 設定時刻になったときか、インターネットなどのネット
ワーク回線からのアクセスがあったときには、上記メモ
リ手段に保存されている映像情報を上記ネットワーク回
線を介して特定の宛先に転送するようにしたことを特徴
とする請求項1記載の撮像処理装置。
3. The transmission / reception processing unit is provided with an Internet server. When a set time is reached or an access is made from a network line such as the Internet, the video information stored in the memory means is transmitted. 2. The image processing apparatus according to claim 1, wherein the image data is transferred to a specific destination via the network line.
【請求項4】 上記送受信処理部がコンピュータと、メ
モリ手段とでで構成され、 上記メモリ手段には、リモートアクセス用ソフトウエア
が格納され、 外部からのアクセスに応答して上記映像情報を自動転送
するようにしたことを特徴とする請求項1記載の撮像処
理装置。
4. The transmission / reception processing unit comprises a computer and a memory means. The memory means stores software for remote access, and automatically transfers the video information in response to an external access. The image processing apparatus according to claim 1, wherein the image processing is performed.
【請求項5】 不審者を監視するための撮像部を備えた
撮像処理装置と、この撮像処理装置がネットワーク回線
を介して接続される、ブラウズ機能を備えた監視装置と
で監視システムが構築され、 上記撮像処理装置には、撮像部と、 この撮像部で撮像された映像情報を圧縮する映像圧縮部
と、 圧縮された映像情報を保存するメモリ手段と、 このメモリ手段に保存された映像情報を送受信処理する
送受信処理部と、 送受信手段とを有し、 上記監視装置からアクセスがあったときか、設定時刻に
なったときに、上記メモリ手段に保存されている上記映
像情報を読み出して、上記ネットワーク回線を介して上
記監視装置側に送信し、 監視装置側のモニタで上記映像情報を再現できるように
したことを特徴とする監視システム。
5. A monitoring system is constructed by an imaging processing device having an imaging unit for monitoring a suspicious individual and a monitoring device having a browsing function to which the imaging processing device is connected via a network line. An image capturing unit; a video compressing unit compressing video information captured by the image capturing unit; a memory unit storing the compressed video information; and a video information stored in the memory unit. A transmission / reception processing unit that performs transmission / reception processing, and a transmission / reception unit, and reads out the video information stored in the memory unit when an access is made from the monitoring device or when a set time comes, A monitoring system, wherein the video information is transmitted to the monitoring device via the network line so that the video information can be reproduced on a monitor of the monitoring device.
【請求項6】 上記映像圧縮部の他に、音声信号を圧縮
する音声圧縮部が設けられ、圧縮された音声情報が上記
メモリ手段に保存されるようにしたことを特徴とする請
求項5記載の監視システム。
6. An audio compression section for compressing an audio signal is provided in addition to the video compression section, and the compressed audio information is stored in the memory means. Monitoring system.
【請求項7】 上記送受信処理部には、Webサーバが
備えられ、 設定時刻になったときか、インターネットなどのネット
ワーク回線からのアクセスがあったときには、上記メモ
リ手段に保存されている映像情報を上記ネットワーク回
線を介して上記監視装置側に転送するようにしたことを
特徴とする請求項5記載の監視システム。
7. The transmission / reception processing unit is provided with a Web server, and when a set time is reached or an access is made from a network line such as the Internet, the video information stored in the memory means is transmitted. 6. The monitoring system according to claim 5, wherein the data is transferred to the monitoring device via the network line.
【請求項8】 上記送受信処理部がコンピュータと、メ
モリ手段とで構成され、 上記メモリ手段には、リモートアクセス用ソフトウエア
が格納され、 上記監視装置側からのアクセスに応答して上記映像情報
を上記監視装置側に自動転送するようにしたことを特徴
とする請求項5記載の監視システム。
8. The transmission / reception processing unit comprises a computer and a memory means. The memory means stores remote access software, and transmits the video information in response to an access from the monitoring device. 6. The monitoring system according to claim 5, wherein the data is automatically transferred to the monitoring device.
JP2000264298A 2000-08-31 2000-08-31 Image pickup and processing device and monitoring system Pending JP2002077881A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000264298A JP2002077881A (en) 2000-08-31 2000-08-31 Image pickup and processing device and monitoring system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000264298A JP2002077881A (en) 2000-08-31 2000-08-31 Image pickup and processing device and monitoring system

Publications (1)

Publication Number Publication Date
JP2002077881A true JP2002077881A (en) 2002-03-15

Family

ID=18751735

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000264298A Pending JP2002077881A (en) 2000-08-31 2000-08-31 Image pickup and processing device and monitoring system

Country Status (1)

Country Link
JP (1) JP2002077881A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004312695A (en) * 2003-01-16 2004-11-04 Dotsudoueru B M S:Kk Remote monitoring system and remote monitoring method
JP2009043049A (en) * 2007-08-09 2009-02-26 Panasonic Corp Video recording system and video recorder

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0360839U (en) * 1989-10-05 1991-06-14
JPH10290445A (en) * 1997-04-14 1998-10-27 N T T Data:Kk Video distribution system and method therefor
JPH1141505A (en) * 1997-07-23 1999-02-12 Canon Inc Camera control system, control method for the same and storage medium storing program for executing control
JPH11266487A (en) * 1998-03-18 1999-09-28 Toshiba Corp Intelligent remote supervisory system and recording medium
JPH11283162A (en) * 1998-03-27 1999-10-15 Victor Co Of Japan Ltd Image transmission equipment
JPH11355737A (en) * 1998-06-09 1999-12-24 Chokosoku Network Computer Gijutsu Kenkyusho:Kk Moving image transfer method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0360839U (en) * 1989-10-05 1991-06-14
JPH10290445A (en) * 1997-04-14 1998-10-27 N T T Data:Kk Video distribution system and method therefor
JPH1141505A (en) * 1997-07-23 1999-02-12 Canon Inc Camera control system, control method for the same and storage medium storing program for executing control
JPH11266487A (en) * 1998-03-18 1999-09-28 Toshiba Corp Intelligent remote supervisory system and recording medium
JPH11283162A (en) * 1998-03-27 1999-10-15 Victor Co Of Japan Ltd Image transmission equipment
JPH11355737A (en) * 1998-06-09 1999-12-24 Chokosoku Network Computer Gijutsu Kenkyusho:Kk Moving image transfer method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004312695A (en) * 2003-01-16 2004-11-04 Dotsudoueru B M S:Kk Remote monitoring system and remote monitoring method
JP2009043049A (en) * 2007-08-09 2009-02-26 Panasonic Corp Video recording system and video recorder

Similar Documents

Publication Publication Date Title
EP1062800B1 (en) Accessing images from a portable digital camera connected to the Internet
US6930709B1 (en) Integrated internet/intranet camera
KR100859917B1 (en) Image storage server, image storage system, and remote monitoring system
US7441005B2 (en) Information supply system using communication line
JP2013051534A (en) Monitoring camera system and monitoring method
US20030067543A1 (en) Camera server system
JP2002027427A (en) Image data transmission system
JP2002101407A (en) Image storage server and its method, remote supervisory system using the image storage server, and image pickup device
US8379092B2 (en) System and method for providing application service using image data
JP6416465B2 (en) Image monitoring system and image transmission method
JP2004208159A (en) Remote controller, television set, operation system and method
JP2002077881A (en) Image pickup and processing device and monitoring system
KR100892072B1 (en) System for providing security monitoring service using mobile phone
JP2004320512A (en) Image management system and program thereof
JP6453281B2 (en) Surveillance camera system, information processing apparatus, information processing method, and program
KR20000010386A (en) Closed circuit television system using a web interface
KR20140146429A (en) CCTV image aquisition and management system and method using smart devices
JP2004146959A (en) Digital supervisory recorder
WO2004032085A1 (en) Monitoring system and relay device
JP4553221B2 (en) Monitoring and reporting method and system, and computer-readable information recording medium recording monitoring and reporting program
JP2004241817A (en) Image distribution system
KR100747080B1 (en) Data transmission system of security device with web camera
JP6363130B2 (en) Surveillance method, difference image creation method, image restoration method, and difference detection apparatus in surveillance camera system
JPH11164035A (en) Remote monitoring system
JP3923019B2 (en) Method and system for connecting to dynamic IP address side

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20060517

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070214

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20090916

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20091029

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091102

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091110

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100104

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100727