JP4281811B2 - Image communication device - Google Patents

Image communication device Download PDF

Info

Publication number
JP4281811B2
JP4281811B2 JP2007048765A JP2007048765A JP4281811B2 JP 4281811 B2 JP4281811 B2 JP 4281811B2 JP 2007048765 A JP2007048765 A JP 2007048765A JP 2007048765 A JP2007048765 A JP 2007048765A JP 4281811 B2 JP4281811 B2 JP 4281811B2
Authority
JP
Japan
Prior art keywords
image
client device
communication apparatus
image communication
request
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2007048765A
Other languages
Japanese (ja)
Other versions
JP2007215202A (en
Inventor
祐二 有馬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Priority to JP2007048765A priority Critical patent/JP4281811B2/en
Publication of JP2007215202A publication Critical patent/JP2007215202A/en
Application granted granted Critical
Publication of JP4281811B2 publication Critical patent/JP4281811B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Landscapes

  • Studio Devices (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Facsimiles In General (AREA)

Description

本発明は、ネットワークからの送信される要求信号に従って画像データを送信する画像通信装置に関するものである。   The present invention relates to an image communication apparatus that transmits image data in accordance with a request signal transmitted from a network.

近年、LAN等のネットワークに接続され、ネットワークを介して受信した要求信号に従って画像データを送信するネットワークカメラが開発されるようになってきた。   In recent years, network cameras connected to a network such as a LAN and transmitting image data in accordance with a request signal received via the network have been developed.

このネットワークカメラは、サーバ機能を有し、ネットワークに接続された他の機器からアクセス可能であり、アクセスされた際にアクセスした機器に対し、所定のHtmlファイルを送信し、それを受信した機器に搭載されているブラウザがそのHtmlファイルの記述に従ってネットワークカメラに画像を要求するものである。   This network camera has a server function and can be accessed from other devices connected to the network. When the network camera is accessed, it transmits a predetermined html file to the device that has received the file. The installed browser requests an image from the network camera according to the description of the HTML file.

しかしながら従来は、アクセスに対して送信する初期画面としてのHtmlファイルは一定でアクセスする機器によって最適な条件で画像データ等を提供することはできないという課題があった。   Conventionally, however, there is a problem that an Html file as an initial screen to be transmitted for access cannot be provided with image data or the like under optimum conditions depending on the device to be accessed.

本発明は、上記従来の課題に鑑み、アクセスする機器によって最適な条件で画像データ等を提供することができる画像通信装置を提供することを目的とする。   In view of the above-described conventional problems, an object of the present invention is to provide an image communication apparatus capable of providing image data and the like under optimum conditions depending on an accessing device.

本発明は上記従来の課題を解決するために、被写体を撮像する撮像手段と、クライアント装置からのアクセスに基づいて、撮像手段により撮像した画像及びこの画像をクライアント装置で表示するレイアウトを示すレイアウト情報をクライアント装置へ送信する通信手段と、クライアント装置から本画像通信装置に対して画像を送信するよう指示があった場合、クライアント装置の種別を示す識別情報をクライアント装置から受け取り、受け取った識別情報に対応するレイアウト情報を、通信手段によりクライアント装置へ送信させる制御手段とを備えたものである。 In order to solve the above-described conventional problems, the present invention provides an image capturing unit that captures an image of an object, an image captured by the image capturing unit based on access from the client device, and layout information indicating a layout for displaying the image on the client device. When the client device is instructed to transmit an image to the image communication device, the communication unit receives the identification information indicating the type of the client device from the client device , and the received identification information And control means for transmitting the corresponding layout information to the client device by the communication means.

本発明は、クライアント装置から本画像通信装置に対して画像を送信するよう指示があったときに、制御手段がクライアント装置の種別を示す識別情報をクライアント装置から受け取り、受け取った識別情報に対応するレイアウト情報を通信手段によりクライアント装置へ送信させることにより、本画像通信装置が、クライアント装置からの識別情報に基づいて、どのようなクライアント装置から画面の要求があったのかを識別し、その識別したクライアント装置と対応するレイアウト情報をクライアント装置へ送るので、カメラで撮像した画像をクライアント装置の機種に合わせたレイアウトで画像を表示することができるという効果を有する。 In the present invention, when the client device instructs the image communication device to transmit an image, the control unit receives identification information indicating the type of the client device from the client device , and corresponds to the received identification information. By causing the layout information to be transmitted to the client device by the communication means, the image communication device identifies what kind of client device has requested the screen based on the identification information from the client device, and Since the layout information corresponding to the client apparatus is sent to the client apparatus, the image captured by the camera can be displayed in a layout that matches the model of the client apparatus.

また、例えば、画像を得るために、クライアント装置側のURLにクライアント装置自身のIPアドレスと識別情報を入力するだけで、クライアント装置側で特段の操作をすることなく希望の画像を得ることができるという効果を有する。   Also, for example, in order to obtain an image, a desired image can be obtained without performing any special operation on the client device side by simply inputting the IP address and identification information of the client device itself in the URL on the client device side. It has the effect.

本発明の請求項1に記載の発明は、被写体を撮像する撮像手段と、クライアント装置からのアクセスに基づいて、撮像手段により撮像した画像及びこの画像をクライアント装置で表示するレイアウトを示すレイアウト情報をクライアント装置へ送信する通信手段と、クライアント装置から本画像通信装置に対して画像を送信するよう指示があった場合、クライアント装置の種別を示す識別情報をクライアント装置から受け取り、受け取った識別情報に対応するレイアウト情報を、通信手段によりクライアント装置へ送信させる制御手段とを備えた画像通信装置であって、クライアント装置から本画像通信装置に対して画像を送信するよう指示があったときに、制御手段がクライアント装置の種別を示す識別情報を受け取り、受け取った識別情報に対応するレイアウト情報を通信手段によりクライアント装置へ送信させることにより、本画像通信装置が、クライアント装置からの識別情報に基づいて、どのようなクライアント装置から画面の要求があったのかを識別し、その識別したクライアント装置と対応するレイアウト情報をクライアント装置へ送るので、カメラで撮像した画像をクライアント装置の機種に合わせたレイアウトで画像を表示することができるという効果を有する。 According to the first aspect of the present invention, there is provided image pickup means for picking up an object, layout information indicating an image picked up by the image pickup means and a layout for displaying the image on the client apparatus based on access from the client apparatus. When there is an instruction to transmit an image to the image communication apparatus from the communication means to be transmitted to the client apparatus, the client apparatus receives identification information indicating the type of the client apparatus from the client apparatus , and corresponds to the received identification information Control means for transmitting the layout information to be transmitted to the client apparatus by the communication means , and when the client apparatus gives an instruction to transmit an image to the image communication apparatus , the control means Receives the identification information indicating the type of client device, and the received identification information By transmitting to the client device by the communication unit layout information corresponding to the present image communication apparatus, based on the identification information from the client device to identify one of any client device to a request for screen, Since the layout information corresponding to the identified client device is sent to the client device, the image captured by the camera can be displayed in a layout that matches the model of the client device.

また、例えば、画像を得るために、クライアント装置側のURLにクライアント装置自身のIPアドレスと識別情報を入力するだけで、クライアント装置側で特段の操作をすることなく希望の画像を得ることができるという効果を有する。   Also, for example, in order to obtain an image, a desired image can be obtained without performing any special operation on the client device side by simply inputting the IP address and identification information of the client device itself in the URL on the client device side. It has the effect.

本発明の請求項2に記載の発明は、請求項1に記載の画像通信装置あって、クライアント装置の識別情報とレイアウト情報とを関連づけて記憶する記憶手段を有し、制御手段は、受け取った識別情報に対応する前記レイアウト情報を記憶手段から選択することにより、クライアント装置から本画像通信装置に対して画面の送信指示があった場合、記憶したレイアウト情報の中から画面の要求を受けたクライアント装置の識別情報と対応するレイアウト情報を選択するだけなので、画像の送信指示があったクライアント装置に対応するレイアウト情報を簡単に送信することができるという効果を有する。 The invention according to claim 2 of the present invention is an image communication apparatus according to claim 1, comprising a storage means for storing in association with identification information and the layout information of the client device, the control means receives By selecting the layout information corresponding to the identified identification information from the storage means, when there is a screen transmission instruction from the client device to the image communication apparatus , a screen request is received from the stored layout information. Since only the layout information corresponding to the identification information of the client device is selected, the layout information corresponding to the client device for which an image transmission instruction has been issued can be easily transmitted.

本発明の請求項3に記載の発明は、請求項1に記載の画像通信装置あって、クライアント装置はコンピュータ装置とすることにより、本画像通信装置へ画像の送信指示を行ったクライアント装置が携帯無線端末装置であることを示す識別情報を送信するだけで、画像サーバから所望の画像を携帯無線端末装置側で受信できるので、携帯無線端末装置の電波が届くエリア内であればどこからでもカメラで撮像した所望の画像を得ることができるという効果を有する。 The invention described in claim 3 of the present invention is an image communication apparatus according to claim 1, by the client device to a computer apparatus, the client apparatus of performing a transmission instruction of the image to the image communication apparatus By simply transmitting identification information indicating that it is a portable wireless terminal device, a desired image can be received from the image server on the portable wireless terminal device side. It has the effect that the desired image imaged by can be obtained.

更に、携帯無線端末装置のURLに携帯無線端末装置自身のIPアドレスと識別情報とを入力するだけで、携帯無線端末装置側で特段の操作を行うことなく簡単に所望の画像を得ることができるという効果を有する。   Furthermore, a desired image can be easily obtained without performing any special operation on the portable wireless terminal device side by simply inputting the IP address and identification information of the portable wireless terminal device itself into the URL of the portable wireless terminal device. It has the effect.

本発明の請求項4に記載の発明は、請求項1に記載の画像通信装置あって、クライアント装置はコンピュータ装置とすることにより、本画像通信装置へ画像の送信指示を行ったクライアント装置が端末装置であることを示す識別情報を送信するだけで、本画像通信装置から所望の画像を端末装置側で受信できるので、端末装置所望の画像を得ることができるという効果を有する。 The invention according to claim 4 of the present invention is an image communication apparatus according to claim 1, by the client device to a computer apparatus, the client apparatus of performing a transmission instruction of the image to the image communication apparatus only transmits identification information indicating that the terminal apparatus, since a desired image from the image communication apparatus can be received by the terminal device, an effect that may be the terminal device to obtain a desired image.

更に、端末装置のURLに端末装置自身のIPアドレスと識別情報とを入力するだけで、端末装置側で特段の操作を行うことなく簡単に所望の画像を得ること。   Furthermore, a desired image can be easily obtained without performing any special operation on the terminal device side by simply inputting the IP address and identification information of the terminal device itself into the URL of the terminal device.

本発明の請求項5に記載の発明は、請求項1乃至請求項2の何れかに記載の画像通信装置であって、レイアウト情報を、Htmlファイルとすることにより、レイアウト情報をHtmlファイルで構成することにより、Htmlファイルはインターネット上で一般に使用されているので、汎用ブラウザを用いて一般のコンピュータ装置や無線端末装置から本画像通信装置に容易にアクセスでき、異なる機種のクライアント装置側から本画像通信装置に対して画像を送るよう指示することができ、この指示に基づいて本画像通信装置から簡単に画像を得ることができるという効果を有する。 The invention according to claim 5 of the present invention is the image communication apparatus according to claim 1, wherein the layout information is an Html file, and the layout information is configured as an Html file. by so Html file is commonly used on the Internet, easy access to the image communication apparatus from general computer device or a wireless terminal by using a general-purpose browser, the image from the client device side of the different types The communication apparatus can be instructed to send an image, and an image can be easily obtained from the image communication apparatus based on the instruction.

以下、本発明の実施の形態について、図面を参照しながら説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

(実施の形態1)
図1は本発明の一実施の形態における画像通信装置システムの構成図である。
(Embodiment 1)
FIG. 1 is a configuration diagram of an image communication apparatus system according to an embodiment of the present invention.

図1において、10は本発明の画像通信装置、20は電話交換機により多数の端末装置間を接続する公衆電話回線網、30はインターネット網、40は、公衆電話回線網20とインターネット網30とを接続するCTIサーバ装置を含むISP(インターネットサービスプロバイダ)、50は公衆電話回線網20に接続され、後述する無線端末装置と無線通信を行う無線基地局、60は公衆電話回線網20に接続される無線通信端末、70は無線基地局と無線で通信し、無線通信端末60やISP40を介して画像通信装置10等と通信可能な無線端末装置、80はインターネット網30に接続されるコンピュータ装置である。   In FIG. 1, 10 is an image communication apparatus according to the present invention, 20 is a public telephone line network connecting a large number of terminal devices by a telephone exchange, 30 is an Internet network, and 40 is a public telephone line network 20 and an Internet network 30. An ISP (Internet Service Provider) including a CTI server device to be connected, 50 is connected to the public telephone line network 20, a radio base station that performs radio communication with a radio terminal apparatus to be described later, and 60 is connected to the public telephone line network 20. A wireless communication terminal 70 is a wireless terminal device that communicates wirelessly with a wireless base station and can communicate with the image communication apparatus 10 and the like via the wireless communication terminal 60 and ISP 40, and 80 is a computer device connected to the Internet network 30. .

画像通信装置10は、画像サーバの機能及び撮像とを有し、無線端末装置70やコンピュータ装置80からアクセスがあった場合に、撮像部で撮像した画像データ等をアクセス元の無線端末装置70やコンピュータ装置80に送信する。   The image communication apparatus 10 has the functions and imaging of the image server, and when accessed from the wireless terminal apparatus 70 or the computer apparatus 80, the image communication apparatus 10 stores the image data captured by the imaging unit, etc. Send to computer device 80.

なお、これらの通信は、TCP/IPプロトコルにより行われる。   Note that these communications are performed using the TCP / IP protocol.

図2は本発明の一実施の形態における画像通信装置の構成図である。   FIG. 2 is a configuration diagram of the image communication apparatus according to the embodiment of the present invention.

11は、パン、チルト、ズーム、明るさ調整等の各種制御が可能な撮像部(図示せず)から撮像した画像データを入力する画像入力手段であり、画像データとして輝度(Y)と色差信号(Cb,Cr)に変換処理する。12は、画像入力部において画像処理で変換して得られた画像データを圧縮する画像データ生成手段であり、本実施の形態においては、JPEG形式のデータに変換する。本画像データ生成手段では、解像度や画質を調整して圧縮データとして出力することができる。たとえば、パーソナル・コンピュータ装置のように画面が大きいものに画像を送信するときには、640×480の解像度で、携帯電話機などに画像を送信する場合には、320×240の解像度とすることができ、また動画像を送るときは画質を粗くして、静止画送るときは画質をよくして送る等することができる。   Reference numeral 11 denotes image input means for inputting image data taken from an image pickup unit (not shown) capable of various controls such as panning, tilting, zooming, and brightness adjustment. Luminance (Y) and color difference signals are used as image data. Conversion processing to (Cb, Cr) is performed. Reference numeral 12 denotes image data generation means for compressing image data obtained by conversion by image processing in the image input unit. In the present embodiment, the image data is converted to JPEG format data. In the present image data generation means, the resolution and image quality can be adjusted and output as compressed data. For example, when transmitting an image to a large screen such as a personal computer device, the resolution can be 640 × 480, and when transmitting an image to a mobile phone or the like, the resolution can be 320 × 240. Further, when sending a moving image, the image quality can be made coarse, and when sending a still image, the image quality can be improved.

13は画像データ生成手段12で生成した画像データを蓄積したり、プログラムを蓄積したりするメモリ、13aは、メモリ13内にメモリエリアにあり、コンピュータ装置等へ送信する表示情報、例えばHtmlファイルを蓄積する表示情報データ格納部である。この表示情報データ格納部には、コンピュータ装置80用の表示情報データと、無線端末装置70用の表示情報データが予め格納されており、後述する判定手段16により所定の文字情報が含まれているかどうかにより何れの表示情報データを使用するかが決定される。13bはクライアント装置から設定できるプリセット位置等の情報を記憶したユーザ設定情報記憶部、14はインターネットなどのインターネット網30と画像通信装置10との間で、プロトコルに従い送受信を行うインターフェース、15は画像通信装置10全体を制御する制御手段、16はネットワークを介してクライアントから送信されてくるデータ送信要求にデータ送信要求に所定の文字情報(本実施の形態では、「Mobile」の文字)が含まれているかどうかや要求信号がどのような要求かを判定する判定手段、17は撮像部(図示せず)の位置を駆動させるパンチルト駆動部であり、制御手段15からの命令により動作する。30はインターネットなどの汎用のインターネット網である。なお、本実施の形態では、撮像部を別体としているが、撮像部を一体として構わない。   Reference numeral 13 denotes a memory for storing the image data generated by the image data generation means 12 or a program. Reference numeral 13a denotes a memory area in the memory 13, and display information to be transmitted to a computer device or the like, for example, an HTML file. It is a display information data storage unit to be accumulated. In this display information data storage unit, display information data for the computer device 80 and display information data for the wireless terminal device 70 are stored in advance, and whether predetermined character information is included by the determination means 16 described later. Which display information data is to be used is determined depending on why. 13b is a user setting information storage unit that stores information such as preset positions that can be set from the client device, 14 is an interface that performs transmission and reception between the Internet network 30 such as the Internet and the image communication device 10, and 15 is image communication. The control means 16 for controlling the entire apparatus 10 includes a predetermined character information (in this embodiment, “Mobile” character) included in the data transmission request in the data transmission request transmitted from the client via the network. Determining means 17 for determining whether or not the request signal is present, 17 is a pan / tilt driving section for driving the position of the image pickup section (not shown), and operates according to a command from the control means 15. Reference numeral 30 denotes a general-purpose Internet network such as the Internet. In this embodiment, the imaging unit is a separate body, but the imaging unit may be integrated.

また、80はクライアントのコンピュータ装置であり、81はインターネットなどのインターネットなどのインターネット網30と画像通信装置10との間で、プロトコルに従い送受信を行うことができるインターフェース、82はブラウザプログラムやOSプログラム等を格納したり、ワークメモリとして一次記憶に使用したりするROMやRAMなどのメモリ、83はブラウザプログラムにより生成される画像データや画像通信装置10から送信される画像データを表示する等に用いられるCRTやLCD等の表示部、84は表示されたブラウザ手段にアクセスする端末やサーバのアドレス等を入力するために用いられる入力部、85はコンピュータ装置80全体を制御する制御部である。   Further, 80 is a client computer device, 81 is an interface that can transmit and receive according to the protocol between the Internet network 30 such as the Internet and the image communication device 10, 82 is a browser program, an OS program, etc. Or a memory such as a ROM or RAM that is used as a primary memory as a work memory, and 83 is used to display image data generated by a browser program or image data transmitted from the image communication apparatus 10. A display unit such as a CRT or LCD, 84 is an input unit used to input the address of a terminal or server that accesses the displayed browser means, and 85 is a control unit that controls the entire computer device 80.

また、図3は本発明の一実施の形態における携帯無線端末の構成図である。   FIG. 3 is a configuration diagram of the portable wireless terminal according to the embodiment of the present invention.

60は無線通信端末であり、61は基地局50と無線通信のために無線信号を送信及び受信するために用いられるアンテナ、62は受信した無線信号を復調したり、基地局に送信する無線信号へ変調したりする無線送受信部、63は無線通信端末60の動作プログラムやユーザが設定した情報(電話帳、着信報知方法、その他ユーザが自由に設定できる機能の設定値)等を記憶する記憶部、64は発信用のダイヤル番号、通話時間、ネットワークにアクセスした場合に送信される表示情報データに従った視覚情報を表示するために用いられる表示部、65はダイヤル番号の入力、電話帳に入力する番号や名前、ネットワークから送信される表示情報データ(Htmlファイル)に含まれる内容に従って動作するように入力する入力部、66は無線通信端末60全体を制御する制御部である。   60 is a radio communication terminal, 61 is an antenna used for transmitting and receiving radio signals for radio communication with the base station 50, and 62 is a radio signal for demodulating the received radio signal or transmitting it to the base station A wireless transmission / reception unit 63 that modulates to a storage unit 63 stores an operation program of the wireless communication terminal 60, information set by the user (phone book, incoming call notification method, setting values of other functions that can be freely set by the user), and the like , 64 is a dial number for calling, a call time, a display unit used to display visual information according to display information data transmitted when accessing the network, 65 is an input of a dial number, and is input to a telephone directory An input unit 66 for inputting to operate according to the content included in the display information data (Html file) transmitted from the network A control unit for controlling the entire line communication terminal 60.

以上のように構成された画像通信装置について、図4,図5に示す、本発明の一実施の形態における画像通信装置の動作を示すフローチャートに沿って以下その動作を説明する。   The operation of the image communication apparatus configured as described above will be described below with reference to the flowcharts shown in FIGS. 4 and 5 showing the operation of the image communication apparatus according to the embodiment of the present invention.

コンピュータ装置80や無線通信端末60からインターネット網30を介して画像通信装置10に対し要求信号の送信があった場合、画像通信装置10はインターフェース14を介してこの要求信号を受信し、まずこの要求信号がパンチルト要求であるかどうかを判定手段16により判定する(Step1)。要求信号がパンチルトの要求(撮像部の撮像位置を垂直方向や水平方向に動作させる要求)であると判定手段16が判定した場合、次にこの時点においてパンチルト動作中かどうかを制御手段15が確認し(Step2)、パンチルト動作中であれば、動作終了するまで一定時間のウェイトをさせながらパンチルト動作の終了を待つ(Step3)。パンチルト動作受信時点に動作中のパンチルト動作が終了した場合には、受信したパンチルト命令に従ってパンチルト動作を開始する(Step4)。パンチルト動作が終了(Step5,6)した場合には、パンチルト動作完了通知を、パンチルト要求を行ったコンピュータ装置80等にHtmlファイルとして送信し、これのHtmlファイルを受信したコンピュータ装置80はそのHtmlファイルの記述内容に従って「パンチルト動作完了通知」を表示部83等に表示する。これによりコンピュータ装置80の利用者は自己の指示したパンチルト動作要求に基づく画像通信装置10の動作が終了したことを知ることができる。   When a request signal is transmitted from the computer apparatus 80 or the wireless communication terminal 60 to the image communication apparatus 10 via the Internet network 30, the image communication apparatus 10 receives this request signal via the interface 14, and first requests this request. It is determined by the determination means 16 whether the signal is a pan / tilt request (Step 1). When the determination unit 16 determines that the request signal is a request for pan / tilt (a request to move the imaging position of the imaging unit in the vertical direction or the horizontal direction), the control unit 15 confirms whether the pan / tilt operation is being performed at this time. However, if the pan / tilt operation is being performed, the end of the pan / tilt operation is waited while waiting for a predetermined time until the operation is completed (Step 3). When the pan / tilt operation being performed at the time of receiving the pan / tilt operation is completed, the pan / tilt operation is started in accordance with the received pan / tilt command (Step 4). When the pan / tilt operation ends (Steps 5 and 6), the pan / tilt operation completion notification is transmitted as an Html file to the computer device 80 or the like that has requested pan / tilt, and the computer device 80 that has received the Html file receives the Html file. The “pan / tilt operation completion notification” is displayed on the display unit 83 or the like. Accordingly, the user of the computer device 80 can know that the operation of the image communication device 10 based on the pan / tilt operation request instructed by the user has been completed.

同様に、受信した要求信号が明るさ調整要求であった場合(Step8)には、受信時点で明るさ調整をしている場合にはそれが終了するまで待って(Step9,10)、受信した明るさ調整要求に従って明るさ調整(Step11〜13)を行い、明るさ調整が終了したら、「明るさ調整完了通知」を明るさ調整要求を行ったコンピュータ装置80等にHtmlファイルとして送信する(Step14)。   Similarly, when the received request signal is a brightness adjustment request (Step 8), if the brightness adjustment is performed at the time of reception, wait until it is finished (Steps 9 and 10). The brightness adjustment (Steps 11 to 13) is performed in accordance with the brightness adjustment request, and when the brightness adjustment is completed, “brightness adjustment completion notification” is transmitted as an Html file to the computer device 80 or the like that has requested the brightness adjustment (Step 14). ).

また、受信要求信号が動画像要求であった場合(Step15)には、通信が切断(Step18)されるまで、撮像部で撮像した画像データを画像入力手段11にて取得(Step16)し、画像データ生成手段12により所定の圧縮処理をした後、ネットワークを介して要求信号を送信したコンピュータ装置80等に画像を逐次送信する(Step17)。通信が切断された場合(例えば、コンピュータ装置をネットワークから開放したり、電源をOFFしたりした場合)、通信は完了し、画像送信は中止される(Step19)。   If the reception request signal is a moving image request (Step 15), image data captured by the imaging unit is acquired by the image input means 11 (Step 16) until communication is disconnected (Step 18). After a predetermined compression process by the data generation means 12, the image is sequentially transmitted to the computer device 80 or the like that transmitted the request signal via the network (Step 17). When the communication is disconnected (for example, when the computer device is released from the network or the power is turned off), the communication is completed and the image transmission is stopped (Step 19).

受信要求信号がフレーム画像(Htmlファイル)の送信要求(この要求は、ポート80のみを指定している場合を指す)である場合、要求信号中に所定の文字コード(ここでは、「mobile」とする)が含まれているかどうかを判定手段16により判定(Step20)する。なお、所定の文字コードは、コンピュータ装置等と画像通信装置との間の通信プロトコルに従って受信可能であり、かつ認識できるものであればよく、その態様は限定されるものではない。本実施の形態では、コンピュータ装置80等から送信される画像通信装置10宛てのIPパケットのデータ部に「Get」に続き「Moblie」と文字コードが含まれており、判定手段16は、HTTPリクエストヘッダのメソッド「GET」に従ってこの「Moblie」が検出できたかどうかを判定する(Step21)。「Moblie」の文字コードが検出できたと判定した場合には、第1の表示情報データである第1のHtmlファイルを表示情報データ格納部13aから取り出し、要求信号を送信元の装置に対し、この第1のHtmlファイルを送信する(Step22)。一方、「Moblie」の文字コードが検出できないと判定した場合には、第2の表示情報データである第2のHtmlファイルを表示情報データ格納部13aから取り出し、要求信号を送信元の装置に対し、この第2のHtmlファイルを送信する(Step23)。   When the reception request signal is a transmission request for a frame image (Html file) (this request indicates that only the port 80 is designated), a predetermined character code (here, “mobile” is included in the request signal). Is determined by the determination means 16 (Step 20). The predetermined character code is not limited as long as it can be received and recognized according to the communication protocol between the computer device and the image communication device. In the present embodiment, the data part of the IP packet addressed to the image communication apparatus 10 transmitted from the computer apparatus 80 or the like contains “Get” followed by the character code, and the determination means 16 receives the HTTP request. It is determined whether or not this “Mobile” has been detected in accordance with the header method “GET” (Step 21). If it is determined that the character code “Mobile” has been detected, the first html file, which is the first display information data, is extracted from the display information data storage unit 13a, and the request signal is sent to the transmission source device. The first html file is transmitted (Step 22). On the other hand, if it is determined that the character code “Mobile” cannot be detected, the second html file, which is the second display information data, is extracted from the display information data storage unit 13a, and a request signal is sent to the transmission source device. The second Html file is transmitted (Step 23).

ここで、第1のHtmlファイルには、解像度を320×240ピクセル及び画質を動き優先(画質が粗く、圧縮率が高い)に圧縮形式を選択して送信させる要求がcgi記述形式で記述されている。例えば、Htmlファイルのソースに、<REF=“Http://AAA.co.jp/Mobile−Quality=Low&Size=320×240”>と記述されており、このHtmlファイルを受け取るとこの記述に従って、画像通信装置10に静止画像データ要求信号を送信する。この記述に従ってアクセスされた画像通信装置10は、Moblieというcgiプログラムに従って、Qualityの引数Low及びSizeの引数320×240を取り出してその内容に従って、画像データ生成手段12により画像圧縮され、画像データが生成される。また、第2のHtmlファイルには、解像度を620×480ピクセル及び画質を画質優先(画質はよいが、圧縮率が低い)に圧縮形式を選択して送信させる要求がcgi記述形式で記述されている。例えば、Htmlファイルのソースに、<REF=“Http://AAA.co.jp/Mobile−Quality=High&Size=620×480”>と記述されており、このファイルを受け取るとこの記述に従って、画像通信装置10に静止画像データ要求信号を送信する。この記述に従ってアクセスされた画像通信装置10は、Moblieというcgiプログラムに従って、Qualityの引数High及びSizeの引数620×480を取り出してその内容に従って、画像データ生成手段12により画像圧縮され、画像データが生成される。   Here, in the first html file, a request to select and send a compression format with a resolution of 320 × 240 pixels and an image quality as a motion priority (rough image quality and high compression ratio) is described in a cgi description format. Yes. For example, in the source of the Html file, <REF = “Http://AAA.co.jp/Mobile-Quality=Low & Size = 320 × 240”> is described, and when this Html file is received, the image is A still image data request signal is transmitted to the communication device 10. The image communication apparatus 10 accessed in accordance with this description takes out the Quality argument Low and the Size argument 320 × 240 according to the cgi program “Mobile”, and the image data generation means 12 compresses the image according to the contents, thereby generating image data. Is done. In the second html file, a request to select and send a compression format with a resolution of 620 × 480 pixels and an image quality priority (image quality is good, but compression ratio is low) is described in a cgi description format. Yes. For example, <REF = “Http://AAA.co.jp/Mobile-Quality=High&Size=620×480”> is described in the source of the Html file, and image communication is performed according to this description when this file is received. A still image data request signal is transmitted to the apparatus 10. The image communication apparatus 10 accessed according to this description takes out the Quality argument High and the Size argument 620 × 480 according to the cgi program “Mobile”, and the image data generation means 12 compresses the image according to the contents to generate image data. Is done.

具体的には、受信要求信号が静止画像要求であった場合、すなわちMoblieというcgiプログラムの動作要求があった場合(Step24)、制御手段15は画像通信装置10がパンチルト動作中若しくは明るさ調整動作中かどうかを判断(Step25)し、動作中(受信した要求信号にパンチルト等の動作要求が含まれているときも動作中とみなす)であれば、この動作が中止するまでの間は、静止画像の送信は行わずに待つ(Step26)。パンチルト動作等が終了した場合、若しくはこの要求信号を受信時にパンチルト動作等が行われていない場合(Step25)には、受信した要求信号中のcgiのQuality及びSizeの引数を取り出し(Step27)、その引数に従って画像データ生成手段12が静止画像の圧縮画像データを生成し、静止画像要求信号を送信した装置に対し、生成した圧縮画像データを送信する(Step28)。   Specifically, when the reception request signal is a still image request, that is, when there is an operation request for a cgi program “Mobile” (Step 24), the control means 15 is operating the pan / tilt operation or brightness adjustment operation. If it is in operation (if the received request signal includes an operation request such as pan / tilt, etc., it is also considered to be in operation), it will remain stationary until this operation is stopped. It waits without transmitting the image (Step 26). When the pan / tilt operation or the like is completed, or when the pan / tilt operation or the like is not performed when the request signal is received (Step 25), the cgi Quality and Size arguments in the received request signal are extracted (Step 27). The image data generation means 12 generates compressed image data of a still image according to the argument, and transmits the generated compressed image data to the apparatus that has transmitted the still image request signal (Step 28).

従って、無線通信端末60と基地局50間でデータ伝送速度が低い場合においても、画像通信装置10から静止画像を入手する場合、URLにMobileの文字を付加するだけで自動的にデータ量の少ない静止画像データが選択され、迅速に表示部に画像通信装置10から送信される静止画像データを受信することが可能となる。一方、ネットワークに直接接続、若しくはADSLなどの大容量の通信線に接続されたコンピュータ装置80のように、静止画像データ程度の容量のデータ受信について即時的に受信できるような装置の場合には、URLにMobileという文字を付加せずに画像通信装置10に要求することにより自動的に一般のコンピュータ装置に適した解像度及び画質を有する静止画像データを受信することができる。なお、無線通信端末60からのアクセスは、<Http://AAA.co.jp/Mobile>をブラウザ66aにより表示部64に表示されているブラウザ画面のURL入力の欄に入力部65を介して入力することにより、ブラウザ手段は、DNSサーバ(図示せず)に「AAA.co.jp」のIPアドレスを問合せし、入手したIPアドレスを宛先としてIPパケットのヘッダ部分に付加すると共に「Get http://AAA.co.jp/Mobile HTTP/1.0」をIPパケットのデータ部分に入れて、そのIPパケットを宛先IPアドレスの画像通信装置10に対して送信することにより行われる。   Therefore, even when the data transmission speed between the wireless communication terminal 60 and the base station 50 is low, when acquiring a still image from the image communication device 10, the data amount is automatically reduced by simply adding Mobile characters to the URL. Still image data is selected, and it is possible to quickly receive still image data transmitted from the image communication apparatus 10 to the display unit. On the other hand, in the case of a device that can be immediately received with respect to data reception of a capacity equivalent to still image data, such as a computer device 80 connected directly to a network or connected to a large-capacity communication line such as ADSL, By requesting the image communication apparatus 10 without adding the word “Mobile” to the URL, it is possible to automatically receive still image data having a resolution and image quality suitable for a general computer apparatus. Note that access from the wireless communication terminal 60 is <http: // AAA. co. jp / Mobile> is input to the URL input field of the browser screen displayed on the display unit 64 by the browser 66a via the input unit 65, so that the browser means sends "AAA." to the DNS server (not shown). co.jp "is inquired, and the obtained IP address is added to the header portion of the IP packet with the obtained IP address as the destination, and" Get http://AAA.co.jp/Mobile HTTP / 1.0 " This is performed by putting the IP packet in the data portion and transmitting it to the image communication apparatus 10 having the destination IP address.

また、受信要求信号が静止画周期要求であった場合(Step29)、その信号を受信した場合にパンチルト動作中や明るさ調整動作中である場合には(Step30)、画像データ送信間隔を1秒と短くするように画像データを合せて周期情報(1秒後ごとに静止画像データの送信を要求する記述を含んだ新たなHtmlファイル)を送信し、動作中で場合には、そのまま静止画像データのみ送信する(Step31、32,33)。この動作により、パンチルト動作中である場合にその動作の変化を容易に知ることができ、画像通信装置10を操作することができる。すなわち、画像周期要求と同時にパンチルト要求がネットワークに接続されたクライアント装置から送信された場合、画像通信装置10から送信される周期情報に基づき、自動的に画像送信の間隔を短くなるので、動作状況がすぐ把握できる。一方、それ以外の場合には、画像送信の周期が長い。従って、このようにすることで、画像を見たいときには必ず画像データが逐次送信されることになり、又余り画像を見る必要がないときには、画像データの受信の間隔が空いているため、煩わしさがない。   When the reception request signal is a still image cycle request (Step 29), and when the signal is received and the pan / tilt operation or the brightness adjustment operation is being performed (Step 30), the image data transmission interval is set to 1 second. The period information (a new html file including a description requesting transmission of still image data every 1 second) is transmitted together with the image data so as to shorten the image data. Only (Steps 31, 32, 33). With this operation, when the pan / tilt operation is being performed, a change in the operation can be easily known, and the image communication apparatus 10 can be operated. That is, when the pan / tilt request is transmitted simultaneously with the image cycle request from the client device connected to the network, the image transmission interval is automatically shortened based on the cycle information transmitted from the image communication device 10. Can be grasped immediately. On the other hand, in other cases, the cycle of image transmission is long. Therefore, in this way, image data is always transmitted sequentially when it is desired to view the image, and when there is no need to view the image, there is an interval for receiving the image data, which is bothersome. There is no.

次に、第1のHtmlファイルを受信した場合の無線通信端末60の表示及び動作について図6を参照しながら説明する。   Next, the display and operation of the wireless communication terminal 60 when the first html file is received will be described with reference to FIG.

図6は本発明の一実施の形態における無線通信端末60の外観及び表示部の表示内容を示す図である。第1のHtmlファイルを受信した場合に、無線通信端末60のブラウザ手段66aは、第1のHtmlファイルに記述された内容に従って、画面を表示する。3aの部分には、画像通信装置10から送信される静止画像データが表示され、又3bの部分には第1のHtmlファイルに記述された文字データが表示されている。無線通信装置10の使用者は、3bに表示されている内容に従って、画像通信装置10の撮像部のパンチルト動作要求やプリセット位置への移動をダイヤルキーである入力手段4を押下する事により、無線通信装置10への各種要求命令を送信することができる。具体的には、ダイヤルキー4を押すとその情報がHtmlファイルの記述に従って、右側へ撮像部がパンニングするように要求する信号及び静止画像送信を要求する信号が画像通信装置10に送信される。また、ダイヤルキー4を押すとその情報がHtmlファイルの記述に従って、プリセットの位置に撮像部を動作させる要求信号及び静止画像送信を要求する信号がするように要求する信号及び静止画像送信を要求する信号が画像通信装置10に送信される。   FIG. 6 is a diagram showing the appearance of the wireless communication terminal 60 and the display content of the display unit in one embodiment of the present invention. When the first html file is received, the browser means 66a of the wireless communication terminal 60 displays a screen according to the contents described in the first html file. Still image data transmitted from the image communication apparatus 10 is displayed in the portion 3a, and character data described in the first Html file is displayed in the portion 3b. The user of the wireless communication device 10 wirelessly presses the input means 4 that is a dial key to request the pan / tilt operation of the imaging unit of the image communication device 10 and move to the preset position according to the content displayed on 3b. Various request commands to the communication device 10 can be transmitted. Specifically, when the dial key 4 is pressed, a signal requesting that the imaging unit pan to the right side and a signal requesting still image transmission are transmitted to the image communication apparatus 10 according to the description of the Html file. When the dial key 4 is pressed, the information requests a signal for requesting the operation of the imaging unit and a signal for requesting still image transmission at a preset position and a still image transmission according to the description of the HTML file. A signal is transmitted to the image communication apparatus 10.

以上のように本発明の実施の形態で説明した画像通信装置10は、通信速度が遅く容量の大きいデータを受信することが困難な無線端末装置であっても、URLとして所定の文字情報を入力するだけで、画像通信装置10から静止画像を入手する場合に自動的にデータ量の少ない静止画像データが選択され、迅速に表示部に画像通信装置10から送信される静止画像データを受信することが可能となる。また、携帯電話装置などの無線端末装置は、インターネット等のネットワークに接続するときにはIPパケット毎にインフラ業者から課金される仕組みが多く、画像通信装置10にアクセスした際、データ量の少ない画像データが一枚(設定された枚数)送信されるだけなので、必要以上に画像データを受信することがなく無用に課金されるようなことがないので、利便性に優れている。また、無線端末装置のダイヤルキーなどの入力手段で簡単にパンチルト動作、プリセット動作、更新動作等をすることができるため、操作性においても優れている。   As described above, the image communication apparatus 10 described in the embodiment of the present invention inputs predetermined character information as a URL even if it is a wireless terminal apparatus that has a low communication speed and is difficult to receive large-capacity data. In this case, when a still image is obtained from the image communication apparatus 10, still image data with a small amount of data is automatically selected, and the still image data transmitted from the image communication apparatus 10 is quickly received on the display unit. Is possible. In addition, a wireless terminal device such as a cellular phone device has a mechanism in which an infrastructure provider charges for each IP packet when connecting to a network such as the Internet. When accessing the image communication device 10, image data with a small amount of data is stored. Since only one sheet (set number) is transmitted, image data is not received more than necessary and there is no need to be charged unnecessarily, which is excellent in convenience. In addition, the pan / tilt operation, the preset operation, the update operation, and the like can be easily performed by an input unit such as a dial key of the wireless terminal device, so that operability is excellent.

さらに、無線端末装置に送信された第1のHtmlファイルに基き、ダイヤルキーを用いてパンチルト制御をする場合、画像通信装置に対し、パンチルト要求命令と共に静止画像要求がIPパケットに埋め込まれて送信され、画像通信装置は、これを受信した場合にはまずパンチルト要求に従ったパンチルト動作をし、そのパンチルト動作を終了した後に撮像部からの画像データを圧縮して画像データを送信するので、静止画像データ要求とパンチルト動作要求等とをそれぞれの要求信号として分けることができ、各要求信号の処理が容易になる。   Further, when pan / tilt control is performed using a dial key based on the first html file transmitted to the wireless terminal device, a still image request is embedded in the IP packet and transmitted together with the pan / tilt request command to the image communication device. When receiving this, the image communication apparatus first performs a pan / tilt operation in accordance with the pan / tilt request, and after the pan / tilt operation is finished, compresses the image data from the imaging unit and transmits the image data. A data request and a pan / tilt operation request can be separated as respective request signals, and the processing of each request signal is facilitated.

一方、ネットワークに直接接続、若しくはADSLなどの大容量の通信線に接続されたコンピュータ装置のように、静止画像データ程度の容量のデータ受信について即時的に受信できるような装置の場合には、URLにMobileという文字を付加せずに画像通信装置に要求することにより自動的に一般のコンピュータ装置に適した解像度及び画質を有する静止画像データを受信することができる。   On the other hand, in the case of a device that can receive data about a still image data amount immediately, such as a computer device connected directly to a network or connected to a large-capacity communication line such as ADSL, By requesting the image communication apparatus without adding the word “Mobile”, still image data having a resolution and image quality suitable for a general computer apparatus can be automatically received.

本発明は、複数の種別のクライアント装置に撮像した画像を送信する画像通信装置に適用できる。   The present invention can be applied to an image communication apparatus that transmits captured images to a plurality of types of client apparatuses.

本発明の一実施の形態における画像通信装置システムの構成図The block diagram of the image communication apparatus system in one embodiment of this invention 本発明の一実施の形態における画像通信装置の構成図1 is a configuration diagram of an image communication apparatus according to an embodiment of the present invention. 本発明の一実施の形態における携帯無線端末の構成図1 is a configuration diagram of a portable wireless terminal according to an embodiment of the present invention. 本発明の一実施の形態における画像通信装置の動作を示すフローチャートThe flowchart which shows operation | movement of the image communication apparatus in one embodiment of this invention. 本発明の一実施の形態における画像通信装置の動作を示すフローチャートThe flowchart which shows operation | movement of the image communication apparatus in one embodiment of this invention. 本発明の一実施の形態における無線通信端末の外観及び表示部の表示内容を示す図The figure which shows the external appearance of the radio | wireless communication terminal in one embodiment of this invention, and the display content of a display part

符号の説明Explanation of symbols

10 画像通信装置
11 画像入力手段
12 画像データ生成手段
13 メモリ
13a 表示情報データ格納部
13b ユーザ設定情報格納部
14 インターフェース
15 制御手段
16 判定手段
20 公衆電話回線網
30 インターネット網
40 ISP
50 基地局
60 無線通信端末
70 無線端末装置
80 コンピュータ装置
DESCRIPTION OF SYMBOLS 10 Image communication apparatus 11 Image input means 12 Image data generation means 13 Memory 13a Display information data storage part 13b User setting information storage part 14 Interface 15 Control means 16 Judgment means 20 Public telephone line network 30 Internet network 40 ISP
50 base station 60 wireless communication terminal 70 wireless terminal device 80 computer device

Claims (5)

被写体を撮像する撮像手段と
クライアント装置からのアクセスに基づいて、前記撮像手段により撮像した画像及びこの画像を前記クライアント装置で表示するレイアウトを示すレイアウト情報を前記クライアント装置へ送信する通信手段と
前記クライアント装置から本画像通信装置に対して画像を送信するよう指示があった場合、前記クライアント装置の種別を示す識別情報を前記クライアント装置から受取り、受け取った前記識別情報に対応するレイアウト情報を、前記通信手段により前記クライアント装置へ送信させる制御手段と、を備えることを特徴とする画像通信装置。
Imaging means for imaging a subject ;
Based on the access from the client device, and a communication means for transmitting the layout information to the client device indicating a layout for displaying an image and the image captured by the client device by the imaging means,
When there is an instruction from the client device to transmit an image to the image communication device, the client device receives identification information indicating the type of the client device from the client device , layout information corresponding to the received identification information, An image communication apparatus comprising: control means for causing the communication means to transmit to the client device.
前記クライアント装置の識別情報と前記レイアウト情報とを関連づけて記憶する記憶手段を有し、前記制御手段は、前記受取った識別情報に対応する前記レイアウト情報を前記記憶手段から選択することを特徴する請求項1記載の画像通信装置。 A storage means for storing in association with the layout information and the identification information of the client device, said control means, characterized by selecting the layout information corresponding to the accepted took identification information from the storage means The image communication apparatus according to claim 1. 前記クライアント装置は携帯無線端末装置であることを特徴する請求項1記載の画像通信装置。 The image communication apparatus according to claim 1, wherein the client apparatus is a portable wireless terminal apparatus. 前記クライアント装置はコンピュータ装置であることを特徴する請求項1記載の画像通信装置。 The image communication apparatus according to claim 1, wherein the client apparatus is a computer apparatus. 前記レイアウト情報は、Htmlファイルであることを特徴とする請求項1乃至請求項2記載の画像通信装置The image communication apparatus according to claim 1, wherein the layout information is an html file.
JP2007048765A 2007-02-28 2007-02-28 Image communication device Expired - Lifetime JP4281811B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007048765A JP4281811B2 (en) 2007-02-28 2007-02-28 Image communication device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007048765A JP4281811B2 (en) 2007-02-28 2007-02-28 Image communication device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2002073623A Division JP3991733B2 (en) 2002-03-18 2002-03-18 Image communication device

Publications (2)

Publication Number Publication Date
JP2007215202A JP2007215202A (en) 2007-08-23
JP4281811B2 true JP4281811B2 (en) 2009-06-17

Family

ID=38493159

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007048765A Expired - Lifetime JP4281811B2 (en) 2007-02-28 2007-02-28 Image communication device

Country Status (1)

Country Link
JP (1) JP4281811B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4883123B2 (en) * 2009-03-31 2012-02-22 凸版印刷株式会社 COUPON DISTRIBUTION SYSTEM, COUPON DISTRIBUTION DEVICE, AND COUPON DISTRIBUTION METHOD

Also Published As

Publication number Publication date
JP2007215202A (en) 2007-08-23

Similar Documents

Publication Publication Date Title
KR100404885B1 (en) Apparatus for remote surveillance using mobile video phone
JP5913927B2 (en) Apparatus and method for acquiring and sharing shooting data in a portable terminal
JP2002354329A (en) Photographing device and photographing system
JP2003069988A (en) Digital camera and its control method
JP2001285420A (en) Mobile radio communication equipment, communication system, and printer
EP1467564B1 (en) Videophone with screen display setting method
US8639301B2 (en) Portable telephone, imaging system employing portable telephone and imaging method
JPWO2005022902A1 (en) Camera with transmission function and mobile phone, image data acquisition and transmission program
JP3804530B2 (en) Monitoring system center device, monitoring system center program, and recording medium recording monitoring system center program
JP4281811B2 (en) Image communication device
JP3991733B2 (en) Image communication device
JP2019036789A (en) Imaging apparatus, communication apparatus, control method of them, and program
US8723964B2 (en) Method and device for communication using an optical sensor
JP4281812B2 (en) Image communication device
JP6269063B2 (en) Content display terminal selection system
JP2007096855A (en) Photographing system and photographing method
JP2003244516A (en) Imaging system, imaging device, and device and method for remotely controlling imaging
JP2003309694A (en) Information transmitter
JP2001197460A (en) Image data relaying method and communication management center
JP4400237B2 (en) Portable terminal device and server device
JP6882012B2 (en) Communication device, control method of communication device, and program
JP4532685B2 (en) Electronic camera remote control system and information processing method and apparatus applied to the system
JP2016009942A (en) Imaging apparatus, terminal device, and communication system
EP1215568A2 (en) Method for transmitting information
JP5636747B2 (en) Communication terminal, communication system, communication method, and computer program

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090130

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090224

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090309

R151 Written notification of patent or utility model registration

Ref document number: 4281811

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120327

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120327

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130327

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130327

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140327

Year of fee payment: 5

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term