JP4165489B2 - 写真処理システム - Google Patents

写真処理システム Download PDF

Info

Publication number
JP4165489B2
JP4165489B2 JP2004291516A JP2004291516A JP4165489B2 JP 4165489 B2 JP4165489 B2 JP 4165489B2 JP 2004291516 A JP2004291516 A JP 2004291516A JP 2004291516 A JP2004291516 A JP 2004291516A JP 4165489 B2 JP4165489 B2 JP 4165489B2
Authority
JP
Japan
Prior art keywords
image data
character information
image
information
processing system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004291516A
Other languages
English (en)
Other versions
JP2006108999A (ja
Inventor
孝二 氏野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Noritsu Koki Co Ltd
Original Assignee
Noritsu Koki Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Noritsu Koki Co Ltd filed Critical Noritsu Koki Co Ltd
Priority to JP2004291516A priority Critical patent/JP4165489B2/ja
Publication of JP2006108999A publication Critical patent/JP2006108999A/ja
Application granted granted Critical
Publication of JP4165489B2 publication Critical patent/JP4165489B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Processing Or Creating Images (AREA)

Description

本発明は、デジタルカメラ等で撮影された画像データを所定のテンプレート画像に合成する写真処理システムに関するものである。
近年、デジタルカメラやカメラ付き携帯電話が普及してきている。このデジタルカメラやカメラ付き携帯電話で撮影された画像は、プリンタ等のプリント装置で出力することにより写真プリントと同様に扱われる。また、様々なテンプレート画像に合成してプリント出力することで写真以外の用途にも使用することができ、付加価値のある画像プリントを実現することができる。
例えば、特許文献1には、画像が印刷された写真立て用面と、その裏面に印刷された書簡用面とを備えた写真立て兼用書簡をプリント出力することが開示されている。
特開2003−266973号公報
このような付加価値のある画像プリントのその他の例として、画像データを合成する領域の横にメッセージ等を書き込むための罫線が引かれたメッセージ書き込み領域を設けたテンプレートをプリント出力するようにしたものがある。
このようにプリント出力するテンプレートにメッセージ書き込み領域を予め設けておくことで、その写真に関する情報や感想等をユーザーが書き込むことにより、後で見直したときに旅行当時の思い出を想起するのが容易となる。
また、普通にプリント出力した写真をアルバムに収納して分類する等しなくても、このテンプレートをプリント出力するだけでアルバム状のプリントが得られることから、写真の整理も容易となる。
しかしながら、旅行から帰ってしばらく期間をおいてから写真をプリント出力した場合、その写真に対するメッセージを書き込もうとしても旅行当時の感動が薄れてしまっていることが多く、当時の情景を忘れてしまっているため適切なコメントを書き込むことが難しくなり、結局何も記入せずに空欄のまま放置することが多いという問題があった。
本発明は、かかる点に鑑みてなされたものであり、その目的とするところは、ユーザーの負担を軽減しつつプリント出力すべき写真に対する適切なメッセージを記載し得るようにすることにある。
前記目的を達成するため、本発明では、ユーザーが撮影した画像データのExif情報に文字情報を付加して、この文字情報をテンプレート画像の文字情報合成領域に合成するようにした。
すなわち、請求項1の発明は、ユーザーが撮影したデジタル画像データを所定のテンプレート画像に設けられた画像合成領域に合成する写真処理システムであって、
前記ユーザーが入力する任意の文字情報を前記画像データのExif情報に付加する文字情報付加手段と、
前記画像データを前記テンプレート画像の画像合成領域に合成するとともに、該画像データに付加された前記文字情報を該テンプレート画像に設けられた文字情報合成領域に合成する合成手段と
前記画像データを撮影した場所の位置情報を特定する位置特定手段とを備え、
前記合成手段は、前記画像データのExif情報に前記文字情報が付加されていない場合に、前記位置特定手段で特定された位置情報に係る観光地に関連した画像データを前記テンプレート画像の文字情報合成領域に合成するように構成されていることを特徴とする。
従って、本発明によれば、文字情報付加手段により画像データのExif情報に文字情報が付加され、合成手段により該画像データに付加された文字情報がテンプレート画像に設けられた文字情報合成領域に合成される。また、位置特定手段により画像データを撮影した場所の位置情報が特定され、該画像データのExif情報に文字情報が付加されていない場合に、該特定された位置情報に係る観光地に関連した画像データが、合成手段によりテンプレート画像の文字情報合成領域に合成される。
請求項の発明は、請求項1に記載された写真処理システムにおいて、
前記ユーザーが音声入力した音声データを文字情報に変換する変換手段をさらに備え、
前記文字情報付加手段は、前記変換手段で変換された文字情報を前記画像データのExif情報に付加するように構成されていることを特徴とする。
従って、本発明によれば、文字情報付加手段により、音声データから変換された文字情報が画像データのExif情報に付加される。
請求項の発明は、請求項1又は2に記載された写真処理システムにおいて、
前記合成手段により画像合成されたテンプレート画像をプリント出力するプリント手段をさらに備えていることを特徴とする。
従って、本発明によれば、プリント手段により、画像合成されたテンプレート画像がプリント出力される。
請求項の発明は、請求項1乃至のうち何れか1項に記載された写真処理システムにおいて、
前記合成手段により画像合成されたテンプレート画像を電子アルバムに記録する記録手段をさらに備えていることを特徴とする。
従って、本発明によれば、記録手段により、画像合成されたテンプレート画像が電子アルバムに記録される。
以上のように、請求項1に係る発明によれば、ユーザーが入力する文字情報を画像データのExif情報に付加し、この画像データをテンプレート画像に合成するときに、該画像データに付加している文字情報を該テンプレート画像の文字情報合成領域に合成するようにしているから、例えば、ユーザーが画像データを撮影したときにその画像データに対する感想やメッセージ等をその場で書き込んでおけば、この画像データをプリント出力するだけで手軽にメッセージ付きアルバムを作成することができ、通常のプリントに比べて付加価値のあるプリントを行うことができて顧客満足度が高まる。
なお、このような画像データに対する感想やメッセージ等の文字情報は、旅行から帰宅したときに入力することもできるが、旅行当時の興奮や感動の記憶が未だ鮮やかに残っている状態でメッセージ入力を行った方が、臨場感に溢れたコメントを入力できると思われるため、旅行当時の情景を想起する上でより好ましい。
さらに、画像データのExif情報に文字情報が付加されていない場合に、位置特定手段で特定された該画像データの撮影場所である観光地に関連した画像データがテンプレート画像の文字情報合成領域に合成されるから、撮影した画像データのExif情報に文字情報が付加されていなくても、テンプレート画像の文字情報合成領域が空白になって全体として見映えが悪くなることを防止できる。さらに、この文字情報合成領域には旅行当時に観光した観光地に関連する画像データ(例えば、USJに旅行した場合には、映画“ジュラシックパーク”の画像データ等)が合成されることになり、旅行当時の思い出を想起する上で有利となる。
請求項に係る発明によれば、ユーザーが音声入力したデータを文字情報に変換して画像データに付加するから、キーボードやタッチパネル等のキー入力により画像データのExif情報に文字情報を付加する場合に比べて入力の手間が軽減され、ユーザーが気軽にメッセージを入力することができるようになる。
請求項に係る発明によれば、画像データや文字情報を合成したテンプレート画像をプリント出力することで、手軽にメッセージ付きアルバムを作成することができ、通常のプリントに比べて付加価値のあるプリントを行うことができて顧客満足度が高まる。
請求項に係る発明によれば、画像データや文字情報を合成したテンプレート画像を電子アルバムに記録することで、例えば、モニタ画面に表示させた画像に文字情報をオーバーラップして表示させたり、文字情報がテロップのように画面上を右から左に流れるように表示させることができ、電子アルバムを鑑賞する楽しみが増して顧客満足度が高まる。
以下、本発明の実施形態を図面に基づいて詳細に説明する。以下の好ましい実施形態の説明は、本質的に例示に過ぎず、本発明、その適用物或いはその用途を制限することを意図するものでは全くない。
図1は、本発明の実施形態に係る写真処理システム100の構成を示すブロック図である。図1に示すように、この写真処理システム100は、画像データを撮影するための携帯機器10と、この携帯機器10から画像データを受け取って画像編集を行う受付ブロック20と、編集した画像データをプリント出力するプリント部30とを備えている。
前記携帯機器10は、画像データの撮影を行うカメラ部11と、撮影した画像や各種メニュー画面を表示するディスプレイ12と、GPS衛星からの電波を取り込んでユーザーの位置情報(経度・緯度のデータ)を特定する位置特定部13と、文字情報を入力するためのキー入力部14(文字情報付加手段)と、音声情報の入出力を担う音声入出力部15と、撮影した画像データを記録するためのフラッシュメモリ等からなる記録媒体16と、外部機器とのデータのやり取りを行う通信ケーブル端子17とを備えている。なお、前記携帯機器10としては、具体的にはカメラ付き携帯電話やデジタルカメラ等を想定しているが、これに限定されず、上述した機能を備えた機器であれば構わない。
前記受付ブロック20は、情報処理を行うパソコン本体21と、画像データや処理メニュー等を表示するディスプレイ22と、パソコン本体21を操作する外部入力機器としてのキーボード23と、前記携帯機器10の記録媒体16に保存された画像データを読み出す半導体ドライブ24と、読み出した画像データを保存するハードディスク25とを備えている。
次に、本発明の実施形態に係る写真処理システムにおいて画像データに文字情報を付加する処理の流れを図2のフローチャート図に示す。図2に示すように、まず、ステップS101で、ユーザーが観光地等を訪れたときに携帯機器10で撮影した画像データを記録媒体16に記録する。
ステップS102で、GPS衛星からの電波に基づいて、画像データを撮影した場所の位置情報(経度・緯度のデータ)を位置特定部13で特定し、その位置情報を画像データのExif情報に記録する。
ステップS103で、撮影した画像データに対する感想やメッセージ等の文字情報をキー入力部14で入力し、画像データのExif情報に文字情報を付加する。
なお、ステップS103では、文字情報の入力をキー入力部14で行うようにしたが、これに限定されず、音声入出力部15で行ってもよい。具体的に、音声入出力部15からユーザーが吹き込んだ感想やメッセージ等の音声情報を、音声情報を文字情報に変換する変換部(図示せず)で文字情報に変換し、画像データのExif情報に文字情報を付加する。
以上のような処理を行うことにより、携帯機器10でユーザーが撮影した画像データのExif情報に文字情報が付加されることとなる。
次に、受付ブロック20における画像編集の処理の流れを図3のフローチャート図に示す。図3に示すように、ステップS201で、前記携帯機器10の記録媒体16を半導体ドライブ24に読み込ませ、撮影した画像データをハードディスク25に保存する。なお、携帯機器10の通信ケーブル端子17を利用して画像データをパソコン本体21に送信するようにしても構わない。
ステップS202で、図4に示すようなテンプレート選択モードに切り替え、複数のテンプレート画像をディスプレイ22に表示する。図4に示すテンプレート画像は、複数の画像合成領域と文字情報合成領域とを有するものであり、その合成領域の配列や数がそれぞれ異なっている。例えば、図4の左側のテンプレート画像では、3つの画像合成領域がテンプレート画像の左側に設けられ、この画像合成領域の右側にそれぞれ文字情報合成領域が設けられており、画像データに付加された文字情報がそれぞれ対応する文字情報合成領域に表示されるようになっている。
ステップS203で、複数のテンプレート画像の中からユーザーが1つ選択し、「決定」ボタンを押す。ステップS204で、図5に示すような画像合成モードに切り替え、選択したテンプレート画像の画像合成領域にどの画像データを合成するかをユーザーが選択する。
ステップS205で、合成手段(図示せず)によって画像合成領域に合成された画像データのExif情報に文字情報が付加されているかを判定する。ステップS205での判定が「YES」の場合には、ステップS206に分岐し、ステップS206で、画像データに付加されている文字情報を合成手段(図示せず)により文字情報合成領域に合成してディスプレイ22に表示する(図6参照)。
そして、ステップS207に進み、ステップS207で、合成された文字情報を編集するかを判定する。ステップS207での判定が「YES」の場合には、ステップS208に分岐して、ステップS208で、図示しない文字情報編集モードに切り替えて、キーボード23により文字情報の修正を行う。ステップS207での判定が「NO」の場合には、そのままステップS209に分岐する。
次に、ステップS205での判定が「NO」の場合には、ステップS210に分岐し、ステップS210で、画像データのExif情報に記録された撮影場所の位置情報を読み出す。そして、ステップS211で、その位置情報に係る観光地に関連した関連画像データを、その画像データに対応した文字情報合成領域に合成してディスプレイ22に表示する(図7参照)。
そして、ステップS212に進み、ステップS212で、前記関連画像データを編集するかを判定する。ステップS212での判定が「YES」の場合には、ステップS213に分岐し、ステップS213で、図示しない関連画像選択モードに切り替え、合成すべき関連画像データの候補をディスプレイ22に一覧表示する。一覧表示された関連画像データの中からユーザーが好みのものを1つ選択することで、前記文字情報合成領域に選択した関連画像データを合成する。ステップS212での判定が「NO」の場合には、そのままステップS209に分岐する。
最後に、ステップS209で、図示しないプレビューモードに切り替え、テンプレート画像、画像データ、及び文字情報がユーザーの希望通りに合成されているかを判定する。
ステップS209での判定が「NO」の場合には、ステップS202に分岐して再度テンプレート画像の選択からやり直す。又は、ステップS204に分岐するようにして、テンプレート画像はそのまま使用し、画像データの合成処理だけをやり直すようにしても構わない。
ステップS209での判定が「YES」の場合には、テンプレート画像に対する画像データ及び文字情報の合成が全て完了したとして画像編集を終了する。
以上の処理により、ユーザーが撮影した画像データ及びこの画像データに付加された文字情報、又は画像データを撮影した場所の位置情報に係る観光地に関連した画像データを合成したテンプレート画像を作成することができる。
次に、作成したテンプレート画像をプリント部30でプリント処理する手順について説明する。まず、パソコン本体21のハードディスク25に保存されている前記受付ブロック20で作成したテンプレート画像を読み出して、ディスプレイ22に表示する。そして、このテンプレート画像をプリントするかを確認してOKであれば、ユーザーが図示しないメニュー画面の「プリント」ボタンを押す。
これにより、プリント部30に当該テンプレート画像が送信され、このデータに基づいてプリント出力が行われる。
以上のような操作を行うことにより、ユーザーが撮影した画像データ及び画像データに付加した文字情報を合成したテンプレート画像をプリント出力することができ、メッセージ付きアルバムの作成を容易に行うことができる。
なお、本実施形態の写真処理システムは、画像データのExif情報に文字情報を付加しておき、画像データを表示する際に付加されている文字情報を読み出してテンプレート画像に合成することでメッセージ付きアルバムを作成するものであるが、これに限定するものではなく、例えば、図8に示すグリーティングカードのように、グリーティングカードの左側に画像を合成表示させ、右側に画像データのExif情報に付加されている文字情報を合成表示するようにしてもよい。
また、図9に示すメッセージ付きアルバムのように、テンプレート画像の画像合成領域と文字情報合成領域とをオーバーラップさせて表示するようにしても構わない。このときには、画像データが見えづらくならないように、文字情報合成領域が半透明に形成されていることが好ましい。
さらに、本発明の実施形態に係る写真処理システムは、今まで説明したような画像データをプリント出力するものに限定するものではなく、例えば、画像データをプリント部30でプリント出力する代わりに、図示しない記録手段で電子アルバムに記録することにより電子アルバムの表示画像に適用することもできる。以下、電子アルバムの一例であるナビゲーションアルバムに本発明を適用した場合について説明する。
ここで、ナビゲーションアルバムとは、電子アルバムを開くと、旅行当日にユーザーが車両で走行した走行経路データをそのまま画面上に表示し、通常のカーナビゲーションのように画面上の現在地を示すカーソル(車両シンボル)が旅行当時の走行経路に沿って移動し、ユーザーが訪れた観光ポイントに到着すると、その場所で撮影したデジタル画像データがサムネイル表示又はスライドショー表示されるように構成されたものである。
図10に示すように、画像表示画面31では、観光地タイトルに関連付けた画像データが1枚ずつ表示される。画像表示画面31の下側位置にはタイトルバー32が表示され、このタイトルバー32の左端には画像データと関連付けられた観光地タイトル(図10では“USJ”)が表示され、タイトルバー32の中央右寄り位置には画像データのExif情報から取得した撮影日時が表示されている。
そして、タイトルバー32の右端には、その観光地毎に予め登録されている観光地にちなんだ画像がはめ込み合成されるようになっており、複数の画像の中からユーザーの好みに合わせて選択して切り替えることができるようになっている。
さらに、タイトルバー32の上側位置には、画像データのExif情報に付加されている文字情報が表示される。この文字情報は、テロップのように画面上を右から左に流れるように表示するようにしても構わない。また、この文字情報は、図示しない変換部によって文字情報から音声情報に変換して、この変換された音声情報をスピーカーを通してナレーションのように出力しても構わない。
以上のように、本発明の実施形態にかかる写真処理システムによれば、画像データのExif情報に文字情報を付加しておくだけでメッセージ付きアルバムを容易に作成することができる。また、この文字情報は、画像データを撮影したときにその場で入力するようにすれば、撮影当時の感動をそのまま表現した文章を作成することができて、より臨場感のあるアルバムとすることができる。
以上説明したように、本発明は、写真処理システムに対し、画像データをテンプレート画像の画像合成領域に合成するとともに該画像データのExif情報に付加された文字情報を文字情報合成領域に合成した画像プリントを実現できるという実用性の高い効果が得られることから、きわめて有用で産業上の利用可能性は高い。
本発明の実施形態に係る写真処理システムの構成を示すブロック図である。 本発明の実施形態に係る写真処理システムの処理の流れを示すフローチャート図である。 受付ブロックにおける画像編集の処理の流れを示すフローチャート図である。 テンプレート選択モードを表示した状態を示す図である。 画像合成モードを表示した状態を示す図である。 テンプレート画像に画像データ及び文字情報を合成した状態を示す図である。 テンプレート画像に画像データ、文字情報、及び関連画像データを合成した状態を示す図である。 本発明の実施形態におけるグリーティングカードである。 本発明の実施形態における画像合成領域と文字情報合成領域とがオーバーラップしたメッセージ付きアルバムである。 本発明の実施形態におけるナビゲーションアルバムの画像表示画面である。
符号の説明
10 携帯機器
11 カメラ部
12 ディスプレイ
13 位置特定部
14 キー入力部
15 音声入出力部
16 記録媒体
20 受付ブロック
25 ハードディスク
30 プリント部
100 写真処理システム

Claims (4)

  1. ユーザーが撮影したデジタル画像データを所定のテンプレート画像に設けられた画像合成領域に合成する写真処理システムであって、
    前記ユーザーが入力する任意の文字情報を前記画像データのExif情報に付加する文字情報付加手段と、
    前記画像データを前記テンプレート画像の画像合成領域に合成するとともに、該画像データに付加された前記文字情報を該テンプレート画像に設けられた文字情報合成領域に合成する合成手段と
    前記画像データを撮影した場所の位置情報を特定する位置特定手段とを備え、
    前記合成手段は、前記画像データのExif情報に前記文字情報が付加されていない場合に、前記位置特定手段で特定された位置情報に係る観光地に関連した画像データを前記テンプレート画像の文字情報合成領域に合成するように構成されていることを特徴とする写真処理システム。
  2. 請求項1に記載された写真処理システムにおいて、
    前記ユーザーが音声入力した音声データを文字情報に変換する変換手段をさらに備え、
    前記文字情報付加手段は、前記変換手段で変換された文字情報を前記画像データのExif情報に付加するように構成されていることを特徴とする写真処理システム。
  3. 請求項1又は2に記載された写真処理システムにおいて、
    前記合成手段により画像合成されたテンプレート画像をプリント出力するプリント手段をさらに備えていることを特徴とする写真処理システム。
  4. 請求項1乃至のうち何れか1項に記載された写真処理システムにおいて、
    前記合成手段により画像合成されたテンプレート画像を電子アルバムに記録する記録手段をさらに備えていることを特徴とする写真処理システム。
JP2004291516A 2004-10-04 2004-10-04 写真処理システム Expired - Fee Related JP4165489B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004291516A JP4165489B2 (ja) 2004-10-04 2004-10-04 写真処理システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004291516A JP4165489B2 (ja) 2004-10-04 2004-10-04 写真処理システム

Publications (2)

Publication Number Publication Date
JP2006108999A JP2006108999A (ja) 2006-04-20
JP4165489B2 true JP4165489B2 (ja) 2008-10-15

Family

ID=36378216

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004291516A Expired - Fee Related JP4165489B2 (ja) 2004-10-04 2004-10-04 写真処理システム

Country Status (1)

Country Link
JP (1) JP4165489B2 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5019577B2 (ja) * 2006-11-30 2012-09-05 株式会社東芝 情報処理装置、編集再生方法およびプログラム
JP5779897B2 (ja) * 2011-02-09 2015-09-16 大日本印刷株式会社 注文受付システム、注文受付方法及び注文受付プログラム
JP6241405B2 (ja) * 2014-10-31 2017-12-06 京セラドキュメントソリューションズ株式会社 画像処理システム及び画像処理方法

Also Published As

Publication number Publication date
JP2006108999A (ja) 2006-04-20

Similar Documents

Publication Publication Date Title
JP3658659B2 (ja) 画像処理装置
JP4604833B2 (ja) 電子アルバムシステム
JP2008206138A (ja) 撮像装置および画像処理装置
US20130100329A1 (en) Image pickup apparatus
JP2008039628A (ja) ルート検索装置
TW200939751A (en) Map display device, map display method, and imaging device
JP2006098250A (ja) カーナビゲーションシステム
JP4165489B2 (ja) 写真処理システム
JP5287258B2 (ja) 撮像装置および画像記録再生方法
US20050018050A1 (en) Wireless communication device, dynamic image preparation method and dynamic image preparation program
JP2005025548A (ja) 注釈情報付き画像の処理装置、出力方法および出力プログラム
JP2006287741A (ja) ナビゲーション装置・撮影装置の連携システムおよびナビゲーション装置
JP4572683B2 (ja) 電子アルバムシステム
JP2007089075A (ja) 撮像装置、ナビゲーション装置、及び位置情報記憶システム
JP2004364039A (ja) 画像処理装置、画像処理方法及びプログラム
JP5387115B2 (ja) 画像表示装置及び画像表示プログラム
JP4525230B2 (ja) 画像表示装置、及び、プログラム
JP2010021885A (ja) 撮像装置及び撮像支援方法
JP2004193859A (ja) デジタル情報機器の制御方法
JP2005184469A (ja) デジタルスチルカメラ
JP2002204347A (ja) 情報処理装置、その方法および記憶媒体
JP4648446B2 (ja) 携帯型画像送受信機
JP2005063063A (ja) 携帯型情報処理装置および画像合成方法
JP2006164043A (ja) 電子アルバム作成システム
JP2000092184A5 (ja)

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070327

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080422

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080612

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080708

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080721

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110808

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110808

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120808

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120808

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130808

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees