JP2016027335A - 車載画像処理装置 - Google Patents

車載画像処理装置 Download PDF

Info

Publication number
JP2016027335A
JP2016027335A JP2015156594A JP2015156594A JP2016027335A JP 2016027335 A JP2016027335 A JP 2016027335A JP 2015156594 A JP2015156594 A JP 2015156594A JP 2015156594 A JP2015156594 A JP 2015156594A JP 2016027335 A JP2016027335 A JP 2016027335A
Authority
JP
Japan
Prior art keywords
vehicle
imaging unit
image processing
housing
processing apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015156594A
Other languages
English (en)
Other versions
JP6158258B2 (ja
JP2016027335A5 (ja
Inventor
謙 大角
Ken Osumi
謙 大角
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Astemo Ltd
Original Assignee
Hitachi Automotive Systems Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Automotive Systems Ltd filed Critical Hitachi Automotive Systems Ltd
Priority to JP2015156594A priority Critical patent/JP6158258B2/ja
Publication of JP2016027335A publication Critical patent/JP2016027335A/ja
Publication of JP2016027335A5 publication Critical patent/JP2016027335A5/ja
Application granted granted Critical
Publication of JP6158258B2 publication Critical patent/JP6158258B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Stereoscopic And Panoramic Photography (AREA)
  • Accessories Of Cameras (AREA)
  • Studio Devices (AREA)
  • Measurement Of Optical Distance (AREA)

Abstract

【課題】生産工程における電気的調整の設置精度及び取り付け精度を向上しつつ、低コストを実現可能な車載画像処理装置を提供する
【解決手段】第1の撮像部12と、第2の撮像部12と、一方端部に第1の撮像部を設け、他方端部に第2の撮像部を設けた筐体部11と、を有し、第1の撮像部及び第2の撮像部で撮像された画像から距離画像を生成する車載画像処理装置において、第1の撮像部と第2の撮像部間に、生産時に設備の治具と接触させる筐体基準面13、13を2箇所有する。
【選択図】図1

Description

本発明は、撮像素子を備えた車載画像処理装置に関する。
2台の撮像部を用いて写し出した1対の画像を用いて、三角測量により対象物までの距離を算出し、それによって対象物の認識を行う車載画像処理装置である車載カメラ(以下、ステレオカメラと呼ぶ)が、車の安全走行を支援する車載システムに適用され始めている。
特に車載環境においては、たとえば前方車両や人間、障害物などの検知を行い、事前に安全に対処する、といったアプリケーション要求があるために、遠距離対象物の距離計測、認識を確実に実現する必要がある。
さらに、車載システムでこれらのステレオ画像処理システムを利用する場合、小型化、低価格化と高信頼性も要求される。
このシステムにおいては、1対の画像に含まれる画素情報の中から相互の画像に共通する特徴点の画素位置の特定と、その特徴点が1対の画像でずれている画素数(以下、視差と呼ぶ)を求める処理を行う専用のLSIが搭載されているのが一般的である。
上記原理のため、1対の画像間には視差以外のずれがないことが理想的であり、各々の撮像手段ごとに、光学特性や信号特性のずれがないように高精度に調整を行い、その精度を保持できる構造が必要となる。
本技術分野の背景技術として、特許文献1がある。この公報には、「車載カメラは、一対のカメラを所定の位置で保持するカメラステイカメラステイ一体構造で構成され車両の筐体に固定される取り付け部を備えている。そして、この車載カメラは、取り付け部に設けられた3つの取り付け穴を利用して3本のビスによって車両の筐体の取り付け穴に強固に固定されることにより、カメラ相互間の相対位置を正確に維持することができるようになっている。」と記載されている。
また、特許文献2には、「複眼カメラの取り付け位置に設けた2以上の光源から2本以上の光線を発射し、前記2本以上の光線の交点にターゲットを設置し、このターゲットを前記複眼カメラにより撮影することにより、前記複眼カメラの調整を行う。これにより複眼カメラの光軸調整及びピントの調整を正確におこなうことができる。」と記載されている。
特開2009−68906号公報 特開2002−218504号公報
ステレオカメラの場合、上述したように測定精度を向上させるためには左右の撮像部の相対的な位置精度を高くする必要がある。しかし、筐体の機械精度を上げるだけでは十分なステレオカメラの性能を実現できないため、生産工程における電気的調整(ステレオカメラで撮像した画像を用いて補正を行う)が必要となる。
そのため、生産工程においては車両取り付け時以上に生産設備の治具に精度良くステレオカメラを設置して調整を行う必要が出てくる。
前述した特許文献1においては、車両へ取り付け時にステレオカメラを精度良く取り付け、かつ温度変化により筐体が変形しにくいようにするためのアイデアであるが、これは生産工程におけるステレオカメラ調整時の設置精度としては十分ではない。また、特許文献2においては、複眼カメラは、治具の基準面に精度良く取り付けられる、とあるが、精度よく取り付ける具体的な方法は記載されていない。
以上から、本発明の目的は、生産工程における電気的調整の精度を上げるために、生産設備の治具への設置精度を向上しつつ、低コストを実現可能な車載画像処理装置を提供することにある。
上記課題を解決するために、本発明の車載画像処理装置は、第1の撮像部と、第2の撮像部と、一方端部に第1の撮像部を設け、他方端部に第2の撮像部を設けた筐体部と、を有し、第1の撮像部及び第2の撮像部で撮像された画像から距離画像を生成する車載画像処理装置において、第1の撮像部と第2の撮像部間に、生産時に設備の治具と接触させる筐体基準面を2箇所有する構成とする。
本発明によれば、生産工程における電気的調整の精度を上げるために、生産設備の治具への設置精度を向上しつつ、低コストを実現可能な車載画像処理装置を提供できる。
本発明に係る車載画像処理装置の実施例1の筐体構造例を示す図である。 本発明に係る車載画像処理装置の実施例2の筐体構造の一例を示す図である。 本発明に係る車載画像処理装置の実施例2の筐体構造の他例を示す図である。 本発明に係る車載画像処理装置の実施例3の筐体構造例を示す図である。
以下、図面を用いて各実施例を説明する。
本発明の車載画像処理装置の実施形態について説明する。図1は車載画像処理装置であるステレオカメラの筐体構造の一例であるが、生産時に設備の治具と接触させる面(以下、筐体基準面13と呼ぶ)を備える筐体構造の例である。
本発明の車載画像処理装置であるステレオカメラの構成は、図1のように、二つの撮像部12(第1の撮像部と第2の撮像部)と、一方端部に第1の撮像部を設け、他方端部に第2の撮像部を設けた筐体部11からなり、これら二つの撮像部12で撮像された画像から距離画像(視差画像)を生成するものである。
撮像部12は、撮像素子と、外界の視覚情報を該撮像素子に結像するためのレンズと、撮像素子に結像された画像情報を画像処理LSIへ取り込む処理を備えた左右の撮像素子基板と、撮像素子を駆動するための信号処理基板と、から構成されている。
また、筐体部11は、撮像素子基板から送られてきた画像情報を基に画像処理LSIにより対象物の抽出を行い、該対象物までの距離や大きさを算出するため回路が構成されている処理基板と、車両側への取り付け時に締結による固定を行うためのネジを通す穴及び台座を有する車両設置面15と、車載画像処理装置であるステレオカメラを車両取り付け時に所望の方向に高精度に取り付けるために、車両側に用意されたピンと勘合するための車両取り付け時の基準穴14と、ステレオカメラの生産時に設備の治具と接触させる面となる筐体基準面13と、から構成される。
ステレオカメラを設備の治具へ設置した後、電気的調整を行うために任意の模様を撮像する必要があるが、その模様から精度よい調整データを生成するためには、ステレオカメラの撮影方向(以下、光軸と呼ぶ)を所望の方向で固定するために、筐体基準面13は設備の治具へ設置する際に上下、左右、前後位置が所望の位置となるようにする必要がある。
また、生産設備における光軸の方向は、ステレオカメラを設備の治具へ設置した際に発生する上下、左右、前後軸の回転方向のずれに対して最も影響を受けやすいため、これらを出来るだけ少なくする必要がある。
生産時の設備へステレオカメラを取り付ける際、車両取り付け時の基準穴14を用いて治具への設置を行うと、車両取り付け時の基準穴14は一般的には筐体部11の中央部に集中するため、車両取り付け時の基準穴14の間隔は短くなる。それに伴い、設備へステレオカメラを設置した際の取り付け誤差が大きくなる。
本発明の特徴は、第1の撮像部と第2の撮像部間に、生産時に設備の治具と接触させる筐体基準面13を2箇所有することである。具体的には、第1の撮像部と第1の撮像部及び第2の撮像部間の中央部(又は車両設置面15)と、の間と、第2の撮像部と中央部(又は車両設置面15)と、の間に、それぞれ筐体基準面13を設ける。つまり、図1にあるように筐体基準面13を、車両取り付け時の基準穴14とは別に筐体部11又は撮像部12に2つ設ける。これは、その2つの筐体基準面13の間隔を可能な限り長く取る、具体的には、より撮像部側に筐体基準面13を設ける(第1の筐体基準面は、第1の撮像部と車両設置面との中央より第1の撮像部側に設け、第2の筐体基準面は、第2の撮像部と車両設置面との中央より第2の撮像部側に設ける)ことで、ステレオカメラを設備に設置する際の取り付け誤差を従来の1/2から1/3に低減することが可能である。可能な限り長く、とは、筐体部11の長手方向に可能な限限り離して設置することが好ましく、例えば撮像部12のレンズ周辺にそれぞれ筐体基準面13を取り付けるよい。
なお、図1では、筐体基準面13は、筐体部11の撮像部12の撮像方向側である前側に設けている構造である。
取り付け誤差を最も小さくするための筐体基準面13の設置位置として最適な場所は、撮像部12のレンズ外側に取り付けるのが好ましいが、撮像部12においてはレンズのピントを調整するなど、機械的調整工程が発生することを加味すると、筐体部11の中で可能な限り外側に配置するのが最適である。
筐体基準面13の形状は設備の治具との接点を考慮すると、図1にあるように矩形が好ましい。
ただし、筐体基準面13は、調整用の設備の治具との接点のほかに、加工時の治具との接点にも使用することが出来る。
また、筐体部11は、一般的にアルミダイカスト製であるため、ダイカストの鋳型から筐体を取り出す際の押し出しピン位置を兼ねても良い。
これらの場合、筐体基準面13の形状は円形でも良い。
また、筐体基準面13を可能な限り平行な面にするには、加工する筐体基準面13は型から抜いたままの状態でも良いが、切削加工や研磨加工をすることにより、より平行な面とすることが出来る。
ステレオカメラを設置する際に位置決めしなければいけないため、図1にあるように、筐体基準面13は、設備側の治具が二点以上接触するだけの大きさが必要である。
この場合、筐体基準面13を一つにしても良いが、筐体基準面13を加工しなければいけないことを考慮すると、コストを下げるためには筐体基準面は出来るだけ小さいことが望ましい。
従って筐体基準面13は2点以上で、かつ筐体基準面13を小さくするのが望ましい。
筐体基準面13を2点とした場合、設備側に精度良く設置するためには、二つの筐体基準面13は平行な同一面であることが最適である。同一面が実現不可能な筐体形状の場合は、平行な面であってもよい。
次に、図1の筐体基準面13の他に筐体基準面を設けた構造の例について説明する。本実施例は、生産時に設備の治具と接触する面が上側(車両と取り付けする面側)にある場合である。
図1に示された同一符号を付された構成と同一機能を有する部分については説明を省略する。
図2(a)は、筐体基準面13とは別に、筐体部11の上部(車両と取り付けする面側)、つまり車両設置面15側に上部筐体基準面21を設けた例である。
図2(b)は、筐体基準面13と上部筐体基準面21を一体にした前部筐体基準面22を設けた例である。この場合は、生産時に設備の治具と接触する面は、前部筐体基準面22の上側(車両と取り付けする面側)、つまり、筐体部11の撮像部12の撮像方向側である前側の上部に設けた例である。
図3は、筐体基準面13とは別に、筐体部11の中央部にある基準穴14と車両設置面15の側部に、側部筐体基準面31を設けた例である。具体的には、この中央部において、撮像部12の撮像方向側に2つ設けた車両設置面15の一方の車両設置面15の側面と、その撮像方向とは逆側に1つ設けた車両設置面15の側面と、に側部筐体基準面31を設けた例である。
上部筐体基準面21も筐体基準面13と同様に、車両取り付け時に車両と接触する車両設置面15を使用することができるが、筐体基準面13と同じく、車両と接触する面が筐体部11の中央部に集中するため、できるだけ距離を離して車両設置面15を配置するためには、図2(a)のように車両と接触する車両設置面15とは別に、上部筐体基準面21を設けるのが望ましい。
この場合、2つの上部筐体基準面21は、平行な同一面であることが最適である。同一面を設けることが困難である場合も、平行な面であれば同様の効果を得ることが可能である。
図2(b)にあるように、上部筐体基準面21と筐体基準面13を設ける際には一体の基準面として前部筐体基準面22としてもよい。これにより、筐体基準面の設置スペースを縮小化することができ、車両搭載時のステレオカメラ筐体の大きさを小さくすることができる。
側部筐体基準面31は、図3に示す通り、前方及び後方に1つずつ設けても良い。本実施例では、前方に設けた2つの車両設置面15の一方の車両設置面15の側面に1つ、後方に設けた2つの基準穴14の一方の基準穴14の側面に1つ、側部筐体基準面31を設けている。但し、どちらか一方、例えば、後方に設けた2つの基準穴14の一方の基準穴14の側面に1つだけ、側部筐体基準面31を設けるだけでも良い。
次に、本実施例では筐体基準面13の代わりに筐体基準穴41を設けた構造の例について説明する。
図1に示された同一符号を付された構成と同一機能を有する部分については説明を省略する。
図4は、筐体基準面13および側部筐体基準面31を設ける代わりに、筐体基準面として筐体基準穴41を撮像部12の車両設置面15側に設けた例である。
設備治具への位置決めを行う必要があるため、筐体基準穴41は、図4の通り、2個であるのが望ましい。また、筐体基準穴41の形状は、両方とも真円または楕円であっても良いが、設備側の治具として挿入するピンを設けることを考慮すると、一方は真円、もう一方は楕円形状であることが嵌合の面から望ましいと言える。
筐体基準穴41は撮像部12に設ける代わりに筐体部11に設けても良い。この場合も、二つの穴は出来る限り距離を離して設置するのが望ましい。
また、上部筐体基準面21と一体化することにより、前後、上下、左右の位置決めを行うことが可能となる。
なお、本発明は、上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。
また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。
また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
11 筐体部
12 撮像部
13 筐体基準面
14 基準穴
15 車両設置面
21 上部筐体基準面
22 前部筐体基準面
31 側部筐体基準面
41 筐体基準穴

Claims (13)

  1. 第1の撮像部と、第2の撮像部と、一方端部に前記第1の撮像部を設け、他方端部に前記第2の撮像部を設けた筐体部と、を有し、前記第1の撮像部及び前記第2の撮像部で撮像された画像から距離画像を生成する車載画像処理装置において、
    前記第1の撮像部と前記第2の撮像部間に、生産時に設備の治具と接触させる筐体基準面を2箇所有する車載画像処理装置。
  2. 請求項1記載の車載画像処理装置において、
    前記筐体基準面は、前記第1の撮像部と前記第1の撮像部及び前記第2の撮像部間の中央部と、の間に第1の筐体基準面を有し、前記第2の撮像部と前記中央部と、の間に第2の筐体基準面を有する車載画像処理装置。
  3. 請求項2記載の車載画像処理装置において、
    前記筐体部の中央部には、車両と取り付ける車両設置面を有し、
    前記第1の筐体基準面は、前記第1の撮像部と前記車両設置面との間に有し、
    前記第2の筐体基準面は、前記第2の撮像部と前記車両設置面との間に有する車載画像処理装置。
  4. 請求項2又は3記載の車載画像処理装置において、
    前記第1の筐体基準面と前記第2の筐体基準面は、互いに平行な面を有する車載画像処理装置。
  5. 請求項3記載の車載画像処理装置において、
    前記第1の筐体基準面は、前記第1の撮像部と前記車両設置面との中央より前記第1の撮像部側に有し、
    前記第2の筐体基準面は、前記第2の撮像部と前記車両設置面との中央より前記第2の撮像部側に有する車載画像処理装置。
  6. 請求項3記載の車載画像処理装置において、
    前記第1の筐体基準面及びは前記第2の筐体基準面は、前記筐体部の前記第1の撮像部及び前記第2の撮像部の撮像方向側である前側に有する車載画像処理装置。
  7. 請求項3記載の車載画像処理装置において、
    前記第1の筐体基準面及び前記第2の筐体基準面は、前記筐体部の前記車両設置面側に有する車載画像処理装置。
  8. 請求項3記載の車載画像処理装置において、
    前記第1の筐体基準面及び前記第2の筐体基準面は、前記筐体部の前記第1の撮像部及び前記第2の撮像部の撮像方向側である前側の上部に有する車載画像処理装置。
  9. 請求項3記載の車載画像処理装置において、
    前記筐体部の中央部は、前記第1の撮像部及び前記第2の撮像部の撮像方向側に2つ、前記撮像方向とは逆側に1つ前記車両設置面を有し、
    前記2つの車両設置面の一方の車両設置面の側面に、前記第1の筐体基準面を有し、 前記1つの車両設置面の側面に、前記第2の筐体基準面を有する車載画像処理装置。
  10. 請求項1記載の車載画像処理装置において、
    前記筐体基準面は、前記第1の撮像部の前記車両設置面側に1つ、前記第2の撮像部の前記車両設置面側に1つ、有する車載画像処理装置。
  11. 請求項10記載の車載画像処理装置において、
    前記筐体基準面は、筐体基準穴であり、前記筐体基準穴の形状は、真円又は楕円である車載画像処理装置。
  12. 請求項11記載の車載画像処理装置において、
    2つの前記筐体基準穴の一方を真円の形状とし、他方を楕円の形状とする車載画像処理装置。
  13. 請求項1記載の車載画像処理装置において、
    前記筐体基準面は、矩形又は円形の形状である車載画像処理装置。
JP2015156594A 2015-08-07 2015-08-07 車載画像処理装置 Active JP6158258B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015156594A JP6158258B2 (ja) 2015-08-07 2015-08-07 車載画像処理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015156594A JP6158258B2 (ja) 2015-08-07 2015-08-07 車載画像処理装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2012169073A Division JP5793122B2 (ja) 2012-07-31 2012-07-31 車載画像処理装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017109654A Division JP6430586B2 (ja) 2017-06-02 2017-06-02 車用ステレオビジョンシステム

Publications (3)

Publication Number Publication Date
JP2016027335A true JP2016027335A (ja) 2016-02-18
JP2016027335A5 JP2016027335A5 (ja) 2016-07-28
JP6158258B2 JP6158258B2 (ja) 2017-07-05

Family

ID=55352763

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015156594A Active JP6158258B2 (ja) 2015-08-07 2015-08-07 車載画像処理装置

Country Status (1)

Country Link
JP (1) JP6158258B2 (ja)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001242521A (ja) * 2000-02-28 2001-09-07 Fuji Heavy Ind Ltd カメラの組み立て構造、カメラの調整方法、および調整用治具
JP2007225543A (ja) * 2006-02-27 2007-09-06 Matsushita Electric Ind Co Ltd ステレオカメラ
JP2008070774A (ja) * 2006-09-15 2008-03-27 Ricoh Co Ltd 光偏向器、光走査装置及び画像形成装置
JP2009068906A (ja) * 2007-09-11 2009-04-02 Panasonic Corp 距離測定装置
JP2009265412A (ja) * 2008-04-25 2009-11-12 Fuji Heavy Ind Ltd ステレオカメラユニット
JP2010106919A (ja) * 2008-10-29 2010-05-13 Nsk Ltd リニアガイド装置
US20110018973A1 (en) * 2008-03-26 2011-01-27 Konica Minolta Holdings, Inc. Three-dimensional imaging device and method for calibrating three-dimensional imaging device
JP2011123078A (ja) * 2004-11-15 2011-06-23 Hitachi Automotive Systems Ltd ステレオカメラ
JP2014029266A (ja) * 2012-07-31 2014-02-13 Hitachi Automotive Systems Ltd 車載画像処理装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001242521A (ja) * 2000-02-28 2001-09-07 Fuji Heavy Ind Ltd カメラの組み立て構造、カメラの調整方法、および調整用治具
JP2011123078A (ja) * 2004-11-15 2011-06-23 Hitachi Automotive Systems Ltd ステレオカメラ
JP2007225543A (ja) * 2006-02-27 2007-09-06 Matsushita Electric Ind Co Ltd ステレオカメラ
JP2008070774A (ja) * 2006-09-15 2008-03-27 Ricoh Co Ltd 光偏向器、光走査装置及び画像形成装置
JP2009068906A (ja) * 2007-09-11 2009-04-02 Panasonic Corp 距離測定装置
US20110018973A1 (en) * 2008-03-26 2011-01-27 Konica Minolta Holdings, Inc. Three-dimensional imaging device and method for calibrating three-dimensional imaging device
JP2009265412A (ja) * 2008-04-25 2009-11-12 Fuji Heavy Ind Ltd ステレオカメラユニット
JP2010106919A (ja) * 2008-10-29 2010-05-13 Nsk Ltd リニアガイド装置
JP2014029266A (ja) * 2012-07-31 2014-02-13 Hitachi Automotive Systems Ltd 車載画像処理装置

Also Published As

Publication number Publication date
JP6158258B2 (ja) 2017-07-05

Similar Documents

Publication Publication Date Title
JP5793122B2 (ja) 車載画像処理装置
KR101724300B1 (ko) 스테레오 카메라
US20160264065A1 (en) Vehicle-mounted camera, method of manufacturing vehicle-mounted camera, and method of manufacturing vehicle body
US9386204B2 (en) Lens mounting mechanism, lens mounting method, and image pickup device
JP4691508B2 (ja) ステレオカメラ
WO2014050282A1 (ja) ステレオカメラ装置
JP2012189324A (ja) ステレオカメラ
JP6941686B2 (ja) 車載撮像装置
JP6627471B2 (ja) 撮像ユニット、車両制御ユニットおよび撮像ユニットの伝熱方法
JP2009068906A (ja) 距離測定装置
EP3070524B1 (en) Imaging unit, vehicle control unit and heat transfer method for imaging unit
JP2015528133A (ja) ステレオ・カメラの二つの画像撮影エレメントを揃えるための方法
US20190285830A1 (en) Imaging device
CN106476716A (zh) 车辆的制造方法
JP2014065393A (ja) ステレオカメラ装置
US20140267621A1 (en) Stereo camera unit
EP3288250B1 (en) Imaging device
JP2017114470A (ja) 車両の製造方法
JP6430586B2 (ja) 車用ステレオビジョンシステム
JP6158258B2 (ja) 車載画像処理装置
JP2018013623A (ja) 車載撮像装置
JP2019060874A (ja) 車用ステレオビジョンシステム
JP2010041373A (ja) カメラモジュールおよびステレオカメラ
JP2021021939A (ja) 撮像ユニットおよび車両制御ユニット
WO2022239324A1 (ja) 取付装置および取付方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160519

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160520

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160727

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160802

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160928

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20170119

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20170125

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170221

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170322

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170509

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170607

R150 Certificate of patent or registration of utility model

Ref document number: 6158258

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250