JP6741342B2 - Vehicle fitting accessories fitting method, vehicle fitting accessories fitting system - Google Patents

Vehicle fitting accessories fitting method, vehicle fitting accessories fitting system Download PDF

Info

Publication number
JP6741342B2
JP6741342B2 JP2016114601A JP2016114601A JP6741342B2 JP 6741342 B2 JP6741342 B2 JP 6741342B2 JP 2016114601 A JP2016114601 A JP 2016114601A JP 2016114601 A JP2016114601 A JP 2016114601A JP 6741342 B2 JP6741342 B2 JP 6741342B2
Authority
JP
Japan
Prior art keywords
vehicle
fitting
image
article
roof box
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016114601A
Other languages
Japanese (ja)
Other versions
JP2017220059A (en
Inventor
勝 徳田
勝 徳田
秀昭 岡野
秀昭 岡野
浩光 飯田
浩光 飯田
昌之 古谷
昌之 古谷
幸一 品田
幸一 品田
謙一 持田
謙一 持田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Car Mate Manufacturing Co Ltd
Original Assignee
Car Mate Manufacturing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Car Mate Manufacturing Co Ltd filed Critical Car Mate Manufacturing Co Ltd
Priority to JP2016114601A priority Critical patent/JP6741342B2/en
Priority to PCT/JP2017/021036 priority patent/WO2017213157A1/en
Publication of JP2017220059A publication Critical patent/JP2017220059A/en
Application granted granted Critical
Publication of JP6741342B2 publication Critical patent/JP6741342B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R9/00Supplementary fittings on vehicle exterior for carrying loads, e.g. luggage, sports gear or the like
    • B60R9/04Carriers associated with vehicle roof
    • B60R9/055Enclosure-type carriers, e.g. containers, boxes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Marketing (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Processing (AREA)

Description

本発明は、画面上でユーザーの好みに応じて種々の車両装着用品(ルーフボックス、チャイルドシートなど)を車両に試着して表示できる車両装着用品試着方法、車両装着用品試着システムに関する。 TECHNICAL FIELD The present invention relates to a vehicle-mounted article fitting method and a vehicle-mounted article fitting system that allows various vehicle-mounted articles (roof box, child seat, etc.) to be tried-on and displayed on a vehicle according to a user's preference on a screen.

車両で荷物を運搬するために、ルーフのベースキャリアにルーフボックスを装着することがある。
ルーフボックスは容量の大きいタイプ、長さのあるタイプ、空気抵抗の少ないデザインのタイプ、さまざまなカラーなど種々のボックスがあり、それに応じてベースキャリアが必要となる。
A roof box is sometimes mounted on a base carrier of the roof for carrying luggage in a vehicle.
There are various types of roof boxes such as high capacity type, long type, low air resistance design type, various colors, etc., and a base carrier is required accordingly.

ルーフボックスを購入する際には、用途やデザインに応じてルーフボックスを選択すると共に、車両に取り付け可能なボックスであるかを判断しなければならない。現状、ユーザーはルーフボックスのカタログ、販売員の助言などを参考にしている。
またルーフボックスと同様に車両に付帯する種々の車両部品としてタイヤ及びホイールがある。このホイール及びタイヤについても車種毎に複数の組み合わせがあり、販売員には経験、ノウハウが求められている。
When purchasing a roof box, it is necessary to select the roof box according to the application and the design and to judge whether the box can be mounted on the vehicle. Currently, users refer to roof box catalogs and sales staff advice.
Similar to the roof box, there are tires and wheels as various vehicle parts attached to the vehicle. There are multiple combinations of these wheels and tires for each vehicle type, and the sales staff are required to have experience and know-how.

そこで特許文献1には、ホイール、タイヤに関する知識を熟知していない者であっても、車両に合致したタイヤ、ホイールの組み合わせ情報が得られる販売支援システムが開示されている。 Therefore, Patent Document 1 discloses a sales support system that allows even a person who is not familiar with the knowledge about wheels and tires to obtain the combination information of tires and wheels that matches the vehicle.

特開2005−44376号公報JP, 2005-44376, A

しかしながら、特許文献1に開示のシステムは、あらかじめ登録された車種、タイヤ、ホイールの情報から装着可能な組み合わせを選択するものであり、例えば、ユーザーが選択したホイールのデザインが車両に似合っているかなどを判断するために車両に試着することまでは考慮されていない。
また現状、車両に装着可能なサンプル等が販売店にあり、店舗が試着作業に積極的な場合には、ユーザーは購入前にあらかじめ試着することができる。しかし、このようなサンプルの試着は極めて限定的であり、かつ取り付け作業に時間を要し効率的でない。
However, the system disclosed in Patent Document 1 selects a combination that can be mounted from pre-registered vehicle types, tires, and wheel information. For example, does the design of the wheel selected by the user match the vehicle? It is not considered to try on the vehicle to determine the.
In addition, at present, there are samples and the like that can be mounted on a vehicle at a store, and if the store is aggressive in the fitting work, the user can try on the clothes before purchase. However, the fitting of such samples is very limited, and the installation work is time consuming and inefficient.

そこで上記従来技術の問題点に鑑み、本発明は、携帯端末などの画面上で車両装着用品の試着が行える車両装着用品試着方法、車両装着用品試着システムを提供することを目的としている。 In view of the above-mentioned problems of the prior art, it is an object of the present invention to provide a vehicle-mounted article fitting method and a vehicle-mounted article fitting system that can try-on a vehicle-mounted article on a screen of a mobile terminal or the like.

上記の課題を解決するための第1の手段として、本発明は、画面上で車両装着用品の試着を行う車両装着用試着システムを用いた試着方法であって、
前記車両装着用試着システムの制御部が車両画像中のあらかじめ定めた車両の前後タイヤを認識して前記前後タイヤの中心を通る水平線をY軸基準線、前記前後タイヤの中心間の1/2の位置を通る垂直線をX軸基準線とし、あらかじめ登録した車両情報を用いて前記Y軸及びX軸基準線からの位置を算出することにより車両装着用品の取付け基準位置を算出する工程と、
前記車両装着用試着システムの制御部が前記前後タイヤを認識して前記車両装着用品の縮尺を算出する工程と、
前記車両装着用試着システムの画像合成処理部が前記車両画像中の車両の前記車両装着用品の取付け基準位置に前記縮尺を調整した前記車両装着用品を合成する工程と、
を有することを特徴とする車両装着用品試着方法を提供することにある。
これにより、携帯端末などの画面上に、ユーザーの車両にルーフボックスなどの車両装着用品を搭載した車両画像を仮想的に表示することができる。
As a first means for solving the above-mentioned problems, the present invention is a fitting method using a fitting system for fitting a vehicle for fitting a fitting for a vehicle on a screen,
The control unit of the vehicle fitting try-on system recognizes the front and rear tires of a predetermined vehicle in the vehicle image, and defines a horizontal line passing through the center of the front and rear tires as a Y-axis reference line and ½ between the centers of the front and rear tires. A vertical line passing through the position is used as an X-axis reference line, and a position from the Y-axis and X-axis reference lines is calculated using vehicle information registered in advance to calculate a mounting reference position of the vehicle-mounted article,
A step of calculating the scale of the vehicle-mounted article by recognizing the front and rear tires by the control unit of the vehicle-wearing fitting system ;
A step of synthesizing the vehicle fitting article in which the scale is adjusted to an attachment reference position of the vehicle fitting article of the vehicle in the vehicle image in the vehicle fitting try-on system ,
The present invention is to provide a method for trying on a vehicle-mounted article, the method including:
Accordingly, it is possible to virtually display a vehicle image in which a vehicle-mounted article such as a roof box is mounted on the vehicle of the user on the screen of the mobile terminal or the like.

上記の課題を解決するための第2の手段として、本発明は、前記第1の手段において、前記車両装着用品はルーフボックスであり、前記基準部分は前後タイヤであり、前記前後タイヤのセンターの位置情報を取得し、前記位置情報およびあらかじめ登録した車両情報に基づいて、前記ルーフボックスの取り付け基準位置を算出することを特徴とする車両装着用品試着方法を提供することにある。
これにより、ルーフボックスを搭載するための基準位置を容易に算出することができ、ルーフボックスの取付け位置を正確に求めることができる。
As a second means for solving the above-mentioned problems, the present invention is the first means, wherein the vehicle mounting article is a roof box, the reference portion is a front and rear tire, and a center of the front and rear tire. Another object of the present invention is to provide a vehicle-wearing article try-on method, characterized by obtaining position information and calculating a mounting reference position of the roof box based on the position information and vehicle information registered in advance.
Accordingly, the reference position for mounting the roof box can be easily calculated, and the mounting position of the roof box can be accurately obtained.

上記の課題を解決するための第3の手段として、本発明は、前記第1又は第2の手段において、前記車両装着用品はルーフボックスであり、前記基準部分は前後タイヤであり、前記前後タイヤ間のピクセル数を算出し、前記ピクセル数とあらかじめ登録した車両情報に基づいて、前記ルーフボックスの縮尺を算出することを特徴とする請求項1又は請求項2に記載の車両装着用品試着方法を提供することにある。
これにより、車両画像中の車両のサイズに合わせて縮尺を調整したルーフボックスを表示させることができる。
As a third means for solving the above problems, the present invention is the first or second means, wherein the vehicle fitting is a roof box, the reference portion is a front and rear tire, and the front and rear tire. The vehicle fitting accessory fitting method according to claim 1 or 2, wherein the number of pixels in between is calculated, and the scale of the roof box is calculated based on the number of pixels and vehicle information registered in advance. To provide.
Accordingly, it is possible to display the roof box whose scale is adjusted according to the size of the vehicle in the vehicle image.

上記の課題を解決するための第4の手段として、本発明は、前記第1ないし3のいずれか1に記載の手段において、前記車両画像は、あらかじめ撮影して記憶部に登録された車両の画像、新たに撮影した画像、あらかじめデータベースに登録された車両の画像のいずれか1つであることを特徴とする請求項1ないし3のいずれか1項に記載の車両装着用品試着方法を提供することにある。
これにより、あらかじめ撮影した車両画像に対して事後的に、再度ルーフボックスの試着を行うことができる。また新たに撮影した画像を用いることによりユーザーの所有する車両に対してルーフボックスの試着を行うことができる。さらにあらかじめ登録された車両の画像を用いることにより、ユーザーが所有する車両以外の車種に対してルーフボックスの試着を行うことができる。
As a fourth means for solving the above problems, the present invention provides the means according to any one of the first to third aspects, in which the vehicle image is captured in advance and registered in a storage unit. The vehicle fitting accessory fitting method according to any one of claims 1 to 3, wherein the method is one of an image, a newly photographed image, and an image of a vehicle registered in a database in advance. Especially.
This allows the roof box to be tried on again after the vehicle image captured in advance. Further, by using the newly captured image, it is possible to try on the roof box of the vehicle owned by the user. Furthermore, by using the image of the vehicle registered in advance, it is possible to try on the roof box for a vehicle model other than the vehicle owned by the user.

上記の課題を解決するための第5の手段として、本発明は、車両画像を取得する記憶部と、
前記車両画像中のあらかじめ定めた車両の前後タイヤを認識して前記前後タイヤの中心を通る水平線をY軸基準線、前記前後タイヤの中心間の1/2の位置を通る垂直線をX軸基準線とし、あらかじめ登録した車両情報を用いて前記Y軸及びX軸基準線からの位置を算出することにより車両装着用品の取付け基準位置及び前記車両装着用品の縮尺を算出する制御部と、
前記車両画像中の車両の前記車両装着用品の取付け基準位置に前記縮尺を調整した前記車両装着用品を合成する画像合成処理部と、
を有することを特徴とする車両装着用品試着システムを提供することにある。
これにより、携帯端末などの画面上に、ユーザーの車両にルーフボックスなどの車両装着用品を搭載した車両画像を容易に表示させることができる。
As a fifth means for solving the above problems, the present invention is a storage unit for acquiring a vehicle image,
Recognizing the front and rear tires of a predetermined vehicle in the vehicle image, a horizontal line passing through the centers of the front and rear tires is a Y-axis reference line, and a vertical line passing through a half position between the centers of the front and rear tires is an X-axis reference. A control unit for calculating a mounting reference position of the vehicle-mounted article and a scale of the vehicle-mounted article by calculating a position from the Y-axis and X-axis reference lines using a vehicle information registered in advance as a line ;
An image synthesizing processing unit for synthesizing the vehicle-mounted article, the scale of which has been adjusted to a mounting reference position of the vehicle-mounted article of the vehicle in the vehicle image,
It is an object of the present invention to provide a fitting system for a vehicle-mounted article, which includes:
This makes it possible to easily display a vehicle image in which a vehicle-mounted article such as a roof box is mounted on the user's vehicle on the screen of a mobile terminal or the like.

上記の課題を解決するための第6の手段として、本発明は、前記第5の手段において、前記車両を撮影する撮影部又はあらかじめ前記車両の車両情報を登録したデータベースと通信可能な通信部を備えたことを特徴とする車両装着用品試着システムを提供することにある。
これにより、新たに撮影した画像を用いることによりユーザーの所有する車両に対してルーフボックスの試着を行うことができる。さらにあらかじめ登録された車両の画像を用いることにより、ユーザーが所有する車両以外の車種に対してルーフボックスの試着を行うことができる。
As a sixth means for solving the above-mentioned problems, the present invention provides, in the fifth means, a communication section capable of communicating with a photographing section for photographing the vehicle or a database in which vehicle information of the vehicle is registered in advance. An object of the present invention is to provide a vehicle-wearing article trying-on system characterized by being provided.
Thereby, the roof box can be tried on the vehicle owned by the user by using the newly captured image. Furthermore, by using the image of the vehicle registered in advance, it is possible to try on the roof box for a vehicle model other than the vehicle owned by the user.

上記の課題を解決するための第7の手段として、本発明は、前記第5又は第6の手段において、前記車両装着用品はルーフボックスであり、前記基準部分は前後タイヤであり、前記制御部は、前記前後タイヤのセンターの位置情報を取得し、前記位置情報およびあらかじめ登録した車両情報に基づいて、前記ルーフボックスの取り付け基準位置を算出することを特徴とする車両装着用品試着システムを提供することにある。
これにより、ルーフボックスを搭載するための基準位置を容易に算出することができ、ルーフボックスの取付け位置を正確に求めることができる。
As a seventh means for solving the above-mentioned problems, the present invention provides the vehicle mounting article according to the fifth or sixth means, wherein the vehicle mounting article is a roof box, the reference portion is front and rear tires, and the control unit. The present invention provides a vehicle-wearing article fitting system, which acquires position information of the center of the front and rear tires and calculates a mounting reference position of the roof box based on the position information and vehicle information registered in advance. Especially.
Accordingly, the reference position for mounting the roof box can be easily calculated, and the mounting position of the roof box can be accurately obtained.

上記の課題を解決するための第8の手段として、本発明は、前記第5ないし第7のいずれか1に記載の手段において、前記車両装着用品はルーフボックスであり、前記基準部分は前後タイヤであり、前記制御部は、前記前後タイヤ間のピクセル数を算出し、前記ピクセル数とあらかじめ登録した車両情報に基づいて、前記ルーフボックスの縮尺を算出することを特徴とする請求項5ないし7のいずれか1項に記載の車両装着用品試着システムを提供することにある。
これにより、車両画像中の車両のサイズに合わせて縮尺を調整したルーフボックスを表示させることができる。
As an eighth means for solving the above-mentioned problems, the present invention provides the means according to any one of the fifth to seventh aspects, wherein the vehicle fitting is a roof box and the reference portion is a front and rear tire. 8. The control unit calculates the number of pixels between the front and rear tires, and calculates the scale of the roof box based on the number of pixels and vehicle information registered in advance. The vehicle fitting article try-on system according to any one of 1 above.
Accordingly, it is possible to display the roof box whose scale is adjusted according to the size of the vehicle in the vehicle image.

上記構成による本発明によれば、ユーザーの車両に車両装着用品(ルーフボックス、チャイルドシートなど)を搭載した仮想的な車両画像を容易に作成して携帯端末などの画面上に表示することができる。また、あらかじめ登録された車両情報、車両装着用品情報に基づいて、任意に選択した車両に対して、任意に選択した車両装着用品を搭載した仮想的な車両画像を作成することができる。 According to the present invention having the above-described configuration, it is possible to easily create a virtual vehicle image in which a vehicle-mounted article (roof box, child seat, etc.) is mounted on a user's vehicle and display it on a screen of a mobile terminal or the like. Further, it is possible to create a virtual vehicle image in which an arbitrarily selected vehicle attachment article is mounted on an arbitrarily selected vehicle based on vehicle information and vehicle attachment article information registered in advance.

本発明の車両装着用品試着システムのブロック図である。It is a block diagram of the vehicle fitting article trial fitting system of the present invention. 本発明の車両装着用品試着方法の処理フロー図である。It is a processing flow figure of the vehicle fitting article trial fitting method of the present invention. 車両装着用品試着方法の説明図である。It is explanatory drawing of the vehicle fitting accessory trying method. ルーフボックスの取付け基準位置の説明図である。It is explanatory drawing of the attachment reference position of a roof box.

本発明の車両装着用品試着方法、車両装着用品試着システムの実施形態を添付の図面を参照しながら、以下詳細に説明する。 BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of a vehicle mounting article fitting method and a vehicle mounting article fitting system of the present invention will be described in detail below with reference to the accompanying drawings.

[車両装着用品試着システム10]
図1は本発明の車両装着用品試着システムのブロック図である。図示のように本発明の車両装着用品試着システム10は、撮影部20と、入力部30と、記憶部40と、制御部50と、画像合成処理部60と、表示部70と、通信部80と、データベース90を主な基本構成としている。なお車両装着用品としては、ルーフボックス、チャイルドシートなどを挙げることができるが、本実施形態では、一例としてルーフボックスを用いて以下説明する。
[Vehicle fitting try-on system 10]
FIG. 1 is a block diagram of a vehicle wearing article fitting system of the present invention. As shown in the figure, the vehicle wearing article fitting system 10 of the present invention includes a photographing unit 20, an input unit 30, a storage unit 40, a control unit 50, an image composition processing unit 60, a display unit 70, and a communication unit 80. The database 90 has a main basic configuration. It should be noted that, as the vehicle-mounted article, a roof box, a child seat, and the like can be cited, but in the present embodiment, the roof box will be described below as an example.

撮影部20は、車両を撮影するCCD、CMOSカメラ等である。撮影部20は画像(静止画像、動画など)を撮影できる撮影装置であれば良く、一例として携帯端末に内蔵されたカメラ等を用いることもできる。
入力部30は、車両又は車両装着用品の情報を入力するためのマウス、キーボード、タッチパネル等のユーザインターフェースである。
The photographing unit 20 is a CCD, a CMOS camera or the like for photographing the vehicle. The image capturing unit 20 may be any image capturing device capable of capturing an image (still image, moving image, etc.), and as an example, a camera or the like built in a mobile terminal may be used.
The input unit 30 is a user interface such as a mouse, a keyboard, and a touch panel for inputting information on the vehicle or vehicle-mounted products.

記憶部40は、撮影部20から取得した画像、入力部30から取得したデータ、後述する画像合成処理部60から取得した合成画像などを後述する制御部50を介して記憶するメモリ等である。
制御部50は、車両画像中のあらかじめ定めた車両の基準部分を認識する処理、車両の特徴点を抽出する処理、車両装着用品の取付け位置を算出する処理、車両画像の車両に合成する車両装着用品の縮尺を算出する処理などの演算処理を行うCPU等である。
The storage unit 40 is a memory or the like that stores the image acquired from the image capturing unit 20, the data acquired from the input unit 30, the combined image acquired from the image combining processing unit 60 described below, and the like via the control unit 50 described below.
The control unit 50 recognizes a predetermined reference part of the vehicle in the vehicle image, extracts the characteristic points of the vehicle, calculates the attachment position of the vehicle attachment article, and attaches the vehicle image to the vehicle. It is a CPU or the like that performs arithmetic processing such as processing for calculating the scale of the article.

画像合成処理部60は、車両画像に車両装着用品であるルーフボックスを搭載した車両画像(二次元、三次元(3Dモデル)で表した車両画像)を生成する。
表示部70は、車両情報、車両画像、車両に車両装着用品を仮想的に合成した合成画像などを表示するディスプレイである。
通信部80は、インターネットなどのネットワークを介して外部のデータベース90と送受信可能なものである。
The image composition processing unit 60 generates a vehicle image (a vehicle image represented by two-dimensional and three-dimensional (3D model)) in which a roof box which is a vehicle-mounted article is mounted on the vehicle image.
The display unit 70 is a display that displays vehicle information, a vehicle image, a composite image obtained by virtually combining a vehicle-mounted article with a vehicle, and the like.
The communication unit 80 is capable of transmitting/receiving with an external database 90 via a network such as the Internet.

データベース90は、車両情報(メーカー、車種、年式、タイプ、車両の各種寸法、二次元、三次元で表した車両画像など)、ルーフボックス、チャイルドシートなどの車両装着用品の情報(メーカー、製品名、品番、詳細情報、二次元、三次元で表した製品画像など)、車両装着用品の適合情報(取付け可能か否か、取付け位置の許容範囲など)、取得情報などが記録されたものである。 The database 90 includes vehicle information (manufacturer, vehicle type, year, type, various dimensions of the vehicle, vehicle images expressed in two-dimensional and three-dimensional, etc.), information on vehicle-mounted articles such as roof boxes and child seats (manufacturer, product name , Product number, detailed information, two-dimensional or three-dimensional product image, etc.), vehicle-mounted accessory compatibility information (whether or not it can be mounted, allowable mounting position range, etc.), acquisition information, etc. are recorded. ..

このような本発明の車両装着用品試着システム10は、ソフトウェアプログラム、アプリケーションソフトを用いた形態、あるいはこれらのソフトがインストールされたパーソナルコンピュータ、携帯端末の形態として実現することができる。 The vehicle fitting accessory trying-on system 10 of the present invention as described above can be realized in the form of using a software program or application software, or in the form of a personal computer or a mobile terminal in which these software are installed.

[車両装着用品試着方法]
次に上記車両装着用品試着システム10を用いた本発明の車両装着用品試着方法について、以下説明する。
[Vehicle fitting accessories fitting method]
Next, a vehicle fitting article fitting method of the present invention using the vehicle fitting article fitting system 10 will be described below.

[新規試着A]
ユーザーが所有する車両などを撮影してルーフボックスを試着する方法は、以下のように行う。
[New fitting A]
The method of taking a picture of a vehicle owned by the user and trying on the roof box is performed as follows.

車両情報を入力する(S100)。車両情報としては、メーカー、車種、年式、タイプ等である。
次にルーフボックスを選択する(S120)。車両情報及び適合情報に基づいて車両に適合可能なルーフボックスが表示される。具体的には、ルーフボックスの品名、品番、製品画像、詳細情報などが表示される。
Vehicle information is input (S100). The vehicle information includes manufacturer, vehicle type, year model, type, and the like.
Next, the roof box is selected (S120). A roof box compatible with the vehicle is displayed based on the vehicle information and the compatibility information. Specifically, the product name, product number, product image, detailed information, etc. of the roof box are displayed.

車両を撮影する(S140)。撮影部20により車両の側面を撮影し、撮影した画像(静止画、動画など)が表示部70の画面上に表示される。
車両の自動認識の可否を行う(S160)。
車両の自動認識は、制御部50により次のように行う。
図3はルーフボックス試着方法の説明図である。本実施形態では一例として車両の基準部分として車両画像の前後タイヤを認識する場合について以下説明する。
The vehicle is photographed (S140). The side surface of the vehicle is photographed by the photographing unit 20, and the photographed image (still image, moving image, etc.) is displayed on the screen of the display unit 70.
Whether or not the vehicle is automatically recognized is determined (S160).
The automatic recognition of the vehicle is performed by the control unit 50 as follows.
FIG. 3 is an explanatory view of the roof box fitting method. In the present embodiment, as an example, a case where the front and rear tires of the vehicle image are recognized as the reference portion of the vehicle will be described below.

図3(1)に示すように、車両画像中の前後タイヤに相当する箇所に認識範囲(2つの丸印)が表示される。このとき、前後タイヤの認識定義は、例えば、Y軸上に左右2つの円があり、2つの円が所定距離離れているなどである。
なお、認識する車両の基準部分はこの他、フロントランプ、テールランプ、サイドドア、サイドミラー、ウィンドー、ドア、ドアハンドルなどを適用することもできる。
As shown in FIG. 3(1), a recognition range (two circles) is displayed at a position corresponding to the front and rear tires in the vehicle image. At this time, the recognition definition of the front and rear tires is, for example, that there are two left and right circles on the Y axis and the two circles are separated by a predetermined distance.
The reference part of the vehicle to be recognized may be a front lamp, a tail lamp, a side door, a side mirror, a window, a door, a door handle, or the like.

図3(2)に示すように、認識範囲の前後タイヤのセンターを導き出し、センターの位置情報(車両画像上の位置座標など)から2つのセンター間のピクセル数を取得する。
図4はルーフボックスの取付け基準位置の説明図である。画面上の前後タイヤの2つのセンターの位置情報(車両画像上の位置座標など)から、ルーフボックスの取付け基準位置を算出する。
一例として、図4(1)において、前後タイヤのセンター間(丸印1)の1/2の位置(丸印2と丸印3の中間)を通る垂直線がX軸基準線となる。そして、あらかじめ登録されている前タイヤと前後ドア隙間の間(丸印4)と前記X軸基準線から前後ドア隙間位置(丸印5)を算出する。
また、あらかじめ登録された前後キャリア取付位置(丸印6)とバー前後間隔(丸印7)を用いて、バー前後間隔(丸印8、丸印9)と前側バー取付位置(丸印10)、バー前後間中間位置(丸印11)を算出し、ルーフボックスの取付け位置(X軸:丸印12)を算出することができる。
また図4(2)において、前後タイヤのセンターを通る水平線がY軸基準線となる。そしてあらかじめ登録された車両全高(丸印1)、タイヤ半径(丸印2)、ベースキャリア単体高さ(丸印3)を用いて、ベースキャリア取付高さ(丸印4及び5)を算出することができる。このうち丸印5がルーフボックスの取り付け位置(Y軸)となる。
As shown in FIG. 3(2), the centers of the front and rear tires in the recognition range are derived, and the number of pixels between the two centers is acquired from the position information of the center (position coordinates on the vehicle image).
FIG. 4 is an explanatory view of the reference mounting position of the roof box. The reference position for mounting the roof box is calculated from the position information of the two centers of the front and rear tires on the screen (positional coordinates on the vehicle image, etc.).
As an example, in FIG. 4A, a vertical line passing through a position 1/2 between the centers of the front and rear tires (circle 1) (intermediate between circles 2 and 3) is the X-axis reference line. Then, the position between the front tire and the front and rear door gap (circle mark 4) which is registered in advance and the front and rear door gap position (circle mark 5) are calculated from the X-axis reference line.
Further, using the pre-registered front and rear carrier mounting positions (circle 6) and the bar front and rear spacing (circle 7), the bar front and rear spacing (circles 8 and 9) and the front bar mounting position (circle 10) are used. The intermediate position between the front and rear of the bar (circle 11) can be calculated, and the mounting position of the roof box (X axis: circle 12) can be calculated.
Further, in FIG. 4B, the horizontal line passing through the centers of the front and rear tires is the Y-axis reference line. The base carrier mounting height (circles 4 and 5) can be calculated using the vehicle total height (circle 1), tire radius (circle 2), and base carrier unit height (circle 3) that have been registered in advance. it can. Of these, the circle 5 is the mounting position (Y axis) of the roof box.

また、2つのセンター間のピクセル数と、あらかじめ登録された前後タイヤ間の距離と、ルーフボックスの長さを用いて、画面上に表示するルーフボックスのピクセル数を算出する。このルーフボックスのピクセル数により、画面上の車両画像に適した縮尺を調整したルーフボックスを求めることができる。換言すると2つのセンター間のピクセル数と、あらかじめ登録された前後タイヤ間の距離から1ピクセルあたりの実寸を算出する。この1ピクセルあたりの実寸とルーフボックスの長さからルーフボックスの表示サイズ(ピクセル数)を算出することができる。
ついで図3(3)に示すように、車両画像中の車両の特徴点(四角印)を抽出する。ここで車両の特徴点とは、例えば、サイドドアの四隅、テールランプなどであり、このような点を複数抽出する。
Further, the number of pixels of the roof box displayed on the screen is calculated using the number of pixels between the two centers, the distance between the front and rear tires registered in advance, and the length of the roof box. Based on the number of pixels of the roof box, it is possible to obtain a roof box having a scale adjusted to a vehicle image on the screen. In other words, the actual size per pixel is calculated from the number of pixels between the two centers and the distance between the front and rear tires registered in advance. The display size (the number of pixels) of the roof box can be calculated from the actual size per pixel and the length of the roof box.
Then, as shown in FIG. 3C, the feature points (square marks) of the vehicle in the vehicle image are extracted. Here, the characteristic points of the vehicle are, for example, the four corners of the side door, the tail lamp, and the like, and a plurality of such points are extracted.

前述の車両の自動認識ができない場合(例えば、背景と車両が同色、暗がりなど)、車両の手動認識を行う(S180)。具体的な手動認識は、車両画像の前後タイヤのセンターを指定する。
指定した前後タイヤの2つのセンター間のピクセル数を取得し、ルーフボックスの縮尺を調整できる。また前後タイヤの2つのセンターの位置情報からルーフボックスの取付け位置を算出できる。
If the automatic recognition of the vehicle cannot be performed (for example, the background and the vehicle have the same color or darkness), the vehicle is manually recognized (S180). For specific manual recognition, the centers of the front and rear tires of the vehicle image are designated.
You can get the number of pixels between the two centers of the specified front and rear tires and adjust the scale of the roof box. Further, the mounting position of the roof box can be calculated from the positional information of the two centers of the front and rear tires.

また別の認識方法として、撮影対象の車両の前後タイヤにあらかじめAR(Augmented Reality:拡張現実)マーカーなどのマーカーを張り付けておく。そして車両を撮影した車両画像中のマーカーにより前後タイヤを認識するように構成してもよい。
車両の自動又は手動認識を行った後、ルーフボックスの試着を行う(S200)。図3(4)に示すように、画像合成処理部60により、車両画像に縮尺を調整しルーフボックスの取付け基準位置、特徴点に基づいてルーフボックスを合成した画像(二次元、三次元で表した画像)を生成し表示画面に表示する。
As another recognition method, markers such as AR (Augmented Reality) markers are attached to the front and rear tires of the vehicle to be imaged in advance. Then, the front and rear tires may be recognized by the markers in the vehicle image obtained by photographing the vehicle.
After automatically or manually recognizing the vehicle, the roof box is tried on (S200). As shown in FIG. 3 (4 ), the image synthesis processing unit 60 adjusts the scale of the vehicle image, and an image (two-dimensional or three-dimensional representation) in which the roof box is synthesized based on the reference mounting position of the roof box and the feature points. Generated image) and display it on the display screen.

このとき、図3(5)に示すように、画像合成処理部60では、ユーザーが携帯端末を持ちながら、側方の撮影場所から移動した場合、前述の複数の特徴点を追尾して、特徴点に基づいて、ルーフボックスの向きを変動させることができる。
また、前述の合成画像では、ルーフボックスの取付け基準位置にルーフボックスの中間位置を合わせて表示されている。ルーフボックスの取付け位置は一般的に許容範囲が設定されており、この許容範囲でルーフボックスの取付け位置を移動させた画像合成処理を行うこともできる。
At this time, as shown in FIG. 3(5), in the image composition processing unit 60, when the user moves from the side photographing location while holding the portable terminal, the feature points are tracked by The orientation of the roof box can be varied based on the points.
Further, in the above-mentioned composite image, the intermediate position of the roof box is displayed in alignment with the reference mounting position of the roof box. Generally, an allowable range is set for the mounting position of the roof box, and it is also possible to perform the image synthesizing process by moving the mounting position of the roof box within this allowable range.

データの保存を行う(S220)。S100からS200までの工程で入力されたデータ及び画像データが記憶部40に記録される。
これにより新たに撮影した画像を用いることによりユーザーの所有する車両に対してルーフボックスの試着を行うことができる。
Data is saved (S220). The data and image data input in the steps from S100 to S200 are recorded in the storage unit 40.
As a result, it is possible to try on the roof box for the vehicle owned by the user by using the newly captured image.

[試着記録確認B]
前述のS220の工程で保存された車両画像を用いて事後的に試着する方法は、以下のように行う。
記憶部40に保存されている車両画像を選択する(S300)。
ルーフボックスを選択する(S320)。保存されている車両情報に基づいて車両に適合可能なルーフボックスが表示される。具体的には、ルーフボックスの品名、品番、製品画像、詳細情報などである。
[Try-on record confirmation B]
The method of subsequently trying on the vehicle image using the vehicle image stored in the step S220 is performed as follows.
The vehicle image stored in the storage unit 40 is selected (S300).
A roof box is selected (S320). A roof box suitable for the vehicle is displayed based on the stored vehicle information. Specifically, the product name, product number, product image, detailed information, etc. of the roof box.

前述のルーフボックスの試着を行う(S200)。画像合成処理部60により、保存した車両画像に縮尺を調整した新たなルーフボックスを合成した画像を生成し、表示画面に表示する。
前述のデータの保存を行う(S220)。S300からS200までの工程で入力されたデータ及び画像データが記憶部40に記録される。
これにより、あらかじめ撮影した車両画像に対して事後的に、再度ルーフボックスの試着を行うことができる。
The roof box is tried on (S200). The image combination processing unit 60 generates an image in which a new roof box with a reduced scale is combined with the saved vehicle image, and the image is displayed on the display screen.
The aforementioned data is saved (S220). The data and image data input in the steps from S300 to S200 are recorded in the storage unit 40.
This allows the roof box to be tried on again after the vehicle image captured in advance.

[登録車両試着C]
ユーザーが所有する車両以外の車種に対してルーフボックスの試着を行う方法は、以下のように行う。
登録車両情報を入力する(S400)。ユーザーが車両のメーカー、車種を入力すると、あらかじめデータベース90上に登録された車両が表示される。
[Registered vehicle fitting C]
The method for fitting the roof box to a vehicle model other than the vehicle owned by the user is as follows.
Registered vehicle information is input (S400). When the user inputs the vehicle manufacturer and vehicle type, the vehicles registered in advance in the database 90 are displayed.

ルーフボックスを選択する(S420)。登録されている車両情報に基づいて車両に適合可能なルーフボックスが表示される。具体的には、ルーフボックスの品名、品番、製品画像、詳細情報などである。
前述のルーフボックスの試着を行う(S200)。画像合成処理部60により、あらかじめ登録された車両画像に縮尺を調整したルーフボックスを合成した画像を生成し、表示画面に表示する。
A roof box is selected (S420). A roof box adaptable to the vehicle is displayed based on the registered vehicle information. Specifically, the product name, product number, product image, detailed information, etc. of the roof box.
The roof box is tried on (S200). The image combination processing unit 60 generates an image in which a roof box whose scale has been adjusted is combined with a vehicle image registered in advance to generate an image, which is displayed on the display screen.

前述同様のデータの保存を行う(S220)。S400からS200までの工程で入力されたデータ及び画像データが記憶部40に記録される。
これによりあらかじめ登録された車両の画像を用いることにより、ユーザーが所有する車両以外の車種に対してルーフボックスの試着を行うことができる。
The same data as described above is saved (S220). The data and image data input in the steps from S400 to S200 are recorded in the storage unit 40.
Thus, by using the image of the vehicle registered in advance, it is possible to try on the roof box for a vehicle model other than the vehicle owned by the user.

このような本発明のルーフボックス試着方法によれば、車両にルーフボックスを搭載した仮想的な車両画像を容易に作成して携帯端末などの画面上に表示することができる。 According to such a roof box fitting method of the present invention, a virtual vehicle image in which the roof box is mounted on the vehicle can be easily created and displayed on the screen of the mobile terminal or the like.

車両装着用品としてチャイルドシートを用いた場合、車両画像中のあらかじめ定めた車両の基準部分としては、装着する座席の高さ、ISOFIX(アイソフィックス)対応車両の場合には、アンカーのピッチ、さらに前述のARマーカーなどを適用すると良い。 When a child seat is used as the vehicle mounting article, the predetermined reference portion of the vehicle in the vehicle image is the height of the seat to be mounted, in the case of an ISOFIX (Isofix) compatible vehicle, the anchor pitch, and It is better to apply an AR marker or the like.

このようなチャイルドシートの試着方法であっても、車両にルーフボックスを搭載した場合と同様に仮想的な車両画像を容易に作成して携帯端末などの画面上に表示することができる。 Even with such a child seat fitting method, a virtual vehicle image can be easily created and displayed on the screen of a mobile terminal or the like as in the case where a vehicle is equipped with a roof box.

本発明の車両装着用品試着方法、車両装着用品試着システムは、車両及び車両に付帯する車両装着用品の製造分野及び販売分野において、産業上の利用可能性を有する。 INDUSTRIAL APPLICABILITY The vehicle fitting accessory fitting method and the vehicle fitting fitting fitting system of the present invention have industrial applicability in the manufacturing field and sales field of vehicles and vehicle fittings incidental to the vehicle.

10………車両装着用品試着システム、20………撮影部、30………入力部、40………記憶部、50………制御部、60………画像合成処理部、70………表示部、80………通信部、90………データベース。
10......Vehicle fitting accessory fitting system, 20.........Shooting unit, 30...Input unit, 40... Storage unit, 50... Control unit, 60 Image combining processing unit, 70... ... Display unit, 80... Communication unit, 90... Database.

Claims (6)

画面上で車両装着用品の試着を行う車両装着用試着システムを用いた試着方法であって、
前記車両装着用試着システムの制御部が車両画像中のあらかじめ定めた車両の前後タイヤを認識して前記前後タイヤの中心を通る水平線をY軸基準線、前記前後タイヤの中心間の1/2の位置を通る垂直線をX軸基準線とし、あらかじめ登録した車両情報を用いて前記Y軸及びX軸基準線からの位置を算出することにより車両装着用品の取付け基準位置を算出する工程と、
前記車両装着用試着システムの制御部が前記前後タイヤを認識して前記車両装着用品の縮尺を算出する工程と、
前記車両装着用試着システムの画像合成処理部が前記車両画像中の車両の前記車両装着用品の取付け基準位置に前記縮尺を調整した前記車両装着用品を合成する工程と、
を有することを特徴とする車両装着用品試着方法。
A fitting method using a fitting system for fitting a vehicle for fitting a fitting for a vehicle on a screen,
The control unit of the vehicle fitting try-on system recognizes the front and rear tires of a predetermined vehicle in the vehicle image, and defines a horizontal line passing through the center of the front and rear tires as a Y-axis reference line and ½ between the centers of the front and rear tires. A vertical line passing through the position is used as an X-axis reference line, and a position from the Y-axis and X-axis reference lines is calculated using vehicle information registered in advance to calculate a mounting reference position of the vehicle-mounted article,
A step of calculating the scale of the vehicle-mounted article by recognizing the front and rear tires by the control unit of the vehicle-wearing fitting system ;
A step of synthesizing the vehicle fitting article in which the scale is adjusted to an attachment reference position of the vehicle fitting article of the vehicle in the vehicle image in the vehicle fitting try-on system ,
A method for trying on fittings for vehicles, which comprises:
前記車両装着用品はルーフボックスであり、前記前後タイヤ間のピクセル数を算出し、前記ピクセル数とあらかじめ登録した車両情報に基づいて、前記ルーフボックスの縮尺を算出することを特徴とする請求項1に記載の車両装着用品試着方法。 The vehicle mounting article is a roof box, the number of pixels between the front and rear tires is calculated, and the scale of the roof box is calculated based on the number of pixels and vehicle information registered in advance. The method for trying on vehicle-mounted products as described in. 前記車両画像は、あらかじめ撮影して記憶部に登録された車両の画像、新たに撮影した画像、あらかじめデータベースに登録された車両の画像のいずれか1つであることを特徴とする請求項1又は2に記載の車両装着用品試着方法。 The vehicle image previously photographed to registered vehicle image in the storage unit, the newly captured image, according to claim 1 or, characterized in that any one of the image of the vehicle which is previously registered in the database The method for trying on vehicle-mounted products according to item 2 . 車両画像を取得する記憶部と、
前記車両画像中のあらかじめ定めた車両の前後タイヤを認識して前記前後タイヤの中心を通る水平線をY軸基準線、前記前後タイヤの中心間の1/2の位置を通る垂直線をX軸基準線とし、あらかじめ登録した車両情報を用いて前記Y軸及びX軸基準線からの位置を算出することにより車両装着用品の取付け基準位置及び前記車両装着用品の縮尺を算出する制御部と、
前記車両画像中の車両の前記車両装着用品の取付け基準位置に前記縮尺を調整した前記車両装着用品を合成する画像合成処理部と、
を有することを特徴とする車両装着用品試着システム。
A storage unit that acquires a vehicle image,
Recognizing the front and rear tires of a predetermined vehicle in the vehicle image, a horizontal line passing through the centers of the front and rear tires is a Y-axis reference line, and a vertical line passing through a half position between the centers of the front and rear tires is an X-axis reference. A control unit for calculating a mounting reference position of the vehicle-mounted article and a scale of the vehicle-mounted article by calculating a position from the Y-axis and X-axis reference lines using a vehicle information registered in advance as a line ;
An image synthesizing processing unit for synthesizing the vehicle-mounted article with the reduced scale adjusted to a mounting reference position of the vehicle-mounted article of the vehicle in the vehicle image,
A fitting system for vehicle-mounted articles, which comprises:
前記車両を撮影する撮影部又はあらかじめ前記車両の車両情報を登録したデータベースと通信可能な通信部を備えたことを特徴とする請求項4に記載の車両装着用品試着システム。 The vehicle wearing article fitting system according to claim 4, further comprising: a photographing unit that photographs the vehicle or a communication unit that can communicate with a database in which vehicle information of the vehicle is registered in advance. 前記車両装着用品はルーフボックスであり、
前記制御部は、前記前後タイヤ間のピクセル数を算出し、前記ピクセル数とあらかじめ登録した車両情報に基づいて、前記ルーフボックスの縮尺を算出することを特徴とする請求項4又は5に記載の車両装着用品試着システム。
The vehicle mounting article is a roof box,
Wherein the control unit calculates the number of pixels between the front and rear tires, based on pre-registered vehicle information and said number of pixels, according to claim 4 or 5, characterized in that to calculate the scale of the roof box Vehicle fitting fitting system.
JP2016114601A 2016-06-08 2016-06-08 Vehicle fitting accessories fitting method, vehicle fitting accessories fitting system Active JP6741342B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2016114601A JP6741342B2 (en) 2016-06-08 2016-06-08 Vehicle fitting accessories fitting method, vehicle fitting accessories fitting system
PCT/JP2017/021036 WO2017213157A1 (en) 2016-06-08 2017-06-06 Article for vehicle installation fitting method and article for vehicle installation fitting system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016114601A JP6741342B2 (en) 2016-06-08 2016-06-08 Vehicle fitting accessories fitting method, vehicle fitting accessories fitting system

Publications (2)

Publication Number Publication Date
JP2017220059A JP2017220059A (en) 2017-12-14
JP6741342B2 true JP6741342B2 (en) 2020-08-19

Family

ID=60578757

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016114601A Active JP6741342B2 (en) 2016-06-08 2016-06-08 Vehicle fitting accessories fitting method, vehicle fitting accessories fitting system

Country Status (2)

Country Link
JP (1) JP6741342B2 (en)
WO (1) WO2017213157A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113760088A (en) 2020-06-04 2021-12-07 史克威尔·艾尼克斯有限公司 Augmented reality display device and recording medium

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004029957A (en) * 2002-06-21 2004-01-29 Trytex:Kk Vehicle component mounting simulator
JP2004152086A (en) * 2002-10-31 2004-05-27 Tsubasa System Co Ltd Method for supporting vehicle parts sale
JP2006011805A (en) * 2004-06-25 2006-01-12 Carlex Co Ltd Sale support system, sale support server device, and sale support method
JP2005044376A (en) * 2004-09-21 2005-02-17 Jailo:Kk Tire wheel sales support system
DE102009014337A1 (en) * 2009-03-21 2010-09-23 Dr.Ing.H.C.F.Porsche Aktiengesellschaft Motor vehicle comprises air bag at head height in column, where airbag is placed in standby state at installation space, and installation space is limited at one of vehicle interior facing side of sliding ramp
JP2010244403A (en) * 2009-04-08 2010-10-28 Mitsubishi Motors Corp Vehicle model deformation display method

Also Published As

Publication number Publication date
WO2017213157A1 (en) 2017-12-14
JP2017220059A (en) 2017-12-14

Similar Documents

Publication Publication Date Title
US10757373B2 (en) Method and system for providing at least one image captured by a scene camera of a vehicle
US10740941B2 (en) Processing user selectable product images and facilitating visualization-assisted virtual dressing
JP6490430B2 (en) Image processing apparatus, image processing system, image processing method, and program
Abraham et al. Fish-eye-stereo calibration and epipolar rectification
JP7133926B2 (en) Information processing device, system, information processing method
US8976230B1 (en) User interface and methods to adapt images for approximating torso dimensions to simulate the appearance of various states of dress
JP5439787B2 (en) Camera device
US20120127199A1 (en) Method and system for simulating superimposition of a non-linearly stretchable object upon a base object using representative images
EP3562134B1 (en) Using infrared imaging to create digital images for use in product customization
JP6151535B2 (en) Parameter acquisition apparatus, parameter acquisition method and program
US11715142B2 (en) System for displaying wheel styles and artwork on vehicles
JP5349224B2 (en) Image processing apparatus and image processing method
TW201738847A (en) Assembly instruction system and assembly instruction method
CN108520106B (en) Method and system for space design
JP6741342B2 (en) Vehicle fitting accessories fitting method, vehicle fitting accessories fitting system
US20150206217A1 (en) Garment and accessories fitting
CN105158900A (en) Method for recognizing head posture on automobile maintenance intelligent glasses
CN105786166A (en) Augmented reality method and system
JP2022045832A5 (en)
JP4057571B2 (en) Image analysis system and image analysis method
CN105590226A (en) Image display method and device used for E-commerce website
JP2003141552A (en) Object direction calculation device and method
JP2021089461A (en) Ar image display system, ar image providing method and program
JP4623320B2 (en) Three-dimensional shape estimation system and image generation system
JP2006011805A (en) Sale support system, sale support server device, and sale support method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190307

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200317

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200512

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200714

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200721

R150 Certificate of patent or registration of utility model

Ref document number: 6741342

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250