JP2019068173A - Image selection device, image output device, image selection method, image output method, and image output system - Google Patents

Image selection device, image output device, image selection method, image output method, and image output system Download PDF

Info

Publication number
JP2019068173A
JP2019068173A JP2017189803A JP2017189803A JP2019068173A JP 2019068173 A JP2019068173 A JP 2019068173A JP 2017189803 A JP2017189803 A JP 2017189803A JP 2017189803 A JP2017189803 A JP 2017189803A JP 2019068173 A JP2019068173 A JP 2019068173A
Authority
JP
Japan
Prior art keywords
image
still
output
selection
moving image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017189803A
Other languages
Japanese (ja)
Other versions
JP7102700B2 (en
Inventor
淑恵 蝦名
Yoshie Ebina
淑恵 蝦名
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dai Nippon Printing Co Ltd
Original Assignee
Dai Nippon Printing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dai Nippon Printing Co Ltd filed Critical Dai Nippon Printing Co Ltd
Priority to JP2017189803A priority Critical patent/JP7102700B2/en
Publication of JP2019068173A publication Critical patent/JP2019068173A/en
Priority to JP2022104411A priority patent/JP7396399B2/en
Application granted granted Critical
Publication of JP7102700B2 publication Critical patent/JP7102700B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

To suitably select a photo for promotion in a service that sells moving pictures.SOLUTION: An image selection device 3 is configured to: acquire still images at multiple timings cut out from a moving picture of one or more visitors (subjects) experiencing an attraction; evaluate a degree of smile of the subject in a still picture for each still picture; and select a still image with a highest degree of smile as an image for promotion. The selected still image is printed by a printer 4 and provided free of charge to visitors who have experienced the attraction.SELECTED DRAWING: Figure 7

Description

本発明は、撮影された動画を販売するサービスにおいて、動画の販売を促進するための技術に関する。   The present invention relates to a technology for promoting the sale of moving pictures in a service for selling shot moving pictures.

遊園地などの観光地を訪れた来場者を撮影して記念品として写真や画像データを販売するサービスがある(例えば引用文献1)。この際、来場者の購買意欲を高めるため、販促用として販売する写真を来場者に提示したり、販売する写真の縮小写真を来場者に無償で提供することがある。   There is a service that shoots visitors visiting sightseeing spots such as amusement parks and sells photographs and image data as souvenirs (for example, cited reference 1). Under the present circumstances, in order to raise a visitor's willingness to buy, the photograph sold for sales promotion may be shown to a visitor, or the reduced photograph of the photograph to sell may be provided to a visitor for free.

特開2004−228637号公報Unexamined-Japanese-Patent No. 2004-228637

ところで、今後は、写真や画像データだけでなく、音声データを含む動画データを撮影して販売するサービスも期待されている。このような動画販売を目的としたサービスにおいても、動画の販売に繋がるような販促用の写真を無償提供または提示することが有効であると考えられる。例えば、動画販売の場合には、販売する動画の任意のタイミングの静止画を切り出して販促用の写真とすることができる。   By the way, in the future, in addition to photographs and image data, services for capturing and selling moving image data including audio data are also expected. It is considered effective to provide or present, for free, or otherwise, pictures for promoting sales that lead to the sale of moving images, even in a service aimed at such moving image sales. For example, in the case of movie selling, a still image at any timing of the movie to be sold can be cut out to be a photograph for sales promotion.

しかしながら、動画の場合、単なる写真撮影よりも動きがあるため撮影中に被写体の状態が刻々と変化する。このため、被写体の状態が悪いタイミング(例えば、目を閉じていたり、顔が下を向いていたり、など)の写真を販促用として提供または提示してしまうと、動画の購入意欲が削がれ、動画を購入してもらえない可能性が高くなる。   However, in the case of a moving image, the state of the subject changes momentarily during shooting because there is more movement than simple photography. For this reason, if you offer or present a photograph of a subject whose condition is bad (for example, your eyes are closed, your face is facing down, etc.) as a sales promotion, your willingness to buy a movie will be cut off. , There is a high possibility that you will not be able to purchase the video.

本発明は、前述した問題点に鑑みてなされたものであり、その目的は、動画を販売するサービスにおいて、販促用の写真を好適に選択することが可能な、画像選択装置等を提供することである。   The present invention has been made in view of the above-mentioned problems, and an object thereof is to provide an image selection apparatus etc. capable of suitably selecting a photograph for sales promotion in a service for selling moving pictures. It is.

前述した目的を達成するために第1の発明は、1又は複数の人物を撮影した動画から切り出された複数のタイミングにおける静止画を取得する取得手段と、前記静止画ごとに、当該静止画に映る前記人物を所定の基準で評価する評価手段と、評価結果に基づいて、前記動画の販促用として提供または提示する前記静止画を選択する選択手段と、を備えることを特徴とする画像選択装置である。   In order to achieve the above-mentioned object, according to a first aspect of the present invention, there is provided an acquisition means for acquiring still images at a plurality of timings cut out from a moving image obtained by photographing one or a plurality of persons; An image selection apparatus comprising: an evaluation unit that evaluates the person appearing on the basis of a predetermined standard; and a selection unit that selects the still image to be provided or presented for promotion of the moving image based on an evaluation result. It is.

第1の発明によれば、撮影した動画から切り出された複数のタイミングにおける静止画ごとに、静止画に映る人物を所定の基準で評価し、評価結果に基づいて販促用の画像を決定する。これにより、撮影された動画を販売するサービスにおいて、動画の販促用の写真(静止画)を好適に選択することが可能となる。   According to the first invention, for each still image at a plurality of timings cut out from a captured moving image, a person appearing in the still image is evaluated based on a predetermined standard, and a promotional image is determined based on the evaluation result. Thereby, in the service for selling the photographed moving image, it is possible to suitably select a photograph (still image) for promoting the moving image.

また前記評価手段は、前記人物の笑顔度を評価するようにしてもよい。また、前記人物の目の開閉を評価するようにしてもよい。また、前記人物のポーズを評価するようにしてもよい。このように様々な基準で静止画に映る人物を評価して販促用の画像を選ぶことができる。   The evaluation means may evaluate the degree of smile of the person. Further, the opening and closing of the eyes of the person may be evaluated. Further, the pose of the person may be evaluated. As described above, it is possible to select a sales promotion image by evaluating a person who appears in a still image according to various criteria.

第2の発明は、1又は複数の人物を撮影した動画から切り出された複数のタイミングにおける静止画を取得する取得手段と、複数の前記静止画を表示し、前記動画の販促用として提供または提示する前記静止画の選択を受け付ける選択手段と、を備えることを特徴とする画像選択装置である。   In a second aspect of the present invention, an acquiring means for acquiring still images at a plurality of timings cut out from a moving image obtained by photographing one or a plurality of persons, displaying a plurality of the still images, and providing or presenting the moving images And a selection unit that receives the selection of the still image.

第2の発明によれば、撮影した動画から切り出された複数のタイミングにおける静止画ごとに、静止画に映る人物を所定の基準で評価し、評価結果に基づいて販促用の画像を決定する。これにより、撮影された動画を販売するサービスにおいて、動画の販促用の写真(静止画)を好適に選択することが可能となる。   According to the second invention, for each still image at a plurality of timings cut out from a captured moving image, a person appearing in the still image is evaluated based on a predetermined standard, and a promotional image is determined based on the evaluation result. Thereby, in the service for selling the photographed moving image, it is possible to suitably select a photograph (still image) for promoting the moving image.

第3の発明は、第1または第2の発明において選択された静止画を出力する出力手段、を備えることを特徴とする画像出力装置である。これにより、動画販促用のサンプル写真を無償で提供または提示することができる。   A third aspect of the invention is an image output apparatus comprising: output means for outputting a still image selected in the first or second aspect of the invention. This makes it possible to provide or present a sample picture for video promotion free of charge.

また前記出力手段は、選択された前記静止画の画像サイズを所定のサイズまで小さくして出力するようにしてもよい。これにより、無償提供用に解像度を落とした画像を出力することができる。   Further, the output means may reduce the image size of the selected still image to a predetermined size and output it. This makes it possible to output an image with a reduced resolution for free provision.

また前記出力手段は、更に、前記動画の提供を受けるために必要となる情報を出力することが望ましい。これにより、動画の購入者に対して、動画のダウンロードサイトのアドレス情報などの動画の提供を受けるために必要となる情報を提供することができる。   Preferably, the output means further outputs information required to receive the provision of the moving image. Thereby, it is possible to provide the purchaser of the moving picture with information necessary for receiving the provision of the moving picture such as address information of the download site of the moving picture.

また前記出力手段は、所定の用紙に印刷して出力するようにしてもよい。この場合、前記用紙は、2つに切り離し可能な用紙であり、前記出力手段は、切り離される一方側に前記静止画を印刷し、他方側に動画の提供を受けるために必要となる情報を印刷することが望ましい。これにより、用紙から一方側を切り離して無償提供用のサンプル写真として提供し、他方側を動画のダウンロード用チケットとして提供することができる。   Further, the output unit may print and output on a predetermined sheet. In this case, the sheet is a sheet that can be separated into two, and the output unit prints the still image on one side to be separated, and prints the information necessary to receive the provision of a moving image on the other side. It is desirable to do. As a result, one side of the sheet can be separated and provided as a sample picture for free provision, and the other side can be provided as a movie download ticket.

また前記出力手段は、前記一方側と前記他方側の用紙のそれぞれに、同一の識別情報を印刷するようにしてもよい。識別情報によって、一方側の用紙(サンプル写真)と他方側の用紙(ダウンロード用チケット)とを照合させることができる。これにより、例えば、チケットの販売スタッフ等が、誤って別のダウンロート用チケットを提供してしまうようなことを防ぐことができる。   Further, the output unit may print the same identification information on each of the sheets on the one side and the other side. By the identification information, it is possible to collate the sheet on one side (sample photograph) with the sheet on the other side (downloading ticket). This can prevent, for example, the ticket sales staff from accidentally providing another download ticket.

第4の発明は、1又は複数の人物を撮影した動画から切り出された複数のタイミングにおける静止画を取得する取得ステップと、前記静止画ごとに、当該静止画に映る前記人物を所定の基準で評価する評価ステップと、評価結果に基づいて、前記動画の販促用として提供または提示する前記静止画を選択する選択ステップと、を含むことを特徴とする画像選択方法である。   A fourth aspect of the invention is an acquisition step of acquiring still images at a plurality of timings cut out from a moving image obtained by photographing one or a plurality of persons, and for each still image, the person appearing in the still image An image selection method comprising: an evaluation step of evaluation; and a selection step of selecting the still image to be provided or presented for promotion of the moving image based on the evaluation result.

第5の発明は、1又は複数の人物を撮影した動画から切り出された複数のタイミングにおける静止画を取得する取得ステップと、複数の前記静止画を表示し、前記動画の販促用として提供または提示する前記静止画の選択を受け付ける選択ステップと、を含むことを特徴とする画像選択方法である。   A fifth aspect of the invention provides an acquiring step of acquiring still images at a plurality of timings cut out from a moving image obtained by photographing one or a plurality of persons, displaying a plurality of the still images, and providing or presenting the moving images as a sales promotion. A selection step of accepting the selection of the still image.

第6の発明は、第4または第5の発明において選択された静止画を出力する出力ステップ、を備えることを特徴とする画像出力方法である。   A sixth invention is an image output method comprising: an output step of outputting the still image selected in the fourth or fifth invention.

第7の発明は、撮影装置と画像選択装置と画像出力装置とを備えた画像出力システムであって、前記撮影装置は、1又は複数の人物を動画で撮影する動画撮影手段と、を備え、前記画像選択装置は、前記動画から切り出された複数のタイミングにおける静止画を取得する取得手段と、前記静止画ごとに、当該静止画に映る前記人物を所定の基準で評価する評価手段と、評価結果に基づいて、前記動画の販促用として提供または提示する前記静止画を選択する選択手段と、を備え、前記画像出力装置は、選択された前記静止画を出力する出力手段と、を備えることを特徴とする画像出力システムである。   A seventh invention is an image output system including a photographing device, an image selection device, and an image output device, wherein the photographing device includes moving image photographing means for photographing one or a plurality of persons as a moving image; The image selection device includes an acquisition unit that acquires still images at a plurality of timings cut out from the moving image, an evaluation unit that evaluates the person shown in the still image for each of the still images based on a predetermined standard, and Selecting means for selecting the still image to be provided or presented for promotion of the moving image based on the result, and the image output device includes output means for outputting the selected still image An image output system characterized by

第8の発明は、撮影装置と画像選択装置と画像出力装置とを備えた画像出力システムであって、前記撮影装置は、1又は複数の人物を動画で撮影する動画撮影手段と、を備え、前記画像選択装置は、前記動画から切り出された複数のタイミングにおける静止画を取得する取得手段と、複数の前記静止画を表示し、前記動画の販促用として提供または提示する前記静止画の選択を受け付ける選択手段と、を備え、前記画像出力装置は、選択された前記静止画を出力する出力手段と、を備えることを特徴とする画像出力システムである。   An eighth aspect of the present invention is an image output system comprising an imaging device, an image selection device, and an image output device, wherein the imaging device includes moving image shooting means for shooting one or a plurality of persons as a moving image, The image selection device is configured to acquire still images at a plurality of timings cut out from the moving image, and to display the plurality of still images and to select or provide the still images to be provided or presented for promotion of the moving image. The image output system is characterized by further comprising: an accepting unit; and an output unit for outputting the selected still image.

本発明によれば、撮影された動画を販売するサービスにおいて、販促用の写真を好適に選択することが可能となる。   According to the present invention, it is possible to suitably select a photograph for sales promotion in a service for selling a captured moving image.

動画提供システム1の概要を示す図A diagram showing an outline of the video providing system 1 動画撮影の様子を示す図Diagram showing movie shooting 画像選択装置3のハードウェア構成の例を示す図A diagram showing an example of a hardware configuration of the image selection device 3 印刷物80の例を示す図A diagram showing an example of the printed matter 80 画像データ60のデータ内容の例を示す図A diagram showing an example of data contents of image data 60 ダウンロード情報70のデータ内容の例を示す図A diagram showing an example of data contents of download information 70 撮影処理の流れを示すフローチャートFlow chart showing the flow of photographing processing 画像選択処理の流れを示すフローチャートFlow chart showing the flow of the image selection process 評価された笑顔度の例を示す図Figure showing an example of the rated smile level プリント処理の流れを示すフローチャートFlow chart showing the flow of print processing ダウンロード処理の流れを示すフローチャートFlow chart showing the flow of download processing 画像選択装置3Aのハードウェア構成の例を示す図A diagram showing an example of a hardware configuration of the image selection device 3A 画像選択処理の流れを示すフローチャートFlow chart showing the flow of the image selection process 静止画の選択を受け付ける表示部の画面例を示す図A diagram showing an example of a screen of a display unit that receives selection of a still image

本実施の形態では、遊園地などに設置されたアトクラション(ジェットコースター)を体験した来場者を撮影した動画を販売する動画撮影販売サービスにおいて、本発明を適用した例について説明するが、本発明はこの例に限定されない。本発明は、前述の課題を有する様々な動画撮影販売サービスに適用可能である。   In the present embodiment, an example in which the present invention is applied to a moving image shooting and selling service for selling moving images obtained by shooting visitors who experienced an atclusion (a roller coaster) installed in an amusement park or the like will be described. It is not limited to this example. The present invention is applicable to various video shooting and sales services having the above-mentioned problems.

[第1の実施形態]
以下、図面を参照しながら、本発明の第1の実施形態について詳細に説明する。図1は、本発明の動画提供システム1の概要を示す図である。動画提供システム1は、カメラ2、画像選択装置3、プリンタ4、ユーザ端末7、ダウンロードサイト8、ストレージ100等から構成される。以下、各構成について説明する。
First Embodiment
Hereinafter, a first embodiment of the present invention will be described in detail with reference to the drawings. FIG. 1 is a diagram showing an outline of a moving image providing system 1 of the present invention. The moving image providing system 1 includes a camera 2, an image selection device 3, a printer 4, a user terminal 7, a download site 8, a storage 100 and the like. Each component will be described below.

(カメラ2)
カメラ2(撮影装置)は、遊園地などのアトラクション(ジェットコースター)を体験中の1又は複数の来場者(被写体)の様子を動画で撮影する。また、撮影した動画から複数のタイミングにおける静止画を切り出して出力する。撮影した動画のデータ(以下、「動画データ62」とも表記する)と動画から切り出された静止画のデータ(以下、「静止画データ63」とも表記する)は、カメラ2と有線または無線接続されたストレージ100に記憶される(図5参照)。
(Camera 2)
The camera 2 (shooting device) shoots, as a moving image, the appearance of one or more visitors (subjects) experiencing an attraction (a roller coaster) such as an amusement park. Further, still images at a plurality of timings are cut out from the captured moving image and output. Data of the captured moving image (hereinafter also referred to as “moving image data 62”) and data of a still image cut out from the moving image (hereinafter referred to also as “still image data 63”) are connected to the camera 2 by wire or wirelessly Are stored in the storage 100 (see FIG. 5).

本実施の形態では、図2に示すように、カメラ2は、ジェットコースターの途中の撮影ポイントに設置され、ジェットコースターを走行する車両9に搭乗した来場者10の様子を動画(音声を含む)で撮影する。本実施の形態では、ジェットコースターのレール上に車両9の車輪の通過を検知するセンサ20が設置されており、車両9の車輪がセンサ20を通過すると、センサ信号がカメラ2に送られる。カメラ2は、センサ信号を受けたタイミングをトリガとして、動画撮影を開始し、所定時間撮影を行う。カメラ2が実行する撮影処理については後述する(図7)。   In the present embodiment, as shown in FIG. 2, the camera 2 is installed at a shooting point on the way of the roller coaster, and a moving image (including sound) of the visitor 10 who got on the vehicle 9 traveling the roller coaster. Shoot with In the present embodiment, a sensor 20 for detecting the passage of the wheels of the vehicle 9 is installed on the rail of the roller coaster, and when the wheels of the vehicle 9 pass the sensor 20, a sensor signal is sent to the camera 2. The camera 2 starts moving image shooting using the timing of receiving the sensor signal as a trigger, and performs shooting for a predetermined time. The photographing process performed by the camera 2 will be described later (FIG. 7).

(画像選択装置3)
画像選択装置3は、ストレージ100に記憶された複数の静止画データ63の中から、動画の販促用として提供する静止画データを選択する。選択された静止画データ63を「代表静止画データ64」とも表記する。
(Image selection device 3)
The image selection device 3 selects still image data to be provided as a moving image promotion from the plurality of still image data 63 stored in the storage 100. The selected still image data 63 is also referred to as "representative still image data 64".

具体的には、画像選択装置3は、静止画データ63ごとに、所定の基準で画像内の被写体を評価し、その評価結果が良い画像を選択する。特に本実施の形態では、被写体の笑顔度を評価し、笑顔度が最も高い静止画データ63を選択する。ただし、どのような基準で被写体を評価するかは、特に限定されるものではなく、動画販売のサービス業者等が任意に定めてよい。画像選択装置3が実行する画像選択処理については後述する(図8)。   Specifically, the image selection device 3 evaluates the subject in the image based on a predetermined standard for each still image data 63, and selects an image with a good evaluation result. Particularly in the present embodiment, the degree of smile of the subject is evaluated, and the still image data 63 having the highest degree of smile is selected. However, the criteria used to evaluate the subject are not particularly limited, and a service provider or the like of video sales may arbitrarily determine it. The image selection process executed by the image selection device 3 will be described later (FIG. 8).

図3は、画像選択装置3(コンピュータ)のハードウェア構成の例を示す図である。図に示すように、画像選択装置3は、制御部31、記憶部32、通信制御部33、バス38等から構成される。   FIG. 3 is a diagram showing an example of the hardware configuration of the image selection device 3 (computer). As shown in the figure, the image selection device 3 includes a control unit 31, a storage unit 32, a communication control unit 33, a bus 38, and the like.

制御部31は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)等によって構成される。CPUは、記憶部32、ROM、記録媒体等に格納されるプログラムをRAM上のワークメモリ領域に呼び出して実行し、バス38を介して接続された各装置を駆動制御し、画像選択装置3が行う後述する処理(画像選択処理、図8参照)を実現する。   The control unit 31 is configured by a central processing unit (CPU), a read only memory (ROM), a random access memory (RAM), and the like. The CPU calls a program stored in the storage unit 32, the ROM, the recording medium, etc. to a work memory area on the RAM and executes it, drives and controls each device connected via the bus 38, and the image selection device 3 The processing to be described later (image selection processing, see FIG. 8) is realized.

記憶部32は、フラッシュメモリ、HDD(Hard Disk Drive)等であり、制御部31が実行するプログラム、プログラム実行に必要なデータ、OS(Operating System)等が格納される。プログラムに関しては、OSに相当する制御プログラムや、後述する処理(画像選択処理、図8参照)を画像選択装置3に実行させるためのアプリケーションプログラムが格納されている。これらの各プログラムコードは、制御部31により必要に応じて読み出されてRAMに移され、CPUに読み出されて各種の手段として実行される。   The storage unit 32 is a flash memory, a hard disk drive (HDD) or the like, and stores a program executed by the control unit 31, data necessary for program execution, an operating system (OS), and the like. As for the program, a control program equivalent to the OS and an application program for causing the image selection device 3 to execute processing (image selection processing, see FIG. 8) described later are stored. Each of these program codes is read by the control unit 31 as necessary, transferred to the RAM, read by the CPU, and executed as various means.

通信制御部33は、通信制御装置、通信ポート等を有し、画像選択装置3とネットワーク間の通信を媒介する通信インタフェースであり、ネットワークを介して、ストレージ100や他のコンピュータ間との通信制御を行うことが可能である。ネットワークは、有線、無線を問わない。バス38は、各装置間の制御信号、データ信号等の授受を媒介する経路である。   The communication control unit 33 has a communication control device, a communication port, etc., and is a communication interface that mediates communication between the image selection device 3 and the network, and controls communication with the storage 100 and other computers via the network. It is possible to The network may be wired or wireless. The bus 38 is a path that mediates the exchange of control signals, data signals, and the like between the devices.

(プリンタ4)
プリンタ4(画像出力装置)は、例えばアトラクションの出口付近に設置され、画像選択装置3により選択された静止画データ63(代表静止画データ64)とダウンロードサイト8へのアドレス情報71を所定の用紙に印刷して出力する。プリンタ4は、例えば、高解像度カラープリンタであり、昇華型、溶融型等、プリンタの方式は問わない。プリンタ4が実行するプリント処理については後述する(図10)。
(Printer 4)
The printer 4 (image output device) is installed, for example, near the exit of the attraction, and the still image data 63 (representative still image data 64) selected by the image selection device 3 and the address information 71 to the download site 8 Print on and output. The printer 4 is, for example, a high resolution color printer, and there is no limitation on the type of printer, such as a sublimation type or a melting type. The print process executed by the printer 4 will be described later (FIG. 10).

図4は、プリンタ4により出力される印刷物80の例を示す図である。図に示すように、印刷物80は、印刷物80を2つに切り離すことができるミシン目81を有している。ミシン目81を境界として左側が、動画販促用として無償提供されるサンプル写真80Aである。また、ミシン目81を境界として右側が動画購入後に提供されるダウンロード用チケット80Bである。   FIG. 4 is a view showing an example of the printed matter 80 outputted by the printer 4. As shown in the figure, the printed matter 80 has perforations 81 which can separate the printed matter 80 into two. The left side of the perforation 81 is a sample photograph 80A provided free of charge for video sales promotion. The right side of the perforation 81 is a download ticket 80B provided after the purchase of the moving image.

サンプル写真80Aには、画像選択装置3により選択された静止画データ(代表静止画データ64)が画像印刷されており、この画像の下にはパスコード72が印刷されている。パスコード72はダウンロードサイト8へアクセスする際に入力する認証コードである。ダウンロード用チケット80Bには、動画のダウンロード手順を説明する文章とともに、ダウンロードサイト8へのアドレス情報71がQRコード(登録商標)の形態で印刷されている。   In the sample photo 80A, still image data (representative still image data 64) selected by the image selection device 3 is image printed, and a pass code 72 is printed under the image. The pass code 72 is an authentication code input when accessing the download site 8. In the download ticket 80B, address information 71 to the download site 8 is printed in the form of a QR code (registered trademark) together with a sentence explaining the download procedure of the moving image.

アトクラションのスタッフ等は、ミシン目81上にサンプル写真80Aとダウンロード用チケット80Bを切り離し、アトクラションを終えた来場者にサンプル写真80Aを無償で提供する。   The attention staff etc. separate the sample photo 80A and the download ticket 80B on the perforation 81 and provide the sample photo 80A free of charge to the visitor who has finished the attraction.

アトラクションを終えた来場者(またはその家族や友人など)がサンプル写真80を見て、動画の購入を決めた場合には、サンプル写真80Aをアトクラションのスタッフ等に提示し、動画の購入代金と引き換えに、ダウンロード用チケット80Bを受け取ることができる。   If the visitor who finished the attraction (or his family or friends, etc.) sees the sample photo 80 and decides to purchase the video, the sample photo 80A is presented to the staff of the attraction, etc., and is exchanged for the purchase price of the video. , The download ticket 80B can be received.

なお、図4に示すように、サンプル写真80Aとダウンロート用チケット80Bの用紙のそれぞれには、サンプル写真80Aとダウンロート用チケット80Bとのセットを識別する同一の識別番号83(「0004」)が印刷されている。この識別番号83によって、サンプル写真80Aとダウンロート用チケット80Bとを照合させることができるので、アトクラションのスタッフ等が、誤って別のダウンロート用チケットを購入者に提供してしまうようなことを防ぐことができる。   In addition, as shown in FIG. 4, the same identification number 83 ("0004") for identifying the set of the sample photo 80A and the download ticket 80B in each of the sample photo 80A and the sheet for the download ticket 80B. Is printed. This identification number 83 makes it possible to collate the sample photo 80A with the download ticket 80B, so that attention staff etc. accidentally provide another download ticket to the purchaser. It can prevent.

(ユーザ端末7)
ユーザ端末7は、ダウンロード用チケット80Bを購入した購入者が保有するスマートフォンなどの情報端末である。ダウンロード用チケット80Bに印刷されたアドレス情報71(QRコード(登録商標))をユーザ端末7に読込ませることで、ダウンロードサイト8へアクセスし、撮影された動画をダウンロードして閲覧することができる。動画のダウンロード処理については後述する(図11)。
(User terminal 7)
The user terminal 7 is an information terminal such as a smartphone held by a purchaser who has purchased the download ticket 80B. By causing the user terminal 7 to read the address information 71 (QR code (registered trademark)) printed on the download ticket 80B, the download site 8 can be accessed, and the captured moving image can be downloaded and viewed. The video download process will be described later (FIG. 11).

(ストレージ100)
図4は、ストレージ100に記憶される画像データ60の内容を示す図である。画像データ60は、撮影ID61と紐づけて、動画データ62、静止画データ63、代表静止画データ64の各画像データを記憶する。
(Storage 100)
FIG. 4 is a diagram showing the contents of the image data 60 stored in the storage 100. As shown in FIG. The image data 60 is associated with the shooting ID 61, and stores image data of the moving image data 62, the still image data 63, and the representative still image data 64.

撮影ID61は、カメラ2により撮影された動画を一意に識別する識別情報である。動画データ62は、カメラ2により撮影された動画のデータである。静止画データ63は、カメラ2により撮影された動画から切り出された複数のタイミングにおける静止画のデータである。代表静止画データ64は、静止画データ63の中から画像選択装置3により選択された静止画のデータである。   The shooting ID 61 is identification information that uniquely identifies a moving image shot by the camera 2. The moving image data 62 is data of a moving image captured by the camera 2. The still image data 63 is data of still images at a plurality of timings cut out from the moving image captured by the camera 2. The representative still image data 64 is data of a still image selected from the still image data 63 by the image selection device 3.

以上、動画提供システム1の各構成について説明した。
次に、図7〜図14を参照して、動画提供システム1が実行する各処理について説明する。
In the above, each structure of the moving image providing system 1 has been described.
Next, each process which the moving image providing system 1 executes will be described with reference to FIGS. 7 to 14.

(撮影処理)
まず、図7を参照して、アトラクション(ジェットコースター)を体験中の来場者(被写体)の様子を動画で撮影する処理(撮影処理)について説明する。まず、ジェットコースターの車両9に来場者10が搭乗し、車両9の走行が開始すると、ジェットコースターのレール上に設置されたセンサ20は車両9の車輪の通過の検知を開始する(ステップS1)。
(Shooting process)
First, with reference to FIG. 7, a process (shooting process) of shooting a state of a visitor (subject) during an experience of an attraction (a roller coaster) with a moving image will be described. First, when the visitor 10 rides on the roller coaster vehicle 9 and travel of the vehicle 9 starts, the sensor 20 installed on the roller coaster rail starts detection of the passage of the wheel of the vehicle 9 (step S1). .

そして、センサ20が車両9の車輪の通過を検知すると(ステップS1;Yes)、センサ信号がカメラ2に送られ、カメラ2は、センサ信号を受けたタイミングをトリガとして、動画の撮影を開始する(ステップS2)。   Then, when the sensor 20 detects the passage of the wheel of the vehicle 9 (step S1; Yes), the sensor signal is sent to the camera 2, and the camera 2 starts shooting of a moving image triggered by the timing of receiving the sensor signal. (Step S2).

また、動画を撮影している間、カメラ2は、動画の撮影を開始してから所定時間おきに撮影中の動画から静止画を切り出して出力する(ステップS3)。これにより、動画から複数のタイミングにおける静止画が出力される。例えば、5秒間の動画を撮影した場合において、1秒間隔で静止画を出力した場合には、5枚の静止画が出力される。   In addition, while shooting a moving image, the camera 2 cuts out and outputs a still image from the moving image being captured at predetermined time intervals after the start of shooting of the moving image (step S3). Thereby, still images at a plurality of timings are output from the moving image. For example, in the case of shooting a 5-second moving image, when still images are output at one second intervals, five still images are output.

動画の撮影が終了すると(ステップS4)、カメラ2は、当該撮影を一意に識別する撮影IDを発行し、撮影IDと撮影した動画と動画から切り出された静止画をストレージ100に送り、ストレージ100に保存して撮影処理を終了する(ステップS5)。   When the video shooting ends (step S4), the camera 2 issues a shooting ID that uniquely identifies the shooting, sends the shooting ID, the shot video, and the still image cut out from the video to the storage 100. And the photographing process is finished (step S5).

例えば、図5に示すように、発行した撮影ID61(「20170901_001」)と紐づけて、撮影された動画のデータ(動画データ62=「・・・/movie01」)と、動画から切り出された3枚の静止画のデータ(静止画データ63−1=「・・・/photo01」、静止画データ63−2=「・・・/photo02」、静止画データ63−3=「・・・/photo03」)がストレージ100に保存される。   For example, as shown in FIG. 5, data of a captured moving image (moving image data 62 = “... / Movie01”) and 3 extracted from the moving image in association with the issued photographing ID 61 (“20170901_001”) Still image data of a sheet (still image data 63-1 = “... / Photo 01”, still image data 63-2 = “.. ./Photo 02”, still image data 63-3 = “. “) Is stored in the storage 100.

(画像選択処理)
次に、図8、9を参照して、画像選択装置3が動画の販促用として無償提供する静止画を選択する処理(画像選択処理)について説明する。
(Image selection process)
Next, with reference to FIGS. 8 and 9, a process (image selection process) of selecting a still image to be provided free of charge for sales promotion of a moving image by the image selection device 3 will be described.

画像選択装置3は、カメラ2による撮影が終了すると、当該撮影の撮影ID61に紐づく全ての静止画データ63をストレージ100から取得する(ステップS11)。ここでは、図5のストレージ100(画像データ60)から撮影ID61「1」に紐づく3枚の静止画データ63(63−1、63−2、63−3)が取得されたものとする。   When the photographing by the camera 2 is completed, the image selection device 3 acquires all still image data 63 linked to the photographing ID 61 of the photographing from the storage 100 (step S11). Here, it is assumed that three still image data 63 (63-1, 63-2, 63-3) linked to the shooting ID 61 “1” are acquired from the storage 100 (image data 60) of FIG.

続いて、画像選択装置3は、取得した静止画データ63(63−1、63−2、63−3)ごとに、公知の顔画像認識技術を用いて、画像内に映る各被写体の表情を認識し、笑顔度を評価する(ステップS12)。笑顔度は、画像内の各被写体のレイティング結果から評価可能であり、例えば、各被写体のレイティング点数の平均値を笑顔度として評価する。   Subsequently, the image selection device 3 uses the known face image recognition technology for each of the acquired still image data 63 (63-1, 63-2, 63-3) to express the expression of each subject in the image. Recognize and evaluate the degree of smile (step S12). The degree of smile can be evaluated from the rating result of each subject in the image. For example, the average value of the rating points of each subject is evaluated as the degree of smile.

図9は、評価された笑顔度の例を示す図である。図の例では、静止画データ63−1の笑顔度は「5」、静止画データ63−2の笑顔度は「20」、静止画データ63−3の笑顔度は「80」、のように笑顔度が評価されている。   FIG. 9 is a diagram showing an example of the evaluated degree of smile. In the example of the figure, the degree of smile of the still image data 63-1 is "5", the degree of smile of the still image data 63-2 is "20", and the degree of smile of the still image data 63-3 is "80". The degree of smile is evaluated.

そして、画像選択装置3は、笑顔度が最も高い静止画データ63を、動画の販促用に無償提供する画像として選択する(ステップS13)。例えば図9の例では、最も笑顔度が高い静止画データ63−3が選択される。   Then, the image selection device 3 selects the still image data 63 having the highest degree of smile as an image to be provided free of charge for sales promotion of a moving image (step S13). For example, in the example of FIG. 9, the still image data 63-3 with the highest degree of smile is selected.

画像選択装置3は、選択した静止画データをストレージ100(画像データ60)の代表静止画データ64(図5参照)に記録して処理を終了する。図5の例では、代表静止画データ64に、ステップS13において選択された静止画データ63−3のファイル(「・・・/photo03」)が記録される。   The image selection device 3 records the selected still image data in the representative still image data 64 (see FIG. 5) of the storage 100 (image data 60), and ends the process. In the example of FIG. 5, the file (“... / Photo 03”) of the still image data 63-3 selected in step S 13 is recorded in the representative still image data 64.

(プリント処理)
次に、図10、11を参照して、プリンタ4が印刷物80を出力する処理(プリント処理)について説明する。
まず、プリンタ4は、図5のストレージ100(画像データ60)を参照し、代表静止画データ64を取得する(ステップS11)。図5の場合、「・・・/photo03」の画像データが取得される。続いて、プリンタ4は、取得した代表静止画データ64に対し、縮小処理を施して、無償配布用に所定のサイズまで画像サイズを落とす(ステップS22)。
(Print processing)
Next, with reference to FIGS. 10 and 11, the process (print process) in which the printer 4 outputs the printed material 80 will be described.
First, the printer 4 refers to the storage 100 (image data 60) of FIG. 5 and acquires representative still image data 64 (step S11). In the case of FIG. 5, the image data of “... / Photo 03” is acquired. Subsequently, the printer 4 performs reduction processing on the acquired representative still image data 64 to reduce the image size to a predetermined size for free distribution (step S22).

次に、プリンタ4は、代表静止画データ64とともに印刷物80に印刷するアドレス情報71とパスコード72を生成する(ステップS23)。生成したアドレス情報71とパスコード72は、図6のダウンロード情報70に示すように、撮影ID61と紐づけてストレージ100や他の記憶領域において管理される。そして、プリンタ4は、所定の用紙に、縮小処理が施された代表静止画データ64とアドレス情報71とパスコード72を印刷し、印刷物80を出力する(ステップS24)。   Next, the printer 4 generates address information 71 and a pass code 72 to be printed on the printed matter 80 together with the representative still image data 64 (step S23). The generated address information 71 and the pass code 72 are managed in the storage 100 or another storage area in association with the photographing ID 61 as shown in the download information 70 of FIG. Then, the printer 4 prints the representative still image data 64 subjected to reduction processing, the address information 71, and the pass code 72 on a predetermined sheet, and outputs the printed matter 80 (step S24).

本実施の形態では、所定の用紙とは、2つに切り離すことが可能なミシン目を有するキャリー用紙であり、プリンタ4は、ミシン目を境界として用紙の一方側に代表静止画データ64とパスコード72を印刷し、ミシン目を境界として用紙の他方側にアドレス情報71をQRコード(登録商標)の形態で印刷する。また、プリンタ4は、用紙の一方側と他方側の双方に同一の識別番号83を印刷する。これにより、図4に示すような印刷物80が出来上がる。図4に示すように、印刷物80のうち、ミシン目81を境界として左側が、無償提供するサンプル写真80Aとなり、ミシン目81を境界として右側が動画購入後に提供されるダウンロード用チケット80Bとなる。サンプル写真80Aは、アトラクションを終えた来場者に無償で提供され、ダウンロード用チケット80Bは、購入代金と引き換えに有償で提供される。   In the present embodiment, the predetermined sheet is a carry sheet having a perforation which can be separated into two, and the printer 4 passes representative still image data 64 and a pass on one side of the sheet with the perforation as a boundary. The code 72 is printed, and the address information 71 is printed in the form of QR code (registered trademark) on the other side of the sheet with the perforation as a boundary. Also, the printer 4 prints the same identification number 83 on both the one side and the other side of the sheet. Thereby, the printed matter 80 as shown in FIG. 4 is completed. As shown in FIG. 4, in the printed product 80, the left side of the printed matter 80 is a sample picture 80A provided free of charge, and the right side is a download ticket 80B provided after the purchase of the moving picture. The sample photo 80A is provided free of charge to visitors who have finished the attraction, and the download ticket 80B is provided for a fee in exchange for the purchase price.

なお、ステップS24において印刷する代表静止画データ64の画像範囲は、被写体が写っている範囲で任意に設定可能である。例えば、代表静止画データ64の全画像範囲を印刷してもよいし、被写体が写っている画像部分だけを切り出して印刷してもよい(後者の場合、被写体にズームアップしたような写真が得られる)。図4は、代表静止画データ64の中から被写体がメインに写る画像範囲を切り出して印刷した例を示している。   Note that the image range of the representative still image data 64 to be printed in step S24 can be arbitrarily set within the range in which the subject is shown. For example, the entire image range of representative still image data 64 may be printed, or only the image portion in which the subject is shown may be cut out and printed (in the latter case, a photograph such as a zoomed-in subject is obtained). ). FIG. 4 shows an example in which an image range in which a subject appears in the main from the representative still image data 64 is cut out and printed.

(ダウンロード処理)
次に、図12を参照して、ダウンロード用チケット80Bの購入者が保有するユーザ端末7を用いて、ダウンロードサイト8から動画をダウンロードする処理(ダウンロード処理)について説明する。
(Download process)
Next, with reference to FIG. 12, a process (downloading process) of downloading a moving image from the download site 8 using the user terminal 7 owned by the purchaser of the download ticket 80B will be described.

ここでは、図4のダウンロード用チケット80Bを用いて、図5の撮影ID61(「20170901_001」)に紐づく動画データ62をダウンロードする場合を説明する。なおこの動画データ62は、ダウンロード用チケット80BにQRコード(登録商標)の形態で印刷された図6のアドレス情報71(「https://AAA・・・」)によって指定されるダウンロードサイト8にアップロードされているものとする。また、動画データ62だけでなく、動画データ62から切り出された複数の静止画データ63(63−1、63−2、63−3)がダウンロードサイト8にアップロードされていてもよい。ダウンロードサイト8は認証が必要なWebサイトであり、サンプル写真80Aに印刷されたパスコード72によって認証を行うものとする。   Here, the case of downloading the moving image data 62 linked to the shooting ID 61 (“20170901_001”) of FIG. 5 using the download ticket 80B of FIG. 4 will be described. The moving image data 62 is a download site 8 specified by the address information 71 ("https: // AAA ...") of FIG. 6 printed in the form of QR code (registered trademark) on the download ticket 80B. It shall be uploaded. In addition to the moving image data 62, a plurality of still image data 63 (63-1, 63-2, 63-3) cut out from the moving image data 62 may be uploaded to the download site 8. The download site 8 is a website that requires authentication, and authentication is performed by the pass code 72 printed on the sample photo 80A.

まず、購入者は、ダウンロード用チケット80Bのアドレス情報71(QRコード(登録商標))をユーザ端末7に読み取らせて(ステップS42)、ダウンロードサイト8へアクセスする(ステップS42)。ダウンロードサイト8へアクセスすると、ユーザ端末7にパスコード入力画面(不図示)が表示され、購入者は、パスコードを入力する。ダウンロードサイト8においてパスコードが正しく認証されると、ユーザ端末7にダウンロード画面(不図示)が表示され、動画データ62をダウンロードして閲覧することが可能となる。   First, the purchaser causes the user terminal 7 to read the address information 71 (QR code (registered trademark)) of the download ticket 80B (step S42), and accesses the download site 8 (step S42). When the download site 8 is accessed, a pass code input screen (not shown) is displayed on the user terminal 7, and the purchaser inputs the pass code. When the pass code is correctly authenticated at the download site 8, a download screen (not shown) is displayed on the user terminal 7, and the moving image data 62 can be downloaded and viewed.

また、ダウンロードサイト8に動画データ62だけでなく、静止画データ63もアップロードされている場合には、購入者は、静止画データ63をダウンロードすることもできる。この静止画データ63はサンプル写真80Aのように縮小処理が施されてはいないため、高画質な画像として閲覧することができる。また、ダウンロードサイト8には、動画から切り出された全ての静止画データ63(63−1、63−2、63−3)がアップロードされているので、サンプル写真80Aとは別のタイミングの静止画データ63をダウンロードして閲覧することも可能となる。   Further, when not only the moving image data 62 but also the still image data 63 is uploaded to the download site 8, the purchaser can also download the still image data 63. Since the still image data 63 is not subjected to reduction processing as in the sample photograph 80A, it can be viewed as a high quality image. In addition, since all still image data 63 (63-1, 63-2, 63-3) cut out from the moving image are uploaded to the download site 8, a still image of a timing different from that of the sample photo 80A It is also possible to download and view the data 63.

以上、本発明の第1の実施形態について説明した。本実施の形態によれば、画像選択装置3が、遊園地などのアトラクション(ジェットコースター)を体験中の来場者(被写体)を撮影した動画から切り出された複数のタイミングにおける静止画を取得し、静止画ごとに、静止画に映る人物の笑顔度を評価し、笑顔度が高い静止画を販促用の画像として選択する。これにより、アトラクションなどで撮影された動画を販売するサービスにおいて、動画の販促用の静止画(写真)を好適に選択することが可能となる。   The first embodiment of the present invention has been described above. According to the present embodiment, the image selection device 3 acquires still images at a plurality of timings cut out from a moving image obtained by photographing a visitor (subject) who is experiencing an attraction (a roller coaster) such as an amusement park. For each still image, the degree of smile of the person appearing in the still image is evaluated, and the still image with a high degree of smile is selected as the image for sales promotion. This makes it possible to suitably select a still image (photograph) for sales promotion of a moving image in a service that sells moving images shot at an attraction or the like.

また、選択された静止画はプリンタ4により印刷され、サンプル写真80Aとしてアトクラションを体験した来場者に無償提供されるので、記念や思い出として残すことができる。特に、被写体の写りの状態が良いタイミングの写真がサンプル写真80Aとして提供されるので、サンプル写真80Aを見た来場者等の動画への購入意欲が高まることが期待される。   Also, the selected still image is printed by the printer 4 and provided free of charge to the visitors who have experienced the attic as the sample photo 80A, so that it can be left as a memorial or memory. In particular, since a photograph at a timing when the state of the subject's reflection is good is provided as the sample photograph 80A, it is expected that the willingness of the visitor etc. who has seen the sample photograph 80A to purchase to a moving image is increased.

[第2の実施形態]
次に、本発明の第2の実施形態について説明する。第2の実施形態は、画像選択装置の構成が異なる。その他の構成は、第1の実施形態と同様である。
図12は、第2の実施形態における画像選択装置3Aのハードウェア構成である。第1の実施形態と異なり、表示部34を備える。表示部34は、例えば、表示画面上で入力操作が可能なタッチパネルディスプレイである。
Second Embodiment
Next, a second embodiment of the present invention will be described. The second embodiment differs in the configuration of the image selection apparatus. The other configuration is the same as that of the first embodiment.
FIG. 12 shows a hardware configuration of the image selection device 3A in the second embodiment. Unlike the first embodiment, the display unit 34 is provided. The display unit 34 is, for example, a touch panel display on which an input operation can be performed on a display screen.

第2の実施形態では、画像選択装置3Aは、例えばアトクラションの出口付近に設置され、表示部34に動画から切り出された全ての静止画を表示し、アトラクションを終えた来場者から静止画の選択を受け付ける。そして、来場者が自ら選択した画像がサンプル写真80Aに印刷される。   In the second embodiment, the image selection device 3A is installed, for example, in the vicinity of the exit of the attraction, displays all still images cut out from the moving image on the display unit 34, and selects still images from the visitors who finished the attraction. Accept Then, the image selected by the visitor is printed on the sample photo 80A.

図13は、画像選択装置3Aが動画の販促用として無償提供する画像(静止画)を選択する処理(画像選択処理)である。
第1の実施形態と同様に、画像選択装置3Aは、カメラ2による撮影が終了すると、当該撮影ID61に紐づく全ての静止画データ63をストレージ100から取得する(ステップS51)。ここでは、図5のストレージ100(画像データ60)から撮影ID61「1」に紐づく3枚の静止画データ63(63−1、63−2、63−3)が取得されたものとする。
FIG. 13 is a process (image selection process) of selecting an image (still image) to be provided free of charge for sales promotion of a moving image by the image selection device 3A.
As in the first embodiment, when the photographing by the camera 2 is completed, the image selection device 3A acquires all still image data 63 linked to the photographing ID 61 from the storage 100 (step S51). Here, it is assumed that three still image data 63 (63-1, 63-2, 63-3) linked to the shooting ID 61 “1” are acquired from the storage 100 (image data 60) of FIG.

続いて、画像選択装置3Aは、取得した静止画データ63(63−1、63−2、63−3)を表示部34に一覧表示し、アトラクションを終えた来場者から画像の選択を受け付ける(ステップS52)。
図14は、画像の選択を受け付ける表示部34の画面例を示す図である。図に示すように、表示部36に3枚の静止画データ63(63−1、63−2、63−3)が一覧表示され、来場者は自身の好きな画像を選択することができる。図の例では、来場者が静止画データ63−1の画像を選択した場合を示している。
Subsequently, the image selection device 3A displays a list of the acquired still image data 63 (63-1, 63-2, 63-3) on the display unit 34, and receives an image selection from the visitor who finished the attraction ( Step S52).
FIG. 14 is a view showing an example of a screen of the display unit 34 that receives selection of an image. As shown in the figure, a list of three still image data 63 (63-1, 63-2, 63-3) is displayed on the display unit 36, and the visitor can select his / her favorite image. The example of the figure shows the case where the visitor selects the image of the still image data 63-1.

そして、画像選択装置3Aは、選択した静止画データ63をストレージ100(画像データ60)の代表静止画データ64(図5参照)に記録して処理を終了する。その他の処理(撮影処理(図7)、プリント処理(図10)、ダウンロード処理(図11))については、第1の実施形態と同様であるので記載を省略する。   Then, the image selection device 3A records the selected still image data 63 in the representative still image data 64 (see FIG. 5) of the storage 100 (image data 60), and ends the process. The other processes (the photographing process (FIG. 7), the print process (FIG. 10), and the download process (FIG. 11)) are the same as in the first embodiment, and thus the descriptions thereof will be omitted.

以上、第2の実施形態における画像選択処理について説明した。第2の実施形態によれば、画像選択装置3Aが、遊園地などのアトラクション(ジェットコースター)を体験中の来場者(被写体)を撮影した動画から切り出された複数のタイミングにおける静止画を表示部に表示し、アトクラションを終えた来場者から静止画の選択を受け付け、選択された静止画を動画販促用の画像として決定する。これにより、アトラクションなどで撮影された動画を販売するサービスにおいて、動画の販促用の静止画(写真)を好適に選択することが可能となる。特に、第2の実施形態では、来場者が自ら好きなタイミングの静止画を選択でき、サンプル写真80Aとして無償でもらうことができるので、来場者の満足度を高めることができる。これに伴い、動画購入への意欲が高まることが期待される。   The image selection process in the second embodiment has been described above. According to the second embodiment, the image selection device 3A displays still images at a plurality of timings cut out from a moving image obtained by photographing a visitor (subject) who is experiencing an attraction (a roller coaster) such as an amusement park. , And accepts the selection of a still image from a visitor who has finished at home, and determines the selected still image as an image for a video sales promotion. This makes it possible to suitably select a still image (photograph) for sales promotion of a moving image in a service that sells moving images shot at an attraction or the like. In particular, in the second embodiment, the visitor can select a still image at a timing he / she likes and can receive it as the sample photo 80A free of charge, so that the degree of satisfaction of the visitor can be increased. Along with this, it is expected that the motivation to buy video will increase.

以上、添付図面を参照しながら、本発明に係る好適な実施形態について説明したが、本発明はかかる例に限定されない。   As mentioned above, although the suitable embodiment concerning the present invention was described, referring to an accompanying drawing, the present invention is not limited to this example.

例えば、本実施の形態では、遊園地などに設置されたジェットコースターを体験した来場者を撮影した動画を販売する動画撮影販売サービスにおいて、本発明を適用した例について説明したが、お化け屋敷、観覧車、メリーゴーランドなどの他のアトクラションを体験する様子を撮影した動画を販売する動画撮影販売サービスにおいて、本発明を適用することもできる。また、キャラクターとのツーショット動画撮影販売サービス、観光スポットでの動画撮影販売サービス、結婚記念の動画撮影販売サービス、学校の卒業記念の動画撮影販売サービスなど、様々な場面で本発明を適用することができる。   For example, in the present embodiment, an example in which the present invention is applied to a movie shooting and selling service for selling a movie of shooting visitors who experienced a roller coaster installed in an amusement park or the like has been described. The present invention can also be applied to a moving picture shooting and selling service for selling moving pictures obtained by shooting a car, other atrium such as merry go land. In addition, the present invention can be applied in various situations such as a two-shot movie shooting and selling service with characters, a movie shooting and selling service at a tourist spot, a movie shooting and selling service of marriage commemoration, and a movie shooting and sale service of graduation of school. it can.

また、本実施の形態では、カメラ2が動画を撮影と静止画の切り出しを同時に行う例を説明したが(図6参照)、静止画の切り出しは、動画の撮影の終了後に行ってもよい。また、本実施の形態では、カメラ2が静止画を切り出して出力する例を説明したが、静止画を切り出す主体はカメラ2でなくてもよい。例えば、カメラ2は動画だけを撮影してストレージ100に保存し、画像選択装置3がストレージ100に保存された動画を取得し、この動画から複数の静止画を切り出してもよい。   Further, in the present embodiment, an example has been described in which the camera 2 simultaneously shoots a moving image and cuts out a still image (see FIG. 6), but the still image may be cut out after the end of shooting of a moving image. Further, although an example in which the camera 2 cuts out and outputs a still image has been described in the present embodiment, the main body from which the still image is cut out may not be the camera 2. For example, the camera 2 may capture only the moving image and store it in the storage 100, the image selection device 3 may obtain the moving image stored in the storage 100, and cut out a plurality of still images from this moving image.

また、本実施の形態では、ジェットコースターの車両の通過を検知するセンサ20の信号をトリガとして、カメラ2の撮影を開始する例を説明したが、撮影の開始のタイミングはこの例に限定されない。例えば、カメラ2の撮影ポタンを手動で押下することで撮影を開始してもよいし、画像認識技術によりジェットコースターがカメラ2の撮影視野内に入ったこと検知したタイミングで撮影を開始してもよいし、音センサにより所定の音量レベルを超えるとジェットコースターが撮影ポイントに近づいてきたものと判断し、撮影を開始してもよい。   Moreover, although the example which starts imaging | photography of the camera 2 by using as a trigger the signal of the sensor 20 which detects passage of the vehicle of a roller coaster was demonstrated in this Embodiment, the timing of the start of imaging | photography is not limited to this example. For example, shooting may be started by manually pressing the shooting position of the camera 2 or shooting may be started at the timing when it is detected that the roller coaster has come within the shooting field of the camera 2 by image recognition technology. Alternatively, if the sound sensor exceeds a predetermined volume level, it may be determined that the roller coaster has approached the shooting point, and shooting may be started.

また、本実施の形態では、画像選択処理(図9)において、被写体の笑顔度を評価しているが、どのような基準により被写体を評価するかは任意である。例えば、公知の顔画像認識技術により、画像内に映る各被写体の黒目を検出し、黒目の検出数によって、被写体の目の開閉度を評価するようにしてもよい。このように被写体を評価すれば、被写体がしっかりと目を開いているタイミングの写真が選ばれやすくなる。   Further, in the present embodiment, the degree of smile of the subject is evaluated in the image selection process (FIG. 9), but it is optional whether the subject is evaluated based on what kind of criteria. For example, black eyes of each subject appearing in the image may be detected by a known face image recognition technology, and the degree of opening and closing of the eyes of the subject may be evaluated based on the number of detected black eyes. If the subject is evaluated in this manner, it is easy to select a picture of the timing when the subject is firmly opening eyes.

また、公知の顔画像認識技術により各被写体の顔の向きを認識し、被写体が所定の方向を向いているかどうかを基準に評価してもよい。例えば、正面方向を向いている被写体の人数を評価値とすれば、被写体全員の顔が良く見えるタイミングの写真が選ばれやすくなる。   Alternatively, the face direction of each subject may be recognized by a known face image recognition technology, and evaluation may be made based on whether the subject is facing a predetermined direction. For example, if the number of subjects facing in the front direction is used as the evaluation value, it is easy to select a picture of a timing at which the faces of all subjects can be seen well.

また、被写体を評価する基準は、動画撮影販売サービス特有のものでもよい。例えば、観光スポットでの動画撮影販売サービスにおいて、観光スポットで流行っている定番のポーズがあるとする。この場合、公知の画像認識技術により、被写体のポーズを認識し、予め決められたポーズ(観光スポットで流行っているポーズ)との類似度を評価し、類似度が最も高いタイミング(ポーズが上手く決まったタイミング)の写真を販促用として提供することができる。また、キャラクターとのツーショット動画撮影販売サービスにおいて、キャラクターの決めポーズがあるとする。この場合も、公知の画像認識技術により、被写体のポーズを認識し、予め決められたポーズ(キャラクターの決めポーズ)との類似度を評価し、類似度が最も高いタイミングの写真を販促用として提供することができる。   The criteria for evaluating the subject may be unique to the video shooting and sales service. For example, in a video shooting and sales service at a tourist spot, it is assumed that there is a standard pose popular in the tourist spot. In this case, the pose of the subject is recognized by a known image recognition technology, and the degree of similarity with a predetermined pose (a pose prevailing at a tourist spot) is evaluated, and the timing with the highest degree of similarity (pose determined well) Can be provided for promotional purposes. In addition, it is assumed that there is a decided pose of a character in a two-shot video shooting and sales service with the character. Also in this case, the image recognition technology of the known art recognizes the pose of the subject, evaluates the similarity with the predetermined pose (characterized pose), and provides the photograph of the timing with the highest similarity as a sales promotion. can do.

また、本実施の形態では、印刷物80(紙媒体)による出力の例を説明したが、出力の形態は紙媒体に限定されない。例えば、プリンタ4が通信制御部を備え、アトラクションの来場者が保有するスマートフォンなどの情報端末との間で通信接続を行い、代表静止画データ64とアドレス情報71を情報端末にデータ出力するようにしてもよい。   Moreover, although the example of the output by printed matter 80 (paper medium) was demonstrated in this Embodiment, the form of an output is not limited to a paper medium. For example, the printer 4 includes a communication control unit, establishes communication connection with an information terminal such as a smartphone owned by a visitor of the attraction, and outputs representative still image data 64 and address information 71 to the information terminal. May be

また、本実施の形態では、プリンタ4は、サンプル写真80Aとダウンロード用チケット80Bの双方を1つの印刷物80で出力する例を説明したが、サンプル写真80Aとダウンロード用チケット80Bは別々に出力してもよい。例えば、プリンタ4はサンプル写真80Aのみを出力するだけとし、別の場所に設置された発券装置によってダウンロード用チケット80Bを出力するように構成してもよい。   Further, in the present embodiment, an example has been described in which the printer 4 outputs both the sample photo 80A and the download ticket 80B as one printed material 80, but the sample photo 80A and the download ticket 80B are separately output It is also good. For example, the printer 4 may output only the sample photo 80A, and may output the download ticket 80B by a ticket issuing apparatus installed at another place.

また、本実施の形態では、販促用の写真をアトラクションの来場者に無償で提供する例を説明したが、販促用の写真を来場者に提示するだけ(見せるだけ)でもよい。この場合の販促用の写真は、無償提供用に画像サイズを落とした縮小写真ではなく、例えば2PCなどのサイズで高画質プリントされた写真とするのが望ましい。このように販促用の写真を来場者に提示するだけでも十分な販促効果が期待できる。   Further, in the present embodiment, an example in which a promotional photograph is provided free of charge to the visitors of the attraction has been described, but it may be only to show (show only) the promotional photographs to the visitors. In this case, it is desirable that the sales promotion photograph is not a downsized photograph whose image size has been reduced for free provision, but a photograph printed in high quality with a size such as 2PC, for example. In this way, just presenting the promotional photos to the visitors can be expected to have a sufficient promotional effect.

その他、当業者であれば、本願で開示した技術的思想の範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。   In addition, it is obvious that those skilled in the art can conceive of various modifications or alterations within the scope of the technical idea disclosed in the present application, and they naturally belong to the technical scope of the present invention. It is understood that.

1………動画提供システム
2………カメラ
3………画像選択装置
4………プリンタ
7………ユーザ端末
8………ダウンロードサイト
9………ジェットコースターの車両
10………アトラクションの来場者(被写体)
31………制御部
32………記憶部
33………通信制御部
34………表示部
60………画像データ
61………撮影ID
62………動画データ
63………静止画データ
64………代表静止画データ
70………ダウンロード情報
71………アドレス情報
72………パスコード
80………印刷物
80A………サンプル写真
80B………ダウンロード用チケット
100………ストレージ
DESCRIPTION OF SYMBOLS 1 ...... Video provision system 2 ...... Camera 3 ...... Image selection apparatus 4 ...... Printer 7 ...... User terminal 8 ...... Download site 9 ...... Vehicle of a roller coaster 10 ...... At the attraction Visitors (subject)
31 ... Control unit 32 ... ... Storage unit 33 ... ... Communication control unit 34 ... ... Display unit 60 ... ... Image data 61 ... ... Shooting ID
62 ...... Video data 63 ...... Still image data 64 ...... Representative still image data 70 ...... Download information 71 ...... Address information 72 ...... Pass code 80 ...... Printed matter 80 A ...... Sample photo 80B ..... Download ticket 100 ..... Storage

Claims (16)

1又は複数の人物を撮影した動画から切り出された複数のタイミングにおける静止画を取得する取得手段と、
前記静止画ごとに、当該静止画に映る前記人物を所定の基準で評価する評価手段と、
評価結果に基づいて、前記動画の販促用として提供または提示する前記静止画を選択する選択手段と、を備えることを特徴とする画像選択装置。
Acquisition means for acquiring still images at a plurality of timings cut out from a moving image obtained by photographing one or a plurality of persons;
An evaluation unit that evaluates the person shown in the still image for each of the still images according to a predetermined standard;
An image selection apparatus comprising: selection means for selecting the still image to be provided or presented as a sales promotion of the moving image based on the evaluation result.
前記評価手段は、前記人物の笑顔度を評価することを特徴とする請求項1に記載の画像選択装置。   The image selection apparatus according to claim 1, wherein the evaluation unit evaluates the degree of smile of the person. 前記評価手段は、前記人物の目の開閉を評価することを特徴とする請求項1に記載の画像選択装置。   The image selection apparatus according to claim 1, wherein the evaluation unit evaluates the opening and closing of the eyes of the person. 前記評価手段は、前記人物のポーズを評価することを特徴とする請求項1に記載の画像選択装置。   The image selection apparatus according to claim 1, wherein the evaluation unit evaluates the pose of the person. 1又は複数の人物を撮影した動画から切り出された複数のタイミングにおける静止画を取得する取得手段と、
複数の前記静止画を表示し、前記動画の販促用として提供または提示する前記静止画の選択を受け付ける選択手段と、を備えることを特徴とする画像選択装置。
Acquisition means for acquiring still images at a plurality of timings cut out from a moving image obtained by photographing one or a plurality of persons;
An image selection apparatus comprising: selection means for displaying a plurality of the still images and receiving a selection of the still images to be provided or presented as a sales promotion of the moving image.
請求項1から請求項5のいずれかに記載の画像選択装置により選択された静止画を出力する出力手段、を備えることを特徴とする画像出力装置。   An image output apparatus comprising: output means for outputting a still image selected by the image selection apparatus according to any one of claims 1 to 5. 前記出力手段は、選択された前記静止画の画像サイズを所定のサイズまで小さくして出力することを特徴とする請求項6に記載の画像出力装置。   7. The image output apparatus according to claim 6, wherein the output unit reduces the image size of the selected still image to a predetermined size and outputs the image. 前記出力手段は、更に、前記動画の提供を受けるために必要となる情報を出力することを特徴とする請求項6または請求項7に記載の画像出力装置。   The image output apparatus according to claim 6, wherein the output unit further outputs information required to receive the provision of the moving image. 前記出力手段は、所定の用紙に印刷して出力することを特徴とする請求項6から請求項8のいずれかに記載の画像出力装置。   The image output apparatus according to any one of claims 6 to 8, wherein the output unit prints and outputs on a predetermined sheet. 前記用紙は、2つに切り離し可能な用紙であり、
前記出力手段は、切り離される一方側に前記静止画を印刷し、他方側に動画の提供を受けるために必要となる情報を印刷することを特徴とする請求項9に記載の画像出力装置。
The sheet is a sheet that can be separated into two,
10. The image output apparatus according to claim 9, wherein the output unit prints the still image on one side to be separated, and prints information necessary to receive provision of a moving image on the other side.
前記出力手段は、前記一方側と前記他方側の用紙のそれぞれに、同一の識別情報を印刷することを特徴とする請求項10に記載の画像出力装置。   The image output apparatus according to claim 10, wherein the output unit prints the same identification information on each of the sheets on the one side and the other side. 1又は複数の人物を撮影した動画から切り出された複数のタイミングにおける静止画を取得する取得ステップと、
前記静止画ごとに、当該静止画に映る前記人物を所定の基準で評価する評価ステップと、
評価結果に基づいて、前記動画の販促用として提供または提示する前記静止画を選択する選択ステップと、を含むことを特徴とする画像選択方法。
An acquiring step of acquiring still images at a plurality of timings cut out from a moving image obtained by photographing one or a plurality of persons;
An evaluation step of evaluating the person appearing in the still image for each of the still images according to a predetermined standard;
And d) selecting the still image to be provided or presented for promotion of the moving image based on the evaluation result.
1又は複数の人物を撮影した動画から切り出された複数のタイミングにおける静止画を取得する取得ステップと、
複数の前記静止画を表示し、前記動画の販促用として提供または提示する前記静止画の選択を受け付ける選択ステップと、を含むことを特徴とする画像選択方法。
An acquiring step of acquiring still images at a plurality of timings cut out from a moving image obtained by photographing one or a plurality of persons;
A selection step of displaying a plurality of the still images and receiving a selection of the still images to be provided or presented as a sales promotion of the moving image.
請求項12または請求項13に記載の画像選択方法により選択された静止画を出力する出力ステップ、を含むことを特徴とする画像出力方法。   An image output method comprising: an output step of outputting a still image selected by the image selection method according to claim 12 or 13. 撮影装置と画像選択装置と画像出力装置とを備えた画像出力システムであって、
前記撮影装置は、
1又は複数の人物を動画で撮影する動画撮影手段と、を備え、
前記画像選択装置は、
前記動画から切り出された複数のタイミングにおける静止画を取得する取得手段と、
前記静止画ごとに、当該静止画に映る前記人物を所定の基準で評価する評価手段と、
評価結果に基づいて、前記動画の販促用として提供または提示する前記静止画を選択する選択手段と、を備え、
前記画像出力装置は、
選択された前記静止画を出力する出力手段と、を備えることを特徴とする画像出力システム。
An image output system comprising an imaging device, an image selection device, and an image output device,
The imaging device is
Video shooting means for shooting one or more persons as a video;
The image selection device
Acquisition means for acquiring still images at a plurality of timings cut out from the moving image;
An evaluation unit that evaluates the person shown in the still image for each of the still images according to a predetermined standard;
And a selection unit for selecting the still image to be provided or presented for promotion of the moving image based on the evaluation result.
The image output device is
And an output unit configured to output the selected still image.
撮影装置と画像選択装置と画像出力装置とを備えた画像出力システムであって、
前記撮影装置は、
1又は複数の人物を動画で撮影する動画撮影手段と、を備え、
前記画像選択装置は、
前記動画から切り出された複数のタイミングにおける静止画を取得する取得手段と、
複数の前記静止画を表示し、前記動画の販促用として提供または提示する前記静止画の選択を受け付ける選択手段と、を備え、
前記画像出力装置は、
選択された前記静止画を出力する出力手段と、を備えることを特徴とする画像出力システム。
An image output system comprising an imaging device, an image selection device, and an image output device,
The imaging device is
Video shooting means for shooting one or more persons as a video;
The image selection device
Acquisition means for acquiring still images at a plurality of timings cut out from the moving image;
Selecting means for displaying a plurality of the still images and receiving a selection of the still images to be provided or presented for promotion of the moving image;
The image output device is
And an output unit configured to output the selected still image.
JP2017189803A 2017-09-29 2017-09-29 Image output device Active JP7102700B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2017189803A JP7102700B2 (en) 2017-09-29 2017-09-29 Image output device
JP2022104411A JP7396399B2 (en) 2017-09-29 2022-06-29 Image output method and image output system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017189803A JP7102700B2 (en) 2017-09-29 2017-09-29 Image output device

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022104411A Division JP7396399B2 (en) 2017-09-29 2022-06-29 Image output method and image output system

Publications (2)

Publication Number Publication Date
JP2019068173A true JP2019068173A (en) 2019-04-25
JP7102700B2 JP7102700B2 (en) 2022-07-20

Family

ID=66340079

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2017189803A Active JP7102700B2 (en) 2017-09-29 2017-09-29 Image output device
JP2022104411A Active JP7396399B2 (en) 2017-09-29 2022-06-29 Image output method and image output system

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022104411A Active JP7396399B2 (en) 2017-09-29 2022-06-29 Image output method and image output system

Country Status (1)

Country Link
JP (2) JP7102700B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019071553A (en) * 2017-10-10 2019-05-09 大日本印刷株式会社 Image selection device, image output device, image selection method, image output method, and image output system

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7102700B2 (en) 2017-09-29 2022-07-20 大日本印刷株式会社 Image output device

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003169275A (en) * 2001-11-29 2003-06-13 Konica Corp Automatic photographing apparatus, print output and external terminal
JP2003348528A (en) * 2002-05-22 2003-12-05 Nippon Telegr & Teleph Corp <Ntt> Representative image selection method, representative image selection apparatus, representative image selection program and recording medium for representative image selection program
JP2005109555A (en) * 2003-09-26 2005-04-21 Casio Comput Co Ltd Image output apparatus, picture output method, and picture output processing program
JP2010118868A (en) * 2008-11-12 2010-05-27 Canon Inc Information processor and control method thereof
JP2011155605A (en) * 2010-01-28 2011-08-11 Nikon Corp Image processing device, imaging device, and image processing program
JP2013183255A (en) * 2012-03-01 2013-09-12 Dainippon Printing Co Ltd Image output system, image output method, image output reception terminal and program
JP2015139001A (en) * 2014-01-20 2015-07-30 キヤノン株式会社 Information processing device, information processing method and program

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003078804A (en) 2001-08-31 2003-03-14 National Institute Of Advanced Industrial & Technology Snapshot system
JP2005345632A (en) 2004-06-01 2005-12-15 Casio Comput Co Ltd Printing system
JP7102700B2 (en) 2017-09-29 2022-07-20 大日本印刷株式会社 Image output device

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003169275A (en) * 2001-11-29 2003-06-13 Konica Corp Automatic photographing apparatus, print output and external terminal
JP2003348528A (en) * 2002-05-22 2003-12-05 Nippon Telegr & Teleph Corp <Ntt> Representative image selection method, representative image selection apparatus, representative image selection program and recording medium for representative image selection program
JP2005109555A (en) * 2003-09-26 2005-04-21 Casio Comput Co Ltd Image output apparatus, picture output method, and picture output processing program
JP2010118868A (en) * 2008-11-12 2010-05-27 Canon Inc Information processor and control method thereof
JP2011155605A (en) * 2010-01-28 2011-08-11 Nikon Corp Image processing device, imaging device, and image processing program
JP2013183255A (en) * 2012-03-01 2013-09-12 Dainippon Printing Co Ltd Image output system, image output method, image output reception terminal and program
JP2015139001A (en) * 2014-01-20 2015-07-30 キヤノン株式会社 Information processing device, information processing method and program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019071553A (en) * 2017-10-10 2019-05-09 大日本印刷株式会社 Image selection device, image output device, image selection method, image output method, and image output system
JP7077572B2 (en) 2017-10-10 2022-05-31 大日本印刷株式会社 Image output device, image output method, and image output system

Also Published As

Publication number Publication date
JP7102700B2 (en) 2022-07-20
JP2022121584A (en) 2022-08-19
JP7396399B2 (en) 2023-12-12

Similar Documents

Publication Publication Date Title
JP7396399B2 (en) Image output method and image output system
US9270841B2 (en) Interactive image capture, marketing and distribution
JP5217922B2 (en) Electronic advertisement system, electronic advertisement distribution apparatus, and program
US10803438B2 (en) Reading apparatus
CN106600733A (en) Sign-in method and system based on face recognition
JP2015179221A (en) Picture-taking editing device, server, control program and recording medium
JP4708439B2 (en) Image browsing device, image browsing method, image browsing program, image browsing system
JP6369074B2 (en) PHOTOGRAPHIC EDITING DEVICE, SERVER, CONTROL PROGRAM, AND RECORDING MEDIUM
JP7077572B2 (en) Image output device, image output method, and image output system
JP6413271B2 (en) Information providing apparatus, image analysis system, information providing apparatus control method, image analysis method, control program, and recording medium
JP6776966B2 (en) Image providing system
US9270840B2 (en) Site image capture and marketing system and associated methods
US20220100366A1 (en) Freehand Memo Gift Authentication
JP6834663B2 (en) Order reception terminal and image provision system
JP7077075B2 (en) Online service system, online service provision method, content management device and computer program
JP6855773B2 (en) Image providing system
US20070291119A1 (en) Image compilation production system and method
US8463654B1 (en) Tour site image capture and marketing system and associated methods
JP7067121B2 (en) Image download system, user terminal, server, and image download method
JP7053996B2 (en) Image creation device, image providing system, and control method of image creation device
JP7059844B2 (en) Image management device and image management method
JP2016181901A (en) Image output system and image output method
JP2020013267A (en) Image management apparatus and image management method
JP2021190913A (en) Automatic imaging system, automatic imaging method, and program
JP6413273B2 (en) PHOTOGRAPHIC EDITING DEVICE, SERVER, PHOTOGRAPHIC EDITING DEVICE, SERVER CONTROL PROGRAM, AND RECORDING MEDIUM

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200730

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210525

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210716

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220118

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220607

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220620

R150 Certificate of patent or registration of utility model

Ref document number: 7102700

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150