JP2013115746A - Print control device, method and program - Google Patents

Print control device, method and program Download PDF

Info

Publication number
JP2013115746A
JP2013115746A JP2011262637A JP2011262637A JP2013115746A JP 2013115746 A JP2013115746 A JP 2013115746A JP 2011262637 A JP2011262637 A JP 2011262637A JP 2011262637 A JP2011262637 A JP 2011262637A JP 2013115746 A JP2013115746 A JP 2013115746A
Authority
JP
Japan
Prior art keywords
frames
frame
printing
control apparatus
moving image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011262637A
Other languages
Japanese (ja)
Other versions
JP5854800B2 (en
Inventor
Hitoshi Watanabe
等 渡邊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2011262637A priority Critical patent/JP5854800B2/en
Publication of JP2013115746A publication Critical patent/JP2013115746A/en
Application granted granted Critical
Publication of JP5854800B2 publication Critical patent/JP5854800B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Record Information Processing For Printing (AREA)

Abstract

PROBLEM TO BE SOLVED: To enable a plurality of portions of interest in a moving image to be printed in detail in consecutive frames of the moving image requiring only a few procedural steps.SOLUTION: The number of frames acquired from a moving image or an acquisition range of frames differs depending on the number of frames selected by a frame selection unit 108. When the selected number of frames is 0, the maximum number of frames which can be arranged on paper constitutes the number of frames to be acquired, and the entire moving image is made the acquisition range of frames. When the selected number of frames is 1, the maximum number of frames which can be arranged on paper constitutes the number of frames to be acquired, and consecutive frames preceding and following a selected frame are acquired. When the selected number of frames is 2 or greater, paper is divided in the vertical direction by the selected number of frames, the number of frames to be arranged in each of the divided regions is decided, which number being the number of frames to be acquired, and consecutive frames preceding and following a selected frame are acquired.

Description

本発明は、デジタルカメラ等で撮影された動画ファイルを指定して、動画を構成するフレームを複数並べて印刷する動画連続フレーム印刷を制御するのに利用して好適な印刷制御装置、方法及びプログラムに関する。   The present invention relates to a print control apparatus, method, and program suitable for use in controlling moving image continuous frame printing in which a moving image file shot by a digital camera or the like is designated and a plurality of frames constituting the moving image are printed side by side. .

従来、動画ファイルを指定して、動画を構成するフレームを複数並べて印刷する動画連続フレーム印刷を行う場合に、印刷装置がフレームを自動的に選択したり、ユーザが始点と終点の両方を指定してその間のフレームを印刷したりする方式が知られている。例えば、特許文献1には、記録用紙に対し予め設定されているプリント可能コマ数をプリントコマ数として決定し、ユーザがダイジェストプリントを行うものとして選択した動画像データから上記決定されたコマの数のフレームを抽出するプリンタシステムが開示されている。また、特許文献2には、動画像データに基づいて印刷を実行する印刷装置であって、印刷を所望する静止画像を切り出す切り出し範囲を決定するに際して、切り出し範囲の始点及び終点となる静止画像を選択させるようにした印刷装置が開示されている。   Conventionally, when you specify a video file and perform continuous video frame printing that prints multiple frames that make up a video, the printing device automatically selects the frame, or the user specifies both the start and end points. A method of printing a frame between the two is known. For example, in Patent Document 1, the number of frames that have been set in advance for a recording sheet is determined as the number of frames to be printed, and the number of frames determined from the moving image data selected by the user to perform digest printing A printer system for extracting the frames is disclosed. Patent Document 2 discloses a printing apparatus that executes printing based on moving image data. When determining a cutout range for cutting out a still image desired to be printed, a still image serving as a start point and an end point of the cutout range is obtained. A printing apparatus is disclosed that is adapted to be selected.

特開2006−211283号公報JP 2006-211283 A 特開2006−60649号公報JP 2006-60649 A

しかしながら、特許文献1に開示された従来技術では、少ない手順で動画全体を印刷するには好適であるが、動画を部分的に詳細に印刷することはできない。また、特許文献2に開示された従来技術では、最低でも2つのフレームを指定しなければならず、また、詳細に印刷したい部分が同一の動画内に複数ある場合は、1回の印刷終了後に同様の操作を繰り返さなければならず、操作が煩雑なのとなってしまう。   However, the conventional technique disclosed in Patent Document 1 is suitable for printing the entire moving image with a few procedures, but the moving image cannot be printed partially in detail. In the prior art disclosed in Patent Document 2, at least two frames must be specified, and when there are a plurality of parts to be printed in detail in the same moving image, after one printing is completed. The same operation must be repeated, and the operation becomes complicated.

本発明は上記のような点に鑑みてなされたものであり、少ない手順で動画内の複数の注目部分を詳細に動画連続フレーム印刷できるようにすることを目的とする。   The present invention has been made in view of the above points, and an object thereof is to enable continuous frame printing of a plurality of attention portions in a moving image in detail with a small number of procedures.

本発明の印刷制御装置は、動画を構成する複数のフレームを1枚の印刷用紙に配置して印刷するための印刷制御装置であって、動画から一又は複数のフレームを選択するフレーム選択手段と、前記フレーム選択手段により選択されたフレームを含む複数のフレームを1枚の印刷用紙に配置するレイアウトを決定するための制御手段であって、前記フレーム選択手段で選択されたフレーム数に応じて、レイアウトを決定する制御手段とを備えたことを特徴とする。   A print control apparatus according to the present invention is a print control apparatus for arranging and printing a plurality of frames constituting a moving image on a single sheet of printing paper, and a frame selection unit that selects one or a plurality of frames from the moving image. , A control means for determining a layout for arranging a plurality of frames including the frame selected by the frame selection means on one printing paper, according to the number of frames selected by the frame selection means, And a control means for determining a layout.

本発明によれば、動画から選択されたフレーム数で印刷形態を変えるようにしたので、少ない手順で動画内の複数の注目部分を詳細に動画連続フレーム印刷することが可能になる。   According to the present invention, since the printing form is changed by the number of frames selected from the moving image, it is possible to print a plurality of attention portions in the moving image in detail in a moving image continuous frame with a small number of procedures.

実施形態に係る印刷装置の構成を示すブロック図である。1 is a block diagram illustrating a configuration of a printing apparatus according to an embodiment. 実施形態に係る印刷装置のメイン処理の流れを示すフローチャートである。6 is a flowchart illustrating a flow of main processing of the printing apparatus according to the embodiment. フレームが1つも選択されていないときの処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a process when no frame is selected. フレームが1つだけ選択されたときの処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a process when only one frame is selected. 複数のフレームが選択されたときの処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a process when a some flame | frame is selected. フレームを1つも選択しないで印刷を行った結果の例を示す図である。It is a figure which shows the example of the result of having printed, without selecting any frame. フレームを1つだけ選択して印刷を行った結果の例を示す図である。It is a figure which shows the example of the result of having selected only one frame and performing printing. 複数のフレームを選択して印刷を行った結果の例を示す図である。It is a figure which shows the example of the result of having selected and printed several frames. 抽出フレームの重複や不足が発生した場合の例を示す図である。It is a figure which shows the example when duplication and lack of an extraction frame generate | occur | produce. 第2の実施形態において2個のフレームが選択されたときの処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a process when two frames are selected in 2nd Embodiment. 第2の実施形態において2個のフレームを選択して印刷を行った結果の例を示す図である。It is a figure which shows the example of the result of having selected and printed two frames in 2nd Embodiment. 第4の実施形態において5個のフレームを選択して印刷を行った結果の例、及び8個のフレームを選択して印刷を行った結果の例を示す図である。It is a figure which shows the example of the result of having selected 5 frames in 4th Embodiment, and having performed printing, and the example of the result of having performed printing by selecting 8 frames.

以下、添付図面を参照して、本発明の好適な実施形態について説明する。
(第1の実施形態)
図1は、本発明の実施形態に係る印刷装置の構成を示すブロック図である。各ブロックはバス101によって相互に接続されており、データフロー及び動作タイミングは基本的にCPU106によって制御される。動画データは画像入力部105から読み込まれ、記憶部104に保持される。記憶部104に保持された動画データは表示部102に最初のフレームが表示される。記憶部104は複数の動画データを同時に保持可能で、表示部102には複数の動画データの最初のフレームを同時に表示可能である。
Preferred embodiments of the present invention will be described below with reference to the accompanying drawings.
(First embodiment)
FIG. 1 is a block diagram illustrating a configuration of a printing apparatus according to an embodiment of the present invention. Each block is mutually connected by a bus 101, and the data flow and operation timing are basically controlled by the CPU. The moving image data is read from the image input unit 105 and held in the storage unit 104. The moving image data stored in the storage unit 104 displays the first frame on the display unit 102. The storage unit 104 can simultaneously hold a plurality of moving image data, and the display unit 102 can simultaneously display the first frames of the plurality of moving image data.

表示部102に表示中の複数の動画データの最初のフレームのうち常に1つの動画データには現在操作対象であることを示すカーソルが表示される。操作部103には画像送りボタンがあり、それを操作することによってカーソルを移動して操作対象動画を変更することができる。画像送りによって操作対象動画が表示部102に表示中の動画データから外れるときは、更に画像入力部105から新たに動画データを読み込み、記憶部104に保持して表示部102の表示を更新する。また、操作部103には動画再生ボタンがあり、それを押すことによって操作対象動画を再生することができる。また、操作部103には動画選択ボタンがあり、表示部102に表示中の動画のうち、カーソルによって指示された動画を選択することができる。操作部103によって動画選択が指示されると、動画選択部107によって選択された動画データは印刷操作対象動画として管理される。動画選択部107は確定した操作対象動画の記録時間、フレームレート、総フレーム数を解析し保持する。また、操作部103には一時停止ボタンがあり、動画再生中に一時停止ボタンを押すと、動画の再生を一時停止できる。また、操作部103にはフレーム選択ボタンがあり、一時停止中にフレーム選択ボタンを押すと、表示中のフレームを選択状態にできる。同様の操作を繰り返すことで複数のフレームを選択することができる。フレームを選択しないことも可能である。フレーム選択処理はフレーム選択部108によって行われ、選択されたフレーム数、フレーム番号、選択された順番が管理される。   A cursor indicating the current operation target is always displayed in one moving image data among the first frames of the plurality of moving image data being displayed on the display unit 102. The operation unit 103 has an image feed button. By operating the image feed button, the operation target moving image can be changed by moving the cursor. When the operation target moving image deviates from the moving image data being displayed on the display unit 102 by image forwarding, the moving image data is newly read from the image input unit 105 and held in the storage unit 104 to update the display on the display unit 102. Further, the operation unit 103 has a moving image playback button, and the operation target moving image can be played by pressing the button. Further, the operation unit 103 has a moving image selection button, and among the moving images displayed on the display unit 102, a moving image designated by the cursor can be selected. When the operation unit 103 instructs to select a moving image, the moving image data selected by the moving image selection unit 107 is managed as a print operation target moving image. The moving image selection unit 107 analyzes and holds the recording time, frame rate, and total number of frames of the determined operation target moving image. In addition, the operation unit 103 has a pause button. When the pause button is pressed during moving image reproduction, the reproduction of the moving image can be paused. In addition, the operation unit 103 has a frame selection button. When the frame selection button is pressed during the pause, the displayed frame can be selected. A plurality of frames can be selected by repeating the same operation. It is also possible not to select a frame. The frame selection process is performed by the frame selection unit 108, and the number of selected frames, the frame number, and the selected order are managed.

動画選択部107によって管理されている動画データは、動画データ読み込み部109によって読み込まれる。動画データは画像入力部105から読み込まれ、記憶部104に保持される。   The moving image data managed by the moving image selection unit 107 is read by the moving image data reading unit 109. The moving image data is read from the image input unit 105 and held in the storage unit 104.

用紙判別部114は印刷用紙(以下、用紙と称する)の用紙サイズを判別する。本実施形態ではLサイズとはがきサイズが使用可能で、装着している用紙カセットによってどちらの用紙に印刷するかを判別する。用紙サイズが判別されると、フレーム配置数取得部113によって、印刷しようとしている用紙に縦横それぞれにフレームを最大いくつ配置できるかを取得する。フレーム配置数は用紙サイズによって予め決められており、縦方向の最大数と横方向の最大数を乗じた数がその用紙に配置できるフレーム数の最大数となる。   The paper discriminating unit 114 discriminates the paper size of printing paper (hereinafter referred to as paper). In this embodiment, the L size and the postcard size can be used, and it is determined which paper is to be printed depending on the paper cassette that is mounted. When the paper size is determined, the frame arrangement number acquisition unit 113 acquires the maximum number of frames that can be arranged vertically and horizontally on the paper to be printed. The number of frames arranged is determined in advance according to the paper size, and the number obtained by multiplying the maximum number in the vertical direction and the maximum number in the horizontal direction is the maximum number of frames that can be arranged on the paper.

用紙に配置できる縦方向の最大数と横方向の最大数が取得されると、フレーム取得数決定部111によって動画から取得するフレーム数(以下、抽出フレーム数とも称する)を決定する。動画から取得するフレーム数は、フレーム選択部108によって選択されたフレーム数とフレーム配置数取得部113によって取得された縦横それぞれの最大配置数から計算によって決定される。計算方法は選択されたフレーム数によって異なる。フレームの選択数が0又は1の場合は、その用紙に配置できるフレームの最大数がフレーム取得数になる。フレームの選択数が2以上の場合は、用紙を縦方向にフレームの選択数で分割し、それぞれの領域に対するフレームの配置数を決定し、その数をフレーム取得数とする。   When the maximum number in the vertical direction and the maximum number in the horizontal direction that can be arranged on the paper are acquired, the frame acquisition number determination unit 111 determines the number of frames acquired from the moving image (hereinafter also referred to as the number of extracted frames). The number of frames to be acquired from the moving image is determined by calculation from the number of frames selected by the frame selection unit 108 and the maximum number of horizontal and vertical arrangements acquired by the frame arrangement number acquisition unit 113. The calculation method depends on the number of selected frames. When the number of frames selected is 0 or 1, the maximum number of frames that can be arranged on the paper is the frame acquisition number. When the number of frame selections is 2 or more, the paper is divided in the vertical direction by the number of frame selections, the number of frames arranged for each region is determined, and that number is used as the frame acquisition number.

フレーム取得数が決定すると、フレーム取得範囲決定部112によってフレームの取得範囲を決定する。フレームの取得範囲はフレーム選択部108によって選択されたフレーム数によって異なる。フレームの選択数が0であれば、動画全体をフレーム取得範囲とする。フレームの選択数が0以外であれば、選択されたフレームを中心にその前後から連続したフレームをフレーム取得数決定部111によって決められた領域ごとのフレーム取得数分取得するためフレームを取得する始点と終点がここで決定される。   When the frame acquisition number is determined, the frame acquisition range determination unit 112 determines the frame acquisition range. The frame acquisition range varies depending on the number of frames selected by the frame selection unit 108. If the number of selected frames is 0, the entire moving image is set as the frame acquisition range. If the number of selected frames is other than 0, the starting point for acquiring a frame for acquiring the number of frames acquired for each area determined by the frame acquisition number determining unit 111 centered on the selected frame from the front and the back And the end point is determined here.

フレーム取得数、フレーム取得範囲が決定すると、必要とするフレームをフレーム取得部110によって取得し、記憶部104に保持する。取得されたフレームはフレームレイアウト部115によって用紙1枚分の印刷用データに変換され、印刷部116によって印刷される。   When the number of frames to be acquired and the frame acquisition range are determined, necessary frames are acquired by the frame acquisition unit 110 and stored in the storage unit 104. The acquired frame is converted into printing data for one sheet by the frame layout unit 115 and printed by the printing unit 116.

なお、図1では、CPU106と他のブロックとを別々のものとして図示したが、一部のブロックの機能をCPU106に担わせるようにしてもよい。   In FIG. 1, the CPU 106 and other blocks are illustrated as separate units, but the functions of some blocks may be assigned to the CPU 106.

図2は、本実施形態に係る印刷装置のメイン処理の流れ、特に選択されたフレーム数によって印刷形態を変える印刷制御処理の流れを示すフローチャートである。以下の処理は、例えばCPU106がプログラムを実行することにより実現される。ステップS201において、フレーム配置数を取得する。既述したようにフレーム配置数は用紙サイズによって異なり、用紙判別部114によって用紙サイズを取得し、フレーム配置数取得部113によって、印刷しようとしている用紙に縦横それぞれにフレームを最大いくつ配置できるかを取得する。   FIG. 2 is a flowchart showing the flow of the main process of the printing apparatus according to the present embodiment, in particular, the flow of the print control process for changing the printing mode according to the selected number of frames. The following processing is realized by the CPU 106 executing a program, for example. In step S201, the number of frame arrangements is acquired. As described above, the number of frame arrangements differs depending on the paper size, the paper size determination unit 114 acquires the paper size, and the frame arrangement number acquisition unit 113 determines the maximum number of frames that can be arranged vertically and horizontally on the paper to be printed. get.

ステップS202において、動画データを読み込む。動画選択部107によって管理されている動画データを動画データ読み込み部109によって読み込む。動画データは画像入力部105から読み込まれ、記憶部104に保持される。   In step S202, moving image data is read. The moving image data read unit 109 reads the moving image data managed by the moving image selection unit 107. The moving image data is read from the image input unit 105 and held in the storage unit 104.

ステップS203において、フレーム選択可能か否かを判定する。フレームの選択数の最大は、フレーム配置数取得部113によって取得した縦方向の最大配置数と一致する。これは、用紙上に選択フレームを含む前後のフレームをレイアウトした際に、横方向に他の選択フレーム関連のフレームが混ざると識別が困難になるために、同じ行に他の選択フレーム関連のフレームが配置されないようにするためである。縦方向の最大配置数を超えるフレームの選択は禁止する。縦方向の最大配置数を超えるフレームを選択しようとすると、例えば表示部102にメッセージを表示し、操作部103のフレーム選択ボタンを押してもフレームは選択されないようにする。   In step S203, it is determined whether or not a frame can be selected. The maximum number of selected frames matches the maximum number of vertical arrangements acquired by the frame arrangement number acquisition unit 113. This is because when a frame before and after the selected frame including the selected frame is laid out on the paper, it becomes difficult to identify the frame when other selected frame related frames are mixed in the horizontal direction. This is to prevent the from being arranged. Selection of frames that exceed the maximum number of vertical arrangements is prohibited. If an attempt is made to select a frame that exceeds the maximum number of arrangements in the vertical direction, for example, a message is displayed on the display unit 102 and no frame is selected even if the frame selection button on the operation unit 103 is pressed.

ステップS203でフレーム選択可能であると判定されると、ステップS204において、フレーム選択終了が指示されているか否かを判定する。本実施形態では操作部103に印刷ボタンがあり、それを押すことでフレーム選択終了としている。   If it is determined in step S203 that the frame can be selected, it is determined in step S204 whether an instruction to end frame selection is instructed. In the present embodiment, the operation unit 103 has a print button, and pressing the button ends frame selection.

ステップS204でフレーム選択終了が指示されていなければ、ステップS205に進み、フレーム選択を許容する。選択した動画を再生し、任意のフレームで一時停止した状態で操作部103のフレーム選択ボタンを押すと表示中のフレームを選択状態にできる。フレーム選択処理はフレーム選択部108によって行われ、選択されたフレーム数、フレーム番号、選択された順番が管理される。フレーム選択が行われると、ステップS203において、再度フレーム選択可能か否かを判定する。それまでに選択されたフレームの総数が、フレーム配置数取得部113によって取得した縦方向の最大配置数よりも少なければ、更にフレーム選択が可能であり、同様の手順を繰り返すことで複数のフレームを選択することができる。フレームを選択しないことも可能である。フレームを1つも選択しない状態で操作部103の印刷ボタンを押すと、選択数を0としてフレーム選択終了となる。   If the end of frame selection is not instructed in step S204, the process proceeds to step S205 and frame selection is permitted. When the selected moving image is played back and the frame selection button of the operation unit 103 is pressed in a state of being paused at an arbitrary frame, the currently displayed frame can be selected. The frame selection process is performed by the frame selection unit 108, and the number of selected frames, the frame number, and the selected order are managed. When frame selection is performed, it is determined again in step S203 whether or not frame selection is possible. If the total number of frames selected so far is less than the maximum vertical arrangement number acquired by the frame arrangement number acquisition unit 113, further frame selection is possible, and a plurality of frames are obtained by repeating the same procedure. You can choose. It is also possible not to select a frame. When the print button of the operation unit 103 is pressed in a state where no frame is selected, the selection number is set to 0 and the frame selection is completed.

ステップS203でフレーム選択が不可能と判定されるか、ステップS204でフレーム選択終了が指示されたと判定されると、ステップS206において、フレーム選択の有無を判定する。フレームが1つも選択されていない場合、ステップS207において、印刷処理0を行う。印刷処理0はフレーム選択がないときの印刷処理であり、その詳細は後述する。フレームが選択されている場合、ステップS208において、フレームが1つだけ選択されているか否かを判定する。フレームが1つだけ選択された場合、ステップS209において、印刷処理1を行う。印刷処理1はフレーム選択が1つだけときの印刷処理であり、その詳細は後述する。複数のフレームが選択された場合、ステップS210において、印刷処理2を行う。印刷処理2はフレーム選択が複数あるときの印刷処理であり、その詳細は後述する。いずれの印刷処理も印刷が終了したら処理を終了する。   If it is determined in step S203 that frame selection is not possible, or if it is determined in step S204 that the end of frame selection has been instructed, it is determined in step S206 whether or not frame selection has been performed. If no frame is selected, print processing 0 is performed in step S207. The printing process 0 is a printing process when there is no frame selection, and details thereof will be described later. If a frame has been selected, it is determined in step S208 whether only one frame has been selected. If only one frame is selected, print processing 1 is performed in step S209. The printing process 1 is a printing process when only one frame is selected, and details thereof will be described later. If a plurality of frames are selected, print processing 2 is performed in step S210. The printing process 2 is a printing process when there are a plurality of frame selections, and details thereof will be described later. In any printing process, when printing is completed, the process is terminated.

図3は、ステップS207の印刷処理0、すなわちフレームが1つも選択されていないときの処理の流れを示すフローチャートである。ステップS301において、抽出フレーム数を決定する。印刷処理0の場合、フレーム配置数取得部113によって取得した縦方向の最大数と横方向の最大数を乗じた数になる。   FIG. 3 is a flowchart showing the flow of the printing process 0 in step S207, that is, the process when no frame is selected. In step S301, the number of extracted frames is determined. In the case of print processing 0, the number is obtained by multiplying the maximum number in the vertical direction acquired by the frame arrangement number acquisition unit 113 and the maximum number in the horizontal direction.

ステップS302において、フレームの抽出範囲を決定する。印刷処理0の場合、動画全体から均等間隔でフレームを抽出するので、抽出範囲は動画全体となり、始点は動画の最初のフレーム、終点は動画の最後のフレームとなる。   In step S302, a frame extraction range is determined. In the case of print processing 0, frames are extracted from the entire moving image at equal intervals, so the extraction range is the entire moving image, the start point is the first frame of the moving image, and the end point is the last frame of the moving image.

ステップS303において、抽出フレームを決定する。印刷処理0の場合、始点フレームと終点フレームの間から均等間隔でフレームを抽出する。動画選択部107が保持する総フレーム数をステップS301で決定した抽出フレーム数で除算することでフレーム間隔が計算できるので、その間隔で抽出するフレームを決定する。ただし、用紙の最大配置数と総フレーム数によっては完全な均等抽出できないこともあるので、始点フレーム、終点フレーム及び抽出間隔にはある程度の幅を持たせて抽出フレームを決定する。   In step S303, an extraction frame is determined. In the case of print processing 0, frames are extracted at regular intervals from between the start point frame and the end point frame. Since the frame interval can be calculated by dividing the total number of frames held by the moving image selection unit 107 by the number of extracted frames determined in step S301, frames to be extracted are determined at the intervals. However, depending on the maximum number of sheets arranged and the total number of frames, it may not be possible to extract completely evenly. Therefore, the start frame, the end frame, and the extraction interval are given a certain width to determine the extraction frame.

ステップS304において、ステップS303で決定したフレームを抽出し、記憶部104に保持する。   In step S304, the frame determined in step S303 is extracted and stored in the storage unit 104.

ステップS305において、フレームレイアウト部115によって、ステップS304で抽出したフレームを用紙に配置するレイアウトを決定する。印刷処理0の場合、単純に用紙の左上から横方向に横方向の最大配置数だけフレームを並べ、改行して縦方向の最大配置数までフレームを時系列順に並べて配置する。   In step S305, the frame layout unit 115 determines a layout for arranging the frame extracted in step S304 on the sheet. In the case of print processing 0, frames are simply arranged in the horizontal direction from the upper left side of the paper in the horizontal direction, and the frames are arranged in time-series order up to the maximum arrangement number in the vertical direction after line feed.

ステップS306において、フレームを印刷用データに変換し、ステップS305で決定したレイアウト通りに配置する。ステップS307において、印刷用データに従って印刷を実行する。   In step S306, the frame is converted into print data and arranged according to the layout determined in step S305. In step S307, printing is executed according to the printing data.

図6は、印刷処理0に従って印刷を行った結果の例を示す図である。この例では、横方向の最大配置数8、縦方向の最大配置数6の用紙に総フレーム数480の動画をフレーム選択なしで印刷を行った。図中の数字はフレーム番号である。用紙601に始点フレーム602から終点フレーム603までを配置している。印刷されたフレームは48個のフレームで、始点フレーム番号は10、終点フレーム番号は480、フレーム間隔は10となっている。   FIG. 6 is a diagram illustrating an example of a result of printing according to the printing process 0. In this example, a moving image having a total number of frames of 480 was printed on a sheet having a maximum number of horizontal arrangements of 8 and a maximum of 6 vertical arrangements without frame selection. The numbers in the figure are frame numbers. On the paper 601, a start point frame 602 to an end point frame 603 are arranged. The printed frames are 48 frames, the start frame number is 10, the end frame number is 480, and the frame interval is 10.

図4は、ステップS209の印刷処理1、すなわちフレームが1つだけ選択されたときの処理の流れを示すフローチャートである。ステップS401において、抽出フレーム数を決定する。印刷処理1の場合、フレーム配置数取得部113によって取得した縦方向の最大数と横方向の最大数を乗じた数になる。   FIG. 4 is a flowchart showing the printing process 1 in step S209, that is, the process flow when only one frame is selected. In step S401, the number of extracted frames is determined. In the case of the printing process 1, the number is obtained by multiplying the maximum number in the vertical direction and the maximum number in the horizontal direction acquired by the frame arrangement number acquisition unit 113.

ステップS402において、フレームの抽出範囲を決定する。印刷処理1の場合、選択フレームを中心にその前後から連続したフレームを抽出するので、抽出範囲は動画の一部となる。ステップS401で決定した抽出フレーム数をCとすると、始点は選択フレームからC/2個前のフレーム、終点は選択フレームからC/2個後のフレームとなる。   In step S402, a frame extraction range is determined. In the case of the printing process 1, since continuous frames are extracted around the selected frame, the extraction range becomes a part of the moving image. Assuming that the number of extracted frames determined in step S401 is C, the start point is C / 2 frames before the selected frame, and the end point is C / 2 frames after the selected frame.

ステップS403において、抽出フレームを決定する。印刷処理1の場合、始点フレームと終点フレームの間のすべてのフレームを抽出する。このとき、必ず選択フレームを含み、抽出フレーム総数はCとする。   In step S403, an extraction frame is determined. In the case of the printing process 1, all frames between the start point frame and the end point frame are extracted. At this time, the selected frame is always included, and the total number of extracted frames is C.

ステップS404において、ステップS403で決定したフレームを抽出し、記憶部104に保持する。   In step S404, the frame determined in step S403 is extracted and stored in the storage unit 104.

ステップS405において、フレームレイアウト部115によって、ステップS404で抽出したフレームを用紙に配置するレイアウトを決定する。印刷処理1の場合、単純に用紙の左上から横方向に横方向の最大配置数だけフレームを並べ、改行して縦方向の最大配置数までフレームを時系列順に並べて配置する。   In step S405, the frame layout unit 115 determines a layout for arranging the frame extracted in step S404 on the paper. In the case of the printing process 1, frames are simply arranged in the horizontal direction from the upper left of the paper in the horizontal direction, and the frames are arranged in time-series order up to the maximum vertical arrangement number by line feed.

ステップS406において、フレームを印刷用データに変換し、ステップS405で決定したレイアウト通りに配置する。ステップS407において、印刷用データに従って印刷を実行する。   In step S406, the frame is converted into print data and arranged according to the layout determined in step S405. In step S407, printing is executed according to the printing data.

図7は、印刷処理1に従って印刷を行った結果の例を示す図である。この例では、横方向の最大配置数8、縦方向の最大配置数6の用紙に総フレーム数480の動画をフレーム1つのみ選択で印刷を行った。図中の数字はフレーム番号である。選択フレームのフレーム番号は250である。印刷処理1では、選択フレームを中心にその前後から連続したフレームをフレーム取得数決定部111によって決められた領域ごとのフレーム取得数分取得する。したがって、縦方向の最大配置数と横方向の最大配置数を乗じた48が用紙全体の最大配置数となり、その半分の24のフレームが選択フレームの前後にそれぞれ配置される。指定フレームのフレーム番号は250であるので、始点フレームは226になり、終点フレームは274になる。ただし、フレーム数の合計が9になってしまうので、終点フレームを1つ前にして終点フレームは273になる。用紙701に、選択フレーム702を略中心にして、始点フレーム703から終点フレーム704までを配置している。印刷されたフレームは48個のフレームで、始点フレーム番号は226、終点フレーム番号は273、フレーム間隔は1となっている。   FIG. 7 is a diagram illustrating an example of a result of printing according to the printing process 1. In this example, a moving image having a total number of frames of 480 was selected and printed on a sheet having a maximum number of horizontal arrangements of 8 and a maximum of 6 vertical arrangements. The numbers in the figure are frame numbers. The frame number of the selected frame is 250. In the printing process 1, frames that are continuous from the front and the back of the selected frame are acquired for the number of frames acquired for each area determined by the frame acquisition number determination unit 111. Therefore, 48, which is obtained by multiplying the maximum number of arrangements in the vertical direction and the maximum number of arrangements in the horizontal direction, is the maximum arrangement number of the entire sheet, and 24 frames, which are half of that, are arranged before and after the selected frame. Since the frame number of the designated frame is 250, the start frame is 226 and the end frame is 274. However, since the total number of frames is 9, the end frame is 273 with the end frame one before. On the sheet 701, a start frame 703 to an end frame 704 are arranged with the selection frame 702 substantially at the center. The printed frames are 48 frames, the start frame number is 226, the end frame number is 273, and the frame interval is 1.

図5は、ステップS210の印刷処理2、すなわち複数のフレームが選択されたときの処理の流れを示すフローチャートである。印刷処理2の場合、基本的に選択フレームを含む前後の連続フレームを用紙内に1行に配置して印刷する。したがって、選択された個々のフレームに対するフレームの抽出数は横方向の最大配置数となり、選択フレーム数分の行が縦方向に縦方向の最大配置数以内で配置される。   FIG. 5 is a flowchart showing a printing process 2 in step S210, that is, a process flow when a plurality of frames are selected. In the case of the printing process 2, basically, continuous frames before and after the selected frame are arranged in one line in the paper and printed. Therefore, the number of extracted frames for each selected frame is the maximum number of horizontal arrangements, and as many rows as the selected number of frames are arranged in the vertical direction within the maximum number of vertical arrangements.

ステップS501において、用紙の印刷領域を選択されたフレーム数に分割する。フレームの選択数がNであれば、用紙を論理的に縦方向にN分割する。   In step S501, the print area of the paper is divided into the selected number of frames. If the number of selected frames is N, the paper is logically divided into N parts in the vertical direction.

ステップS502において、分割した領域内に配置するフレーム数を決定する。このフレーム数は、フレーム配置数取得部113によって取得した横方向の最大数である。   In step S502, the number of frames to be arranged in the divided area is determined. This number of frames is the maximum number in the horizontal direction acquired by the frame arrangement number acquisition unit 113.

ステップS503において、N分割した1つの領域内に複数行フレームを配置できるか否かを判定する。フレーム配置数取得部113によって取得した縦方向の配置数をNで除算した商の自然数部分Qが2以上であれば、1つの領域内にQ行のフレームを配置できることになるので、Qが2以上であるか否かを判定することになる。1つの領域内に複数行配置できるのであれば、ステップS504において、抽出フレーム数を加算する。抽出フレーム数は、フレーム配置数取得部113によって取得した横方向の配置数にQを乗じた数となる。1つの領域内に複数行フレームを配置できなければ、ステップS502で決定した抽出フレーム数のままとなる。   In step S503, it is determined whether or not a multi-row frame can be arranged in one divided N area. If the natural number portion Q of the quotient obtained by dividing the number of vertical arrangements acquired by the frame arrangement number acquisition unit 113 by N is 2 or more, Q rows of frames can be arranged in one region, so that Q is 2 It is determined whether this is the case. If a plurality of rows can be arranged in one area, the number of extracted frames is added in step S504. The number of extracted frames is a number obtained by multiplying the horizontal arrangement number acquired by the frame arrangement number acquisition unit 113 by Q. If a plurality of line frames cannot be arranged in one area, the number of extracted frames determined in step S502 remains unchanged.

ステップS505において、フレームの抽出範囲を決定する。印刷処理2の場合、N分割後の各領域に選択フレームを中心にその前後から連続したフレームを抽出するので、抽出範囲は動画の一部となる。ステップS502で決定した抽出フレーム数をCとすると、始点は選択フレームからC/2個前のフレーム、終点は選択フレームからC/2個後のフレームとなる。選択された全フレームに対して同様に始点フレームと終点フレームを決定する。このとき、抽出フレーム数をCに合わせるために始点又は終点のフレームを1フレーム分調整する。   In step S505, a frame extraction range is determined. In the case of the printing process 2, since a continuous frame is extracted from the front and the back of the selected frame in each area after N division, the extraction range becomes a part of the moving image. Assuming that the number of extracted frames determined in step S502 is C, the start point is C / 2 frames before the selected frame, and the end point is C / 2 frames after the selected frame. Similarly, the start point frame and the end point frame are determined for all the selected frames. At this time, in order to adjust the number of extracted frames to C, the start point or end point frame is adjusted by one frame.

ステップS506において、各領域用に抽出するフレームに重複がないか否かを判定する。ステップS505で決定した各領域の始点と終点フレーム番号から重複の有無を判定する。より具体的には、ある領域の始点と終点の間に他の領域の始点又は終点が含まれていれば、重複フレームがあると判定される。   In step S506, it is determined whether there is no overlap in the frames extracted for each region. The presence / absence of overlap is determined from the start point and end point frame number of each area determined in step S505. More specifically, if the start point or end point of another region is included between the start point and end point of a certain region, it is determined that there is an overlapping frame.

ステップS506で重複フレームがあると判定されると、ステップS507において、重複フレームがある領域同士を統合して1つの領域にする。例えば2つの領域に重複があると判定されると、その2つの領域を統合して領域の面積を加算する。3つ以上の領域に重複があったとしても、まず2つの領域を統合し、さらに統合した領域とそれにもう1つの領域を同様の手順で統合することで最終的に重複フレームのある領域を統合できる。   If it is determined in step S506 that there are overlapping frames, the areas having overlapping frames are integrated into one area in step S507. For example, if it is determined that there is an overlap between two regions, the two regions are integrated and the areas of the regions are added. Even if there are overlaps in three or more areas, the two areas are merged first, and then the merged area and the other area are merged in the same procedure to finally merge the areas with overlapping frames. it can.

ステップS508において、統合した領域に対する抽出フレーム数を再決定する。統合前の各領域の抽出フレーム数を合計したものになる。   In step S508, the number of extracted frames for the integrated region is determined again. This is the sum of the number of extracted frames in each area before integration.

ステップS509において、領域統合にともないフレームの抽出範囲の再決定を行う。統合前に重複していたフレームは統合後には重複させないため統合前よりフレームの抽出範囲は広がる。例えば抽出フレーム数C1の領域とC2の領域でD個のフレームが重複していたとすると、統合後の領域には(C1+C2)個のフレームを必要するが、D個のフレームが重複しているので抽出範囲をみなおす。重複した部分を印刷領域の中心に配置すれば、統合前の2つの抽出範囲が平等に統合後の印刷領域の中心に配置されることになるので、重複部分はそのまま抽出し、その前後にほぼ同数の連続フレームを抽出し抽出フレーム数を(C1+C2)になるようにすればよい。したがって、始点フレームは重複部分の最初のフレームから((C1+C2)/2)フレーム前のフレームで、終点フレームは重複部分の最後のフレームから((C1+C2)/2)フレーム後のフレームになる。このとき抽出フレーム数を(C1+C2)に合わせるために始点又は終点のフレームを1フレーム分調整する。統合する領域が3つ以上のときも、2つ統合するときの処理を繰り返し適用すればよい。ステップS506で重複フレームがないと判定されると、領域の統合は行わない。   In step S509, the frame extraction range is re-determined along with the region integration. Frames that overlap before integration are not overlapped after integration, so the frame extraction range is wider than before integration. For example, assuming that D frames overlap in the area of the number of extracted frames C1 and the area of C2, (C1 + C2) frames are required in the combined area, but D frames overlap. Consider the extraction range. If the overlapping part is arranged at the center of the print area, the two extraction ranges before integration are equally arranged at the center of the print area after integration, so the overlapping part is extracted as it is, The same number of consecutive frames may be extracted so that the number of extracted frames is (C1 + C2). Therefore, the start frame is a frame before ((C1 + C2) / 2) frames from the first frame of the overlapping portion, and the end frame is a frame after ((C1 + C2) / 2) frames from the last frame of the overlapping portion. At this time, in order to adjust the number of extracted frames to (C1 + C2), the start point or end point frame is adjusted by one frame. Even when there are three or more areas to be integrated, the processing for integrating two areas may be repeatedly applied. If it is determined in step S506 that there are no overlapping frames, the areas are not integrated.

ステップS510において、不足フレームがないか否かの判定を行う。不足フレームは、選択フレームが動画の先頭フレーム又は最終フレームに近いときに発生する可能性があり、前述の計算で始点フレームと終点フレームを決定したときに始点フレームが先頭フレームよりも前になる、又は終点フレームが最終フレームよりも後になることで予定した抽出フレーム数を抽出できないことである。   In step S510, it is determined whether or not there is a shortage frame. The missing frame may occur when the selected frame is close to the first frame or the last frame of the moving image, and when the start frame and the end frame are determined by the above calculation, the start frame is before the first frame. Alternatively, the planned number of extracted frames cannot be extracted because the end frame is after the last frame.

ステップS510で不足フレームがあると判定されると、ステップS511において、抽出範囲の再決定を行う。選択フレームを含みその前後から連続したフレームを抽出する際に、前後いずれか一方でフレームが不足する場合、他方から不足する分だけ多く抽出する、例えばここまでの処理の流れで決定した始点フレームの番号が負の数字になることがありうる。選択フレームよりも前に抽出フレームの半分の数のフレームが存在しない場合である。その場合には、始点フレームを先頭フレームとし、不足したフレーム数と同じ数だけ終点フレームを後ろにずらす。また、ここまでの処理の流れで決定した終点フレームの番号が総フレーム数よりも大きな数字になることがありうる。選択フレームよりも後ろに抽出フレームの半分の数のフレームが存在しない場合である。その場合には、終点フレームを最終フレームとし、不足したフレーム数と同じ数だけ始点フレームを前にずらす。ステップS510で不足フレームがないと判定されると、ステップS511の抽出範囲の再決定は行わない。不足フレームの判定は各領域において行う。   If it is determined in step S510 that there is a shortage frame, the extraction range is re-determined in step S511. When extracting consecutive frames from the front and back including the selected frame, if there is a shortage of frames on either the front or back side, extract more from the other side, and for example, the start frame determined in the flow of processing so far The number can be a negative number. This is a case where half the number of extracted frames does not exist before the selected frame. In that case, the start point frame is set as the start frame, and the end point frame is shifted backward by the same number as the number of the missing frames. In addition, the number of the end frame determined in the processing flow so far may be larger than the total number of frames. This is a case where half the number of extracted frames does not exist behind the selected frame. In that case, the end point frame is set as the final frame, and the start point frame is shifted forward by the same number as the number of missing frames. If it is determined in step S510 that there is no missing frame, the extraction range in step S511 is not re-determined. The determination of insufficient frames is performed in each area.

ステップS512において、抽出フレームを決定する。始点フレームと終点フレームの間のすべてのフレームであるが、必ず選択フレームを含み、抽出フレーム総数は個粉での処理で決定した領域ごとの数値となる。抽出フレームの決定も各領域において行う。   In step S512, an extraction frame is determined. Although all frames are between the start point frame and the end point frame, the selected frame is always included, and the total number of extracted frames is a numerical value for each region determined by the processing with the individual powder. The extraction frame is also determined in each region.

ステップS513において、各領域に対するフレームを抽出する。抽出フレームはステップS512で決定されたものである。   In step S513, a frame for each region is extracted. The extracted frame is determined in step S512.

ステップS514において、フレームレイアウト部115によって用紙全体のレイアウトを決定する。印刷処理2の場合、選択フレームに基づいて印刷領域の分割、統合を行っている。分割、統合された各領域に対して抽出したフレームを領域内に時系列順に並べて配置する。   In step S514, the frame layout unit 115 determines the layout of the entire sheet. In the case of the print process 2, the print area is divided and integrated based on the selected frame. Frames extracted for each divided and integrated region are arranged in time series in the region.

ステップS515において、フレームを印刷用データに変換し、ステップS514で決定したレイアウト通りに配置する。ステップS516において、印刷用データに従って印刷を実行する。   In step S515, the frame is converted into print data and arranged according to the layout determined in step S514. In step S516, printing is executed according to the printing data.

図8、図9は、印刷処理2に従って印刷を行った結果の例を示す図である。これらの例では、横方向の最大配置数8、縦方向の最大配置数6の用紙に総フレーム数480の動画を複数のフレーム選択で印刷を行った。図中の数字はフレーム番号である。図8(a)の例では、5個のフレームを選択して印刷を行った。選択フレームのフレーム番号は12、45、120、330、420である。フレームの選択数が5個であるので、用紙801を縦方向に5分割している。5分割した領域にそれぞれ横方向の最大配置数である8個のフレームを配置するために、選択フレームを中心に始点フレームと終点フレームを決定し、縦に5行分配置している。   8 and 9 are diagrams illustrating examples of results of printing according to the printing process 2. FIG. In these examples, a moving image having a total frame number of 480 was printed on a sheet having a maximum number of horizontal arrangements of 8 and a maximum of 6 vertical arrangements by selecting a plurality of frames. The numbers in the figure are frame numbers. In the example of FIG. 8A, five frames are selected and printed. The frame numbers of the selected frames are 12, 45, 120, 330, and 420. Since the number of selected frames is 5, the sheet 801 is divided into five in the vertical direction. In order to arrange 8 frames, which are the maximum number of arrangements in the horizontal direction, in each of the five divided areas, the start frame and the end frame are determined around the selected frame and arranged vertically for 5 lines.

図8(b)の例では、2個のフレームを選択して印刷を行った。選択フレームのフレーム番号は120、330である。フレームの選択数が2個であるので、用紙802を縦方向に2分割している。縦方向の最大配置数6に対して分割数が2であるので、1つの領域に3行入ることがわかる。そのため2分割した領域にそれぞれ横方向の最大配置数である8個の3倍である24個のフレームを配置するために、選択フレームを中心に始点フレームと終点フレームを決定し、各領域に縦に3行分配置している。   In the example of FIG. 8B, printing was performed by selecting two frames. The frame numbers of the selected frames are 120 and 330. Since the number of selected frames is two, the sheet 802 is divided into two in the vertical direction. Since the number of divisions is 2 with respect to the maximum number of arrangement 6 in the vertical direction, it can be seen that 3 lines are included in one area. For this reason, in order to arrange 24 frames, which is three times the maximum number of horizontal arrangements in the horizontal direction, in each of the two divided areas, a start frame and an end frame are determined around the selected frame, and each frame is Are arranged in three lines.

図9(a)はフレームが重複した例であり、5個のフレームを選択して印刷を行った。選択フレームのフレーム番号は12、17、120、330、420である。図8(a)の例と同じように5分割してフレームを配置すると、用紙901の1行目の14、15、16フレームが2行目と重複していることが分かる。そこで、1行目の領域と2行目の領域を統合する。統合した結果が図9(b)である。用紙902の1行目と2行目が統合されて始点フレームと終点フレームが変更され、2行分の領域に重複することなく配置されている。   FIG. 9A shows an example in which frames are overlapped, and printing is performed by selecting five frames. The frame numbers of the selected frames are 12, 17, 120, 330, and 420. As in the example of FIG. 8A, when the frames are arranged by dividing into five, it can be seen that the 14th, 15th and 16th frames in the first row of the paper 901 overlap with the second row. Therefore, the first row area and the second row area are integrated. The result of integration is shown in FIG. The first line and the second line of the paper 902 are integrated to change the start point frame and the end point frame, and are arranged in the area for two lines without overlapping.

図9(c)は不足フレームが発生した例であり、5個のフレームを選択して印刷を行った。選択フレームのフレーム番号は2、45、120、330、478である。図8(a)の例と同じように5分割してフレームを配置すると、用紙903の1行目と5行目に不足フレームが発生していることが分かる。そこで、1行目の領域と2行目の領域で抽出範囲の見直しを行う。抽出範囲の見直しを行った結果が図9(d)である。用紙904の1行目と5行目の始点フレームと終点フレームが変更され、空白部分を残すことなく配置されている。   FIG. 9C shows an example in which an insufficient frame is generated, and printing is performed by selecting five frames. The frame numbers of the selected frames are 2, 45, 120, 330, and 478. As in the example of FIG. 8A, when the frames are divided into five and the frames are arranged, it can be seen that insufficient frames occur in the first and fifth lines of the sheet 903. Therefore, the extraction range is reviewed in the first row area and the second row area. The result of reviewing the extraction range is shown in FIG. The start point frame and end point frame of the first and fifth lines of the paper 904 are changed and arranged without leaving a blank portion.

以上のように、本実施形態に印刷装置では、動画から選択されたフレーム数で印刷形態を変えるようにしたので、少ない手順で動画内の複数の注目部分を詳細に動画連続フレーム印刷することが可能になる。   As described above, in the printing apparatus according to the present embodiment, the printing form is changed by the number of frames selected from the moving image, so that it is possible to print a plurality of attention portions in the moving image in detail in a moving image continuous frame in a small number of steps. It becomes possible.

(第2の実施形態)
第2の実施形態は、2個のフレームを選択したときの処理を第1の実施形態とは異ならせた例である。なお、印刷装置の構成、並びにフレームを1つも選択しないとき、フレームを1つだけ選択したとき、及び3つ以上のフレームを選択したときの処理は第1の実施形態と同様であり、以下では第1の実施形態との相違点を中心に説明する。
(Second Embodiment)
The second embodiment is an example in which processing when two frames are selected is different from that of the first embodiment. The configuration of the printing apparatus and the process when no frame is selected, when only one frame is selected, and when three or more frames are selected are the same as those in the first embodiment. The description will focus on the differences from the first embodiment.

図10は、図2のフローチャートにおいて2個のフレームが選択されたときの処理(図10では印刷処理22と記す)の流れを示すフローチャートである。ステップS1001において、抽出フレーム数を決定する。これは、フレーム配置数取得部113によって取得した縦方向の最大数と横方向の最大数を乗じた数になる。   FIG. 10 is a flowchart showing a flow of processing (referred to as print processing 22 in FIG. 10) when two frames are selected in the flowchart of FIG. In step S1001, the number of extracted frames is determined. This is a number obtained by multiplying the maximum number in the vertical direction and the maximum number in the horizontal direction acquired by the frame arrangement number acquisition unit 113.

ステップS1002において、抽出するフレームの始点を設定する。これは、2個の選択フレームのうちの最初に選択されたフレームとする。ステップS1003において、抽出するフレームの終点を設定する。これは、2個の選択フレームのうちの最後に選択されたフレームとする。   In step S1002, the starting point of the frame to be extracted is set. This is the first selected frame of the two selected frames. In step S1003, the end point of the frame to be extracted is set. This is the last selected frame of the two selected frames.

ステップS1004において、抽出フレームを決定する。ステップS1002及びS1003で設定した終点と終点の間に含まれるフレームの中から、ステップS1001で決定した抽出フレーム数から2を減じた数のフレームを等間隔で抽出するとして該当するフレームを決定する。そして、その前後に始点フレームと終点フレームを配置して、抽出フレームとする。   In step S1004, an extraction frame is determined. Of the frames included between the end points set in steps S1002 and S1003, the corresponding frame is determined as the number of frames obtained by subtracting 2 from the number of extracted frames determined in step S1001 is extracted at equal intervals. Then, the start point frame and the end point frame are arranged before and after the extracted frame.

ステップS1005において、ステップS1004で決定したフレームを抽出し、記憶部104に保持する。   In step S1005, the frame determined in step S1004 is extracted and stored in the storage unit 104.

ステップS1006において、フレームの並びを判定する。ステップS1005でフレームは時系列順に抽出されており、始点フレームが終点フレームよりも時間的に早いフレームであればフレームの並びは抽出順となる。始点フレームが終点フレームよりも時間的に遅いフレームであれば、ステップS1007に進む。ステップS1007において、フレームの並びを逆に並び替える。すなわち、始点フレームから終点フレームに向かって逆時系列順に並ぶことになる。   In step S1006, the arrangement of frames is determined. In step S1005, the frames are extracted in chronological order, and if the start point frame is earlier in time than the end point frame, the arrangement of frames is in the extraction order. If the start frame is a frame later in time than the end frame, the process proceeds to step S1007. In step S1007, the arrangement of the frames is reversed. That is, they are arranged in reverse chronological order from the start frame to the end frame.

ステップS1008において、フレームレイアウト部115によって、ステップS1005で抽出したフレームを用紙に配置するレイアウトを決定する。この場合、単純に用紙の左上から横方向に横方向の最大配置数だけフレームを並べ、改行して縦方向の最大配置数までフレームを時系列順に並べて配置する。ステップS1007でフレームの並び替えが行われている場合は、逆時系列順にフレームを並べることになる。   In step S1008, the frame layout unit 115 determines a layout for arranging the frame extracted in step S1005 on the sheet. In this case, the frames are simply arranged in the horizontal direction from the upper left of the sheet in the horizontal direction, and the frames are arranged in chronological order up to the maximum arrangement number in the vertical direction after line feed. If the frames are rearranged in step S1007, the frames are arranged in reverse chronological order.

ステップS1009において、フレームを印刷用データに変換し、ステップS1008で決定したレイアウト通りに配置する。ステップS1010において、印刷用データに従って印刷を実行する。   In step S1009, the frame is converted into print data and arranged according to the layout determined in step S1008. In step S1010, printing is executed according to the printing data.

図11は、第2の実施形態に従って印刷を行った結果の例を示す図である。この例では、横方向の最大配置数8、縦方向の最大配置数6の用紙に総フレーム数480の動画を2個のフレーム選択で印刷を行った。図中の数字はフレーム番号である。図11(a)は始点が終点よりも時間的に早い例であり、図11(b)は始点が終点よりも時間的に遅い例である。図11(a)は始点フレームを100、終点フレームを335、(b)は始点フレームを335、終点フレームを100として印刷した例となる。   FIG. 11 is a diagram illustrating an example of a result of printing according to the second embodiment. In this example, a moving image having a total number of frames of 480 was printed by selecting two frames on a sheet having a maximum number of horizontal arrangements of 8 and a maximum of 6 vertical arrangements. The numbers in the figure are frame numbers. FIG. 11A is an example in which the start point is earlier in time than the end point, and FIG. 11B is an example in which the start point is later in time than the end point. FIG. 11A shows an example in which the start point frame is 100 and the end point frame is 335, and FIG. 11B is an example in which the start point frame is 335 and the end point frame is 100.

図11(a)の例では、用紙1101上にフレーム番号100の始点フレーム1102からフレーム番号335の終点フレーム1103までの48フレームが、フレーム間隔を5として時系列順に並んで印刷されている。図11(b)の例では、用紙1104上にフレーム番号335の始点フレーム1105からフレーム番号110の終点フレーム1106までの48フレームが、フレーム間隔を5として逆時系列順に並んで印刷されている。   In the example of FIG. 11A, 48 frames from the start frame 1102 with frame number 100 to the end frame 1103 with frame number 335 are printed on a sheet 1101 in a time-series order with a frame interval of 5. In the example of FIG. 11B, 48 frames from the start point frame 1105 of frame number 335 to the end point frame 1106 of frame number 110 are printed on the paper 1104 in the reverse chronological order with a frame interval of 5.

(第3の実施形態)
上記実施形態では、縦方向に選択フレームを配置し、横方向に各選択フレームを中心とした前後のフレームを配置するようして、縦方向の最大配置数を超えるフレームの選択は禁止するようにしたが、それに限定されるものではない。例えば図6に示したように、横方向の最大配置数8、縦方向の最大配置数6の用紙である場合、フレームの選択数を8まで許容するようにしてもよい。この場合、フレームの選択数が0〜6のときは既述したとおりであるが、フレームの選択数が7又は8のときは行列を入れ替えて、横方向に選択フレームを配置し、縦方向に各選択フレームを中心に6個のフレームを配置する。
(Third embodiment)
In the above embodiment, selection frames are arranged in the vertical direction and frames before and after the selection frame are arranged in the horizontal direction so that selection of frames exceeding the maximum arrangement number in the vertical direction is prohibited. However, the present invention is not limited to this. For example, as shown in FIG. 6, in the case of a sheet having the maximum number of horizontal arrangements of 8 and the maximum number of vertical arrangements of 6, the number of frame selections may be allowed up to 8. In this case, when the number of frame selections is 0 to 6, it is as described above. However, when the number of frame selections is 7 or 8, the matrix is exchanged and the selection frames are arranged in the horizontal direction, and the vertical direction. Six frames are arranged around each selected frame.

(第4の実施形態)
上記実施形態では用紙の方向を固定した例を説明したが、フレームの選択数に応じて、用紙の縦横の方向を決定するようにしてもよい。用紙は縦方向に使用する場合と横方向に使用する場合とで、1列に配置可能な最大フレーム数が異なっている。例えば図12(a)、(b)に示すように、用紙の長手方向の最大配置数が8、短手方向の最大配置数が5であるとする。
(Fourth embodiment)
In the above embodiment, an example in which the paper direction is fixed has been described. However, the vertical and horizontal directions of the paper may be determined according to the number of selected frames. The maximum number of frames that can be arranged in one row differs depending on whether the paper is used in the vertical direction or the horizontal direction. For example, as shown in FIGS. 12A and 12B, it is assumed that the maximum number of sheets in the longitudinal direction is 8 and the maximum number of sheets in the short direction is 5.

この場合に、フレームの選択数が0〜5であれば、図12(a)に示すように、長手方向を横方向とするように用紙の方向を決定する。図12(a)において太枠で囲んだフレームが選択フレームである。そして、例えばフレームの選択数が5であれば、縦方向となる短手方向にこれら5個の選択フレームを配置し、長手方向に各選択フレームを中心に8個のフレームを配置する。すなわち、フレームの選択数が所定の数(図12の例では5)以下の場合は、1列に配置可能な最大フレーム数が小さいほうの方向で用紙を使用する。   In this case, if the number of selected frames is 0 to 5, as shown in FIG. 12A, the paper direction is determined so that the longitudinal direction is the horizontal direction. In FIG. 12A, a frame surrounded by a thick frame is a selection frame. For example, if the number of frames to be selected is 5, these five selection frames are arranged in the short direction, which is the vertical direction, and eight frames are arranged in the longitudinal direction centering on each selection frame. That is, when the number of selected frames is equal to or less than a predetermined number (5 in the example of FIG. 12), the paper is used in the direction in which the maximum number of frames that can be arranged in one row is smaller.

それに対して、フレームの選択数が6〜8であれば、図12(b)に示すように、長手方向を縦方向とするように用紙の方向を決定する。図12(b)において太枠で囲んだフレームが選択フレームである。そして、例えば選択フレーム数が8であれば、縦方向となる長手方向にこれら8個の選択フレームを配置し、短手方向に各選択フレームを中心に5個のフレームを配置する。すなわち、フレームの選択数が所定の数(図12の例では5)よりも多い場合は、1列に配置可能な最大フレーム数が大きいほうの方向で用紙を使用する。   On the other hand, if the number of selected frames is 6 to 8, as shown in FIG. 12B, the paper direction is determined so that the longitudinal direction is the vertical direction. In FIG. 12B, a frame surrounded by a thick frame is a selection frame. For example, if the number of selected frames is 8, these 8 selected frames are arranged in the longitudinal direction which is the vertical direction, and 5 frames are arranged around each selected frame in the short direction. That is, when the number of selected frames is larger than a predetermined number (5 in the example of FIG. 12), the sheet is used in the direction in which the maximum number of frames that can be arranged in one row is larger.

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば上記実施形態では印刷装置が本発明を適用した印刷制御装置として機能する例を説明したが、例えば印刷装置に接続するパーソナルコンピュータや撮像装置等の機器が印刷制御装置として機能するようにしてもよい。   As mentioned above, although preferable embodiment of this invention was described, this invention is not limited to these embodiment, A various deformation | transformation and change are possible within the range of the summary. For example, in the above-described embodiment, an example in which the printing apparatus functions as a printing control apparatus to which the present invention is applied has been described. However, for example, a device such as a personal computer or an imaging apparatus connected to the printing apparatus may function as the printing control apparatus. Good.

(その他の実施形態)
また、本発明は、以下の処理を実行することによっても実現される。すなわち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(又はCPUやMPU等)がプログラムを読み出して実行する処理である。
(Other embodiments)
The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media, and a computer (or CPU, MPU, etc.) of the system or apparatus reads the program. It is a process to be executed.

101:バス、102:表示部、103:操作部、104:記憶部、105:画像入力部、106:CPU、107:動画選択部、108:フレーム選択部、109:動画データ読み込み部、110:フレーム取得部、111:フレーム取得数決定部、112:フレーム取得範囲決定部、113:フレーム配置数取得部、114:用紙判別部、115:フレームレイアウト部、116:印刷部   101: Bus, 102: Display unit, 103: Operation unit, 104: Storage unit, 105: Image input unit, 106: CPU, 107: Movie selection unit, 108: Frame selection unit, 109: Movie data reading unit, 110: Frame acquisition unit, 111: Frame acquisition number determination unit, 112: Frame acquisition range determination unit, 113: Frame arrangement number acquisition unit, 114: Paper determination unit, 115: Frame layout unit, 116: Printing unit

Claims (17)

動画を構成する複数のフレームを1枚の印刷用紙に配置して印刷するための印刷制御装置であって、
動画から一又は複数のフレームを選択するフレーム選択手段と、
前記フレーム選択手段により選択されたフレームを含む複数のフレームを1枚の印刷用紙に配置するレイアウトを決定するための制御手段であって、前記フレーム選択手段で選択されたフレーム数に応じて、レイアウトを決定する制御手段とを備えたことを特徴とする印刷制御装置。
A print control device for arranging and printing a plurality of frames constituting a moving image on one sheet of printing paper,
Frame selection means for selecting one or more frames from the video;
A control unit for determining a layout for arranging a plurality of frames including the frame selected by the frame selection unit on one printing paper, wherein the layout is determined according to the number of frames selected by the frame selection unit; And a control means for determining the printing control apparatus.
前記制御手段は、前記フレーム選択手段で選択されたフレーム数に応じて、動画から抽出するフレーム数、抽出するフレーム、抽出するフレームの印刷用紙への配置を決定することを特徴とする請求項1に記載の印刷制御装置。   The control means determines the number of frames to be extracted from a moving image, the frames to be extracted, and the arrangement of the frames to be extracted on a print sheet according to the number of frames selected by the frame selection means. The printing control apparatus according to 1. 前記制御手段は、前記フレーム選択手段により選択されたフレーム数に応じて、印刷用紙の縦方向又は横方向に配置するフレームの数を決定することを特徴とする請求項1又は2に記載の印刷制御装置。   3. The printing according to claim 1, wherein the control unit determines the number of frames to be arranged in a vertical direction or a horizontal direction of the printing paper according to the number of frames selected by the frame selection unit. Control device. 前記制御手段は、前記フレーム選択手段により選択されたフレームとその前後のフレームを抽出して印刷用紙にレイアウトすることを特徴とする請求項1ないし3のいずれか1項に記載の印刷制御装置。   4. The print control apparatus according to claim 1, wherein the control unit extracts a frame selected by the frame selection unit and frames before and after the frame and lays them out on a print sheet. 5. 前記制御手段は、前記フレーム選択手段により選択されたフレームとその前後のフレームが同じ行に配置されるようにレイアウトを決定することを特徴とする請求項4に記載の印刷制御装置。   The print control apparatus according to claim 4, wherein the control unit determines a layout so that the frame selected by the frame selection unit and frames before and after the frame are arranged in the same row. 印刷用紙の縦横それぞれに配置可能な最大フレーム数を取得するフレーム配置数取得手段をさらに有することを特徴とする請求項1ないし5のいずれか1項に記載の印刷制御装置。   6. The print control apparatus according to claim 1, further comprising a frame arrangement number acquisition unit configured to acquire a maximum number of frames that can be arranged in each of the vertical and horizontal directions of the printing paper. 前記制御手段は、前記フレーム選択手段でフレームが1つだけ選択された場合、前記フレーム配置数取得手段で取得した縦方向の配置数と横方向の配置数を乗じた数を最大として、前記フレーム選択手段で選択されたフレームを含みその前後から連続したフレームを抽出して時系列順に並べてレイアウトすることを特徴とする請求項6に記載の印刷制御装置。   When only one frame is selected by the frame selection means, the control means maximizes the number obtained by multiplying the number of arrangements in the vertical direction and the number of arrangements in the horizontal direction acquired by the frame arrangement number acquisition means. The print control apparatus according to claim 6, wherein frames that include the frame selected by the selection unit and that are continuous from the front and back of the frame are extracted and arranged in chronological order for layout. 前記制御手段は、前記フレーム選択手段で複数Nのフレームが選択された場合、印刷用紙を縦方向にN分割し、分割したN個の領域ごとにそれぞれ前記フレーム選択手段で選択されたフレームを含みその前後から連続したフレームを抽出して時系列順に並べてレイアウトすることを特徴とする請求項6又は7に記載の印刷制御装置。   The control means, when a plurality of N frames are selected by the frame selection means, divides the printing paper into N parts in the vertical direction, and includes the frames selected by the frame selection means for each of the divided N areas. 8. The print control apparatus according to claim 6, wherein continuous frames are extracted from before and after the frames and arranged in a time-series order for layout. 前記フレーム配置数取得手段で取得した縦方向の配置数を超えるフレームの選択を禁止することを特徴とする請求項6ないし8のいずれか1項に記載の印刷制御装置。   9. The print control apparatus according to claim 6, wherein selection of frames that exceed the number of arrangements in the vertical direction acquired by the frame arrangement number acquisition unit is prohibited. 前記制御手段は、前記フレーム配置数取得手段で取得した縦方向の配置数をNで除算した商の自然数部分Qが2以上であれば、1つの領域内にQ行のフレームを配置することを特徴とする請求項6ないし9のいずれか1項に記載の印刷制御装置。   If the natural number part Q of the quotient obtained by dividing the number of vertical arrangements acquired by the frame arrangement number acquisition unit by N is 2 or more, the control unit arranges Q rows of frames in one area. The print control apparatus according to claim 6, wherein the print control apparatus is a print control apparatus. 前記制御手段は、前記フレーム選択手段で選択されたフレームを含みその前後から連続したフレームを抽出する際に、前後いずれか一方でフレームが不足する場合、他方から不足する分だけ多く抽出することを特徴とする請求項8に記載の印刷制御装置。   When the control means extracts a frame that includes the frame selected by the frame selection means and continues from the front and back of the frame, if the frame is short on either the front or back side, the control means extracts a larger amount from the other. The print control apparatus according to claim 8, wherein the print control apparatus is a print control apparatus. 前記制御手段は、分割したN個の領域ごとにそれぞれ前記フレーム選択手段で選択されたフレームを含みその前後から連続したフレームを抽出する際に、複数の領域に重複して抽出されたフレームがある場合、該当する複数の領域を統合することを特徴とする請求項8又は11に記載の印刷制御装置。   When the control means extracts frames that include the frames selected by the frame selection means for each of the divided N areas and that is continuous from the front and back of the frames, there are frames extracted in duplicate in a plurality of areas. The print control apparatus according to claim 8 or 11, wherein a plurality of corresponding areas are integrated. 前記制御手段は、前記フレーム選択手段で2個のフレームが選択された場合、前記フレーム配置数取得手段で取得した縦方向の配置数と横方向の配置数を乗じた数を最大として、前記フレーム選択手段で最初に選択されたフレームを始点、最後に選択されたフレームを終点としてフレームを抽出して時系列順又は逆時系列順に並べて印刷する印刷形態とすることを特徴とする請求項6に記載の印刷制御装置。   When two frames are selected by the frame selection means, the control means maximizes the number obtained by multiplying the number of arrangements in the vertical direction and the number of arrangements in the horizontal direction acquired by the frame arrangement number acquisition means. 7. The printing mode according to claim 6, wherein a frame is extracted with a frame selected first by the selection means as a start point and a frame selected last as an end point, and is arranged and printed in time series order or reverse time series order. The printing control apparatus described. 前記制御手段は、前記フレーム選択手段により選択されたフレーム数に応じて、印刷用紙の縦横の方向を決定することを特徴とする請求項1ないし5のいずれか1項に記載の印刷制御装置。   The printing control apparatus according to claim 1, wherein the control unit determines a vertical and horizontal direction of the printing paper according to the number of frames selected by the frame selection unit. 前記印刷用紙は縦方向に使用する場合と横方向に使用する場合とで、1列に配置可能な最大フレーム数が異なっており、
前記制御手段は、前記選択手段により選択されたフレーム数が所定の数よりも多い場合は、前記1列に配置可能な最大フレーム数が大きいほうの方向で印刷用紙を使用すると決定し、前記選択手段により選択されたフレーム数が前記所定の数以下の場合は、前記1列に配置可能な最大フレーム数が小さいほうの方向で印刷用紙を使用すると決定することを特徴とする請求項14に記載の印刷制御装置。
The maximum number of frames that can be arranged in one row differs between when the printing paper is used in the vertical direction and when used in the horizontal direction,
The control means determines that the printing paper is used in the direction in which the maximum number of frames that can be arranged in one row is larger when the number of frames selected by the selection means is larger than a predetermined number, and the selection 15. The method according to claim 14, wherein when the number of frames selected by the means is equal to or less than the predetermined number, it is determined that the printing paper is used in a direction in which the maximum number of frames that can be arranged in one row is smaller. Print control device.
動画を構成する複数のフレームを1枚の印刷用紙に配置して印刷するための印刷制御方法であって、
印刷制御装置が、
動画から一又は複数のフレームを選択する手順と、
前記選択されたフレームを含む複数のフレームを1枚の印刷用紙に配置するレイアウトを決定するための手順であって、前記選択されたフレーム数に応じて、レイアウトを決定する手順とを有することを特徴とする印刷制御方法。
A printing control method for arranging and printing a plurality of frames constituting a moving image on one printing paper,
The print control device
Select one or more frames from the video,
And a procedure for determining a layout for arranging a plurality of frames including the selected frame on one printing paper, and determining a layout according to the number of the selected frames. A printing control method.
動画を構成する複数のフレームを1枚の印刷用紙に配置して印刷するための印刷制御を行うためのプログラムであって、
動画から一又は複数のフレームを選択する処理と、
前記選択されたフレームを含む複数のフレームを1枚の印刷用紙に配置するレイアウトを決定するための処理であって、前記選択されたフレーム数に応じて、レイアウトを決定する処理とをコンピュータに実行させるためのプログラム。
A program for performing printing control for arranging and printing a plurality of frames constituting a moving image on one printing paper,
Selecting one or more frames from the video;
A process for determining a layout for arranging a plurality of frames including the selected frame on a single print sheet, and determining a layout according to the selected number of frames. Program to let you.
JP2011262637A 2011-11-30 2011-11-30 Print control device Expired - Fee Related JP5854800B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011262637A JP5854800B2 (en) 2011-11-30 2011-11-30 Print control device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011262637A JP5854800B2 (en) 2011-11-30 2011-11-30 Print control device

Publications (2)

Publication Number Publication Date
JP2013115746A true JP2013115746A (en) 2013-06-10
JP5854800B2 JP5854800B2 (en) 2016-02-09

Family

ID=48710872

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011262637A Expired - Fee Related JP5854800B2 (en) 2011-11-30 2011-11-30 Print control device

Country Status (1)

Country Link
JP (1) JP5854800B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017092815A (en) * 2015-11-13 2017-05-25 株式会社コーチ・エィ Image display system, image display method and image display program

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7183325B2 (en) 2021-03-18 2022-12-05 ヤフー株式会社 Provision device, provision method and provision program
JP7183324B2 (en) 2021-03-18 2022-12-05 ヤフー株式会社 Provision device, provision method and provision program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003341172A (en) * 2002-05-30 2003-12-03 Fuji Photo Film Co Ltd Animation image printer
JP2007194829A (en) * 2006-01-18 2007-08-02 Casio Comput Co Ltd Camera, image processing apparatus, still picture generating method, program, and storage medium
JP2008092335A (en) * 2006-10-03 2008-04-17 Canon Inc Printer and its control method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003341172A (en) * 2002-05-30 2003-12-03 Fuji Photo Film Co Ltd Animation image printer
JP2007194829A (en) * 2006-01-18 2007-08-02 Casio Comput Co Ltd Camera, image processing apparatus, still picture generating method, program, and storage medium
JP2008092335A (en) * 2006-10-03 2008-04-17 Canon Inc Printer and its control method

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017092815A (en) * 2015-11-13 2017-05-25 株式会社コーチ・エィ Image display system, image display method and image display program

Also Published As

Publication number Publication date
JP5854800B2 (en) 2016-02-09

Similar Documents

Publication Publication Date Title
CN101383141B (en) Image display control apparatus and image display control method
JP2016136699A (en) Information processing apparatus, control method thereof, program, and storage medium
JP2013030161A (en) Image processor, image processing method and image processing program
JP2011217125A (en) Image processor, image processing method, and program
JP2008097435A (en) Image editing device, image editing method and program thereof
JP5854800B2 (en) Print control device
JP2011170796A (en) Display control device and display control method
JP2009122184A (en) Image forming apparatus
CN103718549B (en) Image processing apparatus
JP2011170785A (en) Display control device and display control method
JP2010021656A (en) Image processor and image processing method
JP5534857B2 (en) Display control device and control method of display control device
JP4685843B2 (en) Album editing apparatus and method, and program
JP2006221585A (en) Screen saver controller, screen saver control method and screen saver control program
JP2005055743A (en) Image display method
JP2007233797A (en) Preview reproduction method and device, program and medium
JP5820281B2 (en) Information processing apparatus, processing method thereof, and program
JP2009055272A (en) Image processing apparatus, image processing method, and image processing program
JP2018074337A (en) Moving image processing device, moving image processing method, and program
JP5091705B2 (en) Image forming apparatus
JP2007199223A (en) Image reproducing apparatus, program, and method
JP2009123003A (en) Capture image recording apparatus and capture image recording program
JP2009017017A (en) Multimedia playback device
JP2004194183A (en) Image processor and image pickup device
CN103733618A (en) Image processing device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141125

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150625

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150630

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150817

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151110

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151208

R151 Written notification of patent or utility model registration

Ref document number: 5854800

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees