JP6848713B2 - Program and information processing terminal - Google Patents
Program and information processing terminal Download PDFInfo
- Publication number
- JP6848713B2 JP6848713B2 JP2017121126A JP2017121126A JP6848713B2 JP 6848713 B2 JP6848713 B2 JP 6848713B2 JP 2017121126 A JP2017121126 A JP 2017121126A JP 2017121126 A JP2017121126 A JP 2017121126A JP 6848713 B2 JP6848713 B2 JP 6848713B2
- Authority
- JP
- Japan
- Prior art keywords
- locus
- prohibited area
- program
- point
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明は、ユーザが入力した文字列を所望のレイアウトに編集する情報処理端末のプログラムに関する。 The present invention relates to a program of an information processing terminal that edits a character string input by a user into a desired layout.
例えば特許文献1には、入力された文書データの文書種別を判定し、文書種別毎に予め設定された文書構成情報に従って文書データの体裁(例えば、文字のフォント、サイズ、太さ、又は配置)を整えることが可能な情報処理端末が開示されている。
For example, in
しかしながら、特許文献1に記載の情報処理端末では、予め設定された文章構成情報の範囲でしか文書データが編集できない。すなわち、文書データの編集の自由度が低いという課題がある。
However, in the information processing terminal described in
本発明は、上記の事情に鑑みてなされたものであり、その目的は、ユーザが入力した文字列を柔軟且つ簡単に編集可能な情報処理端末のプログラムを提供することにある。 The present invention has been made in view of the above circumstances, and an object of the present invention is to provide a program of an information processing terminal capable of flexibly and easily editing a character string input by a user.
本明細書では様々な開示を行う。開示例の1つであるプログラムは、表示面を有するディスプレイと、前記表示面に対応付けられたタッチ面を有するユーザインタフェースとを備える情報処理端末によって実行可能である。前記ユーザインタフェースは、前記タッチ面に入力媒体がタッチされた場合に、前記入力媒体がタッチされた前記タッチ面上の位置を示す位置情報を出力するインタフェースである。該プログラムは、予め定められた禁止領域を含む背景画像を前記ディスプレイに表示させる第1表示処理と、文字列を入力する入力操作を前記ユーザインタフェースを通じて受け付ける第1受付処理と、前記タッチ面上を移動する前記入力媒体の軌跡を示す軌跡情報を取得する取得処理とを前記情報処理端末に実行させる。前記軌跡情報は、前記ユーザインタフェースから出力される前記位置情報に基づいて生成される情報である。該プログラムは、前記取得処理で取得した前記軌跡情報が前記表示面上の前記禁止領域に重なる前記軌跡を示しているか否かを判断する第1判断処理と、前記第1判断処理で前記禁止領域に重なる前記軌跡を示していると判断したことに応じて、前記軌跡が前記禁止領域を避けるように、前記取得処理で取得した前記軌跡情報を補正する補正処理と、前記補正処理で補正した前記軌跡情報で示される前記軌跡に沿った前記表示面上の複数の位置それぞれにおいて、前記第1受付処理で入力された前記文字列に含まれる複数の文字それぞれを、前記文字列内における順番に従って前記背景画像に合成する第1合成処理とを前記情報処理端末に実行させる。 Various disclosures are made herein. The program, which is one of the disclosure examples, can be executed by an information processing terminal including a display having a display surface and a user interface having a touch surface associated with the display surface. The user interface is an interface that outputs position information indicating a position on the touch surface to which the input medium is touched when the input medium is touched on the touch surface. The program performs a first display process of displaying a background image including a predetermined prohibited area on the display, a first reception process of accepting an input operation for inputting a character string through the user interface, and the touch surface. The information processing terminal is made to execute an acquisition process for acquiring locus information indicating a locus of the moving input medium. The locus information is information generated based on the position information output from the user interface. The program has a first determination process for determining whether or not the locus information acquired in the acquisition process indicates the trajectory overlapping the prohibited area on the display surface, and the prohibited area in the first determination process. In response to the determination that the locus overlaps with the above, the correction process for correcting the locus information acquired in the acquisition process and the correction process corrected by the correction process so that the locus avoids the prohibited area. At each of the plurality of positions on the display surface along the locus indicated by the locus information, each of the plurality of characters included in the character string input in the first reception process is subjected to the order in the character string. The information processing terminal is made to execute the first compositing process for compositing with the background image.
上記構成によれば、ユーザが入力媒体を用いてタッチ面上に描いた軌跡に沿ってレイアウトされた文字列が背景画像に合成される。これにより、直感的な操作で柔軟且つ簡単に文字列をレイアウトすることができる。また、ユーザが描いた軌跡が予め定められた禁止領域に重なる場合に、当該禁止領域を避けるように軌跡情報が補正される。これにより、強調したい絵或いは文字が配置された背景画像上の領域を禁止領域に設定しておけば、当該絵或いは文字が入力された文字列で隠れてしまうことを抑制できる。 According to the above configuration, a character string laid out along a trajectory drawn by the user on the touch surface using the input medium is combined with the background image. This makes it possible to lay out character strings flexibly and easily with intuitive operations. Further, when the locus drawn by the user overlaps the predetermined prohibited area, the locus information is corrected so as to avoid the prohibited area. As a result, if the area on the background image in which the picture or character to be emphasized is arranged is set as the prohibited area, it is possible to prevent the picture or character from being hidden by the input character string.
開示例の他の1つであるプログラムは、表示面を有するディスプレイと、前記表示面に対応付けられたタッチ面を有するユーザインタフェースとを備える情報処理端末によって実行可能である。前記ユーザインタフェースは、前記タッチ面に入力媒体がタッチされた場合に、前記入力媒体がタッチされた前記タッチ面上の位置を示す位置情報を出力するインタフェースである。該プログラムは、輪郭線を含む背景画像を前記ディスプレイに表示させる表示処理と、文字列を入力する入力操作を前記ユーザインタフェースを通じて受け付ける受付処理と、前記背景画像の前記輪郭線に沿って、前記受付処理で入力された前記文字列に含まれる複数の文字それぞれを、前記文字列内における順番に従って合成する合成処理とを前記情報処理端末に実行させ、前記合成処理において、前記受付処理で入力された前記複数の文字それぞれを、当該文字が配置される位置の前記輪郭線の形状に合わせてエンベロープ変形して、前記背景画像に合成する。 The program, which is another one of the disclosure examples, can be executed by an information processing terminal including a display having a display surface and a user interface having a touch surface associated with the display surface. The user interface is an interface that outputs position information indicating a position on the touch surface to which the input medium is touched when the input medium is touched on the touch surface. The program includes a display process for displaying a background image including a contour line on the display, a reception process for receiving an input operation for inputting a character string through the user interface, and the reception along the contour line of the background image. The information processing terminal is made to execute a synthesis process of synthesizing each of a plurality of characters included in the character string input in the process according to the order in the character string, and is input in the reception process in the synthesis process. Each of the plurality of characters is envelope-deformed according to the shape of the contour line at the position where the character is arranged, and is combined with the background image.
以下、適宜図面を参照して本発明の実施形態について説明する。なお、以下に説明される実施形態は本発明の一例にすぎず、本発明の要旨を変更しない範囲で、本発明の実施形態を適宜変更できることは言うまでもない。例えば、後述する各処理の実行順序は、本発明の要旨を変更しない範囲で、適宜変更することができる。 Hereinafter, embodiments of the present invention will be described with reference to the drawings as appropriate. It goes without saying that the embodiments described below are merely examples of the present invention, and the embodiments of the present invention can be appropriately changed without changing the gist of the present invention. For example, the execution order of each process described later can be appropriately changed without changing the gist of the present invention.
図1は、本実施形態に係るシステム100の概略図である。図1に示されるシステム100は、MFP10と、情報処理端末50とで構成されている。MFP10及び情報処理端末50は、通信ネットワーク101を通じて通信可能に構成されている。通信ネットワーク101は、例えば、有線LAN、無線LAN、或いはこれらの組み合わせであってもよい。または、MFP10及び情報処理端末50は、USBケーブルによって接続されていてもよい。
FIG. 1 is a schematic view of the
MFP10は、図1に示されるように、プリンタ11と、スキャナ12と、ディスプレイ23と、ユーザI/F24と、通信I/F25と、CPU31と、メモリ32と、通信バス33とを主に備える。MFP10を構成する各構成要素は、通信バス33を通じて相互に接続されている。
As shown in FIG. 1, the
プリンタ11は、画像データで示される画像をシートに記録するプリント動作を実行するハードウェアである。本実施形態では、インクを吐出して画像を記録するインクジェット方式のプリンタ11の例を説明するが、プリンタ11の記録方式は電子写真方式等であってもよい。スキャナ12は、原稿に記録されている画像を読み取って画像データを生成するスキャン動作を実行するハードウェアである。なお、スキャナ12は、省略可能である。
The printer 11 is hardware that executes a printing operation of recording an image represented by image data on a sheet. In the present embodiment, an example of an inkjet printer 11 that ejects ink to record an image will be described, but the recording method of the printer 11 may be an electrophotographic method or the like. The
ディスプレイ23は、例えば、液晶ディスプレイ、有機ELディスプレイ等であり、各種情報を表示する表示面を備える。 The display 23 is, for example, a liquid crystal display, an organic EL display, or the like, and includes a display surface for displaying various information.
ユーザI/F24は、入力操作を受け付けるインタフェースである。具体的には、ユーザI/F24はボタンを有しており、押下されたボタンに対応づけられた各種の操作信号をCPU31へ出力する。さらに、ユーザI/F24は、ディスプレイ23の表示面に重畳された膜状のタッチセンサを有していてもよい。ディスプレイ23の表示面に表示されたオブジェクトを指定する操作、文字列或いは数字列を入力する操作は、入力操作の一例である。「オブジェクト」とは、例えば、ディスプレイ23に表示された文字列、アイコン、ボタン、リンク、ラジオボタン、チェックボックス、プルダウンメニュー等である。
The user I /
タッチセンサとして実現されるユーザI/F24は、ユーザがタッチした表示面上の位置を示す位置情報を出力する。なお、本明細書中における「タッチ」とは、入力媒体を表示面に接触させる操作全般を含む。また、入力媒体が表示面に触れていなくても、表示面との間の距離がごく僅かな位置まで入力媒体を近接させる「ホバー」或いは「フローティングタッチ」を、前述の「タッチ」の概念に含めてもよい。さらに入力媒体とは、ユーザの指であってもよいし、タッチペン等であってもよい。ディスプレイ23に表示されたオブジェクトの位置をタップする入力操作は、当該オブジェクトを指定する指定操作の一例である。以下、オブジェクトを指定する指定操作を、単に「オブジェクトの指定」、「オブジェクトに対する指定操作」等と表記することがある。 The user I / F24 realized as a touch sensor outputs position information indicating a position on the display surface touched by the user. The term "touch" in the present specification includes all operations of bringing the input medium into contact with the display surface. Further, even if the input medium does not touch the display surface, the "hover" or "floating touch" that brings the input medium close to the position where the distance from the display surface is very small is adopted as the above-mentioned concept of "touch". May be included. Further, the input medium may be a user's finger, a stylus, or the like. The input operation of tapping the position of the object displayed on the display 23 is an example of the designation operation of designating the object. Hereinafter, the specification operation for specifying an object may be simply referred to as "object specification", "designation operation for an object", or the like.
通信I/F25は、通信ネットワーク101を通じて外部装置と通信可能なインタフェースである。すなわち、MFP10は、通信I/F25を通じて外部装置に各種情報を送信し、通信I/F25を通じて外部装置から各種情報を受信する。通信I/F25の具体的な通信手順は特に限定されないが、例えば、Wi−Fi(登録商標)を採用することができる。また、MFP10及び情報処理端末50がUSBケーブルで接続される場合、通信I/F25は、USBケーブルを着脱可能なUSB−I/Fであってもよい。
The communication I / F 25 is an interface capable of communicating with an external device through the
CPU31は、MFP10の全体動作を制御するものである。CPU31は、ユーザI/F24を通じて入力された各種情報、通信I/F25を通じて外部装置から受信した各種情報等に基づいて、後述する各種プログラムをメモリ32から読み出して実行する。CPU31及びメモリ32は、コントローラの一例を構成する。
The
メモリ32は、OS34と、装置プログラム35とを記憶している。装置プログラム35は、単一のプログラムであってもよいし、複数のプログラムの集合体であってもよい。また、メモリ32は、装置プログラム35の実行に必要なデータ或いは情報等を記憶する。メモリ32は、例えば、RAM、ROM、EEPROM、HDD、MFP10に着脱されるUSBメモリ等の可搬記憶媒体、CPU31が備えるバッファ等、或いはそれらの組み合わせによって構成される。
The
メモリ32は、コンピュータが読み取り可能なストレージ媒体であってもよい。コンピュータが読み取り可能なストレージ媒体とは、non−transitoryな媒体である。non−transitoryな媒体には、上記の例の他に、CD−ROM、DVD−ROM等の記録媒体も含まれる。また、non−transitoryな媒体は、tangibleな媒体でもある。一方、インターネット上のサーバなどからダウンロードされるプログラムを搬送する電気信号は、コンピュータが読み取り可能な媒体の一種であるコンピュータが読み取り可能な信号媒体であるが、non−transitoryなコンピュータが読み取り可能なストレージ媒体には含まれない。後述する情報処理端末50のメモリ62についても同様である。
The
情報処理端末50は、図1に示されるように、ディスプレイ53と、ユーザI/F54と、通信I/F55と、CPU61と、メモリ62と、通信バス63とを主に備える。情報処理端末50に含まれるディスプレイ53、ユーザI/F54、通信I/F55、CPU61、メモリ62、及び通信バス63は、MFP10に含まれるディスプレイ23、ユーザI/F24、通信I/F25、CPU31、メモリ32、及び通信バス33と同様の構成であるので、説明は省略する。CPU61及びメモリ62は、コントローラの一例である。情報処理端末50は、例えば、携帯電話、スマートフォン、タブレット端末、或いはPC等である。
As shown in FIG. 1, the
情報処理端末のユーザI/F54は、入力媒体をタッチしたタッチ面上の位置を示す位置情報を出力する位置センサを備える。一例として、ユーザI/F54のタッチ面は、ディスプレイ53の表示面に重ねられていてもよい。すなわち、ディスプレイ53及びユーザI/F54は、タッチパネルディスプレイを構成していてもよい。そして、この場合の位置情報は、入力媒体がタッチした表示面上の位置を示す。これは、タッチ面上のタッチ位置に対応する表示面上の位置の一例である。
The user I /
他の例として、ユーザI/F54のタッチ面は、ディスプレイ53と異なるタッチパッド上に設けられていてもよい。この場合のユーザI/F54は、位置センサを有するタッチパッドとなる。さらに他の例として、ユーザI/F54のタッチ面は、机や床などの任意の面であってもよい。この場合のユーザI/F54は、位置センサを有する入力媒体であるタッチペンとなる。また、この場合のOS64は、タッチ面上を移動する入力媒体に追従して表示面上を移動するポインタ画像(例えば、矢印を表す画像)を、ディスプレイ53に表示させる。そして、この場合の位置情報は、ポインタ画像が表示された表示面上の位置を示す。これは、タッチ面上のタッチ位置に対応する表示面上の位置の他の例である。
As another example, the touch surface of the user I /
本明細書において、タッチ面に当接させた状態の入力媒体を移動させる入力操作を、「スワイプ操作」と表記する。スワイプ操作は、タッチ面上を任意の向きに移動させることが可能な入力操作である。より詳細には、スワイプ操作を行うユーザは、任意の形状(例えば、直線、円弧、或いはこれらの組み合わせ等)の軌跡を描くように、タッチ面上で入力媒体を移動させることができる。 In the present specification, the input operation of moving the input medium in contact with the touch surface is referred to as "swipe operation". The swipe operation is an input operation that can be moved in any direction on the touch surface. More specifically, the user performing the swipe operation can move the input medium on the touch surface so as to draw a locus of an arbitrary shape (for example, a straight line, an arc, or a combination thereof).
メモリ62は、例えば図2(A)に示されるように、複数のテンプレート画像データを記憶することができる。テンプレート画像データは、ハガキの通信面に記録されるテンプレート画像を示すデータである。本実施形態では、年賀状の通信面に記録されるテンプレート画像の例を説明するが、テンプレート画像の用途はこれに限定されず、例えば、暑中見舞い、クリスマスカード等にも応用することができる。テンプレート画像データは背景画像データの一例であり、テンプレート画像は背景画像の一例である。
The
また、メモリ62は、テンプレート画像データに対応付けて、禁止領域情報を記憶することができる。禁止領域情報は、対応するテンプレート画像データで示されるテンプレート画像上の禁止領域を特定するための情報である。一例として、禁止領域は、横1000ピクセル×縦1500ピクセルのテンプレート画像の左上端位置を基準として特定される。より詳細には、テンプレート画像データ“テンプレートA”の禁止領域情報は、テンプレート画像上の左端位置“left”、上端位置“top”、右端位置“right”、及び下端位置“bottom”の組み合わせによって、禁止領域を特定する。
Further, the
他の例として、禁止領域は、テンプレート画像を構成する画素の特徴によって特定される。より詳細には、テンプレート画像データ“テンプレートC”の禁止領域情報は、テンプレート画像を構成する複数の画素のうち、透過画素が連続する領域(以下、「透過領域」と表記する。)を、禁止領域と特定する。透過画素とは、例えば、各画素に設定された4つの値(例えば、R、G、B、α)のうち、α値で示される透過度が閾値(例えば、90%)以上の画素を指す。なお、禁止領域は、透過領域を含む相似形の領域であってもよい。すなわち、禁止領域は、透過領域を囲む帯状のマージン領域を含んでもよい。 As another example, the prohibited area is specified by the characteristics of the pixels that make up the template image. More specifically, the prohibited area information of the template image data "template C" prohibits a region in which transparent pixels are continuous (hereinafter, referred to as "transparent region") among a plurality of pixels constituting the template image. Identify as an area. The transparent pixel refers to, for example, a pixel in which the transparency indicated by the α value is a threshold value (for example, 90%) or more among the four values (for example, R, G, B, α) set for each pixel. .. The prohibited area may be a similar figure area including a transparent area. That is, the prohibited area may include a band-shaped margin area surrounding the transparent area.
さらに、禁止領域情報は、例えば図15(A)に示されるように、禁止領域に含まれる複数の画素それぞれのZ方向の高さを示す情報(以下、「高さ情報」と表記する。)を含むことができる。Z方向とは、表示面に交差する方向を指す。より詳細には、Z方向とは、表示面に平行なX方向及びY方向に直交する方向を指す。高さ情報の具体例は特に限定されないが、例えば、禁止領域の各画素と基準面とのZ方向の距離を示す情報でもよいし、禁止領域内の座標を入力すると高さ情報が出力される関数でもよい。 Further, the prohibited area information is information indicating the height of each of the plurality of pixels included in the prohibited area in the Z direction (hereinafter, referred to as "height information"), as shown in FIG. 15A, for example. Can be included. The Z direction refers to a direction that intersects the display surface. More specifically, the Z direction refers to a direction parallel to the display surface and orthogonal to the X and Y directions. Specific examples of the height information are not particularly limited, but for example, information indicating the distance between each pixel in the prohibited area and the reference plane in the Z direction may be used, or height information is output when the coordinates in the prohibited area are input. It may be a function.
禁止領域情報は、例えば、テンプレート画像データの制作者或いは端末プログラム65の開発者によって予め設定される。また、禁止領域情報が対応付けられていないテンプレート画像データがメモリ62に記憶されていてもよい。すなわち、テンプレート画像データの制作者或いは端末プログラム65の開発者は、例えば、耐言おうするテンプレート画像上の強調したい絵や文字列、写真や差出人の情報を合成するために予め予約された領域等を、禁止領域に設定すればよい。
The prohibited area information is set in advance by, for example, the creator of the template image data or the developer of the
また図示は省略するが、メモリ62には、写真フォルダが設けられていてもよい。写真フォルダには、例えば、不図示のカメラで撮影した写真データ、或いは不図示のサーバからダウンロードした写真データ等が格納される。
Although not shown, the
[システム100の動作]
図3〜図6を参照して、本実施形態に係るシステム100の動作を説明する。
[Operation of system 100]
The operation of the
本明細書のフローチャートは、基本的に、プログラムに記述された命令に従ったCPU31、61の処理を示す。すなわち、以下の説明における「判断」、「抽出」、「選択」、「算出」、「決定」、「特定」、「取得」、「受付」、「制御」等の処理は、CPU31、61の処理を表している。CPU31、61による処理は、OS34、64を介したハードウェア制御も含む。なお、「取得」は要求を必須とはしない概念で用いる。すなわち、CPU61が要求することなくデータを受信するという処理も、「CPU61がデータを取得する」という概念に含まれる。また、本明細書中の「データ」とは、コンピュータに読取可能なビット列で表される。そして、実質的な意味内容が同じでフォーマットが異なるデータは、同一のデータとして扱われるものとする。本明細書中の「情報」についても同様である。
The flowchart of the present specification basically shows the processing of the
まず、情報処理端末50の端末プログラム65は、ユーザの指示に従ってOS64によって起動されたことに応じて、図7(A)に示されるテンプレート選択画面をディスプレイ53に表示させる(S11)。テンプレート選択画面は、複数のテンプレートアイコン111、112、113、114を含む。テンプレートアイコン111〜114は、メモリ62に記憶された複数のテンプレート画像データの1つに対応する。そして、端末プログラム65は、テンプレート選択画面に対する入力操作を、ユーザI/F54を通じて受け付ける(S12)。S12の処理は、第3受付処理の一例である。
First, the
次に、端末プログラム65は、例えばテンプレートアイコン113を指定する指定操作をユーザI/F54を通じて受け付けたことに応じて(S12:Yes)、指定されたテンプレートアイコン113に対応付けられたテンプレート画像データ“テンプレートC”を、メモリ62から読み出す。次に、端末プログラム65は、図7(B)に示されるテンプレート編集画面を、テンプレート選択画面に代えてディスプレイ53に表示させる(S13)。S13の処理は、第1表示処理及び表示処理の一例である。そして、端末プログラム65は、テンプレート編集画面に対する入力操作を、ユーザI/F54を通じて受け付ける(S14〜S16)。
Next, the
テンプレート編集画面は、テンプレート画像121と、[テキスト]アイコン125と、[プリント]アイコン126とを含む。テンプレート画像121は、メモリ62から読み出したテンプレート画像データ“テンプレートC”で示される画像である。また、テンプレート画像121は、透過領域122を含む。なお、本実施形態では、透過領域122=禁止領域なので、「禁止領域122」と表記することがある。[テキスト]アイコン125は、テンプレート画像121に文字列を合成する指示に対応する。[プリント]アイコン126は、後述する処理によって編集されたテンプレート画像121をハガキの通信面に記録する指示に対応する。
The template editing screen includes a
端末プログラム65は、例えば、透過領域122を指定する指定操作をユーザI/F54を通じて受け付けたことに応じて(S14:Yes)、図8(A)に示される写真選択画面を、テンプレート編集画面に代えてディスプレイ53に表示させる(S17)。写真選択画面は、写真アイコン131、132、133、134、135、136を含む。写真アイコン131〜136それぞれは、メモリ62の写真フォルダに格納された複数の写真データの1つに対応する。そして、端末プログラム65は、写真選択画面に対する入力操作を、ユーザI/F54を通じて受け付ける(S18)。
The
次に、端末プログラム65は、例えば、写真アイコン135を指定する指定操作をユーザI/F54を通じて受け付けたことに応じて(S18:Yes)、指定された写真アイコン135に対応する写真データで示される写真を、テンプレート画像121の透過領域122に合成する(S19)。そして、端末プログラム65は、図8に示されるように、透過領域122に写真が合成されたテンプレート画像121を含むテンプレート編集画面を、写真選択画面に代えてディスプレイ53に表示させる(S13)。
Next, the
端末プログラム65は、写真を合成したテンプレート画像121を含むテンプレート編集画面をディスプレイ53に表示する処理を、APIを介してOS64に指示してもよい。写真を合成したテンプレート画像121とは、例えば、写真アイコン135に対応する写真データで示される写真をZ方向の奥側、テンプレート画像121をZ方向の手前側とし、且つ透過領域122の中心と写真の中心とが一致するように、テンプレート画像121に写真を合成した画像である。これにより、テンプレート画像121に合成された写真のうち、透過領域と重なる部分が表示され、透過領域と異なる領域と重なる部分がテンプレート画像121によって塗りつぶされる。
The
また、端末プログラム65は、例えば、図8(B)の[テキスト]アイコン125を指定する指定操作をユーザI/F54を通じて受け付けたことに応じて(S15:Yes)、テキスト合成処理を実行する(S20)。テキスト合成処理は、ユーザが入力した文字列を、ユーザが指定したレイアウトでテンプレート画像121上に合成する処理である。図4を参照して、テキスト合成処理の詳細を説明する。
Further, the
まず、端末プログラム65は、図9(A)に示されるテキスト入力画面を、テンプレート編集画面に代えてディスプレイ53に表示させる(S31)。テキスト入力画面は、テンプレート画像121と、[A]アイコン141と、[〜]アイコン142と、[属]アイコン143とを含む。そして、端末プログラム65は、テキスト入力画面に対する入力操作を、ユーザI/F54を通じて受け付ける(S32、S33)。テキスト入力画面において、[A]アイコン141、[〜]アイコン142、及び[属]アイコン143のうちの1つが選択状態となり、その他が非選択状態となる。
First, the
図9(A)に示されるテキスト入力画面は、[A]アイコン141が選択状態であり、[〜]アイコン142及び[属]アイコン143が非選択状態であり、テキストボックス144及びソフトウェアキーボード145を含む。すなわち、[A]アイコン141を選択状態とすることによって、テキスト入力画面を通じて文字列が入力可能となる。また、端末プログラム65は、例えば、図9(B)及び図10に示されるテキスト入力画面の[A]アイコン141を指定する指定操作をユーザI/F54を通じて受け付けたことに応じても、図9(A)に示されるテキスト入力画面をディスプレイ53に表示させる。
In the text input screen shown in FIG. 9A, the [A]
また、端末プログラム65は、例えば、図9(A)に示される[〜]アイコン142を指定する指定操作をユーザI/F54を通じて受け付けたことに応じて、[〜]アイコン142を選択状態とし、[A]アイコン141及び[属]アイコン143を非選択状態とする。そして、端末プログラム65は、図10(A)に示されるように、[完了]アイコン146をテキスト入力画面に表示させる。[〜]アイコン142を選択状態とすることによって、ソフトウェアキーボード145を通じて入力された文字列のレイアウトが指定可能となる。
Further, the
さらに、端末プログラム65は、例えば、図10(A)に示される[属]アイコン143を指定する指定操作をユーザI/F54を通じて受け付けたことに応じて、[属]アイコン143を選択状態とし、[A]アイコン141及び[〜]アイコン142を非選択状態とする。そして、端末プログラム65は、文字列の属性(例えば、フォントタイプ、フォントサイズ、色など)の指定を受け付ける不図示のオブジェクトをテキスト入力画面に表示させる。そして、端末プログラム65は、ソフトウェアキーボード145を通じて入力された文字列の属性を、当該オブジェクトを通じて受け付けた属性に変更する。
Further, the
端末プログラム65は、例えば、N(=4)個の文字を含む文字列“よろしく”の入力操作及び[確定]アイコンを指定する指定操作を、図9(A)に示されるソフトウェアキーボード145を通じて受け付ける(S32:Yes)。この処理は、第1受付処理及び受付処理の一例である。次に、端末プログラム65は、入力された文字数N(Nは2以上の整数であって、本実施形態では“4”)と要素数が一致する配列“文字[i]”をメモリ62内に確保する。そして、端末プログラム65は、入力された各文字“よ”、“ろ”、“し”、“く”の文字コードを、文字[i]に入力順に記憶させる(S34)。
The
入力された文字列内における文字[i]の順番は、変数iの昇順である。すなわち、ソフトウェアキーボード145を通じて1文字ずつ順番に入力された場合の「順番」は、入力順に対応する。一方、所謂コピー&ペースト機能を用いて複数の文字が纏めて入力された場合の「順番」は、横書きの場合は左端から右向きの順、縦書きの場合は上端から下向きの順である。但し、「順番」の具体例は前述の例に限定されず、例えば、横書きの場合の右端から左向きの順、縦書きの場合の下端から上向きの順等でもよい。
The order of the characters [i] in the input character string is the ascending order of the variable i. That is, the "order" when characters are input one by one through the
次に、端末プログラム65は、テンプレート画像121上のテキストボックス144の表示位置(以下、「初期位置」と表記する。)に、入力された文字列“よろしく”示す文字画像を合成する(S35)。そして、端末プログラム65は、図9(B)に示されるように、文字列“よろしく”が初期位置に合成されたテンプレート画像121を含むテキスト入力画面を、ディスプレイ53に表示させる(S31)。
Next, the
次に、端末プログラム65は、例えば、図9(B)の[〜]アイコン142を指定する指定操作をユーザI/F54を通じて受け付けたことに応じて(S32:No&S33:レイアウト)、ソフトウェアキーボード145に代えて、[完了]アイコン146をテキスト入力画面に表示させる。また、端末プログラム65は、軌跡情報を記憶する配列“軌跡[i]”をメモリ62内に確保する。軌跡[i]は、位置センサから出力される位置情報を記憶する。すなわち、軌跡情報は、複数の位置情報を含む。軌跡[i]の要素数は、後述するS36で位置情報を記憶させるのに十分な数とする。
Next, the
次に、端末プログラム65は、[〜]アイコン142が選択状態にされたテキスト入力画面のテンプレート画像121上において、ユーザI/F54を通じてスワイプ操作を受け付ける(S37:No)。そして、端末プログラム65は、例えば図2(B)に示されるように、スワイプ操作中に所定の時間間隔でユーザI/F54から出力される位置情報を、軌跡[i]に出力順に記憶させる(S36)。S36、S37の処理は、タッチ面上を移動する入力媒体の軌跡を示す軌跡情報を取得する取得処理の一例である。なお、図2(B)に示される軌跡情報は、ユーザI/F54から出力される位置情報に基づいて、端末プログラム65が生成してもよいし、OS64が生成して端末プログラム65に引き渡してもよい。
Next, the
なお、本実施形態では、繰り返し実行されるS36において、図2(B)に示されるように、位置情報が軌跡[1]〜[200]に記憶されたものとする。また、端末プログラム65は、例えば図10(A)に示されるように、スワイプ操作によってタッチ面上を移動する入力媒体に追従して、軌跡を示す軌跡画像147を表示面上の対応する位置に表示させる。軌跡画像147は、図2(B)に示される位置情報で示される表示面上の位置を結ぶ線である。
In the present embodiment, in S36 which is repeatedly executed, it is assumed that the position information is stored in the loci [1] to [200] as shown in FIG. 2 (B). Further, as shown in FIG. 10A, for example, the
次に、端末プログラム65は、スワイプ操作が終了したと判断したことに応じて(S37:Yes)、軌跡情報で示される軌跡が禁止領域122に重なっているか否かを判断する(S38)。換言すれば、端末プログラム65は、軌跡情報に含まれる複数の位置情報の一部が禁止領域122内の位置を示すか否かを判断する。さらに換言すれば、端末プログラム65は、表示面に表示させた軌跡画像147が透過領域122に重なるか否かを判断する。S38の処理は、第1判断処理の一例である。
Next, the
次に、端末プログラム65は、軌跡が禁止領域122に重ならないと判断したことに応じて(S38:No)、レイアウト処理Aを実行する(S39)。スワイプ操作の終了は、入力媒体がタッチ面から離間されたこと、より詳細には、位置情報がユーザI/F54から出力されなくなったことによって判断できる。レイアウト処理Aは、ソフトウェアキーボード145を通じて入力された文字列“よろしく”を、S366で記憶した軌跡情報で示される入力媒体の移動軌跡に沿って、テンプレート画像121に合成する処理である。図5を参照して、レイアウト処理Aの詳細を説明する。
Next, the
まず、端末プログラム65は、軌跡情報に含まれる位置情報のうち、ソフトウェアキーボード145を通じて入力された文字数Nに一致する数の位置情報を抽出する(S41〜S45)。換言すれば、端末プログラム65は、スワイプ操作の軌跡上の点を対象点として抽出する抽出処理(S41、S44)を、対象点をN個抽出するまで繰り返し実行する。本実施形態では、Ramer−Douglas−Peuckerアルゴリズムを用いて、スワイプ操作の軌跡上の対象点を抽出する。図11を参照して、スワイプ操作の軌跡から4つの対象点を抽出する方法を説明する。
First, the
端末プログラム65は、図11(A)に示されるように、軌跡の始点及び終点を対象点として抽出する(S41)。すなわち、端末プログラム65は、軌跡[1]の要素である位置情報(x1,y1)と、軌跡[200]の要素である位置情報(x200,y200)とで示される表示面上の点を、対象点として抽出する。そして、端末プログラム65は、対象点を示す配列“軌跡[j]”のインデックス“1”、“200”をメモリ62に一時記憶させる。そして、端末プログラム65は、抽出した特徴点の数を示す変数iに2をセットする(S42)。S41の処理は、1回目の抽出処理の一例である。
As shown in FIG. 11A, the
次に、端末プログラム65は、変数iが文字数Nに達するまで(S43:No)、S44、S45の処理を繰り返し実行する。より詳細には、端末プログラム65は、既に抽出した対象点を結ぶ仮想線から最も遠い軌跡上の点を、対象点として抽出する(S44)。そして、端末プログラム65は、変数iに1を加算する(S45)。S44の処理は、2回目以降の抽出処理の一例である。
Next, the
まず、端末プログラム65は、図11(B)に示されるように、2つの対象点を結ぶ破線から最も遠い軌跡上の点として、軌跡[72]で示される対象点を抽出し、インデックス“72”をメモリ62に一時記憶させる。また、端末プログラム65は、図11(C)に示されるように、3つの対象点を結ぶ破線から最も遠い軌跡上の点として、軌跡[38]で示される対象点を抽出し、インデックス“38”をメモリ62に一時記憶させる。これにより、例えば、軌跡の始点、終点、曲点、及び閾値長さ以上の直線の中点のうちのN点が、対象点として抽出される。曲点とは、例えば、軌跡の向きが大きく変わる点(例えば、Uターンする点、鋭角に曲がる点)であって、一般的に「エッジ」或いは「コーナー」等と呼ばれる点を指す。また、数学上の変曲点、極大点、極小点等に相当する点は、曲点に含まれてもよい。
First, as shown in FIG. 11B, the
次に、端末プログラム65は、変数iが文字数Nに達したことに応じて(S43:Yes)、軌跡[1]、[200]、[72]、[38]で示される対象点を、軌跡の方向に沿って並び替える(S46)。より詳細には、端末プログラム65は、入力された文字数N(=4)と要素数が一致する配列“対象点[i]”をメモリ62内に確保する。そして、端末プログラム65は、軌跡[1]、[200]、[72]、[38]の要素である位置情報を、メモリ62に一時記憶させたインデックスの昇順[1]、[38]、[72]、[200]に、対象点[1]〜[4]に記憶させる。
Next, the
次に、端末プログラム65は、変数iに初期値(=1)をセットする(S47)。そして、端末プログラム65は、文字[i]で示される文字を対象点[i]で示されるテンプレート画像121上の位置に合成する処理(S48)を、変数iをインクリメントしながら繰り返し実行する(S49:No→S50)。次に図4に戻って、端末プログラム65は、図10(B)に示されるように、文字列“よろしく”がスワイプ操作の軌跡に沿って合成されたテンプレート画像121を含むテキスト入力画面を、ディスプレイ53に表示させる(S31)。
Next, the
すなわち、端末プログラム65は、対象点[1]の位置情報(x1、y1)で示されるテンプレート画像121上の位置に、文字[1]で示される文字“よ”を合成する。また、端末プログラム65は、対象点[2]の位置情報(x38、y38)で示されるテンプレート画像121上の位置に、文字[2]で示される文字“ろ”を合成する。また、端末プログラム65は、対象点[3]の位置情報(x72、y72)で示されるテンプレート画像121上の位置に、文字[3]で示される文字“し”を合成する。さらに、端末プログラム65は、対象点[4]の位置情報(x200、y200)で示されるテンプレート画像121上の位置に、文字[4]で示される文字“く”を合成する。
That is, the
端末プログラム65は、図10(B)に示される[プリント]アイコン126を指定する指定操作をユーザI/F54を通じて受け付けたことに応じて(S16:Yes)、通信I/F55を通じてMFP10にプリント指示情報を送信する(S21)。プリント指示情報は、編集されたテンプレート画像121をハガキの通信面に記録するプリント動作を、MFP10に実行させるための情報である。プリント指示情報は、編集されたテンプレート画像121を示すテンプレート画像データを含む。なお、出力処理の具体例はこれに限定されず、テンプレート画像データをメモリ62の所定の領域に記憶させることでもよいし、インターネット上の不図示のサーバにアップロードすることでもよい。
The
一方図示は省略するが、MFP10の装置プログラム35は、通信I/F25を通じて情報処理端末50からプリント指示情報を受信する。そして、装置プログラム35は、受信したプリント指示情報に従ったプリント動作をプリンタ11に実行させる。すなわち、プリンタ11は、プリント指示情報に含まれるテンプレート画像データで示されるテンプレート画像121を、ハガキの通信面に印刷する。
On the other hand, although not shown, the apparatus program 35 of the
一方、端末プログラム65は、例えば、図12(A)、図12(C)、及び図14(A)に示されるように、ユーザI/F54を通じて入力された軌跡が禁止領域122に重なると判断したことに応じて(S38:Yes)、レイアウト処理Bを実行する(S40)。レイアウト処理Bは、入力された軌跡が禁止領域122と重ならないように軌跡情報を補正し、補正した軌跡情報で示される軌跡に沿って、テンプレート画像121に文字列を合成する処理である。以下、ソフトウェアキーボード145を通じて文字列“おめでとう”が入力されたことを前提として、レイアウト処理Bの詳細を説明する。
On the other hand, the
まず、端末プログラム65は、テンプレート画像121に含まれる禁止領域122が勾配を有するか否かを判断する(S61)。すなわち、端末プログラム65は、S12で指定されたテンプレート画像データに対応付けられた禁止領域情報が高さ情報を含むか否かを判断すればよい。また、端末プログラム65は、入力された軌跡の終点が禁止領域122内に位置するか否かを判断する(S62)。すなわち、端末プログラム65は、軌跡情報の最後の位置情報で示される位置が禁止領域122内か否かを判断すればよい。S61の処理は第3判断処理の一例であり、S62の処理は第2判断処理の一例である。
First, the
端末プログラム65は、例えば図12(A)或いは図12(C)に示されるように、禁止領域情報が高さ情報を含まず且つ終点153が禁止領域122内だと判断したことに応じて(S61:なし&S62:Yes)、図12(B)或いは図12(D)に示されるように、軌跡が禁止領域122を避けるように軌跡情報を補正する(S63、S64)。S63、S64の処理は、補正処理の一例である。
The
一例として、端末プログラム65は、図12(A)に示される軌跡の終点153を、禁止領域122の輪郭のうちの終点153に最も近い位置154に移動させる(S63)。すなわち、端末プログラム65は、メモリ62に記憶された軌跡情報の最後の位置情報を、禁止領域122の輪郭上の位置154を示す位置情報で上書きすればよい。次に、端末プログラム65は、図12(B)に示されるように、軌跡の進入点152及び移動後の終点154の間の軌跡が、禁止領域122の輪郭に沿って最短距離で結ばれるように、メモリ62に記憶された軌跡情報を補正する(S64)。進入点152とは、禁止領域122外から禁止領域122内に進入する軌跡と輪郭との交点である。すなわち、端末プログラム65は、進入点152及び移動後の終点154の間の軌跡を、禁止領域122の輪郭に沿って時計回りに延びる軌跡に補正する。
As an example, the
他の例として、端末プログラム65は、図12(C)に示される軌跡の終点163を、禁止領域122の輪郭のうちの終点163に最も近い位置164に移動させる(S63)。 次に、端末プログラム65は、図12(D)に示されるように、軌跡の進入点162及び移動後の終点164の間の軌跡(以下、軌跡の両端の参照番号を用いて、「軌跡162−164」のように表記する。)が、禁止領域122の輪郭に沿って最短距離で結ばれるように、メモリ62に記憶された軌跡情報を補正する(S64)。すなわち、端末プログラム65は、軌跡162−164を、禁止領域122の輪郭に沿って反時計回りに延びる軌跡に補正する。
As another example, the
次に、端末プログラム65は、レイアウト処理Aを実行する(S65)。以下、ソフトウェアキーボード145を通じて入力された文字列“おめでとう”を、図12に示される軌跡に沿って、テンプレート画像121に合成するレイアウト処理Aを説明する。なお、前述の説明との共通点の詳細な説明は省略し、相違点を中心に説明する。
Next, the
まず、端末プログラム65は、入力された文字列“おめでとう”の文字数に対応する5個の対象点を抽出する(S41〜S45)。そして、端末プログラム65は、S63、S64で補正した軌跡情報で示される軌跡に沿った表示面上の複数の位置それぞれにおいて、入力された文字列に含まれる複数の文字それぞれを、文字列内における順番に従ってテンプレート画像121に合成する(S48〜S50)。
First, the
図12(B)の例では、始点151、進入点152、及び移動後の終点154の他に、2つの対象点155、156が抽出されるものとする。そして、始点151に対応する位置に文字“お”が合成され、進入点152に対応する位置に文字“め”が合成され、対象点155に対応する位置に文字“で”が合成され、対象点156に対応する位置に文字“と”が合成され、移動後の終点154に対応する位置に文字“う”が合成される。S65で実行されるS48の処理は、第1合成処理及び合成処理の一例である。
In the example of FIG. 12B, it is assumed that two
また、端末プログラム65は、S48〜S50の処理に先立って、進入点152及び移動後の終点154の間に合成する文字“め”、“で”、“と”、“う”を、当該文字が配置される位置の輪郭の形状に合わせてエンベロープ変形してもよい。図13を参照して、対象点156に対応する位置に合成する文字“と”を、エンベロープ変形する処理を説明する。エンベロープ変形のアルゴリズムは既に周知なので、詳細な説明は省略するが、例えば以下のような考え方で実現される。
Further, the
まず、端末プログラム65は、図13(A)に示されるように、変形前の文字“と”を囲む正方形の頂点、各辺の中点、及び対角線の交点の位置に、9個のグリッド171〜179を仮想的に配置する。次に、端末プログラム65は、図13(B)に示されるように、グリッド171〜179で画定される矩形が文字“と”を合成する位置の輪郭の形状に沿うように、グリッド171〜179の少なくとも1つを移動させる。図13の例では、グリッド174がグリッド174’の位置に移動される。
First, as shown in FIG. 13A, the
そして、端末プログラム65は、図13(B)に示されるグリッド171〜173、174’、175〜179で画定される矩形の形状に合わせて、文字“と”を変形させる。一例として、グリッド174をグリッド175から離れる向きに移動させると、文字“と”が左向きに引き延ばされる。他の例として、グリッド174をグリッド175に近づく向きに移動させると、文字“と”が右向きに押し潰される。
Then, the
また図6に戻って、端末プログラム65は、例えば図14(A)に示されるように、禁止領域情報が高さ情報を含まず且つ終点184が禁止領域122外だと判断したことに応じて(S61:なし&S62:No)、例えば図14(B)〜(D)に示される方法で、軌跡が禁止領域122を避けるように軌跡情報を補正する(S66)。S66の処理は、補正処理の一例である。
Further, returning to FIG. 6, the
一例として、端末プログラム65は、図14(B)に示されるように、軌跡182−184を示す軌跡情報を、当該軌跡の進入点182が退出点183に一致するように補正する(S66)。退出点183とは、禁止領域122内から禁止領域122外に退出する軌跡と輪郭との交点を指す。すなわち、軌跡182−184の進入点182が退出点183の位置に一致するように、軌跡182−184が平衡移動される。
As an example, as shown in FIG. 14B, the
他の例として、端末プログラム65は、図14(C)に示されるように、軌跡182−184を削除し、且つ退出点183から終点184に向かう向きに直線的に延びる代替軌跡183”−184”を追加してもよい。すなわち、端末プログラム65は、進入点182及び終点184の間の位置情報を軌跡情報から削除し、代替軌跡183”−184”を示す位置情報を軌跡情報に追加すればよい。代替軌跡183”−184”は、例えば、予め定められた長さの直線であって、退出点183における禁止領域122の法線方向に延びる。さらに他の例として、端末プログラム65は、図14(D)に示されるように、軌跡182−184を削除してもよい。
As another example, the
次に、端末プログラム65は、軌跡の始点181及び進入点182の間に合成する文字数N1と、軌跡の退出点183及び終点184の間に合成する文字数N2とを決定する(S67)。具体的には、端末プログラム65は、始点181から進入点182までの軌跡(以下、「第1軌跡」と表記する。)に沿った長さをL1と、退出点183から終点184までの軌跡(以下、「第2軌跡」と表記する。)に沿った長さをL2とで、入力された文字数Nを比例配分する。すなわち、N1=N×L1/(L1+L2)、N2=N×L1/(L1+L2)となる。S67の処理は、決定処理の一例である。
Then, the
次に、端末プログラム65は、第1軌跡及び第2軌跡それぞれに対するレイアウト処理Aを実行する(S68)。すなわち、端末プログラム65は、第1軌跡からN1個の対象点を抽出し、抽出した対象点に対応する表示面上の位置に文字列内における順番の先頭からN1個の文字を合成する。また、端末プログラム65は、第2軌跡からN2個の対象点を抽出し、抽出した対象点に対応する表示面上の位置に文字列内における順番の(N1+1)個目からN2個の文字を合成する。
Next, the
再び図6に戻って、端末プログラム65は、例えば図15(A)に示されるように、禁止領域情報が高さ情報を含むと判断したことに応じて(S61:あり)、レイアウト処理Aを実行する(S69)。S69で実行するレイアウト処理Aは、禁止領域122に重なる文字を変形する処理を、テンプレート画像121に合成するのに先立って実行する点で前述の説明と相違し、その他の点は前述の説明と共通する。S69で実行されるS48の処理は、第2合成処理の一例である。
Returning to FIG. 6 again, the
より詳細には、端末プログラム65は、図15(C)に示されるように、禁止領域122に重なる位置に合成する文字を、高さ情報で示される禁止領域122の勾配に沿って、禁止領域122に投影した形状に変形する。すなわち、端末プログラム65は、右上から左下に向かって上り勾配となる面に文字“め”を投影したように、文字“め”を射影変換する。また、端末プログラム65は、右上から左下に向かって下り勾配となる面に文字“と”を投影したように、文字“と”を射影変換する。禁止領域122の勾配とは、例えば、禁止領域122に含まれる複数の画素それぞれのZ方向の高さが連続的に変化することによって生じる「表示面に対する仮想的な傾斜」を指す。
More specifically, as shown in FIG. 15C, the
また、端末プログラム65は、禁止領域122に重なる位置に合成する文字を、合成する位置の高さが高いほど大きくしてもよい。すなわち、端末プログラム65は、文字“め”、“と”を文字“お”、“う”より大きくしてもよい。さらに、端末プログラム65は、文字“で”を文字“め”、“と”より大きくしてもよい。
Further, the
[本実施形態の作用効果]
上記の実施形態によれば、ユーザが入力媒体を用いてタッチ面上に描いた軌跡に沿ってレイアウトされた文字列がテンプレート画像121に合成される。これにより、直感的な操作で柔軟且つ簡単に文字列をレイアウトすることができる。また、ユーザが描いた軌跡が予め定められた禁止領域122に重なる場合に、当該禁止領域122を避けるように軌跡情報が補正される。これにより、強調したい絵或いは文字が配置されるテンプレート画像121上の領域を禁止領域122に設定しておけば、当該絵(例えば、写真)或いは文字が入力された文字列で隠れてしまうことを抑制できる。
[Action and effect of this embodiment]
According to the above embodiment, the character string laid out along the locus drawn on the touch surface by the user using the input medium is combined with the
なお図12の例のように、禁止領域122内に位置する終点153、163を、禁止領域122の輪郭上の最も近い位置に移動させ、進入点152、162及び移動後の終点154、164の間の軌跡を輪郭に沿わせることによって、補正の前後における軌跡の変化を最小限にすることができる。これにより、ユーザの所望する文字列のレイアウトを大きく変化させることなく、強調したい絵或いは文字が隠れることを抑制できる。
As in the example of FIG. 12, the
また、図13の例のように、禁止領域122の輪郭上に合成される文字を、合成位置の輪郭の形状に合わせてエンベロープ変形させることによって、テンプレート画像121に合成する文字列のレイアウトを、さらに多様化することができる。但し、文字の変形のさせ方はエンベロープ変形に限定されず、輪郭線の向きに応じて文字を傾けてもよいし、輪郭の形状に応じて文字の大きさを変更してもよい。
Further, as in the example of FIG. 13, the layout of the character string to be combined with the
また図14の例のように、軌跡の始点181、進入点182、及び退出点183の位置を変更せずに軌跡を補正する異によって、ユーザが描いた軌跡の全体の流れを維持しつつ、強調したい絵或いは文字が隠れることを抑制できる。また、第1軌跡181−182及び第2軌跡183”−184”上に配置する文字数を、長さL1、L2で比例配分することによって、軌跡上に配置される文字の間隔を平準化することができる。
Further, as in the example of FIG. 14, the locus is corrected without changing the positions of the
さらに図15の例のように、高さ情報で特定される勾配に沿って文字を射影変換することによって、立体の禁止領域122の表面に文字を貼り付けたように見える。これにより、立体感のあるレイアウトを実現できる。
Further, as in the example of FIG. 15, by projecting and transforming the characters along the gradient specified by the height information, it appears that the characters are pasted on the surface of the prohibited
また、上記の実施形態によれば、テンプレート画像データ毎に禁止領域情報を対応付けるので、ユーザが指定したテンプレート画像121に対応する禁止領域122を避けるように軌跡情報が補正される。すなわち、テンプレート画像データの制作者或いは端末プログラム65の開発者は、対応するテンプレート画像データ上で強調したい絵或いは文字を含む領域を、禁止領域に設定することができる。
Further, according to the above embodiment, since the prohibited area information is associated with each template image data, the locus information is corrected so as to avoid the prohibited
なお、上記の実施形態のように、Ramer−Douglas−Peuckerアルゴリズムを用いて、軌跡上から対象点を抽出することによって、文字列を軌跡上に適切に配置することができる。但し、対象点の抽出方法は、これに限定されない。他の例として、端末プログラム65は、入力媒体の移動距離或いは移動時間で軌跡を(N−1)等分した境界のN点を、対象点として抽出してもよい。
As in the above embodiment, the character string can be appropriately arranged on the locus by extracting the target point from the locus using the Ramer-Douglas-Pucker algorithm. However, the method of extracting the target points is not limited to this. As another example, the
また、上記の実施形態において、端末プログラム65は、S63&S64、S66で補正した軌跡情報で示される軌跡と、[OK]アイコンとを含む確認画面を、ディスプレイ53に表示させてもよい。この処理は、第2表示処理の一例である。次に、端末プログラム65は、[OK]アイコンを指定する指定操作をユーザI/F54を通じて受け付けたことに応じて、S65、S67&S68の処理を実行してもよい。この処理は、第2受付処理の一例である。また、[OK]アイコンの指定は、確認画面に表示された補正後の軌跡を確認したことに対応する確認操作の一例である。これにより、ユーザの意図と大きく異なる軌跡に沿って文字列がレイアウトされるのを抑制できる。
Further, in the above embodiment, the
なお、図13を参照して説明した文字のエンベロープ変形は、補正後の軌跡に沿って文字を合成する場合の他、例えば以下のような用途にも利用できる。端末プログラム65は、文字列を入力する入力操作と、テンプレート画像121に含まれる輪郭線の一部を指定する指定操作とを、ユーザI/F54を通じて受け付ける。次に、端末プログラム65は、指定を受け付けた輪郭線から文字数に対応する数の対象点を抽出する。次に、端末プログラム65は、入力を受け付けた文字列に含まれる複数の文字それぞれを、対応する対象点の位置における輪郭線の形状に合わせてエンベロープ変形する。そして、端末プログラム65は、エンベロープ変形した文字を対応する対象点の位置に合成する。
The character envelope deformation described with reference to FIG. 13 can be used not only for synthesizing characters along the corrected locus, but also for the following purposes, for example. The
なお、上記の実施形態では、スワイプ操作が終了してから対象点を抽出する処理を実行する例(S28:Yes→S29)を説明したが、対象点を抽出するタイミングはこれに限定されない。他の例として、端末プログラム65は、スワイプ操作中に軌跡の始点、終点、曲点、及び閾値長さ以上の直線の中点等の対象点を検出したことに応じて、検出した対象点に入力された文字を入力順に配置してもよい。すなわち、入力媒体が表示面上を移動するのに追従して、入力された文字が入力順に配置されていってもよい。
In the above embodiment, an example (S28: Yes → S29) of executing the process of extracting the target point after the swipe operation is completed has been described, but the timing of extracting the target point is not limited to this. As another example, the
また、上記の実施形態では、図10(B)に示されるように、軌跡上にレイアウトした各文字の上下方向を、ディスプレイ53の長手方向に統一した例を説明した。しかしながら、軌跡上における各文字のレイアウトは、これに限定されない。他の例として、端末プログラム65は、例えば図10(B)に示される各文字“よ”、“ろ”、“し”、“く”を、当該文字の上下方向と対象点における軌跡の法線方向とが一致する向きに回転させて、テンプレート画像121に合成してもよい。すなわち、図10(B)の例によれば、文字“よ”、“く”が反時計周りに回転された状態でディスプレイ53に表示される。
Further, in the above embodiment, as shown in FIG. 10B, an example has been described in which the vertical direction of each character laid out on the locus is unified in the longitudinal direction of the display 53. However, the layout of each character on the trajectory is not limited to this. As another example, the
また、上記の実施形態では、年賀状の通信面に記録するテンプレート画像121に合成する文字をレイアウト或いは変形させる例を説明したが、本発明の用途はこれに限定されない。他の例として、刺繍データに従って布地に糸を縫い込むミシン、ラベルに文字列を記録するラベルプリンタ、円盤形状の画像をCD−ROMの表面に記録するレーベルプリンタ、布地に画像を記録するガーメントプリンタ等において、入力された文字をタッチ面に対する入力操作に従ってレイアウト或いは変形させてもよい。
Further, in the above embodiment, an example of laying out or transforming the characters to be combined with the
また、上記の実施形態のMFP10及び情報処理端末50において、メモリ32、62に記憶された各種プログラムがCPU31、61によって実行されることによって、本発明のコントローラが実行する各処理が実現される例を説明した。しかしながら、コントローラの構成はこれに限定されず、その一部又は全部を集積回路等のハードウェアで実現してもよい。
Further, in the
さらに、本発明は、MFP10及び情報処理端末50として実現できるだけでなく、MFP10及び情報処理端末50に処理を実行させるプログラムとして実現してもよい。そして、当該プログラムは、non−transitoryな記録媒体に記録されて提供されてもよい。non−transitoryな記録媒体は、CD−ROM、DVD−ROM等の他、通信ネットワーク101を通じてMFP10及び情報処理端末50に接続可能なサーバに搭載されたメモリを含んでもよい。そして、サーバのメモリに記憶されたプログラムは、当該プログラムを示す情報或いは信号として、インターネット等の通信ネットワーク101を通じて配信されてもよい。
Further, the present invention can be realized not only as the
10・・・MFP
11・・・プリンタ
50・・・情報処理端末
53・・・ディスプレイ
54・・・ユーザI/F
55・・・通信I/F
61・・・CPU
62・・・メモリ
65・・・端末プログラム
10 ... MFP
11 ...
55 ... Communication I / F
61 ... CPU
62 ...
Claims (14)
該プログラムは、
予め定められた禁止領域を含む背景画像を前記ディスプレイに表示させる第1表示処理と、
文字列を入力する入力操作を前記ユーザインタフェースを通じて受け付ける第1受付処理と、
前記タッチ面上を移動する前記入力媒体の軌跡を示す軌跡情報を取得する取得処理とを前記情報処理端末に実行させ、前記軌跡情報は、前記ユーザインタフェースから出力される前記位置情報に基づいて生成される情報であり、
該プログラムは、
前記取得処理で取得した前記軌跡情報が前記表示面上の前記禁止領域に重なる前記軌跡を示しているか否かを判断する第1判断処理と、
前記第1判断処理で前記禁止領域に重なる前記軌跡を示していると判断したことに応じて、前記軌跡が前記禁止領域を避けるように、前記取得処理で取得した前記軌跡情報を補正する補正処理と、
前記補正処理で補正した前記軌跡情報で示される前記軌跡に沿った前記表示面上の複数の位置それぞれにおいて、前記第1受付処理で入力された前記文字列に含まれる複数の文字それぞれを、前記文字列内における順番に従って前記背景画像に合成する第1合成処理とを前記情報処理端末に実行させるプログラム。 A program that can be executed by an information processing terminal including a display having a display surface and a user interface having a touch surface associated with the display surface. In the user interface, an input medium is touched on the touch surface. In this case, it is an interface that outputs position information indicating the position on the touch surface to which the input medium is touched.
The program
The first display process of displaying a background image including a predetermined prohibited area on the display, and
The first reception process that accepts an input operation for inputting a character string through the user interface, and
The information processing terminal is made to execute an acquisition process for acquiring locus information indicating a locus of the input medium moving on the touch surface, and the locus information is generated based on the position information output from the user interface. Information to be processed
The program
The first determination process for determining whether or not the locus information acquired in the acquisition process indicates the locus overlapping the prohibited area on the display surface.
A correction process for correcting the locus information acquired in the acquisition process so that the locus avoids the prohibited area in response to the determination in the first determination process that the locus overlaps the prohibited area. When,
At each of the plurality of positions on the display surface along the locus indicated by the locus information corrected by the correction process, each of the plurality of characters included in the character string input in the first reception process is described. A program that causes the information processing terminal to execute a first compositing process for compositing the background image according to the order in the character string.
前記第1判断処理で前記禁止領域に重なる前記軌跡を示していると判断したことに応じて、前記取得処理で取得した前記軌跡情報で示される前記軌跡の終点が前記禁止領域内に位置するか否かを判断する第2判断処理を前記情報処理端末に実行させ、
前記第2判断処理で前記禁止領域内だと判断した場合の前記補正処理において、
前記禁止領域の輪郭のうちの前記終点に最も近い位置に前記終点が移動し、
進入点及び移動後の前記終点の間の前記軌跡が前記輪郭に沿うように、前記軌跡情報を補正し、前記進入点は、前記禁止領域外から前記禁止領域内に進入する前記軌跡と前記輪郭との交点である請求項1に記載のプログラム。 The program
Whether the end point of the locus indicated by the locus information acquired in the acquisition process is located in the prohibited area in response to the determination in the first determination process that the locus overlaps the prohibited area. The information processing terminal is made to execute a second judgment process for determining whether or not the information processing terminal is used.
In the correction process when it is determined that the area is within the prohibited area in the second determination process.
The end point moves to the position closest to the end point in the contour of the prohibited area,
The locus information is corrected so that the locus between the approach point and the end point after movement follows the contour, and the approach point is the locus and the contour that enter the prohibited area from outside the prohibited area. The program according to claim 1, which is an intersection with.
該プログラムは、前記第1合成処理において、
前記始点から前記進入点までの前記軌跡に対応する前記表示面上の位置に、前記文字列内における順番の先頭からN1個の前記文字を合成し、
前記退出点から前記終点までの前記軌跡に対応する前記表示面上の位置に、次のN2個の前記文字を合成する請求項5から7のいずれかに記載のプログラム。 Of the N (N is an integer of 2 or more) characters included in the character string input received in the first reception process, the program synthesizes the number of characters N between the start point of the locus and the entry point. 1 is determined to be N × L 1 / (L 1 + L 2 ), and the number of characters N 2 to be combined between the exit point and the end point of the locus is determined to be N × L 1 / (L 1 + L 2 ). The processing is executed by the information processing terminal, where L 1 is a length along the locus from the start point to the entry point, and L 2 is along the locus from the exit point to the end point. Is the length
The program is used in the first synthesis process.
A position on the display surface corresponding to the track from the start point to the entry point, the N 1 pieces of said character synthesized from the head of the order within the character string,
The program according to any one of claims 5 to 7, wherein the next N two characters are synthesized at a position on the display surface corresponding to the locus from the exit point to the end point.
前記補正処理で補正した前記軌跡情報で示される前記軌跡を前記ディスプレイに表示させる第2表示処理と、
前記第2表示処理で表示させた前記軌跡を確認したことに対応する確認操作を、前記ユーザインタフェースを通じて受け付ける第2受付処理と、
前記第2受付処理で前記確認操作を受け付けたことに応じて、前記第1合成処理とを前記情報処理端末に実行させる請求項1から8のいずれかに記載のプログラム。 The program
A second display process for displaying the locus indicated by the locus information corrected by the correction process on the display,
A second reception process that accepts a confirmation operation corresponding to the confirmation of the locus displayed in the second display process through the user interface, and
The program according to any one of claims 1 to 8, which causes the information processing terminal to execute the first synthesis process in response to receiving the confirmation operation in the second reception process.
前記第1判断処理で前記禁止領域に重なる前記軌跡を示していると判断したことに応じて、前記禁止領域が前記表示面に交差する方向の勾配を有するか否かを判断する第3判断処理を前記情報処理端末に実行させ、
前記第3判断処理で前記勾配を有しないと判断したことに応じて、前記補正処理及び前記第1合成処理を前記情報処理端末に実行させ、
前記第3判断処理で前記勾配を有すると判断したことに応じて、前記取得処理で取得した前記軌跡情報で示される前記軌跡に沿った前記表示面上の複数の位置それぞれにおいて、前記第1受付処理で入力された前記文字列に含まれる複数の文字それぞれを、前記文字列内における順番に従って前記背景画像に合成する第2合成処理を前記情報処理端末に実行させ、
前記第2合成処理において、前記禁止領域に重なる位置に合成する前記文字を、前記勾配に沿って前記禁止領域に投影した形状に変形して、前記背景画像に合成する請求項1から9のいずれかに記載のプログラム。 The program
A third determination process for determining whether or not the prohibited area has a gradient in a direction intersecting the display surface in response to the determination in the first determination process that the locus overlaps the prohibited area. To the information processing terminal
In response to the determination that the third determination process does not have the gradient, the information processing terminal is made to execute the correction process and the first synthesis process.
In response to the determination of having the gradient in the third determination process, the first reception is performed at each of a plurality of positions on the display surface along the trajectory indicated by the trajectory information acquired in the acquisition process. The information processing terminal is made to execute a second synthesis process of synthesizing each of the plurality of characters included in the character string input in the process into the background image according to the order in the character string.
Any of claims 1 to 9 in which the character to be combined at a position overlapping the prohibited area in the second composition process is transformed into a shape projected onto the prohibited area along the gradient and combined with the background image. The program described in Crab.
前記情報処理端末が備えるメモリに記憶された複数の背景画像データのうちの1つを指定する指定操作を、前記ユーザインタフェースを通じて受け付ける第3受付処理を前記情報処理端末に実行させ、
前記第1表示処理において、前記第3受付処理で指定を受け付けた背景画像データで示される前記背景画像を前記ディスプレイに表示させ、
前記第1判断処理において、前記第3受付処理で指定を受け付けた前記背景画像データに対応付けて設定された前記禁止領域に前記軌跡が重なるか否かを判断する請求項1から10のいずれかに記載のプログラム。 The program
The information processing terminal is made to execute a third reception process for accepting a designation operation for designating one of a plurality of background image data stored in the memory included in the information processing terminal through the user interface.
In the first display process, the background image indicated by the background image data designated in the third reception process is displayed on the display.
Any of claims 1 to 10 for determining whether or not the locus overlaps the prohibited area set in association with the background image data designated in the third reception process in the first determination process. The program described in.
前記補正処理で補正した前記軌跡情報で示される前記軌跡上の対象点を抽出する抽出処理を、前記第1受付処理で入力された文字数Nに相当する数の前記対象点を抽出するまで前記情報処理端末に繰り返し実行させ、
1回目の前記抽出処理において、前記軌跡の始点及び終点を前記対象点として抽出し、
2回目以降の前記抽出処理において、既に抽出した前記対象点を結ぶ仮想線から最も遠い前記軌跡上の点を前記対象点として抽出し、
前記第1合成処理において、前記入力媒体の移動方向に沿って配列したN個の前記対象点に対応する前記表示面上の位置において、前記第1受付処理で入力されたN個の文字それぞれを、前記文字列内における順番に従って前記背景画像に合成する請求項1から11のいずれかに記載のプログラム。 The program
The information is extracted until the number of target points corresponding to the number of characters N input in the first reception process is extracted by the extraction process for extracting the target points on the locus indicated by the locus information corrected by the correction process. Let the processing terminal execute it repeatedly
In the first extraction process, the start point and the end point of the locus are extracted as the target points.
In the second and subsequent extraction processes, the point on the locus farthest from the virtual line connecting the already extracted target points is extracted as the target point.
In the first synthesis process, each of the N characters input in the first reception process is displayed at a position on the display surface corresponding to the N target points arranged along the moving direction of the input medium. , The program according to any one of claims 1 to 11, which is combined with the background image according to the order in the character string.
該プログラムは、
輪郭線を含む背景画像を前記ディスプレイに表示させる表示処理と、
文字列を入力する入力操作を前記ユーザインタフェースを通じて受け付ける受付処理と、
前記背景画像の前記輪郭線に沿って、前記受付処理で入力された前記文字列に含まれる複数の文字それぞれを、前記文字列内における順番に従って合成する合成処理とを前記情報処理端末に実行させ、
前記合成処理において、前記受付処理で入力された前記複数の文字それぞれを、当該文字が配置される位置の前記輪郭線の形状に合わせてエンベロープ変形して、前記背景画像に合成するプログラム。 A program that can be executed by an information processing terminal including a display having a display surface and a user interface having a touch surface associated with the display surface. In the user interface, an input medium is touched on the touch surface. In this case, it is an interface that outputs position information indicating the position on the touch surface to which the input medium is touched.
The program
Display processing to display a background image including contour lines on the display,
Reception processing that accepts input operations for inputting character strings through the user interface,
The information processing terminal is made to execute a synthesis process of synthesizing each of a plurality of characters included in the character string input in the reception process along the contour line of the background image in the order in the character string. ,
A program in which, in the compositing process, each of the plurality of characters input in the reception process is envelope-deformed according to the shape of the contour line at a position where the characters are arranged, and synthesized with the background image.
前記表示面に対応付けられたタッチ面を有するユーザインタフェースと、
コントローラとを備える情報処理端末であって、
前記ユーザインタフェースは、前記タッチ面に入力媒体がタッチされた場合に、前記入力媒体がタッチされた前記タッチ面上の位置を示す位置情報を出力するインタフェースであり、
前記コントローラは、
予め定められた禁止領域を含む背景画像を前記ディスプレイに表示させる第1表示処理と、
文字列を入力する入力操作を前記ユーザインタフェースを通じて受け付ける第1受付処理と、
前記タッチ面上を移動する前記入力媒体の軌跡を示す軌跡情報を取得する取得処理とを実行し、前記軌跡情報は、前記ユーザインタフェースから出力される前記位置情報に基づいて生成される情報であり、
前記コントローラは、
前記取得処理で取得した前記軌跡情報が前記表示面上の前記禁止領域に重なる前記軌跡を示しているか否かを判断する第1判断処理と、
前記第1判断処理で前記禁止領域に重なる前記軌跡を示していると判断したことに応じて、前記軌跡が前記禁止領域を避けるように、前記取得処理で取得した前記軌跡情報を補正する補正処理と、
前記補正処理で補正した前記軌跡情報で示される前記軌跡に沿った前記表示面上の複数の位置それぞれにおいて、前記第1受付処理で入力された前記文字列に含まれる複数の文字それぞれを、前記文字列内における順番に従って前記背景画像に合成する第1合成処理とを実行する情報処理端末。 A display with a display surface and
A user interface having a touch surface associated with the display surface and
An information processing terminal equipped with a controller
The user interface is an interface that outputs position information indicating a position on the touch surface to which the input medium is touched when the input medium is touched on the touch surface.
The controller
The first display process of displaying a background image including a predetermined prohibited area on the display, and
The first reception process that accepts an input operation for inputting a character string through the user interface, and
The acquisition process of acquiring the locus information indicating the locus of the input medium moving on the touch surface is executed, and the locus information is information generated based on the position information output from the user interface. ,
The controller
The first determination process for determining whether or not the locus information acquired in the acquisition process indicates the locus overlapping the prohibited area on the display surface.
A correction process for correcting the locus information acquired in the acquisition process so that the locus avoids the prohibited area in response to the determination in the first determination process that the locus overlaps the prohibited area. When,
At each of the plurality of positions on the display surface along the locus indicated by the locus information corrected by the correction process, each of the plurality of characters included in the character string input in the first reception process is described. An information processing terminal that executes a first compositing process for compositing with the background image according to the order in the character string.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017121126A JP6848713B2 (en) | 2017-06-21 | 2017-06-21 | Program and information processing terminal |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017121126A JP6848713B2 (en) | 2017-06-21 | 2017-06-21 | Program and information processing terminal |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019008388A JP2019008388A (en) | 2019-01-17 |
JP6848713B2 true JP6848713B2 (en) | 2021-03-24 |
Family
ID=65029544
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017121126A Active JP6848713B2 (en) | 2017-06-21 | 2017-06-21 | Program and information processing terminal |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6848713B2 (en) |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3164617B2 (en) * | 1991-11-07 | 2001-05-08 | 株式会社日立製作所 | Apparatus and method for deforming character / graphics |
JP3054545B2 (en) * | 1994-07-15 | 2000-06-19 | 三洋電機株式会社 | Character / graphic editing method and apparatus |
US5831632A (en) * | 1995-12-28 | 1998-11-03 | Adobe Systems Incorporated | Automatic graphical pattern placement |
US20040119762A1 (en) * | 2002-12-24 | 2004-06-24 | Fuji Xerox Co., Ltd. | Systems and methods for freeform pasting |
JP4579106B2 (en) * | 2005-09-05 | 2010-11-10 | 株式会社メイクソフトウェア | PHOTOGRAPHING APPARATUS, PHOTOGRAPHING APPARATUS CONTROL METHOD, AND PHOTOGRAPHING APPARATUS CONTROL PROGRAM |
JP4779902B2 (en) * | 2006-09-15 | 2011-09-28 | ブラザー工業株式会社 | Image editing apparatus and image editing program |
JP5625615B2 (en) * | 2010-08-20 | 2014-11-19 | 株式会社リコー | Electronic information board device |
JP2012088969A (en) * | 2010-10-20 | 2012-05-10 | Sharp Corp | Input display apparatus, input display method, computer program, and recording medium |
JP5601547B2 (en) * | 2012-12-28 | 2014-10-08 | フリュー株式会社 | Image editing apparatus, image editing method, and program |
KR102284238B1 (en) * | 2015-05-28 | 2021-07-30 | 미쓰비시덴키 가부시키가이샤 | Input display device, input display method, and program |
-
2017
- 2017-06-21 JP JP2017121126A patent/JP6848713B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2019008388A (en) | 2019-01-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5269851B2 (en) | Image editing apparatus, image editing method and program thereof | |
US20130286435A1 (en) | Image processing apparatus, method for controlling the same, and recording medium | |
CN109739372B (en) | Graph drawing method for handwriting input equipment and handwriting reading equipment | |
JP5437340B2 (en) | Viewer device, server device, display control method, electronic comic editing method and program | |
CN107133615B (en) | Information processing apparatus, information processing method, and computer program | |
JP2022034030A (en) | Image processing apparatus, method, and program | |
JP5340048B2 (en) | Image processing apparatus, image processing method, and program | |
JP5366699B2 (en) | Image processing apparatus, image processing method, and image processing program | |
JP6053291B2 (en) | Image processing apparatus, image processing apparatus control method, and program | |
JP2003308310A (en) | Display method, display, display program, and recording medium recorded with display program | |
JP2017215661A (en) | Image processing device, control method of the same and computer program | |
US20110320933A1 (en) | Editing apparatus, layout editing method performed by editing apparatus, and storage medium storing program | |
JP2011215824A (en) | Apparatus, method and program for displaying image | |
JP2018049319A (en) | Document browsing device and program | |
JP6848713B2 (en) | Program and information processing terminal | |
JP3388451B2 (en) | Handwriting input device | |
JP6939304B2 (en) | Control program | |
JP6880676B2 (en) | Program and image forming equipment | |
JP7329957B2 (en) | Virtual object display device and program | |
JP6330488B2 (en) | Information processing apparatus, recording system, and program | |
JP6456203B2 (en) | Information processing apparatus, information processing program, and information processing method | |
JP2013134640A (en) | Fold position controller, method for controlling the same, and program therefor | |
JP5528410B2 (en) | Viewer device, server device, display control method, electronic comic editing method and program | |
JP6805757B2 (en) | Program and image forming equipment | |
JP6617448B2 (en) | Mobile terminal and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200324 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210122 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210202 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210215 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6848713 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |