JP6582469B2 - Character conversion support device, diary creation support device, character conversion support method, and program - Google Patents

Character conversion support device, diary creation support device, character conversion support method, and program Download PDF

Info

Publication number
JP6582469B2
JP6582469B2 JP2015054512A JP2015054512A JP6582469B2 JP 6582469 B2 JP6582469 B2 JP 6582469B2 JP 2015054512 A JP2015054512 A JP 2015054512A JP 2015054512 A JP2015054512 A JP 2015054512A JP 6582469 B2 JP6582469 B2 JP 6582469B2
Authority
JP
Japan
Prior art keywords
character
image
input
data
address
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015054512A
Other languages
Japanese (ja)
Other versions
JP2016173797A (en
Inventor
博樹 菅野
博樹 菅野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2015054512A priority Critical patent/JP6582469B2/en
Publication of JP2016173797A publication Critical patent/JP2016173797A/en
Application granted granted Critical
Publication of JP6582469B2 publication Critical patent/JP6582469B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、入力された文字を別の文字に変換する文字変換を支援する装置、日記作成支援装置、文字変換を支援する方法、及び、プログラムに関する。   The present invention relates to a device that supports character conversion for converting an input character into another character, a diary creation support device, a method that supports character conversion, and a program.

従来から、多くの情報機器には、入力された文字を別の文字に変換する文字変換機能が提供されている。文字変換機能は、文字入力作業の効率に直結する極めて重要な機能であるため、文字変換機能により利用者が意図した文字変換が行われる確率(以降、変換効率と記す)を高めるさまざまな技術が提案されている。   Conventionally, many information devices have been provided with a character conversion function for converting an inputted character into another character. Since the character conversion function is an extremely important function that is directly related to the efficiency of character input work, there are various technologies that increase the probability that the character conversion intended by the user will be performed by the character conversion function (hereinafter referred to as conversion efficiency). Proposed.

例えば、既存のソフトウェアには、概して変換効率の低い人名や地名への変換を支援するために、設定により変換候補の中から人名や地名を優先的に表示する技術が導入されている。   For example, in order to support conversion to a person name or place name whose conversion efficiency is generally low in existing software, a technique for preferentially displaying a person name or place name from conversion candidates by setting is introduced.

また、特許文献1には、画像撮影時に取得した撮影位置の情報を画像ファイルのヘッダに記憶することで、画像表示中に行われる文字変換において、その画像の撮影位置に関連する文字列を変換候補として優先的に表示する技術が記載されている。   Further, in Patent Document 1, information on the shooting position acquired at the time of image shooting is stored in the header of the image file, thereby converting a character string related to the shooting position of the image in character conversion performed during image display. A technique for preferential display as a candidate is described.

特開2010−152608号公報JP 2010-152608 A

ところで、人名や地名には同じ読み方の複数の文字列が多数存在する。このため、単に人名や地名を優先的に表示するだけでは、十分な変換効率は得られない。   By the way, there are a plurality of character strings having the same reading in the names of people and places. For this reason, sufficient conversion efficiency cannot be obtained simply by preferentially displaying the names of people and places.

また、特許文献1に記載された技術では、辞書データに加えて、画像ファイルのヘッダに記憶された撮影位置の情報を用いることで、変換効率を向上させることができる。しかしながら、このような機能を実現するためには撮影装置がその機能の一端を担う必要がある。このため、撮影機能を有しない情報機器単体では実現が困難であり、適用可能な装置が限られてしまう。   In the technique described in Patent Document 1, the conversion efficiency can be improved by using information on the shooting position stored in the header of the image file in addition to the dictionary data. However, in order to realize such a function, it is necessary that the photographing apparatus bears a part of the function. For this reason, it is difficult to realize an information device alone that does not have a photographing function, and applicable devices are limited.

以上のような実情を踏まえ、本発明は、変換効率を向上させることができる汎用性が高い技術を提供することを目的とする。   In light of the above circumstances, an object of the present invention is to provide a highly versatile technique that can improve conversion efficiency.

本発明の一態様は、各々が画像と前記画像に関連付けられた第1の文字と前記第1の文字の読み方を示す仮名文字とを含む複数の宛名データに含まれる複数の画像の中から入力画像に対応する対応画像を検索して、前記対応画像に関連付けられた第1の文字である対応文字と前記対応文字の読み方を示す対応仮名文字とを取得する画像検索部と、前記入力画像に関連付けて入力された仮名文字である入力文字に基づいて複数の文字変換候補を決定する文字変換部と、前記複数の文字変換候補の少なくとも一つを表示部に表示させる表示制御部であって、前記対応仮名文字に前記入力文字が含まれているときに前記対応文字を優先的に前記表示部に表示させる表示制御部と、前記対応仮名文字に前記入力文字が含まれているときに、前記対応画像と前記対応文字と前記対応仮名文字とを含む対応宛名データを、前記入力画像を含むデータである日記データに関連付ける関連付け部と、前記関連付け部によって関連付けられた前記対応宛名データの中から、第2の入力文字を含む宛名を含む対応宛名レコードを検索する宛名検索部と、前記関連付け部によって関連付けられた前記対応宛名データの中に、前記第2の入力文字を含む宛名を含む対応宛名レコードが存在すると前記宛名検索部によって判断された場合、当該対応宛名データが関連付けられている日記データを表示部に表示させる第2表示制御部と、を備える文字変換支援装置を提供する。 One aspect of the present invention is an input from a plurality of images included in a plurality of address data each including an image, a first character associated with the image, and a kana character indicating how to read the first character. An image search unit that searches for a corresponding image corresponding to the image and obtains a corresponding character that is a first character associated with the corresponding image and a corresponding kana character that indicates how to read the corresponding character; A character conversion unit that determines a plurality of character conversion candidates based on input characters that are kana characters input in association with each other, and a display control unit that displays at least one of the plurality of character conversion candidates on a display unit, A display control unit that preferentially displays the corresponding character on the display unit when the input character is included in the corresponding kana character; and when the input character is included in the corresponding kana character, Corresponding image And the corresponding address data including the corresponding character and the corresponding kana character are associated with the diary data that is the data including the input image, and the correspondence address data associated with the association unit is a second And a corresponding address record including the address including the second input character in the corresponding address data associated by the associating unit and a corresponding address record including the address including the input character. Then, there is provided a character conversion support device comprising: a second display control unit that causes the display unit to display diary data associated with the corresponding address data when determined by the address search unit .

上記の文字変換支援装置において、前記画像検索部は、前記入力画像の被写体と前記複数の画像の各々の被写体との類似度に基づいて前記対応画像を検索し、前記対応画像の前記被写体の名称である前記対応文字と前記対応仮名文字とを取得してもよい。   In the character conversion support device, the image search unit searches the corresponding image based on a similarity between the subject of the input image and each of the subjects of the plurality of images, and the name of the subject of the corresponding image The corresponding character and the corresponding kana character may be acquired.

また、上記の文字変換支援装置において、前記画像検索部は、顔認識処理により特定された前記入力画像の被写体の顔部分の特徴と前記複数の画像の各々の被写体の顔部分の特徴とを比較して前記類似度を決定してもよい。   In the character conversion support device, the image search unit compares the characteristics of the face portion of the subject of the input image specified by the face recognition process with the characteristics of the face portion of the subject of each of the plurality of images. Then, the similarity may be determined.

また、上記の文字変換支援装置において、前記複数の宛名データは、前記複数の画像の各々に関連付けられた第2の文字をさらに含み、前記画像検索部は、前記対応画像に関連付けられた前記対応文字と前記対応仮名文字と、前記対応画像に関連付けられた前記第2の文字である第2の対応文字を取得し、前記表示制御部は、前記対応仮名文字に前記入力文字が含まれているときに前記対応文字及び前記第2の対応文字を優先的に前記表示部に表示させてもよい。   In the character conversion support device, the plurality of address data further include a second character associated with each of the plurality of images, and the image search unit includes the correspondence associated with the corresponding image. A character, the corresponding kana character, and a second corresponding character, which is the second character associated with the corresponding image, are acquired, and the display control unit includes the input character in the corresponding kana character Sometimes, the corresponding character and the second corresponding character may be preferentially displayed on the display unit.

本発明の更に別の態様は、記憶部に記憶されている複数の画像から入力画像に対応する対応画像を検索して、前記対応画像に関連付けられた対応文字と前記対応文字の読み方を示す対応仮名文字を取得し、前記入力画像に関連付けて入力された仮名文字である入力文字に基づいて複数の文字変換候補を決定し、前記複数の文字変換候補の少なくとも一つを表示部に表示し、前記対応仮名文字に前記入力文字が含まれているときに、前記対応文字を優先して前記表示部に表示し、前記対応仮名文字に前記入力文字が含まれているときに、前記対応画像と前記対応文字と前記対応仮名文字とを含む対応宛名データを、前記入力画像を含むデータである日記データに関連付け、前記関連付けられた前記対応宛名データの中から、第2の入力文字を含む宛名を含む対応宛名レコードを検索し、前記関連付けられた前記対応宛名データの中に、前記第2の入力文字を含む宛名を含む対応宛名レコードが存在すると検索された場合、当該対応宛名データが関連付けられている日記データを表示部に表示する文字変換支援方法を提供する。 According to still another aspect of the present invention, a correspondence image corresponding to an input image is searched from a plurality of images stored in a storage unit, and correspondence characters associated with the correspondence image and how to read the correspondence characters are indicated. Obtaining a kana character, determining a plurality of character conversion candidates based on an input character that is a kana character input in association with the input image, and displaying at least one of the plurality of character conversion candidates on a display unit; When the input characters are included in the corresponding kana characters, the corresponding characters are preferentially displayed on the display unit, and when the input characters are included in the corresponding kana characters, Corresponding address data including the corresponding character and the corresponding kana character is associated with diary data that is data including the input image, and a second input character is included in the associated corresponding address data. When the corresponding address record including the address is searched and a corresponding address record including the address including the second input character exists in the associated corresponding address data, the corresponding address data is associated. It is to provide a character conversion support how to display on the display unit the diary data are.

本発明の更に別の態様は、記憶部と表示部を備える文字変換支援装置のコンピュータを、前記記憶部に記憶されている複数の画像から入力画像に対応する対応画像を検索して、前記対応画像に関連付けられた対応文字と前記対応文字の読み方を示す対応仮名文字を取得する手段、前記入力画像に関連付けて入力された仮名文字である入力文字に基づいて複数の文字変換候補を決定する手段、前記複数の文字変換候補の少なくとも一つを前記表示部に表示させ、前記対応仮名文字に前記入力文字が含まれているときに、前記対応文字を優先して前記表示部に表示させる手段、前記対応仮名文字に前記入力文字が含まれているときに、前記対応画像と前記対応文字と前記対応仮名文字とを含む対応宛名データを、前記入力画像を含むデータである日記データに関連付ける手段、前記関連付けられた前記対応宛名データの中から、第2の入力文字を含む宛名を含む対応宛名レコードを検索する手段、前記関連付けられた前記対応宛名データの中に、前記第2の入力文字を含む宛名を含む対応宛名レコードが存在すると検索された場合、当該対応宛名データが関連付けられている日記データを表示部に表示する手段、として機能させるプログラムを提供する。 According to still another aspect of the present invention, a computer of a character conversion support device including a storage unit and a display unit searches for a corresponding image corresponding to an input image from a plurality of images stored in the storage unit, and Means for acquiring a corresponding character associated with an image and a corresponding kana character indicating how to read the corresponding character, and means for determining a plurality of character conversion candidates based on an input character that is a kana character input in association with the input image Means for displaying at least one of the plurality of character conversion candidates on the display unit and preferentially displaying the corresponding character on the display unit when the input character is included in the corresponding kana character; When the input character is included in the corresponding kana character, the corresponding address data including the corresponding image, the corresponding character, and the corresponding kana character is data including the input image. Means for associating with the data; means for searching for a correspondence address record including a destination including a second input character from the associated correspondence address data; and When a search is made that a corresponding address record including an address including two input characters exists, a program is provided that functions as means for displaying diary data associated with the corresponding address data on the display unit .

本発明によれば、変換効率を向上させることができる汎用性が高い技術を提供することができる。   According to the present invention, a highly versatile technique capable of improving the conversion efficiency can be provided.

本発明の一実施形態に係る印刷装置1の概観図である。1 is an overview of a printing apparatus 1 according to an embodiment of the present invention. 印刷装置1の物理構成を示すブロック図である。2 is a block diagram illustrating a physical configuration of the printing apparatus 1. FIG. 印刷装置1の機能構成を示すブロック図である。2 is a block diagram illustrating a functional configuration of the printing apparatus 1. FIG. 印刷装置1で行われる日記作成処理の流れを示すフローチャートである。4 is a flowchart illustrating a flow of diary creation processing performed in the printing apparatus 1. 日記のレイアウトを選択するためのレイアウト選択画面の一例を示す図である。It is a figure which shows an example of the layout selection screen for selecting the layout of a diary. 印刷装置1で行われる画像選択処理の流れを示すフローチャートである。4 is a flowchart illustrating a flow of image selection processing performed by the printing apparatus 1. 画像選択処理で選択された画像の一例を示す図である。It is a figure which shows an example of the image selected by the image selection process. 画像DB26に記憶されたレコード27の一例を示した図である。It is the figure which showed an example of the record 27 memorize | stored in image DB26. 画像DB26に登録された宛名情報を参照する参照画面の一例を示した図である。It is the figure which showed an example of the reference screen which refers the address information registered into image DB26. 印刷装置1で行われる変換候補表示処理の流れを示すフローチャートである。4 is a flowchart showing a flow of conversion candidate display processing performed by the printing apparatus 1. 日記の本文を作成するための編集画面の一例を示した図である。It is the figure which showed an example of the edit screen for producing the text of a diary. 日記の本文を作成するための編集画面の別の例を示した図である。It is the figure which showed another example of the edit screen for producing the text of a diary. 印刷装置1で行われる変換候補表示処理の変形例の流れを示すフローチャートである。10 is a flowchart illustrating a flow of a modification example of conversion candidate display processing performed by the printing apparatus 1; 日記の本文を作成するための編集画面の更に別の例を示した図である。It is the figure which showed another example of the edit screen for producing the text of a diary. 印刷装置1で行われる日記保存処理の流れを示すフローチャートである。4 is a flowchart illustrating a diary storage process performed by the printing apparatus 1. 印刷装置1で行われる日記参照処理の流れを示すフローチャートである。3 is a flowchart showing a flow of diary reference processing performed in the printing apparatus 1. 日記を表示した表示画面の一例を示した図である。It is the figure which showed an example of the display screen which displayed the diary.

図1は、一実施形態に係る印刷装置1の概観図である。印刷装置1は、日記や葉書などの文書を作成し印刷する機能を備えた日記作成支援装置である。印刷装置1は、筐体2と、入力部3と、表示部4と、を備えている。   FIG. 1 is a schematic view of a printing apparatus 1 according to an embodiment. The printing apparatus 1 is a diary creation support apparatus having a function of creating and printing a document such as a diary or a postcard. The printing apparatus 1 includes a housing 2, an input unit 3, and a display unit 4.

筐体2の前面には、印刷媒体が排出される排紙口5と、可搬記録媒体が挿入される挿入口6が設けられている。入力部3は、文字入力キー、十字キー、変換キー、決定キーなどの種々のキーを備えるキーボードであり、筐体2に軸支されている。表示部4は、例えば、液晶ディスプレイであり、印刷する画像や文字を表示する。表示部4も筐体2に軸支されている。   On the front surface of the housing 2, a paper discharge port 5 through which a print medium is discharged and an insertion port 6 through which a portable recording medium is inserted are provided. The input unit 3 is a keyboard having various keys such as a character input key, a cross key, a conversion key, and a determination key, and is supported by the housing 2. The display unit 4 is, for example, a liquid crystal display, and displays images and characters to be printed. The display unit 4 is also pivotally supported by the housing 2.

図2は、印刷装置1の物理構成を示すブロック図である。印刷装置1は、入力部3と、表示部4と、プロセッサ10と、メモリ11と、記憶部12と、可搬記録媒体14を収容する可搬記録媒体駆動部13と、印刷部15と、を備えている。   FIG. 2 is a block diagram illustrating a physical configuration of the printing apparatus 1. The printing apparatus 1 includes an input unit 3, a display unit 4, a processor 10, a memory 11, a storage unit 12, a portable recording medium driving unit 13 that houses a portable recording medium 14, a printing unit 15, It has.

プロセッサ10は、印刷装置1の動作を制御する制御部であり、システムプログラムや制御プログラムをメモリ11に読み出して実行する。メモリ11は、システムプログラムを記憶したROM(Read Only Memory)と、種々のプログラムの実行時にワークメモリとして機能するRAM(Random Access Memory)を含んでいる。記憶部12は、例えば、ハードディスクドライブ(HDD)やソリッドステートドライブ(SSD)などであり、主に、制御プログラムやプログラムの実行に必要なデータが記憶されている。また、記憶部12には、後述するデータベースのデータも記憶されている。可搬記録媒体14は、例えば、光ディスクやメモリカードなどであり、主に制御プログラムやプログラムの実行に必要なデータが記憶されている。印刷部15は、印刷媒体に画像や文字を印刷する。また、後述する写真入り日記を印刷する。   The processor 10 is a control unit that controls the operation of the printing apparatus 1 and reads a system program and a control program into the memory 11 and executes them. The memory 11 includes a ROM (Read Only Memory) that stores a system program and a RAM (Random Access Memory) that functions as a work memory when various programs are executed. The storage unit 12 is, for example, a hard disk drive (HDD) or a solid state drive (SSD), and mainly stores a control program and data necessary for executing the program. The storage unit 12 also stores database data, which will be described later. The portable recording medium 14 is, for example, an optical disk or a memory card, and mainly stores a control program and data necessary for executing the program. The printing unit 15 prints images and characters on a print medium. In addition, a photo diary, which will be described later, is printed.

図3は、印刷装置1の機能構成を示すブロック図である。印刷装置1は、入力された文字を他の文字に変換する文字変換機能を備える文字変換支援装置を備えていて、図3には、文字変換支援装置が有する文字変換候補の表示制御に関する構成が記載されている。印刷装置1は、操作検出部21と、文字変換部22と、画像検索部23と、表示制御部24と、辞書DB25と、画像DB26と、表示部4を備えている。なお、本明細書において、“文字”という用語は文字列を含む用語であり、1以上の文字を指す。また、“文字”には、仮名文字、漢字、数字などの種々の文字が含まれる。   FIG. 3 is a block diagram illustrating a functional configuration of the printing apparatus 1. The printing apparatus 1 includes a character conversion support device that includes a character conversion function that converts input characters into other characters. FIG. 3 illustrates a configuration related to display control of character conversion candidates that the character conversion support device has. Are listed. The printing apparatus 1 includes an operation detection unit 21, a character conversion unit 22, an image search unit 23, a display control unit 24, a dictionary DB 25, an image DB 26, and a display unit 4. In this specification, the term “character” is a term including a character string, and indicates one or more characters. “Character” includes various characters such as kana characters, kanji, and numbers.

操作検出部21は、入力部3に対する利用者の操作を検出し、利用者の操作によって入力された文字や画像を出力する。   The operation detection unit 21 detects a user operation on the input unit 3 and outputs a character or an image input by the user operation.

文字変換部22は、操作検出部21から出力された仮名文字であって未確定の仮名文字(以降、入力文字と記す)を受信すると、入力文字に基づいて、利用者による入力が予測される複数の文字変換候補を決定する。具体的には、文字変換部22は、入力文字を検索キーに設定して辞書DB25に検索処理を実行させることで、複数の文字変換候補を辞書DB25から取得する。決定した複数の文字変換候補は、表示制御部24へ出力される。   When the character conversion unit 22 receives an unconfirmed kana character (hereinafter referred to as an input character) output from the operation detection unit 21, an input by the user is predicted based on the input character. A plurality of character conversion candidates are determined. Specifically, the character conversion unit 22 acquires a plurality of character conversion candidates from the dictionary DB 25 by setting an input character as a search key and causing the dictionary DB 25 to execute a search process. The determined plurality of character conversion candidates are output to the display control unit 24.

画像検索部23は、操作検出部21から出力された画像(以降、入力画像と記す)を受信すると、画像DB26に記憶されている複数の画像から入力画像に対応する画像(以降、対応画像と記す)を検索し、対応画像に関連付けられた第1の文字(以降、対応文字と記す)と対応文字の読み方を示す仮名文字(以降、対応仮名文字)とを含む文字情報を取得する。具体的には、画像検索部23は、入力画像と画像DB26に記憶されている画像とを比較照合して対応画像を検索し、対応画像に関連付けられた文字情報を画像DB26から取得する。取得した文字情報は、表示制御部24へ出力される。   Upon receiving the image output from the operation detection unit 21 (hereinafter referred to as an input image), the image search unit 23 selects an image corresponding to the input image (hereinafter referred to as a corresponding image) from a plurality of images stored in the image DB 26. Character information including a first character associated with the corresponding image (hereinafter referred to as a corresponding character) and a kana character indicating how to read the corresponding character (hereinafter referred to as a corresponding kana character). Specifically, the image search unit 23 searches the corresponding image by comparing the input image and the image stored in the image DB 26, and acquires character information associated with the corresponding image from the image DB 26. The acquired character information is output to the display control unit 24.

表示制御部24は、文字変換部22から出力された複数の文字変換候補の少なくとも一つを表示部4に表示させる。具体的には、表示制御部24は、入力文字が入力画像に関連付けて入力されている場合には、画像検索部23から出力された文字情報の対応仮名文字に入力文字が含まれているか否かを判定する。なお、本実施形態では、この判定の際、対応仮名文字に入力文字が前方一致しているか否かを判定する。そして、前方一致していると判定すると、複数の文字変換候補をソートしてその文字情報の対応文字を優先的に表示部4に表示させる。さらに、表示制御部24は、複数の文字変換候補をそれらの属性に基づいてソートして、特定の属性(例えば、人名、地名など)の文字変換候補を優先的に表示部4に表示してもよい。   The display control unit 24 causes the display unit 4 to display at least one of the plurality of character conversion candidates output from the character conversion unit 22. Specifically, when the input character is input in association with the input image, the display control unit 24 determines whether the input character is included in the corresponding kana character of the character information output from the image search unit 23. Determine whether. In this embodiment, at the time of this determination, it is determined whether or not the input character matches the corresponding kana character. Then, if it is determined that the front matches, a plurality of character conversion candidates are sorted and the corresponding characters of the character information are preferentially displayed on the display unit 4. Furthermore, the display control unit 24 sorts the plurality of character conversion candidates based on their attributes, and preferentially displays the character conversion candidates having specific attributes (for example, person names, place names, etc.) on the display unit 4. Also good.

辞書DB25は、予測変換辞書であり、文字毎に複数の文字変換候補が記憶されている。また、辞書DB25には、人名、地名などを識別するための属性情報が各文字変換候補と関連付けて記憶されていることが望ましい。   The dictionary DB 25 is a predictive conversion dictionary and stores a plurality of character conversion candidates for each character. The dictionary DB 25 preferably stores attribute information for identifying a person name, place name, etc. in association with each character conversion candidate.

画像DB26は、複数の画像と、複数の画像の各々に関連付けられた文字情報とを記憶する記憶部であり、これらの情報(画像を含む)を管理するデータベースである。文字情報には、少なくとも、画像に関連付けられた第1の文字とその第1の文字の読み方を示す仮名文字が含まれている。画像DB26の具体例としては、例えば、宛名データを管理する宛名データベースが挙げられる。その場合、画像DB26に記憶されている画像は、例えば、人物が写った写真の画像であり、文字情報には、写真に写った人物の宛名情報(姓名、姓名読み、連名、連名読み、郵便番号、住所など)が含まれる。   The image DB 26 is a storage unit that stores a plurality of images and character information associated with each of the plurality of images, and is a database that manages these pieces of information (including images). The character information includes at least a first character associated with the image and a kana character indicating how to read the first character. A specific example of the image DB 26 is an address database that manages address data. In this case, the image stored in the image DB 26 is, for example, an image of a photograph showing a person, and the text information includes address information (first name, last name reading, consecutive name, joint name reading, postal mail) of the person shown in the photograph. Number, address, etc.).

以上のように構成された印刷装置1によれば、文字が画像と関連付けて入力された場合には、複数の文字変換候補の中から画像に関連する文字情報(対応文字)が優先的に表示部4に表示される。一般に、画像と関連付けて入力される文字は、画像に関連する文字である可能性が高い。このため、画像に関連する文字情報(対応文字)を優先的に表示部4が表示することで、変換効率を向上させることができる。従って、利用者は、文字入力作業を効率的に行うことが可能となる。   According to the printing apparatus 1 configured as described above, when a character is input in association with an image, character information (corresponding character) related to the image is preferentially displayed from among a plurality of character conversion candidates. Part 4 is displayed. In general, a character input in association with an image is likely to be a character related to the image. For this reason, the display unit 4 preferentially displays character information (corresponding characters) related to the image, so that the conversion efficiency can be improved. Therefore, the user can efficiently perform the character input work.

図4は、印刷装置1で行われる日記作成処理の流れを示すフローチャートである。以下、画像DB26が宛名データベースである場合を例にして、印刷装置1が写真付き日記を作成する処理について具体的に説明する。   FIG. 4 is a flowchart showing a diary creation process performed by the printing apparatus 1. Hereinafter, the process in which the printing apparatus 1 creates a diary with photos will be described in detail, taking as an example the case where the image DB 26 is an address database.

印刷装置1は、操作検出部21が日記作成処理の開始を指示する利用者の操作を検出すると、メモリ11を初期化する(ステップS10)。ここでは、例えば、人名優先フラグ、宛名姓名優先フラグなどのフラグ値をOFFに設定し、さらに、対応宛名レコードをメモリ11から消去する。なお、人名優先フラグ、宛名姓名優先フラグ、対応宛名レコードについては後述する。   When the operation detection unit 21 detects a user operation instructing the start of the diary creation process, the printing apparatus 1 initializes the memory 11 (step S10). Here, for example, flag values such as a person name priority flag and a name surname priority flag are set to OFF, and the corresponding address record is deleted from the memory 11. The personal name priority flag, the address name surname priority flag, and the corresponding address record will be described later.

次に、印刷装置1は、作成する日記のレイアウトを決定するために、選択可能なレイアウトを表示する(ステップS20)。ここでは、表示部4は、例えば、図5に示すようなレイアウト選択画面を表示する。図5に示すレイアウトL1からレイアウトL6は、いずれも画像領域(図5では“写真”と記載)とテキスト領域(図5では“テキスト”と記載)を有している。   Next, the printing apparatus 1 displays selectable layouts in order to determine the layout of the diary to be created (step S20). Here, the display unit 4 displays a layout selection screen as shown in FIG. 5, for example. Each of the layouts L1 to L6 shown in FIG. 5 has an image area (described as “photo” in FIG. 5) and a text area (described as “text” in FIG. 5).

印刷装置1は、操作検出部21がレイアウトを選択する利用者の操作を検出すると(ステップS30YES)、選択されたレイアウトに画像領域が存在するか否かを判定する(ステップS40)。画像領域が存在する場合には、印刷装置1は、図6に示す画像選択処理を開始する(ステップS50)。   When the operation detection unit 21 detects an operation of the user who selects a layout (YES in step S30), the printing apparatus 1 determines whether an image area exists in the selected layout (step S40). If there is an image area, the printing apparatus 1 starts the image selection process shown in FIG. 6 (step S50).

画像選択処理では、まず、印刷装置1は、利用者が選択可能な画像を表示する(ステップS51)。ここでは、表示部4が、例えば、複数の画像のサムネイルを一覧で表示する。その後、印刷装置1は、操作検出部21が画像を選択する利用者の操作を検出すると(ステップS52YES)、顔認識処理を実行する(ステップS53)。なお、以降では、利用者が選択した画像を入力画像と記す。   In the image selection process, first, the printing apparatus 1 displays an image that can be selected by the user (step S51). Here, the display unit 4 displays, for example, thumbnails of a plurality of images as a list. Thereafter, when the operation detection unit 21 detects the user's operation for selecting an image (YES in step S52), the printing apparatus 1 executes face recognition processing (step S53). Hereinafter, an image selected by the user is referred to as an input image.

顔認識処理は、画像検索部23により行われる処理であり、入力画像に被写体の顔部分が含まれているか否かを判定する。顔部分が含まれているか否かを判定するアルゴリズムは、特定のアルゴリズムに限られず、任意のアルゴリズムを採用し得る。例えば、図7に示す画像P1が選択された場合であれば、画像検索部23は、顔認識処理により人物H1の顔部分F1、人物H2の顔部分F2を検出する。   The face recognition process is a process performed by the image search unit 23, and determines whether the face portion of the subject is included in the input image. An algorithm for determining whether or not a face portion is included is not limited to a specific algorithm, and an arbitrary algorithm can be adopted. For example, if the image P1 shown in FIG. 7 is selected, the image search unit 23 detects the face portion F1 of the person H1 and the face portion F2 of the person H2 by face recognition processing.

顔が検出されない場合には(ステップS54NO)、印刷装置1は、図6の処理を終了し、図4に示すテキスト記入処理を実行する(ステップS60)。一方、画像検索部23が顔を検出すると、即ち、入力画像に顔部分が含まれていると判定すると(ステップS54YES)、人名優先フラグのフラグ値をONに設定する(ステップS55)。なお、人名優先フラグは、文字変換候補を表示部4が表示する際に人名を優先的に表示するか否かを示すフラグであり、メモリ11に記憶される。   If no face is detected (NO in step S54), the printing apparatus 1 ends the process of FIG. 6 and executes the text entry process shown in FIG. 4 (step S60). On the other hand, if the image search unit 23 detects a face, that is, determines that a face portion is included in the input image (YES in step S54), the flag value of the personal name priority flag is set to ON (step S55). The personal name priority flag is a flag indicating whether or not the personal name is preferentially displayed when the display unit 4 displays the character conversion candidates, and is stored in the memory 11.

次に、印刷装置1は、宛名データベースで検索処理を実行する(ステップS56)。宛名データベース(画像DB26)には、図8に示すようなレコード27が複数登録されていて、各レコード27には、姓名データ(姓データ27a、名データ27b)、姓名読みデータ(姓読みデータ27c、名読みデータ27d)、連名データ(連名姓データ27e、連名名データ27f)、連名読みデータ(連名姓読みデータ27g、連名名読みデータ27h)、郵便番号データ27i、住所データ27j、画像(写真データ27k)が含まれている。なお、登録されている宛名レコード(レコード27)は、例えば、図9に示す参照画面から参照することができる。   Next, the printing apparatus 1 executes a search process using the address database (step S56). A plurality of records 27 as shown in FIG. 8 are registered in the address database (image DB 26), and in each record 27, first and last name data (last name data 27a, first name data 27b), first and last name reading data (last name reading data 27c). Name reading data 27d), joint name data (joint name surname data 27e, joint name surname data 27f), joint name reading data (joint name surname reading data 27g, joint name surname reading data 27h), postal code data 27i, address data 27j, image (photograph) Data 27k) is included. The registered address record (record 27) can be referred to, for example, from the reference screen shown in FIG.

ステップS56では、画像検索部23が、入力画像と各レコード27の写真データ27kを比較照合することで、対応画像を検索する。具体的には、画像検索部23は、画像DB26から写真データ27kを順番に取得し、取得した写真データ27kの被写体と入力画像の被写体との類似度を決定する。類似度は、ステップS53で検出した入力画像の被写体の顔部分(例えば、図7の画像P1の顔部分F1)の特徴と、取得した写真データ27kの被写体の顔部分(例えば、図9の画像P2の顔部分)の特徴を比較して決定する。これらの処理をすべてのレコード27の写真データ27kに対して行うことで、入力画像と各レコード27の写真データ27kとの類似度が決定される。画像検索部23は、得られた類似度に基づいて複数の写真データ27kから対応画像を特定し、対応画像の検索を終了する。   In step S56, the image search unit 23 searches the corresponding image by comparing and collating the input image with the photo data 27k of each record 27. Specifically, the image search unit 23 sequentially acquires the photo data 27k from the image DB 26, and determines the similarity between the acquired subject of the photo data 27k and the subject of the input image. The similarity is the characteristics of the face portion of the subject (for example, the face portion F1 of the image P1 in FIG. 7) of the input image detected in step S53 and the face portion of the subject of the acquired photographic data 27k (for example, the image of FIG. 9). It is determined by comparing the characteristics of the face part of P2. By performing these processes on the photo data 27k of all the records 27, the similarity between the input image and the photo data 27k of each record 27 is determined. The image search unit 23 specifies a corresponding image from the plurality of photograph data 27k based on the obtained similarity, and ends the search for the corresponding image.

検索の結果、対応画像が存在した場合には、対応宛名レコードが存在すると判定し(ステップS57YES)、宛名姓名優先フラグのフラグ値をONに設定する。このとき、対応宛名レコードをメモリ11に記憶させる(ステップS58)。ここでは、対応画像の被写体の名称である対応文字(例えば、姓データ27a、名データ27b)と対応文字の読みを示す対応読み文字(姓読みデータ27c、名読みデータ27d)を含む対応宛名レコード全体を記憶させてもよく、例えば写真データ27kを除く一部のみを記憶させてもよい。なお、宛名姓名優先フラグは、文字変換候補を表示部4が表示する際に対応宛名レコードに含まれるデータを表示順序の決定に利用するか否かを示すフラグであり、メモリ11に記憶される。   As a result of the search, if a corresponding image exists, it is determined that a corresponding address record exists (step S57 YES), and the flag value of the first name surname priority flag is set to ON. At this time, the corresponding address record is stored in the memory 11 (step S58). Here, the corresponding address record including the corresponding characters (for example, the surname data 27a and the name data 27b) which are the names of the subjects of the corresponding image and the corresponding reading characters (the surname reading data 27c and the name reading data 27d) indicating the reading of the corresponding characters. The whole may be stored, for example, only a part other than the photo data 27k may be stored. Note that the first name surname priority flag is a flag indicating whether or not the data included in the corresponding address record is used for determining the display order when the display unit 4 displays the character conversion candidates, and is stored in the memory 11. .

ステップS53で入力画像から複数の顔部分が検出されている場合には(ステップS59YES)、顔部分毎(例えば、図7の顔部分F1、顔部分F2)に、ステップS56からステップS58の処理を繰り返す。全ての顔部分に対する処理が終了すると、印刷装置1は、図6の処理を終了し、図4に示すテキスト記入処理を実行する(ステップS60)。   If a plurality of face portions are detected from the input image in step S53 (step S59 YES), the processing from step S56 to step S58 is performed for each face portion (for example, face portion F1 and face portion F2 in FIG. 7). repeat. When the processes for all the face portions are completed, the printing apparatus 1 ends the process of FIG. 6 and executes the text entry process shown in FIG. 4 (step S60).

印刷装置1は、日記のテキスト領域にテキストを入力するテキスト記入処理において、図10に示す変換候補表示処理を行う。変換候補表示処理では、まず、印刷装置1は、文字入力を検出する(ステップS61)。ここでは、操作検出部21が利用者による文字入力操作を検出する。   The printing apparatus 1 performs conversion candidate display processing shown in FIG. 10 in text entry processing for inputting text into the text area of the diary. In the conversion candidate display process, first, the printing apparatus 1 detects a character input (step S61). Here, the operation detection unit 21 detects a character input operation by the user.

操作検出部21が文字入力操作を検出すると、印刷装置1は、入力文字に基づいて複数の文字変換候補を決定する(ステップS62)。ここでは、文字変換部22が入力文字を検索キーに設定して辞書DB25に検索処理を実行させることで、複数の文字変換候補を辞書DB25から取得する。なお、入力文字は、未確定の仮名文字である。   When the operation detection unit 21 detects a character input operation, the printing apparatus 1 determines a plurality of character conversion candidates based on the input characters (step S62). Here, the character conversion unit 22 sets an input character as a search key and causes the dictionary DB 25 to execute a search process, thereby acquiring a plurality of character conversion candidates from the dictionary DB 25. The input character is an undetermined kana character.

次に、印刷装置1は、メモリ11に記憶されている人名優先フラグのフラグ値がONに設定されているか否かを判定する(ステップS63)。人名優先フラグのフラグ値がONに設定されている場合には、印刷装置1は、ステップS62で決定した複数の文字変換候補を、人名を優先してソートする(ステップS64)。なお、文字変換候補が人名か否かについては、辞書DB25に文字変換候補に関連付けて記憶されている属性情報に基づいて判断する。   Next, the printing apparatus 1 determines whether the flag value of the personal name priority flag stored in the memory 11 is set to ON (step S63). If the flag value of the personal name priority flag is set to ON, the printing apparatus 1 sorts the plurality of character conversion candidates determined in step S62 with priority on the personal name (step S64). Whether or not the character conversion candidate is a person name is determined based on attribute information stored in the dictionary DB 25 in association with the character conversion candidate.

さらに、印刷装置1は、メモリ11に記憶されている宛名姓名優先フラグのフラグ値がONに設定されているか否かを判定する(ステップS65)。宛名姓名優先フラグのフラグ値がONに設定されている場合には、入力文字は図6で利用者が選択した入力画像と関連付けられていると判断できる。このため、印刷装置1は、入力文字を検索キーに設定してメモリ11に記憶されている対応宛名レコード内で検索処理を実行する(ステップS66、ステップS67)。具体的には、表示制御部24が、対応宛名レコードの姓名読みデータ(姓読みデータ27c、名読みデータ27d)に入力文字が前方一致しているか否かを判定する。そして、入力文字が前方一致していると判定した場合には、表示制御部24は、ステップS64でソートされた複数の文字変換候補を、対応レコードの姓名データ(姓データ27a、名データ27b)を優先してさらにソートする(ステップS68)。   Furthermore, the printing apparatus 1 determines whether the flag value of the first name surname priority flag stored in the memory 11 is set to ON (step S65). When the flag value of the first name surname priority flag is set to ON, it can be determined that the input character is associated with the input image selected by the user in FIG. Therefore, the printing apparatus 1 sets the input character as a search key and executes a search process in the corresponding address record stored in the memory 11 (steps S66 and S67). Specifically, the display control unit 24 determines whether or not the input character matches the first and last name reading data (first name reading data 27c and first name reading data 27d) of the corresponding address record. If it is determined that the input characters match forward, the display control unit 24 selects the plurality of character conversion candidates sorted in step S64 as the first name data (first name data 27a, first name data 27b) of the corresponding record. Is further prioritized (step S68).

最後に、印刷装置1は、複数の文字変換候補の少なくとも1つを表示する(ステップS69)。ここでは、人名優先フラグのフラグ値がOFFに設定されている場合(ステップS63NO)には、表示制御部24は、ステップS62で決定された複数の文字変換候補をそのままの順番で表示部4に表示させる。   Finally, the printing apparatus 1 displays at least one of a plurality of character conversion candidates (step S69). Here, when the flag value of the personal name priority flag is set to OFF (NO in step S63), the display control unit 24 displays the plurality of character conversion candidates determined in step S62 on the display unit 4 in the same order. Display.

また、宛名姓名優先フラグのフラグ値がOFFに設定されている場合(ステップS65NO)、及び、対応宛名レコードの姓名読みデータに入力文字が前方一致していない場合(ステップS67NO)には、表示制御部24は、ステップS64でのソート後の順番、つまり、人名を優先した順番で、複数の文字変換候補を表示部4に表示させる。図11には、変換候補表示領域40内で人名候補41が他の文字変換候補よりも先に表示されている例が示されている。   Further, when the flag value of the first name surname priority flag is set to OFF (NO in step S65), and when the input characters do not coincide with the first name read data of the corresponding address record (step S67 NO), display control is performed. The unit 24 causes the display unit 4 to display a plurality of character conversion candidates in the order after the sorting in step S64, that is, the order in which the personal names are prioritized. FIG. 11 shows an example in which the personal name candidate 41 is displayed before the other character conversion candidates in the conversion candidate display area 40.

さらに、対応宛名レコードの姓名読みデータに入力文字が前方一致している場合(ステップS67YES)には、表示制御部24は、人名を優先した順番で、且つ、対応宛名レコードの姓名データを優先した順番で、複数の文字変換候補を表示部4に表示させる。図12には、変換候補表示領域40内で人名候補41が他の文字変換候補よりも先に表示されていて、且つ、対応宛名レコードの姓名データである宛名候補42が先頭に表示されている例が示されている。   Furthermore, when the input characters are matched with the first and last name reading data of the corresponding address record (YES in step S67), the display control unit 24 prioritizes the first name and last name data of the corresponding address record in the order in which the personal names are prioritized. A plurality of character conversion candidates are displayed on the display unit 4 in order. In FIG. 12, the personal name candidate 41 is displayed before the other character conversion candidates in the conversion candidate display area 40, and the address candidate 42 that is the first and last name data of the corresponding address record is displayed at the top. An example is shown.

なお、印刷装置1は、図10に示す変換候補表示処理の代わりに図13に示す変換候補表示処理を行ってもよい。図13のステップS81からステップS88、ステップS91は、図10のステップS61からステップS69と同様である。   Note that the printing apparatus 1 may perform the conversion candidate display process illustrated in FIG. 13 instead of the conversion candidate display process illustrated in FIG. 10. Steps S81 to S88 and S91 in FIG. 13 are the same as steps S61 to S69 in FIG.

図13に示す変換候補表示処理は、対応宛名レコードの姓名読みデータに入力文字が前方一致している場合には、さらに、対応宛名レコードに連名データが含まれている否かを判定し、連名データが含まれている場合には、連名データを優先的に表示する点が、図10に示す変換候補表示処理とは異なっている。   The conversion candidate display process shown in FIG. 13 further determines whether or not consecutive name data is included in the corresponding address record when the input character matches the first and last name reading data of the corresponding address record. When the data is included, the combination name data is preferentially displayed, which is different from the conversion candidate display process shown in FIG.

印刷装置1は、連名データ(連名姓データ27e、連名名データ27f、連名姓読みデータ27g、連名名読みデータ27h)が対応宛名レコードに存在するかを判定し(ステップS89)、存在する場合には、表示制御部24は、ステップS88でソートされた複数の文字変換候補の先頭に対応レコードの連名姓名データ(連名姓データ27e、連名名データ27f)を追加する(ステップS90)。   The printing apparatus 1 determines whether the consecutive name data (the consecutive name surname data 27e, the consecutive name surname data 27f, the consecutive name surname reading data 27g, the joint name surname reading data 27h) exists in the corresponding address record (step S89). The display control unit 24 adds consecutive name and surname data (joint surname data 27e and conjoint name data 27f) of the corresponding record to the head of the plurality of character conversion candidates sorted in step S88 (step S90).

これにより、対応宛名レコードの姓名読みデータに入力文字が前方一致している場合(ステップS87YES)には、表示制御部24は、複数の文字変換候補に加えて、連名姓名データも表示部4に表示される。図14には、連名姓名データである連名宛名候補43を文字変換候補とともに表示した例が示されている。図14では、変換候補表示領域40で連名宛名候補43が先頭で、その後、人名候補41が他の文字変換候補よりも先に表示されていて、且つ、対応宛名レコードの姓名データである宛名候補42が連名宛名候補43の次に表示されている。   As a result, if the input character matches the first and last name reading data of the corresponding address record (YES in step S87), the display control unit 24 adds the first and last name data to the display unit 4 in addition to the plurality of character conversion candidates. Is displayed. FIG. 14 shows an example in which a joint name candidate 43, which is the surname data, is displayed together with a character conversion candidate. In FIG. 14, in the conversion candidate display area 40, the joint name address candidate 43 is displayed first, and then the personal name candidate 41 is displayed before the other character conversion candidates, and the address candidate is the first name name data of the corresponding address record. 42 is displayed next to the joint name candidate 43.

印刷装置1は、テキスト記入処理終了後、操作検出部21が日記を保存する利用者の操作を検出すると、図15に示す日記保存処理を開始する(ステップS70)。まず、印刷装置1は、日記データを記憶部12に記憶させる(ステップS71)。日記データには、日記のレイアウトデータ、日記に含まれる写真データやテキストデータが含まれる。続いて、印刷装置1は、メモリ11に記憶されている人名優先フラグのフラグ値と宛名姓名優先フラグのフラグ値を、日記データに関連付けて記憶部12に記憶させる(ステップS72、ステップS73)。さらに、印刷装置1は、宛名姓名優先フラグのフラグ値がONであれば(ステップS74YES)、メモリ11に記憶されている対応宛名レコードを、日記データに関連付けて記憶部12に記憶させる(ステップS75)。即ち、印刷装置1は、日記データに対応宛名レコードを関連付ける関連付け部を備えている。   When the operation detection unit 21 detects the user's operation for saving the diary after the text entry process is completed, the printing apparatus 1 starts the diary saving process shown in FIG. 15 (step S70). First, the printing apparatus 1 stores the diary data in the storage unit 12 (step S71). The diary data includes diary layout data, photo data and text data included in the diary. Subsequently, the printing apparatus 1 stores the flag value of the personal name priority flag and the flag value of the first and last name priority flag stored in the memory 11 in the storage unit 12 in association with the diary data (steps S72 and S73). Furthermore, if the flag value of the first name surname priority flag is ON (step S74 YES), the printing apparatus 1 stores the corresponding address record stored in the memory 11 in the storage unit 12 in association with the diary data (step S75). ). That is, the printing apparatus 1 includes an association unit that associates a corresponding address record with diary data.

図16は、印刷装置1で行われる日記参照処理の流れを示すフローチャートである。以下、印刷装置1が、図4に示す日記作成処理により作成された日を参照する処理について具体的に説明する。   FIG. 16 is a flowchart showing the flow of diary reference processing performed in the printing apparatus 1. Hereinafter, the process in which the printing apparatus 1 refers to the date created by the diary creation process shown in FIG. 4 will be specifically described.

印刷装置1は、まず、操作検出部21が宛名検索機能を用いて日記を参照する利用者の操作を検出したか否かを判定する(ステップS101)。宛名検索機能を使用していない場合には、印刷装置1は、選択された他の検索処理を実行する(ステップS106)。   First, the printing apparatus 1 determines whether or not the operation detecting unit 21 has detected an operation of a user who refers to the diary using the address search function (step S101). If the address search function is not used, the printing apparatus 1 executes another selected search process (step S106).

印刷装置1は、宛名検索機能が選択された場合には、日記データに関連付けて記憶されている対応宛名レコード内で、入力された文字列(第2の入力文字)を含む宛名を含む対応宛名レコードを検索する(ステップS102)。利用者が入力した宛名を含む対応宛名レコードが存在する場合には(ステップS103YES)、その対応宛名レコードが関連付けられている日記データを表示部4に表示する(ステップS104)。即ち、印刷装置1は、関連付け部によって関連付けられた対応宛名レコードの中から第2の入力文字を含む宛名を含む対応宛名レコードを検索する宛名検索部と、検索された対応宛名レコードに関連付けられている日記データを表示部4に表示させる第2表示制御部と、を備えている。図17には、日記データが表示部4に表示されている例が示されている。利用者が入力した宛名を含む対応宛名レコードが存在しない場合には、該当する日記データが存在しないことを示すエラーメッセージを表示部4に表示する(ステップS105)。   When the address search function is selected, the printing apparatus 1 includes a corresponding address including the address including the input character string (second input character) in the corresponding address record stored in association with the diary data. A record is searched (step S102). If there is a corresponding address record including the address input by the user (YES in step S103), the diary data associated with the corresponding address record is displayed on the display unit 4 (step S104). In other words, the printing apparatus 1 is associated with the address search unit that searches for the corresponding address record including the address including the second input character from the corresponding address records associated by the associating unit, and the searched corresponding address record. A second display control unit for displaying the existing diary data on the display unit 4. FIG. 17 shows an example in which diary data is displayed on the display unit 4. If there is no corresponding address record including the address input by the user, an error message indicating that the corresponding diary data does not exist is displayed on the display unit 4 (step S105).

上述した印刷装置1によれば、写真入り日記を作成する際に、写真に写っている人物の人名が優先的に文字変換候補として表示される。このため、写真の人物の人名を素早く入力することができる。また、連名データを合わせて表示させることで、写真の人物に関係するより多くの人名を素早く入力することができる。さらに、入力した宛名に基づいて日記データを検索し、表示部に表示させることができる。   According to the printing apparatus 1 described above, when creating a diary with photos, the names of persons in the photos are preferentially displayed as character conversion candidates. For this reason, the person name of the person in the photograph can be input quickly. Further, by displaying the combined name data together, it is possible to quickly input more person names related to the person in the photograph. Furthermore, diary data can be searched based on the input address and displayed on the display unit.

上述した実施形態及び変形例は、発明の理解を容易にするために具体例を示したものであり、本発明はこれらの実施形態及び変形例に限定されるものではない。文字変換支援装置、日記作成支援装置、文字変換支援方法、及びプログラムは、特許請求の範囲により規定される本発明の思想を逸脱しない範囲において、さまざまな変形、変更が可能である。この明細書で説明される個別の実施形態及び変形例の文脈におけるいくつかの特徴を組み合わせて単一の実施形態としてもよい。   The embodiments and modifications described above are specific examples for facilitating understanding of the invention, and the present invention is not limited to these embodiments and modifications. The character conversion support device, diary creation support device, character conversion support method, and program can be variously modified and changed without departing from the concept of the present invention defined by the claims. Several features in the context of individual embodiments and variations described in this specification may be combined into a single embodiment.

例えば、上記では、画像DB26が宛名データベースである例を示したが、画像DB26は宛名データベースに限られない。写真の被写体は人物に限られず、例えば、植物、動物であってもよい。画像DB26は、被写体の写真と名称を関連付けて記憶させたデータベースであればよい。また、上記では、宛名データや日記データを記憶する記憶部12を、印刷装置1が備えるものとして説明したが、これらのデータは、印刷装置1とLANやインターネットなどのネットワークを介してデータ送受信が可能に構成された記憶装置やサーバの記憶部に記憶されているものであっても良い。   For example, in the above description, the image DB 26 is an address database, but the image DB 26 is not limited to an address database. The subject of the photograph is not limited to a person, and may be, for example, a plant or an animal. The image DB 26 may be a database that stores a photograph of a subject and a name in association with each other. In the above description, the storage unit 12 that stores address data and diary data has been described as being included in the printing apparatus 1. However, these data can be transmitted and received between the printing apparatus 1 and a network such as a LAN or the Internet. It may be stored in a storage device or a storage unit of a server that can be configured.

以下、本願の出願当初の特許請求の範囲に記載された発明を付記する。
[付記1]
各々が画像と前記画像に関連付けられた第1の文字と前記第1の文字の読み方を示す仮名文字とを含む複数の宛名データに含まれる複数の画像の中から入力画像に対応する対応画像を検索して、前記対応画像に関連付けられた第1の文字である対応文字と前記対応文字の読み方を示す対応仮名文字とを取得する画像検索部と、
前記入力画像に関連付けて入力された仮名文字である入力文字に基づいて複数の文字変換候補を決定する文字変換部と、
前記複数の文字変換候補の少なくとも一つを表示部に表示させる表示制御部であって、前記対応仮名文字に前記入力文字が含まれているときに前記対応文字を優先的に前記表示部に表示させる表示制御部と、を備える
ことを特徴とする文字変換支援装置。
[付記2]
付記1に記載の文字変換支援装置において、
前記画像検索部は、前記入力画像の被写体と前記複数の画像の各々の被写体との類似度に基づいて前記対応画像を検索し、前記対応画像の前記被写体の名称である前記対応文字と前記対応仮名文字とを取得する
ことを特徴とする文字変換支援装置。
[付記3]
付記2に記載の文字変換支援装置において、
前記画像検索部は、顔認識処理により特定された前記入力画像の被写体の顔部分の特徴と前記複数の画像の各々の被写体の顔部分の特徴とを比較して前記類似度を決定する
ことを特徴とする文字変換支援装置。
[付記4]
付記1乃至付記3のいずれか1つに記載の文字変換支援装置において、
前記複数の宛名データは、前記複数の画像の各々に関連付けられた第2の文字をさらに含み、
前記画像検索部は、前記対応画像に関連付けられた前記対応文字と前記対応仮名文字と、前記対応画像に関連付けられた前記第2の文字である第2の対応文字を取得し、
前記表示制御部は、前記対応仮名文字に前記入力文字が含まれているときに前記対応文字及び前記第2の対応文字を優先的に前記表示部に表示させる
ことを特徴とする文字変換支援装置。
[付記5]
付記1乃至付記4のいずれか一つに記載の文字変換支援装置と、
前記対応仮名文字に前記入力文字が含まれているときに、前記対応画像と前記対応文字と前記対応仮名文字とを含む対応宛名データを、前記入力画像を含むデータである日記データに関連付ける関連付け部と、
前記関連付け部によって関連付けられた前記対応宛名データの中から、第2の入力文字を含む宛名を含む対応宛名レコードを検索する宛名検索部と、
前記関連付け部によって関連付けられた前記対応宛名データの中に、前記第2の入力文字を含む宛名を含む対応宛名レコードが存在すると前記宛名検索部によって判断された場合、当該対応宛名データが関連付けられている日記データを表示部に表示させる第2表示制御部と、を備える
ことを特徴とする日記作成支援装置。
[付記6]
記憶部に記憶されている複数の画像から入力画像に対応する対応画像を検索して、前記対応画像に関連付けられた対応文字と前記対応文字の読み方を示す対応仮名文字を取得し、
前記入力画像に関連付けて入力された仮名文字である入力文字に基づいて複数の文字変換候補を決定し、
前記複数の文字変換候補の少なくとも一つを表示部に表示し、前記対応仮名文字に前記入力文字が含まれているときに、前記対応文字を優先して前記表示部に表示する
ことを特徴とする文字変換支援方法。
[付記7]
記憶部と表示部を備える文字変換支援装置のコンピュータを、
前記記憶部に記憶されている複数の画像から入力画像に対応する対応画像を検索して、前記対応画像に関連付けられた対応文字と前記対応文字の読み方を示す対応仮名文字を取得する手段、
前記入力画像に関連付けて入力された仮名文字である入力文字に基づいて複数の文字変換候補を決定する手段、
前記複数の文字変換候補の少なくとも一つを前記表示部に表示させ、前記対応仮名文字に前記入力文字が含まれているときに、前記対応文字を優先して前記表示部に表示させる手段、
として機能させることを特徴とするプログラム。
Hereinafter, the invention described in the scope of claims at the beginning of the application of the present application will be added.
[Appendix 1]
A corresponding image corresponding to the input image is selected from among a plurality of images included in a plurality of address data each including an image, a first character associated with the image, and a kana character indicating how to read the first character. An image search unit that searches to obtain a corresponding character that is a first character associated with the corresponding image and a corresponding kana character indicating how to read the corresponding character;
A character conversion unit that determines a plurality of character conversion candidates based on input characters that are kana characters input in association with the input image;
A display control unit for displaying at least one of the plurality of character conversion candidates on a display unit, wherein the corresponding character is preferentially displayed on the display unit when the input character is included in the corresponding kana character. A character conversion support device comprising:
[Appendix 2]
In the character conversion support device according to attachment 1,
The image search unit searches the corresponding image based on a similarity between the subject of the input image and each of the subjects of the plurality of images, and the corresponding character that is the name of the subject of the corresponding image and the corresponding character A character conversion support device that acquires kana characters.
[Appendix 3]
In the character conversion support device according to attachment 2,
The image search unit determines the similarity by comparing a feature of the face portion of the subject of the input image specified by face recognition processing with a feature of the face portion of the subject of each of the plurality of images. Character conversion support device.
[Appendix 4]
In the character conversion support device according to any one of supplementary notes 1 to 3,
The plurality of address data further includes a second character associated with each of the plurality of images,
The image search unit obtains the corresponding character and the corresponding kana character associated with the corresponding image, and a second corresponding character that is the second character associated with the corresponding image,
The display control unit preferentially displays the corresponding character and the second corresponding character on the display unit when the input character is included in the corresponding kana character. .
[Appendix 5]
The character conversion support device according to any one of supplementary notes 1 to 4,
An association unit for associating corresponding address data including the corresponding image, the corresponding character, and the corresponding kana character with diary data that is data including the input image when the input character is included in the corresponding kana character When,
An address search unit for searching for a corresponding address record including an address including a second input character from the corresponding address data associated by the associating unit;
If it is determined by the address search unit that there is a corresponding address record including the address including the second input character in the corresponding address data associated by the associating unit, the corresponding address data is associated. A diary creation support apparatus comprising: a second display control unit configured to display existing diary data on a display unit.
[Appendix 6]
A corresponding image corresponding to the input image is searched from a plurality of images stored in the storage unit, a corresponding character associated with the corresponding image and a corresponding kana character indicating how to read the corresponding character are acquired,
Determining a plurality of character conversion candidates based on input characters that are kana characters input in association with the input image;
Displaying at least one of the plurality of character conversion candidates on a display unit, and displaying the corresponding character on the display unit with priority when the input character is included in the corresponding kana character. Character conversion support method.
[Appendix 7]
A computer of a character conversion support device including a storage unit and a display unit,
Means for searching for a corresponding image corresponding to an input image from a plurality of images stored in the storage unit, and acquiring corresponding kana characters associated with the corresponding image and how to read the corresponding characters;
Means for determining a plurality of character conversion candidates based on input characters that are kana characters input in association with the input image;
Means for displaying at least one of the plurality of character conversion candidates on the display unit and preferentially displaying the corresponding character on the display unit when the input character is included in the corresponding kana character;
A program characterized by functioning as

1・・・印刷装置、2・・・筐体、3・・・入力部、4・・・表示部、5・・・排出口、6・・・挿入口、10・・・プロセッサ、11・・・メモリ、12・・・記憶部、13・・・可搬記録媒体駆動部、14・・・可搬記録媒体、15・・・印刷部、21・・・操作検出部、22・・・文字変換部、23・・・画像検索部、24・・・表示制御部、25・・・辞書DB、26・・・画像DB、27・・・レコード、27a・・・姓データ、27b・・・名データ、27c・・・姓読みデータ、27d・・・名読みデータ、27e・・・連名姓データ、27f・・・連名名データ、27g・・・連名姓読みデータ、27h・・・連名名読みデータ、27i・・・郵便番号データ、27j・・・住所データ、27k・・・写真データ、L1、L2、L3、L4、L5、L6・・・レイアウト、H1、H2・・・人物、F1、F2・・・顔部分、P1、P2・・・画像、30・・・入力文字、40・・・変換候補表示領域、41・・・人名候補、42・・・宛名候補、43・・・連名宛名候補 DESCRIPTION OF SYMBOLS 1 ... Printing apparatus, 2 ... Housing | casing, 3 ... Input part, 4 ... Display part, 5 ... Discharge port, 6 ... Insertion port, 10 ... Processor, 11 * ..Memory, 12... Storage unit, 13... Portable recording medium drive unit, 14... Portable recording medium, 15. Character conversion unit, 23 ... Image search unit, 24 ... Display control unit, 25 ... Dictionary DB, 26 ... Image DB, 27 ... Record, 27a ... Last name data, 27b ... First name data, 27c: Last name reading data, 27d: Last name reading data, 27e: Last name last name data, 27f: Last name data, 27g: Last name reading data, 27h: Last name reading Name reading data, 27i ... zip code data, 27j ... address data, 27k ... photo data, L1, L , L3, L4, L5, L6 ... layout, H1, H2 ... person, F1, F2 ... face part, P1, P2 ... image, 30 ... input characters, 40 ... conversion Candidate display area, 41 ... person name candidate, 42 ... address candidate, 43 ... joint address candidate

Claims (6)

各々が画像と前記画像に関連付けられた第1の文字と前記第1の文字の読み方を示す仮名文字とを含む複数の宛名データに含まれる複数の画像の中から入力画像に対応する対応画像を検索して、前記対応画像に関連付けられた第1の文字である対応文字と前記対応文字の読み方を示す対応仮名文字とを取得する画像検索部と、
前記入力画像に関連付けて入力された仮名文字である入力文字に基づいて複数の文字変換候補を決定する文字変換部と、
前記複数の文字変換候補の少なくとも一つを表示部に表示させる表示制御部であって、前記対応仮名文字に前記入力文字が含まれているときに前記対応文字を優先的に前記表示部に表示させる表示制御部と、
前記対応仮名文字に前記入力文字が含まれているときに、前記対応画像と前記対応文字と前記対応仮名文字とを含む対応宛名データを、前記入力画像を含むデータである日記データに関連付ける関連付け部と、
前記関連付け部によって関連付けられた前記対応宛名データの中から、第2の入力文字を含む宛名を含む対応宛名レコードを検索する宛名検索部と、
前記関連付け部によって関連付けられた前記対応宛名データの中に、前記第2の入力文字を含む宛名を含む対応宛名レコードが存在すると前記宛名検索部によって判断された場合、当該対応宛名データが関連付けられている日記データを表示部に表示させる第2表示制御部と、を備える
ことを特徴とする文字変換支援装置。
A corresponding image corresponding to the input image is selected from among a plurality of images included in a plurality of address data each including an image, a first character associated with the image, and a kana character indicating how to read the first character. An image search unit that searches to obtain a corresponding character that is a first character associated with the corresponding image and a corresponding kana character that indicates how to read the corresponding character;
A character conversion unit that determines a plurality of character conversion candidates based on input characters that are kana characters input in association with the input image;
A display control unit for displaying at least one of the plurality of character conversion candidates on a display unit, wherein the corresponding character is preferentially displayed on the display unit when the input character is included in the corresponding kana character. A display control unit
An association unit for associating corresponding address data including the corresponding image, the corresponding character, and the corresponding kana character with diary data that is data including the input image when the input character is included in the corresponding kana character When,
An address search unit for searching for a corresponding address record including an address including a second input character from the corresponding address data associated by the associating unit;
If it is determined by the address search unit that there is a corresponding address record including the address including the second input character in the corresponding address data associated by the associating unit, the corresponding address data is associated. And a second display control unit that displays the existing diary data on the display unit .
請求項1に記載の文字変換支援装置において、
前記画像検索部は、前記入力画像の被写体と前記複数の画像の各々の被写体との類似度に基づいて前記対応画像を検索し、前記対応画像の前記被写体の名称である前記対応文字と前記対応仮名文字とを取得する
ことを特徴とする文字変換支援装置。
The character conversion support device according to claim 1,
The image search unit searches the corresponding image based on a similarity between the subject of the input image and each of the subjects of the plurality of images, and the corresponding character that is the name of the subject of the corresponding image and the corresponding character A character conversion support device that acquires kana characters.
請求項2に記載の文字変換支援装置において、
前記画像検索部は、顔認識処理により特定された前記入力画像の被写体の顔部分の特徴と前記複数の画像の各々の被写体の顔部分の特徴とを比較して前記類似度を決定する
ことを特徴とする文字変換支援装置。
The character conversion support device according to claim 2,
The image search unit determines the similarity by comparing a feature of the face portion of the subject of the input image specified by face recognition processing with a feature of the face portion of the subject of each of the plurality of images. Character conversion support device.
請求項1乃至請求項3のいずれか1項に記載の文字変換支援装置において、
前記複数の宛名データは、前記複数の画像の各々に関連付けられた第2の文字をさらに含み、
前記画像検索部は、前記対応画像に関連付けられた前記対応文字と前記対応仮名文字と、前記対応画像に関連付けられた前記第2の文字である第2の対応文字を取得し、
前記表示制御部は、前記対応仮名文字に前記入力文字が含まれているときに前記対応文字及び前記第2の対応文字を優先的に前記表示部に表示させる
ことを特徴とする文字変換支援装置。
The character conversion support device according to any one of claims 1 to 3,
The plurality of address data further includes a second character associated with each of the plurality of images,
The image search unit obtains the corresponding character and the corresponding kana character associated with the corresponding image, and a second corresponding character that is the second character associated with the corresponding image,
The display control unit preferentially displays the corresponding character and the second corresponding character on the display unit when the input character is included in the corresponding kana character. .
記憶部に記憶されている複数の画像から入力画像に対応する対応画像を検索して、前記対応画像に関連付けられた対応文字と前記対応文字の読み方を示す対応仮名文字を取得し、
前記入力画像に関連付けて入力された仮名文字である入力文字に基づいて複数の文字変換候補を決定し、
前記複数の文字変換候補の少なくとも一つを表示部に表示し、前記対応仮名文字に前記入力文字が含まれているときに、前記対応文字を優先して前記表示部に表示し、
前記対応仮名文字に前記入力文字が含まれているときに、前記対応画像と前記対応文字と前記対応仮名文字とを含む対応宛名データを、前記入力画像を含むデータである日記データに関連付け、
前記関連付けられた前記対応宛名データの中から、第2の入力文字を含む宛名を含む対応宛名レコードを検索し、
前記関連付けられた前記対応宛名データの中に、前記第2の入力文字を含む宛名を含む対応宛名レコードが存在すると検索された場合、当該対応宛名データが関連付けられている日記データを表示部に表示する、
ことを特徴とする文字変換支援方法。
A corresponding image corresponding to the input image is searched from a plurality of images stored in the storage unit, a corresponding character associated with the corresponding image and a corresponding kana character indicating how to read the corresponding character are acquired,
Determining a plurality of character conversion candidates based on input characters that are kana characters input in association with the input image;
Displaying at least one of the plurality of character conversion candidates on a display unit, and when the input character is included in the corresponding kana character, the corresponding character is preferentially displayed on the display unit ,
When the input character is included in the corresponding kana character, the corresponding address data including the corresponding image, the corresponding character, and the corresponding kana character is associated with diary data that is data including the input image,
Searching the corresponding address record including the address including the second input character from the associated corresponding address data,
When it is searched that there is a corresponding address record including the address including the second input character in the associated corresponding address data, the diary data associated with the corresponding address data is displayed on the display unit. To
A character conversion support method characterized by that.
記憶部と表示部を備える文字変換支援装置のコンピュータを、
前記記憶部に記憶されている複数の画像から入力画像に対応する対応画像を検索して、前記対応画像に関連付けられた対応文字と前記対応文字の読み方を示す対応仮名文字を取得する手段、
前記入力画像に関連付けて入力された仮名文字である入力文字に基づいて複数の文字変換候補を決定する手段、
前記複数の文字変換候補の少なくとも一つを前記表示部に表示させ、前記対応仮名文字に前記入力文字が含まれているときに、前記対応文字を優先して前記表示部に表示させる手段、
前記対応仮名文字に前記入力文字が含まれているときに、前記対応画像と前記対応文字と前記対応仮名文字とを含む対応宛名データを、前記入力画像を含むデータである日記データに関連付ける手段、
前記関連付けられた前記対応宛名データの中から、第2の入力文字を含む宛名を含む対応宛名レコードを検索する手段、
前記関連付けられた前記対応宛名データの中に、前記第2の入力文字を含む宛名を含む対応宛名レコードが存在すると検索された場合、当該対応宛名データが関連付けられている日記データを表示部に表示する手段、
として機能させることを特徴とするプログラム。
A computer of a character conversion support device including a storage unit and a display unit,
Means for searching for a corresponding image corresponding to an input image from a plurality of images stored in the storage unit, and acquiring corresponding kana characters associated with the corresponding image and how to read the corresponding characters;
Means for determining a plurality of character conversion candidates based on input characters that are kana characters input in association with the input image;
Means for displaying at least one of the plurality of character conversion candidates on the display unit and preferentially displaying the corresponding character on the display unit when the input character is included in the corresponding kana character;
Means for associating corresponding address data including the corresponding image, the corresponding character, and the corresponding kana character with diary data that is data including the input image when the input character is included in the corresponding kana character;
Means for searching for a correspondence address record including a destination including a second input character from the associated correspondence address data;
When it is searched that there is a corresponding address record including the address including the second input character in the associated corresponding address data, the diary data associated with the corresponding address data is displayed on the display unit. Means to
A program characterized by functioning as
JP2015054512A 2015-03-18 2015-03-18 Character conversion support device, diary creation support device, character conversion support method, and program Active JP6582469B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015054512A JP6582469B2 (en) 2015-03-18 2015-03-18 Character conversion support device, diary creation support device, character conversion support method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015054512A JP6582469B2 (en) 2015-03-18 2015-03-18 Character conversion support device, diary creation support device, character conversion support method, and program

Publications (2)

Publication Number Publication Date
JP2016173797A JP2016173797A (en) 2016-09-29
JP6582469B2 true JP6582469B2 (en) 2019-10-02

Family

ID=57008238

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015054512A Active JP6582469B2 (en) 2015-03-18 2015-03-18 Character conversion support device, diary creation support device, character conversion support method, and program

Country Status (1)

Country Link
JP (1) JP6582469B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2021192462A1 (en) * 2020-03-27 2021-09-30

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014229091A (en) * 2013-05-23 2014-12-08 オムロン株式会社 Program for character input

Also Published As

Publication number Publication date
JP2016173797A (en) 2016-09-29

Similar Documents

Publication Publication Date Title
JP4305079B2 (en) Image management device
US20120294496A1 (en) Face recognition apparatus, control method thereof, and face recognition method
JP2004234228A (en) Image search device, keyword assignment method in image search device, and program
JP6080409B2 (en) Information processing apparatus, information processing method, and program
JP2000067065A (en) Method for identifying document image and record medium
JP4991407B2 (en) Information processing apparatus, control program thereof, computer-readable recording medium storing the control program, and control method
JP2006065477A (en) Character recognition device
JP4556739B2 (en) Image management apparatus, image management method, and image management program
JP6582469B2 (en) Character conversion support device, diary creation support device, character conversion support method, and program
TWI794547B (en) Document retrieval device, document retrieval program, document retrieval method
JP2021149439A (en) Information processing apparatus and information processing program
JP5933396B2 (en) Image classification device and image classification method
JP7102284B2 (en) File management device, file management method, and program
JP4525785B2 (en) Information processing apparatus and computer program
JP5310206B2 (en) Document processing apparatus, document processing method, and document processing program
JP2007334670A (en) Device, method and program for image processing
US10990338B2 (en) Information processing system and non-transitory computer readable medium
JPH10162024A (en) Electronic filing method and electronic filing device
JP2006146591A (en) Image display apparatus
JP2006092226A (en) Document attribute acquisition method and device and recording medium with program recorded thereon
JP2018055504A (en) Information processing apparatus
JP4731408B2 (en) Print processing system and DM creating apparatus constituting the same
JP4054787B2 (en) Data retrieval device
JP2006155340A (en) Image managing device, image management method, and image management program
JP6303742B2 (en) Image processing apparatus, image processing method, and image processing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180215

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190129

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190318

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20190415

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190806

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190819

R150 Certificate of patent or registration of utility model

Ref document number: 6582469

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150