JP2019135609A - Character input support system, character input support control device, and character input support program - Google Patents
Character input support system, character input support control device, and character input support program Download PDFInfo
- Publication number
- JP2019135609A JP2019135609A JP2018018414A JP2018018414A JP2019135609A JP 2019135609 A JP2019135609 A JP 2019135609A JP 2018018414 A JP2018018414 A JP 2018018414A JP 2018018414 A JP2018018414 A JP 2018018414A JP 2019135609 A JP2019135609 A JP 2019135609A
- Authority
- JP
- Japan
- Prior art keywords
- file name
- data
- image
- character
- function
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
Description
本発明は、撮像現場での発話音声データを用いて、ファイル名やコメントを登録するための文字入力支援システム、文字入力支援制御装置、文字入力支援プログラムに関するものである。 The present invention relates to a character input support system, a character input support control device, and a character input support program for registering a file name and a comment using speech data at an imaging site.
例えば、製造業等の広大な工場を管理する企業において、日々の点検業務やトラブル時の対応業務の際、デジタルカメラやスマートホン（スマートフォンという場合もある）を用いて現場の状況をデジタルファイルとして映像記録する必要がある。また、撮像デバイスとして、近年では、スマートグラスに代表されるウェアラブル端末を用いることもある。 For example, in a company that manages a vast factory such as a manufacturing industry, when performing daily inspection operations and troubleshooting operations, digital cameras and smart phones (sometimes referred to as smartphones) are used as digital files for the situation at the site. It is necessary to record video. In recent years, wearable terminals represented by smart glasses are sometimes used as imaging devices.
ところで、撮像したデジタルファイルの対象物及びファイル名の紐付けは、オフィス等に戻ってからパソコン等でリネームする必要があったが、類似の映像記録から撮像時の状況を思い出して入力するのは労力がかかっている。 By the way, associating the object and file name of the imaged digital file had to be renamed with a personal computer etc. after returning to the office etc., but remembering and inputting the situation at the time of imaging from similar video recording It takes effort.
なお、参考として、撮像したデジタルファイルを自動で整理する技術として、特許文献１〜特許文献３の技術が提案されている。 As a reference, Patent Documents 1 to 3 have been proposed as techniques for automatically organizing captured digital files.
特許文献１には、デジタルカメラ等で撮像した画像データの中から、ユーザのプリント傾向・嗜好を反映させたプリント推奨画像を自動的に選択することが記載されている。 Japanese Patent Application Laid-Open No. 2004-151561 describes that a print recommendation image that reflects a user's print tendency / preference is automatically selected from image data captured by a digital camera or the like.
また、特許文献２には、動画像からベストショットに対応するフレーム画像を、精度よく、効率的かつ高速に抽出することが記載されている。 Patent Document 2 describes that a frame image corresponding to a best shot is extracted from a moving image with high accuracy and efficiency.
さらに、特許文献３には、予め登録された認識用の画像パターンに応じて自動的に撮像画像を振り分けることが記載されている。 Furthermore, Patent Document 3 describes that a captured image is automatically distributed according to a recognition image pattern registered in advance.
しかしながら、特許文献１及び特許文献２のように、大量の映像を自動で整理、または類似映像からベストショットだけを抜き出すなどの画像解析技術は従来から存在し、サービスとしても提供されているが、上記課題（類似の映像記録から撮像時の状況を思い出して入力するときの労力膨大）を解決するものではない。 However, as in Patent Literature 1 and Patent Literature 2, image analysis techniques such as automatically organizing a large number of videos or extracting only the best shot from similar videos have been conventionally provided as services, It does not solve the above-mentioned problem (a large amount of labor when remembering and inputting the situation at the time of imaging from a similar video recording).
なお、特許文献３では、予め登録した認識用の画像パターンに応じて、自動的に撮像画像を振り分けているが、初期設定（認識用の画像パターンの登録）が必須であり、撮像現場における様々な状況変化に対応できない。 In Patent Document 3, captured images are automatically distributed according to recognition image patterns registered in advance, but initial setting (registration of image patterns for recognition) is indispensable, and there are various in the imaging field. It cannot respond to the changing situation.
本発明は、静止画、動画を問わず、撮像現場での状況を発話することで、リアルタイムに発話音声の内容を撮像画像のファイル名や画像に関するコメントとして登録することができる文字入力支援システム、文字入力支援制御装置、文字入力支援プログラムを得ることにある。 The present invention relates to a character input support system capable of registering the content of a uttered voice as a file name of a captured image or a comment related to the image in real time by speaking the situation at the imaging site regardless of whether it is a still image or a moving image. The object is to obtain a character input support control device and a character input support program.
本発明に係る文字入力支援システムは、画像を撮像する撮像機能、撮像した画像を表示する表示機能、及び、発話音声を入力する音声入力機能を備え、外部とデータ通信可能な通信端末装置と、音声データを文字データに変換するデータ変換制御装置と、を有する文字入力支援システムであって、前記通信端末装置が、前記撮像機能によって撮像した画像を、前記表示機能によってプレビュー表示するプレビュー表示手段と、撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせる問い合わせ手段と、問い合わせ手段の問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付ける受付手段と、前記受付手段で受け付けた音声データから、前記データ変換制御装置により変換された文字データを取得する取得手段とを有し、前記取得手段で取得した文字データを、撮像された画像に付与する特殊ファイル名とすることを特徴としている。 A character input support system according to the present invention includes an imaging function for capturing an image, a display function for displaying the captured image, and a voice input function for inputting speech speech, and a communication terminal device capable of data communication with the outside, A character input support system that converts voice data into character data, and a preview display unit that previews an image captured by the communication terminal device using the imaging function using the display function; In addition to the normal file name that is automatically assigned to the captured image, an inquiry means for interactively inquiring whether or not to assign a special file name, and the special file name is assigned by an inquiry from the inquiry means Sound indicating the special file name spoken and input by the voice input function Receiving means for receiving data, and acquiring means for acquiring character data converted by the data conversion control device from the voice data received by the receiving means, and the character data acquired by the acquiring means is imaged. It is characterized by a special file name assigned to each image.
本発明によれば、撮像機能、表示機能、及び、音声入力機能を備えた通信端末装置と、データ変換制御装置と、で文字入力支援システムを構成する。 According to the present invention, a character input support system is configured by a communication terminal device having an imaging function, a display function, and a voice input function, and a data conversion control device.
通信端末装置では、プレビュー表示手段が、通信端末の撮像機能によって撮像した画像を、表示機能にプレビュー表示する。 In the communication terminal device, the preview display means previews the image captured by the imaging function of the communication terminal on the display function.
問い合わせ手段では、撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせる。 The inquiry means inquires interactively whether to assign a special file name separately from the normal file name automatically assigned to the captured image.
受付手段では、問い合わせ手段の問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付ける。 The accepting means accepts voice data indicating the special file name uttered and inputted by the voice input function when there is a request to give the special file name by an inquiry from the inquiry means.
取得手段では、受付手段で受け付けた発話による音声データから、変換制御装置のデータ変換機能により変換された文字データを取得する。 The obtaining unit obtains the character data converted by the data conversion function of the conversion control device from the speech data received by the receiving unit.
取得した文字データは、撮像された画像の画像データを格納する場合の特殊ファイル名とされる。 The acquired character data is used as a special file name when storing image data of a captured image.
すなわち、撮像現場において、撮像した状況を見ながら当該撮像画像を容易に特定し得る特殊ファイル名を付与することができるため、撮像現場とは異なる場所（例えば、ファイル管理施設）でのファイル整理を実行する場合の仕分け等の作業が容易となる。 In other words, since a special file name that can easily identify the captured image can be given while viewing the captured situation at the imaging site, file organization at a location different from the imaging site (for example, a file management facility) is performed. Work such as sorting when executed is facilitated.
また、発話による音声データを文字データに変換して特殊ファイル名を付与することができるため、撮像者の労力を増大させることがない。 In addition, since the voice data from the utterance can be converted into character data and a special file name can be given, the labor of the photographer is not increased.
本発明において、前記通常ファイル名又は前記特殊ファイル名が付与された画像を含む記録データファイルを受け付けて、格納するファイルサーバーをさらに有している。 The present invention further includes a file server that receives and stores a recording data file including an image to which the normal file name or the special file name is assigned.
文字入力支援システムとして、例えば、ネットワークに接続された記録データ管理制御装置の一部であるファイルサーバーを備えることで、当該記録データ管理制御装置により、記録データファイルの格納、読み出し、及び編集等、一括管理することができる。 As a character input support system, for example, by providing a file server that is part of a recording data management control device connected to a network, the recording data management control device stores, reads, and edits recording data files, Can be managed collectively.
本発明において、前記通常ファイル名又は前記特殊ファイル名が付与された画像を含む記録データファイルには、文字登録可能なコメント領域が付与されており、当該コメント領域に、発話による音声データによって文字を付与するコメント付与手段をさらに有している。 In the present invention, the record data file including the image with the normal file name or the special file name is provided with a comment area where characters can be registered. It further has comment giving means to give.
発話による音声データにより、記録データファイルに設けられたコメント領域に文字データを登録することができる。 Character data can be registered in the comment area provided in the recording data file by the voice data by the utterance.
本発明に係る文字入力支援制御装置は、画像を撮像する撮像機能、撮像した画像を表示する表示機能、発話音声を入力する音声入力機能、及び、音声データを文字データに変換するデータ変換機能を有する記録データファイル名入力支援制御装置であって、前記撮像機能によって撮像した画像を、前記表示機能によってプレビュー表示するプレビュー表示手段と、撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせる問い合わせ手段と、問い合わせ手段の問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付ける受付手段と、前記受付手段で受け付けた音声データから、前記データ変換機能により変換された文字データを取得する取得手段とを有し、前記取得手段で取得した文字データを、撮像された画像の画像データを格納する記録データファイルの特殊ファイル名とすることを特徴としている。 The character input support control device according to the present invention has an image pickup function for picking up an image, a display function for displaying the picked-up image, a voice input function for inputting speech voice, and a data conversion function for converting voice data into character data. A recording data file name input support control device having preview display means for previewing an image captured by the imaging function by the display function and a normal file name automatically given to the captured image Separately, inquiring means for inquiring whether or not to assign a special file name in an interactive manner, and when there is a request for assigning the special file name by an inquiry from the inquiring means, it is uttered and by the voice input function Accepting means for accepting voice data indicating the input special file name, and accepting by the accepting means A recording data file special file for storing character data acquired by the acquisition means, and storing image data of a captured image. It is characterized by its name.
本発明によれば、文字入力支援制御装置は、撮像機能、表示機能、音声入力機能、及び、データ変換機能を備えている。 According to the present invention, the character input support control device includes an imaging function, a display function, a voice input function, and a data conversion function.
文字入力支援制御装置では、プレビュー表示手段が、通信端末の撮像機能によって撮像した画像を、表示機能にプレビュー表示する。 In the character input support control device, the preview display means previews the image captured by the imaging function of the communication terminal on the display function.
問い合わせ手段では、撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせる。 The inquiry means inquires interactively whether to assign a special file name separately from the normal file name automatically assigned to the captured image.
受付手段では、問い合わせ手段の問い合わせにより、特殊ファイル名を付与する要求があった場合に、プレビュー表示されている画像に付与する特殊ファイル名として、発話による入力を受け付ける。 The accepting unit accepts an input by utterance as a special file name to be given to an image displayed in a preview when there is a request to give a special file name by an inquiry from the inquiring unit.
取得手段では、受付手段で受け付けた発話による音声データから、変換制御装置のデータ変換機能により変換された文字データを取得する。 The obtaining unit obtains the character data converted by the data conversion function of the conversion control device from the speech data received by the receiving unit.
取得した文字データは、撮像された画像の画像データを格納する場合の特殊ファイル名とされる。 The acquired character data is used as a special file name when storing image data of a captured image.
すなわち、撮像現場において、撮像した状況を見ながら当該撮像画像を容易に特定し得る特殊ファイル名を付与することができるため、撮像現場とは異なる場所（例えば、ファイル管理施設）でのファイル整理を実行する場合の仕分け等の作業が容易となる。 In other words, since a special file name that can easily identify the captured image can be given while viewing the captured situation at the imaging site, file organization at a location different from the imaging site (for example, a file management facility) is performed. Work such as sorting when executed is facilitated.
また、発話による音声データを文字データに変換して特殊ファイル名を付与することができるため、撮像者の労力を増大させることがない。 In addition, since the voice data from the utterance can be converted into character data and a special file name can be given, the labor of the photographer is not increased.
本発明において、前記通常ファイル名又は前記特殊ファイル名が付与された画像を含む記録データファイルを格納するファイルサーバー機能をさらに有している。 The present invention further includes a file server function for storing a recording data file including an image assigned with the normal file name or the special file name.
記録データファイル名入力支援制御装置がファイルサーバー機能を備えることで、当該記録データファイル名入力支援制御装置により、記録データファイルの格納、読み出し、及び編集等、一括管理することができる。 Since the recording data file name input support control device has a file server function, the recording data file name input support control device can collectively manage recording data file storage, reading, editing, and the like.
本発明において、前記通常ファイル名又は前記特殊ファイル名が付与された画像を含む記録データファイルには、文字登録可能なコメント領域が付与されており、当該コメント領域に、発話による音声データによって文字を付与するコメント付与手段をさらに有している。 In the present invention, the record data file including the image with the normal file name or the special file name is provided with a comment area where characters can be registered. It further has comment giving means to give.
発話による音声データにより、記録データファイルに設けられたコメント領域に文字データを登録することができる。 Character data can be registered in the comment area provided in the recording data file by the voice data by the utterance.
本発明に係る文字入力支援プログラムは、画像を撮像する撮像機能、撮像した画像を表示する表示機能、及び、発話音声を入力する音声入力機能を備えたコンピュータに、前記撮像機能によって撮像した画像を、前記表示機能によってプレビュー表示し、撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせすると共に、問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付け、受け付けた音声データを文字データに変換し、変換した文字データを、撮像された画像の画像データを格納する記録データファイルの特殊ファイル名とする、ことを実行させることを特徴としている。 The character input support program according to the present invention includes a computer having an imaging function for capturing an image, a display function for displaying the captured image, and a voice input function for inputting speech sound. In addition to the normal file name that is automatically given to the captured image that is displayed as a preview by the display function, an inquiry is made interactively as to whether or not to give a special file name. When there is a request for assigning a file name, voice data indicating a special file name spoken and input by the voice input function is received, and the received voice data is converted into character data. , The special file name of the recording data file that stores the image data of the captured image is executed. It is characterized by a door.
発話による音声データにより、通常ファイル名とは別に、特殊ファイル名を付与することができる。 A special file name can be given separately from the normal file name by the voice data by the utterance.
本発明に係る文字入力支援プログラムは、画像を撮像する撮像機能、撮像した画像を表示する表示機能、及び、発話音声を入力する音声入力機能を備えたコンピュータに、前記撮像機能によって撮像した画像を、前記表示機能によってプレビュー表示し、撮像された画像に設定されたコメント領域にコメントを付与するか否かを、対話形式で問い合わせすると共に、問い合わせにより、前記コメントを付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付け、受け付けた音声データを文字列に変換し、前記コメント領域に、文字列を付与する、
ことを実行させることを特徴としている。
The character input support program according to the present invention includes a computer having an imaging function for capturing an image, a display function for displaying the captured image, and a voice input function for inputting speech sound. In the case where there is a request to attach the comment by the inquiry, in addition to inquiring whether to add a comment to the comment area set in the captured image that is previewed by the display function and set in the captured image Receiving voice data indicating a special file name spoken and input by the voice input function, converting the received voice data into a character string, and adding a character string to the comment area;
It is characterized by having things executed.
発話による音声データにより、通常ファイル名とは別に、特殊ファイル名を付与することができる。 A special file name can be given separately from the normal file name by the voice data by the utterance.
本発明では、従来技術に対し、撮像現場で特殊ファイル名等を付与することができ、かつ、発話による音声データを文字データに変換して特殊ファイル名等とすることができる。 In the present invention, a special file name or the like can be given to the conventional technique at an imaging site, and voice data obtained by utterance can be converted into character data to obtain a special file name or the like.
本発明によれば、静止画、動画を問わず、撮像現場での状況を発話することで、リアルタイムに発話音声の内容を撮像画像のファイル名や画像に関するコメントとして登録することができる。 According to the present invention, it is possible to register the content of the uttered voice as a file name of a captured image and a comment related to the image in real time by speaking the situation at the imaging site regardless of a still image or a moving image.
図１には、本実施の形態に係る記録データファイル用文字入力支援システム１０の概略構成図が示されている。 FIG. 1 shows a schematic configuration diagram of a recording data file character input support system 10 according to the present embodiment.
記録データファイル用文字入力支援システム１０は、通信端末装置１２と、記録データ管理制御装置１４と、発話音声−文字変換制御装置１６とで構成され、ネットワーク１８を介して、相互に通信可能となっている。 The recording data file character input support system 10 includes a communication terminal device 12, a recording data management control device 14, and an utterance voice-character conversion control device 16, and can communicate with each other via a network 18. ing.
（通信端末装置１２） (Communication terminal device 12)
図２に示される如く、通信端末装置１２は、マイクロコンピュータ２０を備えている。マイクロコンピュータ２０は、ＣＰＵ２０Ａ、ＲＡＭ２０Ｂ、ＲＯＭ２０Ｃ、入出力ポート２０Ｄ、及びこれらを接続するデータバスやコントロールバス等で構成されたバス２０Ｅによって構成されている。 As shown in FIG. 2, the communication terminal device 12 includes a microcomputer 20. The microcomputer 20 includes a CPU 20A, a RAM 20B, a ROM 20C, an input / output port 20D, and a bus 20E configured by a data bus, a control bus, and the like for connecting them.
Ｉ／Ｏ２０Ｄには、入出力デバイス２２、ハードディスク２４、撮像デバイス２６、及びネットワーク１８と接続するための通信Ｉ／Ｆ２８が接続されている。 A communication I / F 28 for connecting to the input / output device 22, the hard disk 24, the imaging device 26, and the network 18 is connected to the I / O 20 </ b> D.
入出力デバイス２２は、モニタ及び入力パッドとして機能するタッチパネル部２２Ａと、スピーカ２２Ｂと、マイクロフォン２２Ｃとを備える。 The input / output device 22 includes a touch panel unit 22A that functions as a monitor and an input pad, a speaker 22B, and a microphone 22C.
通信Ｉ／Ｆ２８は、ネットワーク１８に接続された無線中継装置３０を介してネットワーク１８との間で、データを送受信する。より具体的には、撮像デバイス２６で撮像した画像データを、ネットワーク１８を介して記録データ管理制御装置１４（図１参照）へ送信するようになっている。なお、撮像は、動画と静止画の何れであってもよい。 The communication I / F 28 transmits / receives data to / from the network 18 via the wireless relay device 30 connected to the network 18. More specifically, the image data captured by the imaging device 26 is transmitted to the recording data management control device 14 (see FIG. 1) via the network 18. Note that the imaging may be either a moving image or a still image.
動画の場合は、マイクロフォン２２Ｃで収録した音データ（後述する環境音データ）を含み、静止画の場合は、環境音データは存在しないという違いはある。 In the case of a moving image, sound data (environmental sound data described later) recorded by the microphone 22C is included, and in the case of a still image, there is a difference that there is no environmental sound data.
以下において、単に、「撮像」とした場合は、動画と静止画とを含むものとする。また、以下において、画像データと音声データとを総称して、「記録データ」という。すなわち、記録データ管理制御装置１４は、画像データと音声データとを管理制御する機能を有する。 In the following, simply “imaging” includes moving images and still images. Hereinafter, image data and audio data are collectively referred to as “recorded data”. That is, the recording data management control device 14 has a function of managing and controlling image data and audio data.
また、以下において、単に、音声データという場合は、撮像デバイス２６による動画の撮像時の周辺環境音データと、通信端末装置１２を管理（所持）する管理者が撮像している対象を特定するために発話する発話音声データとを含むものとし、必要に応じて、環境音データと発話音声データとは、区別して説明する。また、静止画の場合、発話音声データは収録可能である。 In the following description, the term “audio data” is used to specify the ambient environment sound data when a moving image is captured by the imaging device 26 and the target being imaged by an administrator who manages (owns) the communication terminal device 12. Utterance voice data to be uttered, and environmental sound data and utterance voice data will be described separately as necessary. In the case of a still image, speech audio data can be recorded.
（通信端末装置１２の適用例） (Application example of the communication terminal device 12)
通信端末装置１２は、少なくとも、上記基本機能（入出力デバイス機能（特に、マイクロフォン）、撮像デバイス機能、及び通信Ｉ／Ｆ機能）を備えていればよい。一例として、図３（Ａ）に示すスマートフォン１２ＳＰが代表的な通信端末装置１２として適用可能である。 The communication terminal device 12 only needs to include at least the basic functions (input / output device functions (particularly microphones), imaging device functions, and communication I / F functions). As an example, a smartphone 12SP illustrated in FIG. 3A is applicable as a typical communication terminal device 12.
すなわち、図３（Ａ）に示される如く、スマートフォン１２ＳＰは、通信機能（通信Ｉ／Ｆ２８に相当）を備えており、筐体３２の前面がタッチパネル部２２Ａとされ、タッチパネル部２２Ａの周囲には、スピーカ２２Ｂ及びマイクロフォン２２Ｃが設けられている。また、筐体の前面及び背面には、撮像デバイス２６が設けられている。 That is, as shown in FIG. 3A, the smartphone 12SP has a communication function (corresponding to the communication I / F 28), the front surface of the housing 32 is the touch panel unit 22A, A speaker 22B and a microphone 22C are provided. In addition, imaging devices 26 are provided on the front and back surfaces of the housing.
また、その他の通信端末装置１２の例としては、図３（Ｂ）に示すデジタルカメラ１２ＤＣ、図３（Ｃ）に示すヘッドセット型ウェラブルカメラユニット１２ＨＳが適用可能である。 Further, as other examples of the communication terminal device 12, a digital camera 12DC shown in FIG. 3B and a headset type wearable camera unit 12HS shown in FIG. 3C are applicable.
なお、ヘッドセット型ウェラブルカメラユニット１２ＨＳに限らず、図３（Ｄ）に示される如く、入出力デバイス２２及び撮像デバイス２６を含む一部又は全部の機能が眼鏡型の装着部に組み込まれたスマートグラス型ウェラブルカメラユニット１２ＳＧであってもよい。 In addition, not only the headset type wearable camera unit 12HS but also a part or all of the functions including the input / output device 22 and the imaging device 26 are incorporated in the spectacle-type wearing unit as shown in FIG. It may be a smart glass type wearable camera unit 12SG.
（記録データ管理制御装置１４） (Recording data management control device 14)
図１に示される如く、記録データ管理制御装置１４は、マイクロコンピュータとしての機能を備えており（詳細省略）、ハード構成としては、制御装置本体１４Ａ、モニタ１４Ｂ、キーボード１４Ｃ、及びマウス１４Ｄを有する。制御装置本体１４Ａは、図示は省略するが、ＣＰＵ、ＲＡＭ、ＲＯＭ、Ｉ／Ｏ、及びバスを備えている。 As shown in FIG. 1, the recording data management control device 14 has a microcomputer function (details omitted), and has a control device main body 14A, a monitor 14B, a keyboard 14C, and a mouse 14D as hardware configurations. . The control device main body 14A includes a CPU, a RAM, a ROM, an I / O, and a bus (not shown).
また。記録データ管理制御装置１４は、記録データファイルサーバ１４Ｅを備えており、記録データファイルサーバ１４Ｅには、制御装置本体１４Ａの制御に基づき、通信端末装置１２から受信した記録データがファイル化されて格納されるようになっている。 Also. The recording data management control device 14 includes a recording data file server 14E. The recording data file server 14E stores the recording data received from the communication terminal device 12 as a file based on the control of the control device body 14A. It has come to be.
このとき、ファイル名は、規則性を持つ番号や日付等が、自動的に付与され、設定されるのが一般的である（例えば、「DVC01012020-001」等）。 At this time, the file name is generally automatically assigned and set with a regular number or date (for example, “DVC01012020-001” or the like).
ここで、ファイル名が設定され、記録データファイルサーバ１４Ｅに格納された複数のファイルは、記録データ管理制御装置１４の制御装置本体１４Ａに一時的に読み出され、ファイル内の記録データの編集等が実行される。 Here, a plurality of files set with file names and stored in the recording data file server 14E are temporarily read out to the control device main body 14A of the recording data management control device 14, and editing of the recording data in the files, etc. Is executed.
このとき、複数のファイルの中から、必要なファイルを選択するには、ファイル名が重要となる。このため、記録データが比較的に容易に特定し得る特殊ファイル名を、自動的に付与されたファイル名に代えて、或いは追加して付与（以下、ファイル名の変更という）する場合がある。 At this time, in order to select a necessary file from a plurality of files, the file name is important. For this reason, a special file name that can be relatively easily specified by recorded data may be given instead of or automatically added to the file name (hereinafter referred to as a file name change).
特殊ファイル名への変更は、比較例として、撮像拠点ではなく、記録データ管理制御装置１４の設置拠点（オフィス等）において、記録データファイルサーバ１４Ｅに格納された状態で，記録データ管理制御装置１４の制御装置本体１４Ａに読み出して実行されていた。 As a comparative example, the change to the special file name is performed by the recording data management control device 14 in a state where it is stored in the recording data file server 14E at the installation location (office or the like) of the recording data management control device 14 instead of the imaging base. The control device main body 14A was read out and executed.
しかしながら、比較例では、類似の記録データから撮像時の状況を思い出して、変更するべき特殊ファイル名を入力するのは労力がかかっている。 However, in the comparative example, it takes a lot of effort to input the special file name to be changed by recalling the situation at the time of imaging from similar recorded data.
そこで、本実施の形態では、通信端末装置１２による撮像が実行される撮像拠点において、撮像が動画の場合は、撮像中又は撮像後のプレビュー表示中に、撮像者３４（図１参照）が発話した音声（発話音声データ）を文字情報に変換し、記録データの特殊ファイル名とした。 Therefore, in the present embodiment, in the imaging base where imaging by the communication terminal device 12 is performed, when the imaging is a moving image, the photographer 34 (see FIG. 1) speaks during imaging or during preview display after imaging. The converted voice (speech voice data) was converted into character information and used as a special file name for the recorded data.
また、撮像が静止画の場合は、静止画の撮像後に当該静止画を一定時間プレビュー表示させている間に、撮像者３４（図１参照）が発話した音声（発話音声データ）を文字情報に変換し、記録データの特殊ファイル名とした。 When the image is captured as a still image, the voice (uttered speech data) uttered by the photographer 34 (see FIG. 1) is displayed as character information while the still image is displayed as a preview for a predetermined time after the still image is captured. Converted to a special file name for recorded data.
なお、特殊ファイル名と共に、或いは特殊ファイル名に代えて、記録データに付加されるコメント領域のコメント内容とするようにしてもよい。例えば、自動的に付与されるファイル名を維持したい場合は、記録データを特定し得る情報をコメント領域のコメント内容として保存すれば、コメント領域のコメント内容が、特殊ファイル名と同等の機能を有する。 The comment contents in the comment area added to the recording data may be used together with the special file name or instead of the special file name. For example, if you want to maintain the automatically assigned file name, save the information that can identify the recorded data as the comment contents in the comment area, and the comment contents in the comment area have the same function as the special file name. .
本実施の形態では、この発話音声データから文字情報への変換は、通信端末装置１２とネットワーク１８を介して接続されている発話音声−文字変換制御装置１６により、通信端末装置１２の撮像デバイス２６（図２参照）による撮像と同期して実行される。 In the present embodiment, the conversion from the utterance voice data to the character information is performed by the utterance voice-character conversion control device 16 connected to the communication terminal device 12 via the network 18 by the imaging device 26 of the communication terminal device 12. This is executed in synchronization with the imaging by (see FIG. 2).
図４は、本実施の形態に係る通信端末装置１２で実行される、撮像時の特殊ファイル名及び／又はコメント付与のための記録データファイル名入力支援制御を機能別に示した機能ブロック図である。なお、図２における各ブロックは、通信端末装置１２のハード構成を限定するものではなく、一部又は全部の機能が、マイクロコンピュータ２０（図２参照）に予めインストールされたソフトウェア（アプリケーションプログラム）の動作として実行させるようにしてもよい。 FIG. 4 is a functional block diagram showing the special data file name and / or record data file name input support control for adding comments at the time of imaging, which is executed by the communication terminal device 12 according to the present embodiment. . Note that each block in FIG. 2 does not limit the hardware configuration of the communication terminal device 12, and some or all of the functions are software (application programs) preinstalled in the microcomputer 20 (see FIG. 2). It may be executed as an operation.
図２に示される如く、撮像デバイス２６は、撮像制御部５０に接続されている。撮像制御部５０は、入出力デバイス２２からの撮像開始指示及び撮像終了指示を受けて、撮像デバイス２６及び画像取込部５２を制御する。 As shown in FIG. 2, the imaging device 26 is connected to the imaging control unit 50. The imaging control unit 50 receives the imaging start instruction and the imaging end instruction from the input / output device 22 and controls the imaging device 26 and the image capturing unit 52.
撮像デバイス２６で撮像された画像データは、画像取込部５２に取り込まれる。 The image data captured by the imaging device 26 is captured by the image capturing unit 52.
画像取込部５２には、撮像制御部５０を介して、撮像時に入出力デバイス２２のマイクロフォンで同期して収録した撮像時の環境音データが入力される。 The image capturing unit 52 receives environmental sound data at the time of imaging, which is recorded in synchronization with the microphone of the input / output device 22 at the time of imaging, via the imaging control unit 50.
画像取込部５２は、一時格納部５４に接続されている。画像取込部５２では、画像データと環境音データとが結合されて記録データファイルが生成される共に、当該記録データファイルには自動的に通常ファイル名が付与されて、一時格納部５４に一時的に格納される。 The image capturing unit 52 is connected to the temporary storage unit 54. The image capturing unit 52 combines the image data and the environmental sound data to generate a recording data file, and the recording data file is automatically given a normal file name and temporarily stored in the temporary storage unit 54. Stored.
一方、画像取込部５２は、プレビュー制御部５６に接続されている。画像取込部５２は、撮像デバイス２６から取り込んだ画像データをプレビュー制御部５６へ送出する。 On the other hand, the image capturing unit 52 is connected to the preview control unit 56. The image capturing unit 52 sends the image data captured from the imaging device 26 to the preview control unit 56.
プレビュー制御部５６は、入出力デバイス２２及び特殊ファイル名要否判定部５８に接続されている。 The preview control unit 56 is connected to the input / output device 22 and the special file name necessity determination unit 58.
プレビュー制御部５６は、入出力デバイス２２との間で、情報の送受信を実行する。 The preview control unit 56 transmits and receives information to and from the input / output device 22.
すなわち、プレビュー制御部５６は、モニタに撮像中の画像を表示する（プレビュー表示）と共に、通常ファイル名と、特殊ファイル名を付与するか否かの問い合わせのためのメッセージを表示する。 In other words, the preview control unit 56 displays an image being captured on the monitor (preview display) and also displays a message for inquiring whether to give a normal file name and a special file name.
また、プレビュー制御部５６は、入出力デバイス２２の機能であるタッチパネル部２２Ａ（図２参照）の入力パッドの操作に基づく、問い合わせの回答を受け付け、受け付けた回答を、特殊ファイル名要否判定部５８へ送出する。 Also, the preview control unit 56 receives an answer to an inquiry based on the operation of the input pad of the touch panel unit 22A (see FIG. 2) which is a function of the input / output device 22, and the received answer is converted into a special file name necessity determination unit. 58.
特殊ファイル名要否判定部５８は、特殊ファイル名管理制御部６０及び記録データ取込部６２に接続されている。 The special file name necessity determination unit 58 is connected to the special file name management control unit 60 and the recording data fetch unit 62.
特殊ファイル名管理制御部６０は、入出力デバイス２２に接続されている。 The special file name management control unit 60 is connected to the input / output device 22.
特殊ファイル名管理制御部６０では、特殊ファイル名要否判定部５８から、特殊ファイルが必要である旨の判定結果（必要判定）を受けると、入出力デバイス２２の機能であるタッチパネル部２２Ａ（図２参照）のモニタに対して、発話開始指示を送信すると共に、当該発話開始指示後は、入出力デバイス２２の機能であるマイクロフォン２２Ｃで収録した発話音声データを取り込む体制をとる。 When the special file name management control unit 60 receives a determination result (necessity determination) indicating that the special file is necessary from the special file name necessity determination unit 58, the touch panel unit 22A (FIG. 2), a speech start instruction is transmitted, and after the speech start instruction, speech voice data recorded by the microphone 22C, which is a function of the input / output device 22, is captured.
この場合、予め定めた命令語（「はじめ」「おわり」等）によって、発話開始時期と発話終了時期を認識することは、周知の技術が適用可能である。 In this case, a known technique can be applied to recognizing the utterance start time and the utterance end time using predetermined command words (such as “start” and “end”).
特殊ファイル名管理制御部６０に取り込んだ、発話音声データは、通信Ｉ／Ｆ２８及びネットワーク１８を介して発話音声−文字変換制御装置１６へ通知することで、文字データに変換された状態で返信される。 The utterance voice data fetched into the special file name management control unit 60 is sent back to the utterance voice-character conversion control device 16 via the communication I / F 28 and the network 18 to be returned in a state converted into character data. The
特殊ファイル名管理制御部６０では、返信された文字データを入出力デバイス２２へ送出することで、文字データの編集が可能である。編集するか否かは、撮像者に問い合わせればよい。 The special file name management control unit 60 can edit the character data by sending the returned character data to the input / output device 22. Whether or not to edit may be inquired of the photographer.
なお、編集の要否は、撮像者に問い合わせることなく、例えば、ＡＩ機能を搭載し、画像データとの照合で、過去の撮像者の要求（適正な特殊ファイル名）を適宜学習し、変換した文字データを取捨選択し、自動的に編集するようにしてもよい。 Whether or not editing is necessary, for example, an AI function is installed, and the request (appropriate special file name) of the past photographer is appropriately learned and converted by collating with the image data. Character data may be selected and automatically edited.
また、特殊ファイル名管理制御部６０は、特殊ファイル名（文字情報）の生成と同様に、記録データに付与されるコメント領域へのコメント情報に関しても、発話音声データから文字情報を生成する。 Also, the special file name management control unit 60 generates character information from the utterance voice data with respect to the comment information to the comment area given to the recording data, in the same manner as the generation of the special file name (character information).
特殊ファイル名管理制御部６０は、文字データの編集が終了すると、特殊ファイル名・コメント付与部６４に文字情報を送出すると共に、記録データ取込部６２に対して、送信指示を出力する。 When the editing of the character data is completed, the special file name management control unit 60 sends the character information to the special file name / comment adding unit 64 and outputs a transmission instruction to the recording data fetching unit 62.
記録データ取込部６２では、前記特殊ファイル名要否判定部５８から、特殊ファイル不要（否）情報が通知されると、一時格納部５４から記録データを取り込み、記録データと通常ファイル名を記録データ送信部６６へ送出する。 When the special file name necessity determination unit 58 notifies the special file name necessity determination unit 58 of the record data fetch unit 62, the record data fetch unit 62 fetches the record data from the temporary storage unit 54 and records the record data and the normal file name. The data is sent to the data transmitter 66.
一方、記録データ取込部６２では、前記特殊ファイル名要否判定部５８から、特殊ファイル必要（要）情報が通知されると、特殊ファイル名管理制御部６０からの送信指示を待って、一時格納部５４から記録データを取り込み、記録データと通常ファイル名を特殊ファイル名・コメント付与部６４へ送出する。 On the other hand, when the special file necessary / unnecessary information is notified from the special file name necessity determining unit 58, the recording data fetching unit 62 waits for a transmission instruction from the special file name management control unit 60 and temporarily Record data is fetched from the storage unit 54, and the record data and the normal file name are sent to the special file name / comment adding unit 64.
特殊ファイル名・コメント付与部６４では、記録データに特殊ファイル名（＋コメント）を付加して、記録データ送信部６６へ送出する。 The special file name / comment adding unit 64 adds a special file name (+ comment) to the recording data and sends it to the recording data transmitting unit 66.
記録データ送信部６６は、記録データを通信Ｉ／Ｆ２８及びネットワーク１８を介して、記録データ管理制御装置１４へ送出する。記録データ管理制御装置１４では、受信した記録データを記録データ管理制御装置１４の記録データファイルサーバ１４Ｅへ格納する。 The recording data transmission unit 66 sends the recording data to the recording data management control device 14 via the communication I / F 28 and the network 18. The recording data management control device 14 stores the received recording data in the recording data file server 14E of the recording data management control device 14.
以下に、本実施の形態の作用を、図５及び図６のフローチャートに従い説明する。 Hereinafter, the operation of the present embodiment will be described with reference to the flowcharts of FIGS.
ステップ１００では、撮像が終了したか否かを判断し、撮像が終了するまで（否定判定）は、ステップ１００で待機し、肯定判定されると、ステップ１０２へ移行して、プレビュー表示する。 In step 100, it is determined whether or not imaging is completed. Until imaging is completed (negative determination), the process waits in step 100. If an affirmative determination is made, the process proceeds to step 102 to display a preview.
プレビュー表示は、必要に応じて、静止画の場合は低解像度に変換し、動画の場合は間引きした動画又は静止画を繰り返し再生して、処理速度を高めるようにしてもよい。 If necessary, the preview display may be converted to a low resolution in the case of a still image, and a thinned moving image or still image may be repeatedly reproduced in the case of a moving image to increase the processing speed.
次のステップ１０４では、プレビュー表示された画像に自動付与される通常ファイル名を表示して、ステップ１０６へ移行する。 In the next step 104, the normal file name automatically given to the preview-displayed image is displayed, and the process proceeds to step 106.
ステップ１０６では、特殊ファイル名の要否に関するメッセージを報知する。報知の手段としては、通信端末装置１２のタッチパネル部２２Ａに表示する（視覚を通じた報知）、並びに、スピーカ２２Ｂを適用して音声で出力する（聴覚を通じた報知）、の少なくとも一方の報知手段を用いる。 In step 106, a message regarding the necessity of the special file name is notified. As the notification means, at least one of the notification means for displaying on the touch panel unit 22A of the communication terminal device 12 (notification through vision) and outputting the voice by applying the speaker 22B (notification through hearing) is provided. Use.
視覚を通じた報知例としては、タッチパネル部２２Ａに、前記プレビュー表示及び通常ファイル名と共に、「特殊ファイル名を付与しますか？」と表示する。聴覚を通じた報知例としては、この表示文字を音声として出力すればよい。 As an example of visual notification, “Are you sure you want to assign a special file name?” Is displayed on the touch panel unit 22A together with the preview display and the normal file name. As an example of notification through hearing, this display character may be output as sound.
次のステップ１０８では、報知したメッセージに対して、回答があったか否かを判断し、否定判定された場合は、ステップ１１０へ移行する。ステップ１１０では、所定時間経過したか否かを判断し、否定判定された場合は、ステップ１０８へ戻る。また、ステップ１１０で肯定判定、すなわち、報知メッセージが実行されてから所定時間経過しても回答がない場合は、特殊ファイル名を付与する必要がないと判断し、ステップ１１２へ移行して、記録データを通常ファイル名で保存処理し、ステップ１１４へ移行する。ステップ１１４では、コメント領域に関する処理が実行され（後述、図６のフローチャート参照）、このルーチンは終了する。 In the next step 108, it is determined whether or not there is a reply to the notified message. If a negative determination is made, the process proceeds to step 110. In step 110, it is determined whether or not a predetermined time has elapsed. If a negative determination is made, the process returns to step 108. Also, if the determination in step 110 is affirmative, that is, if there is no response even after a predetermined time has passed since the notification message was executed, it is determined that it is not necessary to assign a special file name, and the process proceeds to step 112 for recording. The data is saved with the normal file name, and the process proceeds to step 114. In step 114, processing relating to the comment area is executed (see the flowchart of FIG. 6 described later), and this routine ends.
また、ステップ１０８で、肯定判定、すなわち、報知メッセージに対して回答があると、ステップ１１６へ移行する。ステップ１１６では、回答内容として、特殊ファイル名を付与するか付与しないかを判断し、回答内容が付与しないと判定された場合は、ステップ１１２へ移行して、記録データを通常ファイル名で保存処理し、ステップ１１４へ移行する。ステップ１１４では、コメント領域に関する処理が実行され（後述、図６のフローチャート参照）、このルーチンは終了する。 In Step 108, if an affirmative determination is made, that is, if there is an answer to the notification message, the process proceeds to Step 116. In step 116, it is determined whether or not a special file name is given as the answer contents. If it is judged that no answer contents are given, the process proceeds to step 112, and the recording data is saved as a normal file name. Then, the process proceeds to step 114. In step 114, processing relating to the comment area is executed (see the flowchart of FIG. 6 described later), and this routine ends.
一方、ステップ１１６で、回答内容が付与すると判定された場合は、ステップ１１８へ移行して、発話音声の取得処理及び文字変換処理を実行する。 On the other hand, if it is determined in step 116 that the answer content is to be added, the process proceeds to step 118, and the speech voice acquisition process and the character conversion process are executed.
具体的には、予め定め命令語等によって、発話開始を指示し、次いで、撮像者は、プレビュー表示を見ながら、特殊ファイル名となる内容を発話する。 Specifically, the start of the utterance is instructed by a predetermined command word or the like, and then the photographer utters the content that becomes the special file name while watching the preview display.
この発話音声データは、発話音声−文字変換制御装置１６へ送出され、文字データに変換されて、返信される。 This utterance voice data is sent to the utterance voice-character conversion control device 16, converted into character data, and returned.
発話音声データから文字データへの変換は、音声認識による単純文字変換や、予め定めた文字コマンドに基づく文字変換等、特に変換手段は限定されるものではない。 The conversion from the spoken voice data to the character data is not particularly limited by conversion means such as simple character conversion by voice recognition or character conversion based on a predetermined character command.
特殊ファイル名に関する発話が終了すると、発話終了を指示することで、ステップ１１８の発話音声の取得処理及び文字変換処理が終了し、ステップ１２０へ移行する。 When the utterance related to the special file name is finished, the utterance voice acquisition process and the character conversion process in step 118 are finished by instructing the utterance end, and the process proceeds to step 120.
ステップ１２０では、特殊ファイル名となる文字列を、タッチパネル部２２Ａのモニタに表示し、ステップ１２２へ移行する。 In step 120, the character string that becomes the special file name is displayed on the monitor of the touch panel unit 22A, and the process proceeds to step 122.
ステップ１２２では、特殊ファイル名の編集の要否に関するメッセージを報知する。報知の手段としては、通信端末装置１２のタッチパネル部２２Ａに表示する（視覚を通じた報知）、並びに、スピーカ２２Ｂを適用して音声で出力する（聴覚を通じた報知）、の少なくとも一方の報知手段を用いる。 In step 122, a message regarding the necessity of editing the special file name is notified. As the notification means, at least one of the notification means for displaying on the touch panel unit 22A of the communication terminal device 12 (notification through vision) and outputting the voice by applying the speaker 22B (notification through hearing) is provided. Use.
視覚を通じた報知例としては、タッチパネル部２２Ａに、特殊ファイル名と共に、「特殊ファイル名を編集しますか？」と表示する。聴覚を通じた報知例としては、この表示文字を音声として出力すればよい。 As an example of visual notification, “Do you want to edit the special file name?” Is displayed on the touch panel unit 22A together with the special file name. As an example of notification through hearing, this display character may be output as sound.
次のステップ１２４では、報知したメッセージに対して、回答があったか否かを判断し、否定判定された場合は、ステップ１２６へ移行する。ステップ１２６では、所定時間経過したか否かを判断し、否定判定された場合は、ステップ１２４へ戻る。また、ステップ１２６で肯定判定、すなわち、報知メッセージが実行されてから所定時間経過しても回答がない場合は、特殊ファイル名を編集する必要がないと判断し、ステップ１２８へ移行して、記録データを現在の特殊ファイル名で保存処理し、ステップ１３０へ移行する。ステップ１３０では、コメント領域に関する処理が実行され（後述、図５のフローチャート参照）、このルーチンは終了する。 In the next step 124, it is determined whether or not there is a reply to the notified message. If a negative determination is made, the process proceeds to step 126. In step 126, it is determined whether or not a predetermined time has elapsed. If a negative determination is made, the process returns to step 124. If the answer at step 126 is affirmative, that is, if there is no response even after a predetermined time has passed since the notification message was executed, it is determined that there is no need to edit the special file name, and the process proceeds to step 128 for recording. The data is saved with the current special file name, and the process proceeds to step 130. In step 130, processing relating to the comment area is executed (see the flowchart of FIG. 5 described later), and this routine ends.
また、ステップ１２４で、肯定判定、すなわち、報知メッセージに対して回答があると、ステップ１３２へ移行する。ステップ１３２では、回答内容として、特殊ファイル名に対して、編集必要か編集不要かを判断し、回答内容が編集不要と判定された場合は、ステップ１２８へ移行して、記録データを現在の特殊ファイル名で保存処理し、ステップ１３０へ移行する。ステップ１３０では、コメント領域に関する処理が実行され（後述、図５のフローチャート参照）、このルーチンは終了する。 In Step 124, if an affirmative determination is made, that is, if there is a reply to the notification message, the process proceeds to Step 132. In step 132, it is determined whether or not editing is required for the special file name as the response content. If it is determined that the response content does not need editing, the process proceeds to step 128 and the recorded data is stored in the current special file name. Save processing is performed with the file name, and the process proceeds to step 130. In step 130, processing relating to the comment area is executed (see the flowchart of FIG. 5 described later), and this routine ends.
一方、ステップ１３２で、回答内容が編集必要と判定された場合は、ステップ１３４移行して、編集内容を特定するメッセージを、表示及び／又は音声で報知する。報知メッセージ例としては、「編集要件（書換、挿入、削除）と、編集範囲（一部、全部）を指定して下さい」等といった、編集に関する詳細事項の提示を要求する内容である。 On the other hand, if it is determined in step 132 that the response content needs to be edited, the process proceeds to step 134 and a message for specifying the editing content is displayed and / or notified by voice. An example of the notification message is a content requesting presentation of detailed items related to editing, such as “specify editing requirements (rewriting, insertion, deletion) and editing range (partially, all)”.
次のステップ１３６では、特殊ファイル名の編集内容を確定し、ステップ１１８へ戻り、上記工程を繰り返す。すなわち、編集箇所に対して、発話音声データの入力を実行する。 In the next step 136, the edited contents of the special file name are confirmed, and the process returns to step 118 to repeat the above process. That is, the input of utterance voice data is executed for the edited portion.
なお、入出力デバイス２２のモニタに特殊ファイル名が表示されているので、タッチパネル部２２Ａの入力パッドを適用し、表示されている特殊ファイル名を所謂ワードプロセッサ機能で編集するようにしてもよい。特に、編集箇所が一部である場合は、入力パッドを適用した方が、簡便となる場合がある。 Since the special file name is displayed on the monitor of the input / output device 22, the special file name may be edited by a so-called word processor function by applying the input pad of the touch panel unit 22A. In particular, when the editing part is a part, it may be easier to apply the input pad.
図６は、図５のステップ１１４又はステップ１３０におけるコメント領域に関する処理の詳細を示すフローチャートである。基本的には、特殊ファイル名を付与する処理の流れと同等であるが、図６に従い、発話音声データの入力から、コメント領域へ文字データを付与するまでの一連の処理を説明する。 FIG. 6 is a flowchart showing details of the processing related to the comment area in step 114 or step 130 of FIG. Basically, it is the same as the flow of processing for assigning a special file name, but a series of processing from input of speech voice data to addition of character data to a comment area will be described with reference to FIG.
ステップ１５０では、コメント領域への文字付与の要否に関するメッセージを報知する。報知の手段としては、通信端末装置１２のタッチパネル部２２Ａに表示する（視覚を通じた報知）、並びに、スピーカ２２Ｂを適用して音声で出力する（聴覚を通じた報知）、の少なくとも一方の報知手段を用いる。 In step 150, a message regarding the necessity of character addition to the comment area is notified. As the notification means, at least one of the notification means for displaying on the touch panel unit 22A of the communication terminal device 12 (notification through vision) and outputting the voice by applying the speaker 22B (notification through hearing) is provided. Use.
視覚を通じた報知例としては、タッチパネル部２２Ａに、前記プレビュー表示及び通常ファイル名と共に、「コメント領域に文字を付与しますか？」と表示する。聴覚を通じた報知例としては、この表示文字を音声として出力すればよい。 As an example of visual notification, the touch panel unit 22A displays “Do you want to add characters to the comment area?” Together with the preview display and the normal file name. As an example of notification through hearing, this display character may be output as sound.
次のステップ１５２では、報知したメッセージに対して、回答があったか否かを判断し、否定判定された場合は、ステップ１５４へ移行する。ステップ１５４では、所定時間経過したか否かを判断し、否定判定された場合は、ステップ１５２へ戻る。また、ステップ１５４で肯定判定、すなわち、報知メッセージが実行されてから所定時間経過しても回答がない場合は、コメント領域に文字を付与する必要がないと判断し、このルーチンは終了する（図５のステップ１１４又はステップ１３０の後にリターンし、終了する）。 In the next step 152, it is determined whether or not there is a reply to the notified message. If a negative determination is made, the process proceeds to step 154. In step 154, it is determined whether or not a predetermined time has elapsed. If a negative determination is made, the process returns to step 152. Further, if the determination in step 154 is affirmative, that is, if there is no answer even after a predetermined time has passed since the notification message was executed, it is determined that it is not necessary to add characters to the comment area, and this routine ends (see FIG. 5 and returns after step 114 or 130 and finishes).
また、ステップ１５２で、肯定判定、すなわち、報知メッセージに対して回答があると、ステップ１５６へ移行する。ステップ１５６では、回答内容として、コメント領域に文字を付与するか付与しないかを判断し、回答内容が付与しないと判定された場合は、このルーチンは終了する（図５のステップ１１４又はステップ１３０の後にリターンし、終了する）。 In Step 152, if an affirmative determination is made, that is, if there is an answer to the notification message, the process proceeds to Step 156. In step 156, it is determined whether or not a character is added to the comment area as the response content. If it is determined that the response content is not added, this routine ends (step 114 or step 130 in FIG. 5). Return later and finish).
一方、ステップ１５６で、回答内容が付与すると判定された場合は、ステップ１５８へ移行して、発話音声の取得処理及び文字変換処理を実行する。 On the other hand, if it is determined in step 156 that the content of the answer is to be given, the process proceeds to step 158 to execute a speech voice acquisition process and a character conversion process.
具体的には、予め定め命令語等によって、発話開始を指示し、次いで、撮像者は、例えば、プレビュー表示を見ながら、コメント領域に付与する文字列となる内容を発話する。 Specifically, the start of utterance is instructed by a predetermined command word or the like, and then the photographer utters the contents to be a character string to be added to the comment area while watching the preview display, for example.
この発話音声データは、発話音声−文字変換制御装置１６へ送出され、文字データに変換されて、返信される。 This utterance voice data is sent to the utterance voice-character conversion control device 16, converted into character data, and returned.
発話音声データから文字データへの変換は、音声認識による単純文字変換や、予め定めた文字コマンドに基づく文字変換等、特に変換手段は限定されるものではない。 The conversion from the spoken voice data to the character data is not particularly limited by conversion means such as simple character conversion by voice recognition or character conversion based on a predetermined character command.
コメント領域に付与する文字列に関する発話が終了すると、発話終了を指示することで、ステップ１５８の発話音声の取得処理及び文字変換処理が終了し、ステップ１６０へ移行する。 When the utterance related to the character string to be added to the comment area is finished, the utterance voice acquisition process and the character conversion process in step 158 are finished by instructing the utterance end, and the process proceeds to step 160.
ステップ１６０では、コメント領域に付与する文字列を、タッチパネル部２２Ａのモニタに表示し、ステップ１６２へ移行する。 In step 160, the character string to be added to the comment area is displayed on the monitor of the touch panel unit 22A, and the process proceeds to step 162.
ステップ１６２では、コメント領域に付与する文字列の編集の要否に関するメッセージを報知する。報知の手段としては、通信端末装置１２のタッチパネル部２２Ａに表示する（視覚を通じた報知）、並びに、スピーカ２２Ｂを適用して音声で出力する（聴覚を通じた報知）、の少なくとも一方の報知手段を用いる。 In step 162, a message relating to the necessity of editing the character string assigned to the comment area is notified. As the notification means, at least one of the notification means for displaying on the touch panel unit 22A of the communication terminal device 12 (notification through vision) and outputting the voice by applying the speaker 22B (notification through hearing) is provided. Use.
視覚を通じた報知例としては、タッチパネル部２２Ａに、特殊ファイル名と共に、「コメントを編集しますか？」と表示する。聴覚を通じた報知例としては、この表示文字を音声として出力すればよい。 As an example of visual notification, “Do you want to edit the comment?” Is displayed on the touch panel unit 22A together with the special file name. As an example of notification through hearing, this display character may be output as sound.
次のステップ１６４では、報知したメッセージに対して、回答があったか否かを判断し、否定判定された場合は、ステップ１６６へ移行する。ステップ１６６では、所定時間経過したか否かを判断し、否定判定された場合は、ステップ１６４へ戻る。また、ステップ１６６で肯定判定、すなわち、報知メッセージが実行されてから所定時間経過しても回答がない場合は、コメント領域に付与する文字列を編集する必要がないと判断し、ステップ１６８へ移行して、現在のコメント内容の文字列で保存処理し、このルーチンは終了する（図５のステップ１１４又はステップ１３０の後にリターンし、終了する）。 In the next step 164, it is determined whether or not there is an answer to the notified message. If a negative determination is made, the process proceeds to step 166. In step 166, it is determined whether or not a predetermined time has elapsed. If a negative determination is made, the process returns to step 164. If the answer is affirmative in step 166, that is, if there is no answer even after a predetermined time has passed since the notification message was executed, it is determined that there is no need to edit the character string to be added to the comment area, and the process proceeds to step 168. Then, the current comment content character string is stored, and this routine ends (returns after step 114 or step 130 in FIG. 5 and ends).
また、ステップ１６４で、肯定判定、すなわち、報知メッセージに対して回答があると、ステップ１７０へ移行する。ステップ１７０では、回答内容として、コメント領域に付与する文字列に対して、編集必要か編集不要かを判断し、回答内容が編集不要と判定された場合は、ステップ１６８へ移行して、記録データを現在のコメント内容の文字列で保存処理し、このルーチンは終了する（図５のステップ１１４又はステップ１３０の後にリターンし、終了する）。 In Step 164, if an affirmative determination is made, that is, if there is an answer to the notification message, the process proceeds to Step 170. In step 170, it is determined whether or not editing is necessary for the character string assigned to the comment area as the response content. If it is determined that the response content does not need to be edited, the process proceeds to step 168 to record data. Is stored with the character string of the current comment content, and this routine ends (returns after step 114 or step 130 in FIG. 5 and ends).
一方、ステップ１７０で、回答内容が編集必要と判定された場合は、ステップ１７２へ移行して、編集内容を特定するメッセージを、表示及び／又は音声で報知する。報知メッセージ例としては、「編集要件（書換、挿入、削除）と、編集範囲（一部、全部）を指定して下さい」等といった、編集に関する詳細事項の提示を要求する内容である。 On the other hand, if it is determined in step 170 that the response content needs to be edited, the process proceeds to step 172, and a message for specifying the editing content is displayed and / or notified by voice. An example of the notification message is a content requesting presentation of detailed items related to editing, such as “specify editing requirements (rewriting, insertion, deletion) and editing range (partially, all)”.
次のステップ１７４では、コメント領域に付与する文字列の編集内容を確定し、ステップ１５８へ戻り、上記工程を繰り返す。すなわち、編集箇所に対して、発話音声データの入力を実行する。 In the next step 174, the edit contents of the character string to be added to the comment area are confirmed, and the process returns to step 158 to repeat the above process. That is, the input of utterance voice data is executed for the edited portion.
なお、入出力デバイス２２Ａのモニタに特殊ファイル名が表示されているので、タッチパネル部２２Ａの入力パッドを適用し、表示されているコメント領域に付与する文字列を所謂ワードプロセッサ機能で編集するようにしてもよい。特に、編集箇所が一部である場合は、入力パッドを適用した方が、簡便となる場合がある。 Since the special file name is displayed on the monitor of the input / output device 22A, the input pad of the touch panel unit 22A is applied so that the character string to be added to the displayed comment area is edited by a so-called word processor function. Also good. In particular, when the editing part is a part, it may be easier to apply the input pad.
ここで、図５及び図６のフローチャートの処理の流れを、記録データに特殊ファイル名を付与する、コメントは付与しない、かつ、編集しない、という基本的な処理の流れに特化して要約すると、以下の手順となる。 Here, the processing flow of the flowcharts of FIGS. 5 and 6 is summarized by focusing on the basic processing flow of assigning a special file name to recording data, not adding a comment, and not editing. The procedure is as follows.
（手順１） 撮像者は、通信端末装置１２を持って、現場で撮像する（動画、静止画は問わない）。 (Procedure 1) The imager takes the communication terminal device 12 and takes an image on the spot (whether it is a moving image or a still image).
（手順２） 通信端末のモニタ機能で、プレビュー表示する（動画の場合は収録の一部の動画又は間引きしたコマ送りの静止画） (Procedure 2) Use the monitor function of the communication terminal to display a preview (in the case of a movie, a part of the recorded movie or a frame-thinned still image)
（手順３） 撮像者からのタイミングで発話を開始指示があると、発話音声−文字変換制御装置１６によって発話音声が文字に変換される。 (Procedure 3) When there is an instruction to start utterance at the timing from the photographer, the utterance voice-character conversion control device 16 converts the utterance voice into characters.
（手順４） 文字変換された文字データをプレビュー表示されている画像データのファイル名領域に特殊ファイル名として保存する。 (Procedure 4) Character data after character conversion is saved as a special file name in the file name area of image data displayed as a preview.
図７は、上記手順に基づき、記録データの格納状態とファイル名の付与の関係を示す概念図を示したものである。 FIG. 7 is a conceptual diagram showing the relationship between the recording data storage state and the file name assignment based on the above procedure.
記録データには、静止画ファイル７０と動画ファイル７２とが混在しているが、撮像順に通常ファイル名が付与される。図７では、連番として、「０００１」、「０００２」、・・・「０００６」が付与されている。 In the recording data, the still image file 70 and the moving image file 72 are mixed, but the normal file names are given in the order of imaging. In FIG. 7, “0001”, “0002”,... “0006” are assigned as serial numbers.
プレビュー表示されると、例えば、通常ファイル名「０００１」において、撮像者が、『ＬＮＧタンク設備の外観』と発話すると、音声解析によって文字列に変換され、通常ファイル名「０００１」が、特殊ファイル名「０００１−ＬＮＧタンク外観」に変更される。この場合、編集によって、発話から変換された文字が編集されて（・・・「設備の」が削除）特殊ファイル名となっている。 When the preview is displayed, for example, when the photographer utters “appearance of the LNG tank facility” in the normal file name “0001”, it is converted into a character string by voice analysis, and the normal file name “0001” is converted into a special file. The name is changed to “0001-LNG tank appearance”. In this case, the character converted from the utterance is edited by editing (... "Equipment" is deleted), and the special file name is obtained.
また、通常ファイル名「０００６」において、撮像者が、『サテライト基地のＬＮＧ運搬状況』と発話すると、音声解析によって文字列に変換され、通常ファイル名「０００６」が、特殊ファイル名「０００１−サテライト基地のＬＮＧ運搬状況」に変更される。この場合、編集はされず、発話から変換された文字がそのまま特殊ファイル名となっている。 In addition, when the photographer utters “satellite base LNG transport status” in the normal file name “0006”, it is converted into a character string by voice analysis, and the normal file name “0006” is converted into the special file name “0001-satellite”. It is changed to “LNG transport status of the base”. In this case, editing is not performed, and the character converted from the utterance is the special file name as it is.
（変形例） (Modification)
上記実施の形態では、ネットワーク１８を介して、通信端末装置１２と、発話音声−文字変換制御装置１６とを相互に連携させることで、発話音声データから、記録データに特殊ファイル名を付与するようにしたが、通信端末装置１２に音声−文字データ変換機能を備えるようにしてもよい。 In the above embodiment, the communication terminal device 12 and the speech-to-character conversion control device 16 are linked to each other via the network 18 so that a special file name is assigned to the recording data from the speech data. However, the communication terminal device 12 may be provided with a voice-character data conversion function.
また、ハードディスク２４を、記録データファイルサーバ１４Ｅとして機能させるようにしてもよい。 Further, the hard disk 24 may function as the recording data file server 14E.
この変形例に係る通信端末装置１２は、単体で、記録データファイル用文字入力支援システム、記録データファイル用文字入力支援制御装置として機能させることができる。 The communication terminal device 12 according to this modification can function alone as a recording data file character input support system and a recording data file character input support control device.
図８は、変形例に係る記録データファイル名入力支援プログラムを実行するときの機能ブロック図である。なお、図４に示す、本実施の形態の記録データファイル名入力支援プログラムを実行するときの機能ブロック図と同一構成部分については、同一の符号を付して、その構成の説明を省略する。 FIG. 8 is a functional block diagram when the recording data file name input support program according to the modification is executed. Note that the same components as those in the functional block diagram when executing the recording data file name input support program of the present embodiment shown in FIG. 4 are denoted by the same reference numerals, and description of the configuration is omitted.
図８に示される如く、変形例に係る通信端末装置１２Ａの特殊ファイル名管理制御部６０は、音声−文字データ変換処理部６０Ａを備えている。 As shown in FIG. 8, the special file name management control unit 60 of the communication terminal device 12A according to the modification includes a voice-character data conversion processing unit 60A.
特殊ファイル名管理制御部６０は、特殊ファイル名要否判定部５８から、特殊ファイルが必要である旨の判定結果（必要判定）を受けると、入出力デバイス２２の機能であるタッチパネル部２２Ａ（図２参照）のモニタに対して、発話開始指示を送信すると共に、当該発話開始指示後は、入出力デバイス２２の機能であるマイクロフォン２２Ｃで収録した発話音声データを取り込む体制をとる。 When the special file name management control unit 60 receives a determination result (necessity determination) indicating that the special file is necessary from the special file name necessity determination unit 58, the touch panel unit 22A (see FIG. 2), a speech start instruction is transmitted, and after the speech start instruction, speech voice data recorded by the microphone 22C, which is a function of the input / output device 22, is captured.
この場合、予め定めた命令語（「はじめ」「おわり」等）によって、発話開始時期と発話終了時期を認識することは、周知の技術が適用可能である。 In this case, a known technique can be applied to recognizing the utterance start time and the utterance end time using predetermined command words (such as “start” and “end”).
特殊ファイル名管理制御部６０に取り込んだ、発話音声データは、発話音声−文字変換処理部６０Ａで文字データに変換される。 The utterance voice data taken into the special file name management control unit 60 is converted into character data by the utterance voice-character conversion processing unit 60A.
特殊ファイル名管理制御部６０では、変換された文字データを入出力デバイス２２へ送出することで、文字データの編集が可能である。編集するか否かは、撮像者に問い合わせればよい。 The special file name management control unit 60 can edit the character data by sending the converted character data to the input / output device 22. Whether or not to edit may be inquired of the photographer.
また、特殊ファイル名管理制御部６０は、特殊ファイル名（文字情報）の生成と同様に、記録データに付与されるコメント領域へのコメント情報に関しても、発話音声データから文字情報を生成する。 Also, the special file name management control unit 60 generates character information from the utterance voice data with respect to the comment information to the comment area given to the recording data, in the same manner as the generation of the special file name (character information).
特殊ファイル名管理制御部６０は、文字データの編集が終了すると、特殊ファイル名・コメント付与部６４に文字情報を送出すると共に、記録データ取込部６２に対して、送信指示を出力する。 When the editing of the character data is completed, the special file name management control unit 60 sends the character information to the special file name / comment adding unit 64 and outputs a transmission instruction to the recording data fetching unit 62.
記録データ取込部６２では、前記特殊ファイル名要否判定部５８から、特殊ファイル不要（否）情報が通知されると、一時格納部５４から記録データを取り込み、記録データと通常ファイル名を記録データ格納処理部６８へ送出する。 When the special file name necessity determination unit 58 notifies the special file name necessity determination unit 58 of the record data fetch unit 62, the record data fetch unit 62 fetches the record data from the temporary storage unit 54 and records the record data and the normal file name. The data is sent to the data storage processing unit 68.
一方、記録データ取込部６２では、前記特殊ファイル名要否判定部５８から、特殊ファイル必要（要）情報が通知されると、特殊ファイル名管理制御部６０からの送信指示を待って、一時格納部５４から記録データを取り込み、記録データと通常ファイル名を特殊ファイル名・コメント付与部６４へ送出する。 On the other hand, when the special file necessary / unnecessary information is notified from the special file name necessity determining unit 58, the recording data fetching unit 62 waits for a transmission instruction from the special file name management control unit 60 and temporarily Record data is fetched from the storage unit 54, and the record data and the normal file name are sent to the special file name / comment adding unit 64.
特殊ファイル名・コメント付与部６４では、記録データに特殊ファイル名（＋コメント）を付加して、記録データ格納処理部６８へ送出する。 The special file name / comment adding unit 64 adds a special file name (+ comment) to the recording data and sends it to the recording data storage processing unit 68.
記録データ格納処理部６８は、ハードディスク２４を制御して、記録データを当該ハードディスク２４へ格納する。 The recording data storage processing unit 68 controls the hard disk 24 to store the recording data in the hard disk 24.
１０ 記録データファイル用文字入力支援システム
１２ 通信端末装置
１２ＳＰ スマートフォン
１２ＤＣ デジタルカメラ
１２ＨＳ ヘッドセット型ウェラブルカメラユニット
１２ＳＧ スマートグラス型ウェラブルカメラユニット
１４ 記録データ管理制御装置
１４Ａ 制御装置本体
１４Ｂ モニタ
１４Ｃ キーボード
１４Ｄ マウス
１４Ｅ 記録データファイルサーバ
１６ 発話音声−文字変換制御装置
１８ ネットワーク
２０ マイクロコンピュータ
２０Ａ ＣＰＵ
２０Ｂ ＲＡＭ
２０Ｃ ＲＯＭ
２０Ｄ 入出力ポート
２０Ｅ バス
２２ 入出力デバイス
２２Ａ タッチパネル部
２２Ｂ スピーカ
２２Ｃ マイクロフォン
２４ ハードディスク
２６ 撮像デバイス
２８ 通信Ｉ／Ｆ
３０ 無線中継装置
３２ 筐体
３４ 撮像者
５０ 撮像制御部
５２ 画像取込部
５４ 一時格納部
５６ プレビュー制御部
５８ 特殊ファイル名要否判定部
６０ 特殊ファイル名管理制御部
６２ 記録データ取込部
６４ 特殊ファイル名・コメント付与部
６６ 記録データ送信部
７０ 静止画ファイル
７２ 動画ファイル
DESCRIPTION OF SYMBOLS 10 Character input support system for recording data files 12 Communication terminal device 12SP Smartphone 12DC Digital camera 12HS Headset type wearable camera unit 12SG Smart glass type wearable camera unit 14 Recording data management control device 14A Control device main body 14B Monitor 14C Keyboard 14D Mouse 14E Recording data file server 16 Speech-to-character conversion control device 18 Network 20 Microcomputer 20A CPU
20B RAM
20C ROM
20D input / output port 20E bus 22 input / output device 22A touch panel unit 22B speaker 22C microphone 24 hard disk 26 imaging device 28 communication I / F
DESCRIPTION OF SYMBOLS 30 Wireless relay apparatus 32 Case 34 Photographer 50 Imaging control part 52 Image capture part 54 Temporary storage part 56 Preview control part 58 Special file name necessity judgment part 60 Special file name management control part 62 Recording data capture part 64 Special File name / comment assigning unit 66 Recording data transmission unit 70 Still image file 72 Movie file
本発明に係る文字入力支援システムは、画像を撮像する撮像機能、撮像した画像を表示する表示機能、及び、発話音声を入力する音声入力機能を備え、外部とデータ通信可能な通信端末装置と、音声データを文字データに変換するデータ変換制御装置と、を有する文字入力支援システムであって、前記通信端末装置が、前記撮像機能によって撮像した画像を、前記表示機能によって保存処理前の画像をプレビュー表示するプレビュー表示手段と、動画の場合は撮像中又はプレビュー表示中に、静止画の場合はプレビュー表示中に、それぞれ撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせる問い合わせ手段と、問い合わせ手段の問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付ける受付手段と、前記受付手段で受け付けた音声データから、前記データ変換制御装置により変換された文字データを取得する取得手段とを有し、前記取得手段で取得した文字データを、撮像された画像に付与する特殊ファイル名とすることを特徴としている。 A character input support system according to the present invention includes an imaging function for capturing an image, a display function for displaying the captured image, and a voice input function for inputting speech speech, and a communication terminal device capable of data communication with the outside, A data input control system for converting voice data into character data, wherein the communication terminal device previews an image captured by the imaging function and an image before storage processing by the display function In addition to the normal display file name that is automatically assigned to each captured image during the shooting or preview display for moving images, and during the preview display for still images , a special file is displayed. Inquiry means for inquiring whether to give a name in an interactive manner, and the special file by the inquiry of the inquiry means Receiving the voice data indicating the special file name spoken and input by the voice input function, and the data conversion control device from the voice data received by the receiving means Acquisition means for acquiring the character data converted in accordance with the above, and the character data acquired by the acquisition means is used as a special file name to be given to the captured image.
本発明に係る文字入力支援制御装置は、画像を撮像する撮像機能、撮像した画像を表示する表示機能、発話音声を入力する音声入力機能、及び、音声データを文字データに変換するデータ変換機能を有する文字入力支援制御装置であって、前記撮像機能によって撮像した画像を、前記表示機能によって保存処理前の画像をプレビュー表示するプレビュー表示手段と、動画の場合は撮像中又はプレビュー表示中に、静止画の場合はプレビュー表示中に、それぞれ撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせる問い合わせ手段と、問い合わせ手段の問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付ける受付手段と、前記受付手段で受け付けた音声データから、前記データ変換機能により変換された文字データを取得する取得手段とを有し、前記取得手段で取得した文字データを、撮像された画像の画像データを格納する記録データファイルの特殊ファイル名とすることを特徴としている。 The character input support control device according to the present invention has an image pickup function for picking up an image, a display function for displaying the picked-up image, a voice input function for inputting speech voice, and a data conversion function for converting voice data into character data. A character input support control device having a preview display means for previewing an image captured by the imaging function before the storage process by the display function ; In the case of an image, during the preview display , an inquiry means for interactively inquiring whether or not to assign a special file name separately from the normal file name automatically assigned to each captured image, and an inquiry means When there is a request to give the special file name by inquiry, it is spoken and entered by the voice input function. Receiving means for receiving voice data indicating the special file name, and acquiring means for acquiring character data converted by the data conversion function from the voice data received by the receiving means. This character data is used as a special file name of a recording data file for storing image data of a captured image.
本発明に係る文字入力支援プログラムは、画像を撮像する撮像機能、撮像した画像を表示する表示機能、及び、発話音声を入力する音声入力機能を備えたコンピュータに、前記撮像機能によって撮像した画像を、前記表示機能によって保存処理前の画像をプレビュー表示し、動画の場合は撮像中又はプレビュー表示中に、静止画の場合はプレビュー表示中に、それぞれ撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせすると共に、問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付け、受け付けた音声データを文字データに変換し、変換した文字データを、撮像された画像の画像データを格納する記録データファイルの特殊ファイル名とする、ことを実行させることを特徴としている。 The character input support program according to the present invention includes a computer having an imaging function for capturing an image, a display function for displaying the captured image, and a voice input function for inputting speech sound. The image before saving is displayed as a preview by the display function, and is automatically given to each captured image during shooting or preview display for moving images and during preview display for still images. In addition to the file name, whether or not to assign a special file name is inquired interactively, and when there is a request to assign the special file name as a result of the inquiry, it is uttered and by the voice input function Receives audio data indicating the input special file name, converts the received audio data into character data, and converts the converted character data The data, the special file name of the recorded data file that stores the image data of the captured image, is characterized in that to perform the.
本発明に係る文字入力支援プログラムは、画像を撮像する撮像機能、撮像した画像を表示する表示機能、及び、発話音声を入力する音声入力機能を備えたコンピュータに、前記撮像機能によって撮像した画像を、前記表示機能によって保存処理前の画像をプレビュー表示し、動画の場合は撮像中又はプレビュー表示中に、静止画の場合はプレビュー表示中に、それぞれ撮像された画像に設定されたコメント領域にコメントを付与するか否かを、対話形式で問い合わせすると共に、問い合わせにより、前記コメントを付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付け、受け付けた音声データを文字列に変換し、前記コメント領域に、文字列を付与する、ことを実行させることを特徴としている。 The character input support program according to the present invention includes a computer having an imaging function for capturing an image, a display function for displaying the captured image, and a voice input function for inputting speech sound. The display function displays a preview of the pre-save image, and in the case of moving images, during shooting or preview display, while in the case of still images, during preview display, comments are set in the comment areas set for the captured images. Whether or not to add a voice message indicating a special file name that is spoken and input by the voice input function when a request is given to add the comment by the inquiry. Accepts, converts the received voice data into a character string, and assigns the character string to the comment area It is characterized by causing.
本発明に係る文字入力支援システムは、画像を撮像する撮像機能、撮像した画像を表示する表示機能、及び、発話音声を入力する音声入力機能を備え、外部とデータ通信可能な通信端末装置と、音声データを文字データに変換するデータ変換制御装置と、を有する文字入力支援システムであって、前記通信端末装置が、前記撮像機能によって撮像した画像を、前記表示機能によって保存処理前の画像をプレビュー表示するプレビュー表示手段と、動画の場合は撮像中又はプレビュー表示中に、静止画の場合はプレビュー表示中に、それぞれ撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせる問い合わせ手段と、問い合わせ手段の問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付ける受付手段と、前記受付手段で受け付けた音声データから、前記データ変換制御装置により変換された文字データの編集の要否を確認し、編集が必要な場合は、音声入力又は文字入力によって編集した後に確定した文字データを取得する取得手段とを有し、前記取得手段で取得した文字データを、撮像された画像に付与する特殊ファイル名とすることを特徴としている。 A character input support system according to the present invention includes an imaging function for capturing an image, a display function for displaying the captured image, and a voice input function for inputting speech speech, and a communication terminal device capable of data communication with the outside, A data input control system for converting voice data into character data, wherein the communication terminal device previews an image captured by the imaging function and an image before storage processing by the display function In addition to the normal display file name that is automatically assigned to each captured image during the shooting or preview display for moving images, and during the preview display for still images, a special file is displayed. Inquiry means for inquiring whether to give a name in an interactive manner, and the special file by the inquiry of the inquiry means Receiving the voice data indicating the special file name spoken and input by the voice input function, and the data conversion control device from the voice data received by the receiving means And obtaining means for obtaining character data determined after editing by voice input or character input if the editing is necessary. The character data is used as a special file name assigned to the captured image.
本発明に係る文字入力支援制御装置は、画像を撮像する撮像機能、撮像した画像を表示する表示機能、発話音声を入力する音声入力機能、及び、音声データを文字データに変換するデータ変換機能を有する文字入力支援制御装置であって、前記撮像機能によって撮像した画像を、前記表示機能によって保存処理前の画像をプレビュー表示するプレビュー表示手段と、動画の場合は撮像中又はプレビュー表示中に、静止画の場合はプレビュー表示中に、それぞれ撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせる問い合わせ手段と、問い合わせ手段の問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付ける受付手段と、前記受付手段で受け付けた音声データから、前記データ変換制御装置により変換された文字データの編集の要否を確認し、編集が必要な場合は、音声入力又は文字入力によって編集した後に確定した文字データを取得する取得手段とを有し、前記取得手段で取得した文字データを、撮像された画像の画像データを格納する記録データファイルの特殊ファイル名とすることを特徴としている。 The character input support control device according to the present invention has an image pickup function for picking up an image, a display function for displaying the picked-up image, a voice input function for inputting speech voice, and a data conversion function for converting voice data into character data. A character input support control device having a preview display means for previewing an image captured by the imaging function before the storage process by the display function; In the case of an image, during the preview display, an inquiry means for interactively inquiring whether or not to assign a special file name separately from the normal file name automatically assigned to each captured image, and an inquiry means When there is a request to give the special file name by inquiry, it is spoken and entered by the voice input function. A receiving means for receiving audio data indicative of the special file name, from said voice data received by the receiving means, to check the necessity of editing text data converted by the data conversion control device, when editing is required Has an acquisition means for acquiring character data determined after editing by voice input or character input, and the character data acquired by the acquisition means is stored in a special data record file for storing image data of a captured image. It is characterized by the file name.
本発明に係る文字入力支援プログラムは、画像を撮像する撮像機能、撮像した画像を表示する表示機能、及び、発話音声を入力する音声入力機能を備えたコンピュータに、前記撮像機能によって撮像した画像を、前記表示機能によって保存処理前の画像をプレビュー表示し、動画の場合は撮像中又はプレビュー表示中に、静止画の場合はプレビュー表示中に、それぞれ撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせすると共に、問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付け、受け付けた音声データを文字データに変換すると共に、変換された文字データの編集の要否を確認し、編集が必要な場合は、音声入力又は文字入力によって編集し、変換した文字データを、撮像された画像の画像データを格納する記録データファイルの特殊ファイル名とする、ことを実行させることを特徴としている。 The character input support program according to the present invention includes a computer having an imaging function for capturing an image, a display function for displaying the captured image, and a voice input function for inputting speech sound. The image before saving is displayed as a preview by the display function, and is automatically given to each captured image during shooting or preview display for moving images and during preview display for still images. In addition to the file name, whether or not to assign a special file name is inquired interactively, and when there is a request to assign the special file name as a result of the inquiry, it is uttered and by the voice input function receiving voice data indicating the special file name entered, it converts the audio data received character data, conversion of Confirmed the necessity of editing text data, when editing is required, edited by voice input or text input, the converted character data, special files recorded data file that stores the image data of the captured image It is characterized by letting it be called a name.
本発明に係る文字入力支援プログラムは、画像を撮像する撮像機能、撮像した画像を表示する表示機能、及び、発話音声を入力する音声入力機能を備えたコンピュータに、前記撮像機能によって撮像した画像を、前記表示機能によって保存処理前の画像をプレビュー表示し、動画の場合は撮像中又はプレビュー表示中に、静止画の場合はプレビュー表示中に、それぞれ撮像された画像に設定されたコメント領域にコメントを付与するか否かを、対話形式で問い合わせすると共に、問い合わせにより、前記コメントを付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付け、受け付けた音声データを文字データに変換すると共に、変換された文字データの編集の要否を確認し、編集が必要な場合は、音声入力又は文字入力によって編集し、前記コメント領域に、文字列を付与する、ことを実行させることを特徴としている。 The character input support program according to the present invention includes a computer having an imaging function for capturing an image, a display function for displaying the captured image, and a voice input function for inputting speech sound. The display function displays a preview of the pre-save image, and in the case of moving images, during shooting or preview display, while in the case of still images, during preview display, comments are set in the comment areas set for the captured images. Whether or not to add a voice message indicating a special file name that is spoken and input by the voice input function when a request is given to add the comment by the inquiry. reception, converts the reception voice data into character data, the necessity of editing of the converted character data has been sure And, if editing is required, edited by voice input or text input, the comment area, imparts a character string, is characterized by executing the.
Claims (8)
音声データを文字データに変換するデータ変換制御装置と、
を有する文字入力支援システムであって、
前記通信端末装置が、
前記撮像機能によって撮像した画像を、前記表示機能によってプレビュー表示するプレビュー表示手段と、
撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせる問い合わせ手段と、
問い合わせ手段の問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付ける受付手段と、
前記受付手段で受け付けた音声データから、前記データ変換制御装置により変換された文字データを取得する取得手段とを有し、
前記取得手段で取得した文字データを、撮像された画像に付与する特殊ファイル名とする文字入力支援システム。 A communication terminal device having an imaging function for capturing an image, a display function for displaying the captured image, and a voice input function for inputting speech voice, and capable of data communication with the outside;
A data conversion control device for converting voice data into character data;
A character input support system comprising:
The communication terminal device
Preview display means for previewing an image captured by the imaging function using the display function;
Inquiry means for inquiring interactively whether to give a special file name separately from the normal file name automatically given to the captured image,
Receiving means for receiving voice data indicating a special file name spoken and input by the voice input function when there is a request to give the special file name by an inquiry from the inquiry means;
Acquisition means for acquiring character data converted by the data conversion control device from the voice data received by the reception means;
A character input support system in which character data acquired by the acquisition unit is used as a special file name to be added to a captured image.
前記撮像機能によって撮像した画像を、前記表示機能によってプレビュー表示するプレビュー表示手段と、
撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせる問い合わせ手段と、
問い合わせ手段の問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付ける受付手段と、
前記受付手段で受け付けた音声データから、前記データ変換機能により変換された文字データを取得する取得手段とを有し、
前記取得手段で取得した文字データを、撮像された画像の画像データを格納する記録データファイルの特殊ファイル名とする文字入力支援制御装置。 A character input support control device having an image pickup function for picking up an image, a display function for displaying the picked-up image, a voice input function for inputting speech voice, and a data conversion function for converting voice data into character data,
Preview display means for previewing an image captured by the imaging function using the display function;
Inquiry means for inquiring interactively whether to give a special file name separately from the normal file name automatically given to the captured image,
Receiving means for receiving voice data indicating a special file name spoken and input by the voice input function when there is a request to give the special file name by an inquiry from the inquiry means;
Acquisition means for acquiring character data converted by the data conversion function from the voice data received by the reception means;
A character input support control device that uses the character data acquired by the acquisition means as a special file name of a recording data file for storing image data of a captured image.
前記撮像機能によって撮像した画像を、前記表示機能によってプレビュー表示し、
撮像された画像に自動的に付与される通常ファイル名とは別に、特殊ファイル名を付与するか否かを、対話形式で問い合わせすると共に、
問い合わせにより、前記特殊ファイル名を付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付け、
受け付けた音声データを文字データに変換し、
変換した文字データを、撮像された画像の画像データを格納する記録データファイルの特殊ファイル名とする、
ことを実行させる文字入力支援プログラム。 To a computer having an imaging function for capturing an image, a display function for displaying the captured image, and a voice input function for inputting speech sound,
The image captured by the imaging function is preview-displayed by the display function,
In addition to the normal file name that is automatically assigned to the captured image, inquires whether to give a special file name interactively,
When there is a request to give the special file name by an inquiry, the voice data indicating the special file name spoken and inputted by the voice input function is received,
Convert received voice data into text data,
The converted character data is used as the special file name of the recording data file that stores the image data of the captured image.
A character input support program that makes things happen.
前記撮像機能によって撮像した画像を、前記表示機能によってプレビュー表示し、
撮像された画像に設定されたコメント領域にコメントを付与するか否かを、対話形式で問い合わせすると共に、
問い合わせにより、前記コメントを付与する要求があった場合に、発話され、かつ前記音声入力機能によって入力された特殊ファイル名を示す音声データを受け付け、
受け付けた音声データを文字列に変換し、
前記コメント領域に、文字列を付与する、
ことを実行させる文字入力支援プログラム。 To a computer having an imaging function for capturing an image, a display function for displaying the captured image, and a voice input function for inputting speech sound,
The image captured by the imaging function is preview-displayed by the display function,
Whether to add a comment to the comment area set in the captured image is inquired interactively,
When there is a request to give the comment by inquiry, voice data indicating a special file name spoken and input by the voice input function is received,
Convert received voice data into a character string,
A character string is given to the comment area.
A character input support program that makes things happen.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018018414A JP2019135609A (en) | 2018-02-05 | 2018-02-05 | Character input support system, character input support control device, and character input support program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018018414A JP2019135609A (en) | 2018-02-05 | 2018-02-05 | Character input support system, character input support control device, and character input support program |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019091320A Division JP2019159333A (en) | 2019-05-14 | 2019-05-14 | Character input support system and character input support program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2019135609A true JP2019135609A (en) | 2019-08-15 |
Family
ID=67624133
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018018414A Pending JP2019135609A (en) | 2018-02-05 | 2018-02-05 | Character input support system, character input support control device, and character input support program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2019135609A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2021135811A (en) * | 2020-02-27 | 2021-09-13 | 東京瓦斯株式会社 | Character input support control device, character input support system, and character input support program |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH09135417A (en) * | 1995-11-10 | 1997-05-20 | Ricoh Co Ltd | Digital still video camera |
| JP2000232599A (en) * | 1998-12-16 | 2000-08-22 | Internatl Business Mach Corp <Ibm> | Digital camera, operating method, recording medium read by computer, computer system and automatic digital photograph |
| JP2002041529A (en) * | 2000-07-28 | 2002-02-08 | Sony Corp | Portable telephone set and unarranged visual information processing method |
| JP2003219327A (en) * | 2001-09-28 | 2003-07-31 | Canon Inc | Image management device, image management method, control program, information processing system, image data management method, adaptor, and server |
| US20040041921A1 (en) * | 2002-08-29 | 2004-03-04 | Texas Instruments Incorporated | Voice recognition for file naming in digital camera equipment |
| JP2005012377A (en) * | 2003-06-17 | 2005-01-13 | Sharp Corp | Communication terminal, control method of the same, sound recognition processor, control method of sound recognition processor, communication terminal control program, record medium with communication terminal control program recorded, sound recognition processor control program and record medium with sound recognition processor control program recorded |
| WO2012147274A1 (en) * | 2011-04-26 | 2012-11-01 | Ｎｅｃカシオモバイルコミュニケーションズ株式会社 | Input assistance device, input asssistance method, and program |
| JP2014142934A (en) * | 2013-01-23 | 2014-08-07 | Lg Electronics Inc | Electronic device and method of controlling electronic device |
| JP2016122344A (en) * | 2014-12-25 | 2016-07-07 | 株式会社東芝 | System, server device and electronic apparatus |
-
2018
- 2018-02-05 JP JP2018018414A patent/JP2019135609A/en active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH09135417A (en) * | 1995-11-10 | 1997-05-20 | Ricoh Co Ltd | Digital still video camera |
| JP2000232599A (en) * | 1998-12-16 | 2000-08-22 | Internatl Business Mach Corp <Ibm> | Digital camera, operating method, recording medium read by computer, computer system and automatic digital photograph |
| JP2002041529A (en) * | 2000-07-28 | 2002-02-08 | Sony Corp | Portable telephone set and unarranged visual information processing method |
| JP2003219327A (en) * | 2001-09-28 | 2003-07-31 | Canon Inc | Image management device, image management method, control program, information processing system, image data management method, adaptor, and server |
| US20040041921A1 (en) * | 2002-08-29 | 2004-03-04 | Texas Instruments Incorporated | Voice recognition for file naming in digital camera equipment |
| JP2005012377A (en) * | 2003-06-17 | 2005-01-13 | Sharp Corp | Communication terminal, control method of the same, sound recognition processor, control method of sound recognition processor, communication terminal control program, record medium with communication terminal control program recorded, sound recognition processor control program and record medium with sound recognition processor control program recorded |
| WO2012147274A1 (en) * | 2011-04-26 | 2012-11-01 | Ｎｅｃカシオモバイルコミュニケーションズ株式会社 | Input assistance device, input asssistance method, and program |
| JP2014142934A (en) * | 2013-01-23 | 2014-08-07 | Lg Electronics Inc | Electronic device and method of controlling electronic device |
| JP2016122344A (en) * | 2014-12-25 | 2016-07-07 | 株式会社東芝 | System, server device and electronic apparatus |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2021135811A (en) * | 2020-02-27 | 2021-09-13 | 東京瓦斯株式会社 | Character input support control device, character input support system, and character input support program |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7831598B2 (en) | Data recording and reproducing apparatus and method of generating metadata | |
| US8615395B2 (en) | Generating a display screen in response to detecting keywords in speech | |
| JP2005276187A (en) | Method for identifying image and terminal apparatus | |
| CN106254913A (en) | The processing method and processing device of multi-medium data | |
| CN109895092B (en) | Information processing apparatus, information processing method, and computer readable medium | |
| JP2021061527A (en) | Information processing apparatus, information processing method, and information processing program | |
| US20120242860A1 (en) | Arrangement and method relating to audio recognition | |
| US20230231973A1 (en) | Streaming data processing for hybrid online meetings | |
| JP2019135609A (en) | Character input support system, character input support control device, and character input support program | |
| JP2005175627A (en) | System for taking proceedings | |
| JP2019159333A (en) | Character input support system and character input support program | |
| JP5246592B2 (en) | Information processing terminal, information processing method, and information processing program | |
| CN116472705A (en) | Conference content display method, conference system and conference equipment | |
| JP5023932B2 (en) | Imaging apparatus, image capturing method by scenario, and program | |
| JP6642630B2 (en) | Information processing device and program | |
| JP2005130257A (en) | System, server and computer program for supporting conference | |
| JP2020119444A (en) | Character input support system, character input support control device, character input support control method and character input support program | |
| KR102423005B1 (en) | Recognition test data providing system and method for deep learning | |
| US20230262200A1 (en) | Display system, display method, and non-transitory recording medium | |
| JP7302642B2 (en) | Information processing device, program and control method | |
| JP7139839B2 (en) | Information processing device, information processing method and program | |
| KR20230008687A (en) | Method and apparatus for automatic picture labeling and recording in smartphone | |
| JP2019050444A (en) | Interface device for data editing, capture device, image processing device, data editing method, and data editing program | |
| JP2021135811A (en) | Character input support control device, character input support system, and character input support program | |
| JP2021135810A (en) | Character input support control device, character input support system, and character input support program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180726 |
|
| A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20180726 |
|
| A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20180918 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181016 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181128 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20190219 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190514 |
|
| C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20190514 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20190521 |
|
| C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20190528 |
|
| A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20190712 |
|
| C211 | Notice of termination of reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C211 Effective date: 20190723 |
|
| C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20200414 |
|
| C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20200512 |
|
| C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20200804 |
|
| C13 | Notice of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: C13 Effective date: 20201006 |
|
| C23 | Notice of termination of proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C23 Effective date: 20210202 |
|
| C03 | Trial/appeal decision taken |
Free format text: JAPANESE INTERMEDIATE CODE: C03 Effective date: 20210309 |
|
| C30A | Notification sent |
Free format text: JAPANESE INTERMEDIATE CODE: C3012 Effective date: 20210309 |