JP2020053064A - プログラム及び電子機器 - Google Patents
プログラム及び電子機器 Download PDFInfo
- Publication number
- JP2020053064A JP2020053064A JP2019205485A JP2019205485A JP2020053064A JP 2020053064 A JP2020053064 A JP 2020053064A JP 2019205485 A JP2019205485 A JP 2019205485A JP 2019205485 A JP2019205485 A JP 2019205485A JP 2020053064 A JP2020053064 A JP 2020053064A
- Authority
- JP
- Japan
- Prior art keywords
- image
- comment
- shooting
- cpu
- program
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
【課題】画像に関し生成されたテキストを他の画像に基づいて更新する。【解決手段】コンピュータに、画像を取得する取得処理、画像に基づいて前記画像に関するテキストを生成する生成処理、前記生成処理により生成された第1画像に関するテキストを、前記第1画像の後に取得された第2画像を認識して更新する更新処理を実行させるためのプログラム。【選択図】図2
Description
本発明は、テキストを生成するプログラム及び該プログラムを実行する電子機器に関するものである。
従来、過去に撮影された画像に関する情報を用いて今回撮影された画像のコメントを作成する文書自動作成装置が知られている(例えば、特許文献1参照)。この文書自動作成装置によれば、過去に撮影された画像との関係を考慮したコメントを作成することができる。
しかしながら、この文書自動作成装置においては、今回撮影された画像に関する情報を過去に撮影された画像のコメントに反映させることはできなかった。このため、所定の期間内に一連の画像が撮影された場合等において、各画像に付されているコメントが前後の画像のコメントと調和しない場合があった。
本発明の目的は、画像に関し生成されたテキストを他の画像に基づいて更新するプログラム及び該プログラムを実行する電子機器を提供することである。
本発明のプログラムは、コンピュータに、画像を取得する取得処理、画像に基づいて前記画像に関するテキストを生成する生成処理、前記生成処理により生成された第1画像に関するテキストを、前記第1画像の後に取得された第2画像を認識して更新する更新処理を実行させる。
本発明の電子機器は、本発明のプログラムを実行する。
本発明によれば、画像に関し生成されたテキストを他の画像に基づいて更新することができる。
以下、図面を参照して本発明の実施の形態に係るデジタルカメラについて説明する。図1は、実施の形態に係るデジタルカメラ2の構成を示すブロック図である。デジタルカメラ2は、CPU4を備え、CPU4には、GPS衛星から受信した信号に基づいて撮影位置を測定するGPS6、操作部8、LCD表示部10の表示制御を行う表示制御部12、LCD表示部10に表示されるアイコンが指等でタッチされたことを検出するタッチパネル13、被写体を撮影するための撮像素子14、撮像素子14から出力された撮像信号から生成された画像データを一時的に記憶するメモリ16、画像データを記憶するメモリカード18を着脱するメモリカードスロット19が接続されている。
また、CPU4には、撮影位置の位置情報等を記憶する情報記憶部20、画像データに基づく画像のコメント等を記録するコメントファイルを記憶するファイル記憶部22、コメントを構成するコメント素材をデータベースとして記憶するコメントデータベース24、コメントデータベース24に記憶されているコメント素材をつなぎ合わせて既存のコメント作成技術によりコメントを作成するコメント作成部26、コメントデータベース24から取得するコメント素材の等級(以下、表現レベルという。)を決定する際に参照されるコメントテーブルを記憶するテーブルデータベース27、既存の顔認識技術により画像データに基づく画像から人の顔を認識する顔認識部28、メールサーバを介して画像データ等の送受信を行う無線通信部32が接続されている。
ここで、操作部8には、シャッタボタン(不図示)、撮影のシーンに適した撮影モード(例えば、オートモード、風景モード、料理モード等)を設定するモードダイヤル(不図示)等が含まれている。
図2は、実施の形態に係るデジタルカメラ2により撮影された画像及び画像のコメントを示す図である。図2に示すように、本実施の形態においては、デジタルカメラ2により撮影が行われる度に撮影された画像に対してコメントが付与される。例えば、1枚目に画像42のような画像が撮影された場合、CPU4は、コメント作成部26により画像42の画像データ等に基づいて「すず音と大沼ビール」のようなコメントを作成し、作成したコメントを画像42に付与する。次に、2枚目に画像44のような画像が撮影された場合、CPU4は、コメント作成部26により画像44の画像データ等に基づいて「W旅館からの眺め」のようなコメントを作成し、作成したコメントを画像44に付与する。次に、3枚目に画像46のような画像が撮影された場合、CPU4は、コメント作成部26により画像46の画像データ等に基づいて「W旅館にて夕食」のようなコメントを作成し、作成したコメントを画像46に付与する。次に、4枚目に画像48のような画像が撮影され
た場合、CPU4は、コメント作成部26により画像48の画像データ等に基づいて「ごちそうにみんなにっこり」のようなコメントを作成し、作成したコメントを画像48に付与する。
た場合、CPU4は、コメント作成部26により画像48の画像データ等に基づいて「ごちそうにみんなにっこり」のようなコメントを作成し、作成したコメントを画像48に付与する。
また、所定の条件で撮影が行われた場合、過去に撮影された画像のコメントが更新される。例えば、3枚目の画像46が料理モードで撮影された場合、矢印Aに示すように、1枚目の画像42のコメント「すず音と大沼ビール」が「夕食前のすず音と大沼ビール」のように更新される。同様に、矢印Bに示すように、2枚目の画像44のコメント「W旅館からの眺め」が「夕食前のW旅館からの眺め」のように更新される。また、4枚目の画像48から検出された人の顔が笑顔であった場合、矢印Cに示すように、3枚目の画像48のコメント「W旅館にて夕食」が「素晴らしいW旅館にて夕食」のように更新される。なお、コメントの更新の具体的な内容については後に詳しく説明する。
図3は、実施の形態に係るデジタルカメラ2に記憶されているコメントファイルの内容を示す図である。図3に示すように、本実施の形態においては、デジタルカメラ2により撮影が行われる度に、撮影された画像の画像データのファイル名、撮影日時、撮影位置、撮影時に設定されていた撮影モード、及び画像に付与されたコメントがコメントファイルに記録される。また、所定の条件で撮影が行われた場合には、これから撮影される画像のコメントを構成する予定の予備コメント素材がコメントデータベース24から取得され、コメントファイルに記録される。なお、予備コメント素材の具体的な内容については後に詳しく説明する。
次に、図4に示すフローチャートを参照して実施の形態に係るデジタルカメラ2の処理について、3枚目の画像46の撮影、及び4枚目の画像48の撮影が行われた場合を例に説明する。
まず、シャッタボタンが操作されて3枚目の画像46が撮影されると(ステップS1)、CPU4は、撮影された画像46の画像データをメモリ16に一旦記憶する。次に、CPU4は、GPS6により測位された撮影位置の位置情報を取得し(ステップS2)、取得した位置情報、及び位置情報取得時の日時に関する日時情報を画像データのファイル名と共に情報記憶部20に記憶する。
次に、CPU4は、メモリ16から画像データを読み出し、情報記憶部20から位置情報及び日時情報を読み出し、画像データ、位置情報、及び日時情報の少なくとも一つを用いてコメントデータベース24からコメント素材を取得する(ステップS3)。例えば、CPU4は、撮影モードが料理モードに設定されている場合、「食」というコメント素材をコメントデータベース24から取得する。また、位置情報に基づく撮影位置に基づいて、「W旅館」というコメント素材をコメントデータベース24から取得する。また、日時情報に基づく撮影日時が「2012/8/11 18:30」である場合、CPU4は、「夕」というコメント素材をコメントデータベース24から取得する。
次に、CPU4は、コメント作成部26により、「食」、「W旅館」、及び「夕」をつなぎ合わせた「W旅館にて夕食」というコメントを作成する(ステップS4)。
次に、CPU4は、図3に示すように、画像46の画像データのファイル名「DSC003.jpg」、画像46の撮影日時「2012/8/11 18:30」、画像46の撮影時の撮影位置「…」、画像46の撮影時に設定されていた撮影モード名「料理モード」、及びコメント作成部26により作成した画像46のコメント「W旅館にて夕食」をコメントファイルに記録する(ステップS5)。
次に、CPU4は、ファイル名「DSC003.jpg」の画像データにタグ情報として位置情報及び日時情報を付加してExif等の所定のファイル形式の画像データとしてメモリカード18に記憶する(ステップS6)。
次に、CPU4は、予備コメント素材を取得する必要性についての判定を行う(ステップS7)。例えば、撮影モードが料理モードに設定されているか否の判定を行う。予備コメント素材を取得する必要がない場合(ステップS7:No)、ステップS10の処理に進む。
一方、予備コメント素材を取得する必要がある場合(ステップS7:Yes)、即ち、撮影モードが料理モードに設定されている場合、CPU4は、「ごちそう」、「料理」、「食」、「飯」、「食事」の5つの表現レベルの予備コメント素材をコメントデータベース24から取得する(ステップS8)。次に、CPU4は、コメントファイルにおいて、次に撮影される画像の情報が記録される位置に取得した予備コメント素材を記録する(ステップS9)。例えば、図3に示すように、ファイル名「DSC003.jpg」の行(3行目)の次の行(4行目)の予備コメント素材・レベル「A」の欄に「ごちそう」のように記録する。同様に、予備コメント素材・レベル「B+」の欄に「料理」、予備コメント素材・レベル「B」の欄に「食」、予備コメント素材・レベル「B−」の欄に「飯」、予備コメント素材・レベル「C」の欄に「食事」のように記録する。なお、料理モードにおいてコメントファイルに記録された予備コメント素材は、記録されてから例えば30分経過後に削除される。
次に、CPU4は、過去に撮影された画像のコメントを更新する必要性についての判定を行う(ステップS10)。例えば、撮影モードが料理モードに設定されていること、及び撮影された画像から笑顔が認識されたことの少なくとも一つに該当するか否かの判定を行う。過去に撮影された画像のコメントを更新する必要がない場合(ステップS10:No)、CPU4は、3枚目の画像46が撮影された場合における一連の処理を終了する。
一方、過去に撮影された画像のコメントを更新する必要がある場合(ステップS10:Yes)、CPU4は、画像46の撮影時よりも所定の時間前までに撮影された画像のコメントを更新するコメントと決定する(ステップS11)。例えば、図5に示すように、画像46(18:30撮影)よりも30分前までに撮影された画像42(18:03撮影)のコメント「すず音と大沼ビール」、及び画像44(18:05撮影)のコメント「W旅館からの眺め」を更新するコメントと決定する。
次に、CPU4は、更新に用いるコメント素材を取得する(ステップS12)。例えば、CPU4は、過去のコメントに付するコメント素材として、「前」というコメント素材をコメントデータベース24から取得する。また、図3に示すコメントファイルに記録されている撮影日時「2012/8/11 18:30」に基づいて、「夕」というコメント素材をコメントデータベース24から取得する。また、撮影モードが料理モードに設定されている場合、「食」というコメント素材をコメントデータベース24から取得する。
次に、CPU4は、コメントファイルに記録されているファイル名「DSC001.jpg」の画像データに基づく画像42のコメント「すず音と大沼ビール」を読み出し、コメント「すず音と大沼ビール」に「前」、「夕」、「食」をつなぎ合わせる。そして、図2の矢印Aに示すように、画像42のコメントを「すず音と大沼ビール」から「夕食前のすず音と大沼ビール」に更新し、更新後のコメントをコメントファイルに上書きする。
また、CPU4は、コメントファイルに記録されているファイル名「DSC002.jpg」の画像44のコメント「W旅館からの眺め」を読み出し、コメント「W旅館からの
眺め」に「前」、「夕」、「食」をつなぎ合わせる。そして、図2の矢印Bに示すように、画像44のコメントを「W旅館からの眺め」から「夕食前のW旅館からの眺め」に更新し、更新後のコメントをコメントファイルに上書きする。
眺め」に「前」、「夕」、「食」をつなぎ合わせる。そして、図2の矢印Bに示すように、画像44のコメントを「W旅館からの眺め」から「夕食前のW旅館からの眺め」に更新し、更新後のコメントをコメントファイルに上書きする。
以上により、3枚目の画像46が撮影された場合の処理が完了する。以下、続けて4枚目の画像48が撮影された場合の処理について説明する。まず、4枚目の画像48が撮影されると(ステップS1)、CPU4は、画像48撮影時の位置情報を取得し(ステップS2)、位置情報、日時情報を画像データのファイル名と共に情報記憶部20に記憶する。
次に、CPU4は、メモリ16から画像データを読み出し、情報記憶部20から位置情報及び日時情報を読み出し、画像データ、位置情報、及び日時情報の少なくとも一つを用いてコメントデータベース24からコメント素材を取得する(ステップS3)。例えば、CPU4は、顔認識部28により画像データに基づく画像48から人の顔を検出し、3人以上の人の顔を検出した場合、「みんな」というコメント素材をコメントデータベース24から取得する。さらに、画像48から検出された人の顔が笑顔であった場合、「にっこり」というコメント素材をコメントデータベース24から取得する。
なお、図3に示すように、コメントファイルの今回撮影された画像に関する情報が記録される行(4行目)に予備コメント素材が記録されている場合、CPU4は、更にコメントファイルから予備コメント素材を取得する。例えば、CPU4は、予備コメント素材を取得する際に画像48から検出された人の顔の笑顔度を「A」、「B+」、「B」、「B−」、「C」のように5段階で判定し、笑顔度が「A」であれば、予備コメント素材・レベル「A」の欄から予備コメント素材「ごちそう」を取得する。なお、画像48から笑顔が認識されない場合、CPU4は、標準レベルであるレベル「B」の予備コメント素材「食」を取得する。
次に、CPU4は、コメント作成部26により、「にっこり」、「みんな」、「ごちそう」をつなぎ合わせ、図2に示すように、4枚目の画像48のコメントとして、「ごちそうにみんなにっこり」というコメントを作成する(ステップS4)。
次に、CPU4は、図4に示すように、画像48の画像データのファイル名「DSC004.jpg」、画像48の撮影日時「2012/8/11 18:35」、画像48の撮影位置「…」、画像48の撮影時に設定されていた撮影モード「料理モード」、及びコメント作成部26により作成した画像48のコメント「ごちそうにみんなにっこり」をコメントファイルに記録する(ステップS5)。
次に、CPU4は、ファイル名「DSC004.jpg」の画像データにタグ情報として位置情報及び日時情報を付加してExif等の所定のファイル形式の画像データとしてメモリカード18に記憶する(ステップS6)。
次に、予備コメント素材を取得する必要性についての判定を行う(ステップS7)。ここで、4枚目の画像48撮影時には、撮影モードが料理モードに設定されていることから、予備コメント素材を取得する必要がある(ステップS7:Yes)。このため、CPU4は、3枚目の画像46が撮影された場合の処理と同様に、「ごちそう」、「料理」、「食」、「飯」、「食事」の5つの表現レベルの予備コメント素材を取得し(ステップS8)、図3に示すように、ファイル名「DSC004.jpg」の行(4行目)の次の行(5行目)の予備コメント素材の欄に記録する(ステップS9)。なお、笑顔が認識された場合にコメントファイルに記録された予備コメント素材は、記録されてから例えば10分経過後に削除される。
次に、CPU4は、過去に撮影された画像のコメントを更新する必要性の判定を行う(ステップS10)。4枚目の画像48撮影においては、料理モードにおいて笑顔が認識されており、過去に撮影された画像のコメントを更新する必要があるため(ステップS10:Yes)、CPU4は、更新するコメントの決定を行う(ステップS11)。ここで、笑顔が認識された場合、CPU4は、図5に示すように、画像48(18:35撮影)よりも10分前までに撮影された画像46(18:30撮影)のコメント「W旅館の夕食」を更新するコメントと決定する。
次に、CPU4は、更新に用いるコメント素材を取得する(ステップS12)。例えば、料理モードで撮影された画像48の笑顔度が「A」である場合、CPU4は、図6に示す料理モード用のコメントテーブルを参照し、笑顔度「A」に対応する表現レベルの形容詞「素晴らしい」、名詞「ごちそう」、動詞「舌鼓を打つ」をコメント素材の候補として選定する。そして、選定した候補の中から、画像46のコメント「W旅館の夕食」に付け加えるのに相応しい形容詞「素晴らしい」を更新に用いるコメント素材として特定し、コメント素材「素晴らしい」をコメントデータベース24から取得する。
次に、CPU4は、コメントファイルに記録されているファイル名「DSC003.jpg」の画像46のコメント「W旅館の夕食」を読み出し、コメント「W旅館の夕食」に「素晴らしい」をつなぎ合わせる。そして、図2の矢印Cに示すように、画像46のコメントを「W旅館の夕食」から「素晴らしいW旅館の夕食」に更新し、更新したコメントをコメントファイルに上書きする。
この実施の形態に係るデジタルカメラ2によれば、過去に撮影された画像のコメントを更新することにより、所定の期間内に一連の画像が撮影された場合において、画像に付されたコメントを前後の画像のコメントと調和させることができる。また、これから撮影される画像のコメントに用いる予備コメント素材を予めコメントファイルに記録することにより、過去に撮影された画像のコメントを参照せずに、これから撮影される画像に適切なコメントを付与することができる。
また、更新するコメントを撮影時よりも所定の時間前までに撮影された画像のコメントに制限し、かつ、予備コメント素材を撮影時から所定の時間経過後に削除することにより、今回撮影した画像との関連が近い画像のコメントのみを更新し、コメントファイルに記録されている全てのコメントが更新されることを防止することができる。
なお、上述の実施の形態において、メモリカード18から画像データが削除された場合、削除された画像データに基づく画像が撮影された時に更新されたコメントを元に戻すようにしてもよい。例えば、図7の上段に示すように、3枚目の画像46の画像データがメモリカード18から削除されたとする。この場合、CPU4は、まず、図7の矢印Dに示すように、コメントファイルから画像46の画像データに関する記録を削除する。
次に、CPU4は、コメントファイルに記録されている、画像46が撮影された時に更新された画像42のコメント、及び画像44のコメントを元のコメントに戻す。即ち、図7の矢印Eに示すように、画像46の撮影時に更新された画像42のコメント「夕食前のすず音と大沼ビール」を、画像46が撮影される前のコメント「すず音と大沼ビール」に戻す。また、図7の矢印Fに示すように、画像46の撮影時に更新された画像44のコメント「夕食前のW旅館からの眺め」を、画像46が撮影される前のコメント「W旅館からの眺め」に戻す。これにより、画像データが削除された場合においても、前後の画像のコメントとの関連を維持することができる。
なお、この場合さらに、画像46の撮影時に取得された予備コメント素材を含むコメントを変更するようにしてもよい。例えば、CPU4は、図7の矢印Gに示すように、画像46の撮影時に取得された予備コメント素材「ごちそう」(図3参照)を含む、画像48のコメント「ごちそうにみんなにっこり」を「みんなにっこり」のように変更するようにしてもよい。
なお、メモリカード18から画像データが削除された場合、削除された画像データに関する記録をコメントファイルから削除する処理のみを行うようにしてもよい。例えば、図8の上段に示すように、3枚目の画像46の画像データがメモリカード18から削除された場合、CPU4は、画像46のコメントをコメントファイルから削除する処理のみを行い、削除の対象とならなかった画像42、画像44、画像48のコメントは変更しないようにしてもよい。
また、上述の実施の形態において、撮影時のフォーカス位置に基づいて語順や長さの異なるコメントを作成するようにしてもよい。例えば、図9に示す画像が撮影され、「ともちゃん」、「うれしそう」、「美味しい」、「料理」、及び「食」というコメント素材がコメントデータベース24から取得されたとする。そして、図9(a)に示すように、人の顔にフォーカス位置が合わせられていたとする。この場合、CPU4は、人物である「ともちゃん」を主語としてコメントの語順及び長さを決定する。ここで、コメントの語順及び長さの決定は、既存の文書作成技術を用いて行う。次に、CPU4は、コメント作成部26により、決定した語順及び長さに基づいてコメント素材をつなぎ合わせ、「美味しい料理を食べてうれしそうなともちゃん」(文例1−1)、または、「ともちゃんは美味しい料理を食べてうれしそう」(文例1−2)のようなコメントを作成する。
一方、図9(b)に示すように、人の顔ではなく料理にフォーカス位置が合わせられている場合、CPU4は、人物である「料理」を主語としてコメントの語順及び長さを決定する。そして、コメント作成部26により、決定した語順及び長さに基づいてコメント素材をつなぎ合わせ、「ともちゃんがうれしそうに食べた美味しい料理」(文例2−1)、または、「ともちゃんがうれしそうに食べた料理は美味かった」(文例2−2)のようなコメントを作成する。このように、撮影時のフォーカス位置に基づいてコメントの語順及び長さを決定することにより、撮影者の主観や意図を的確に反映させたコメントを作成することができる。
また、撮影時の撮影モードに基づいて語順や長さの異なるコメントを作成するようにしてもよい。例えば、図10に示すような画像が撮影され、「健太」、「タマ」、「公園」、「遊」、及び「うれしそう」というコメント素材がコメントデータベース24から取得されたとする。そして、図10(a)に示すように、キッズモードが設定されていたとする。この場合、CPU4は、子供である「健太」を主語としてコメントの語順及び長さを決定する。次に、CPU4は、決定した語順及び長さに基づいてコメント素材をつなぎ合わせ、「公園でタマと遊んでうれしそうな健太」(文例3−1)、または、「健太は公園でタマと遊んでうれしそう」(文例3−2)のようなコメントを作成する。
一方、図10(b)に示すように、ペットモードが設定されている場合、CPU4は、ペットである「タマ」を主語としてコメントの語順及び長さを決定する。そして、決定した語順及び長さに基づいてコメント素材をつなぎ合わせ、「公園で健太と遊んでうれしそうなタマ」(文例4−1)、または、「タマは公園で健太と遊んでうれしそう」(文例4−2)のようなコメントを作成する。
また、上述の実施の形態において、操作者の操作によりGPS6による測位機能のオン/オフを設定できるようにしてもよい。そして、GPS6による測位機能がオンにされて
いる場合とオフにされている場合とで異なるコメントを作成するようにしてもよい。例えば、図11(a)に示すように、GPS6による測位機能がオンにされ、風景モードで撮影が行われた場合、CPU4は、風景モードに基づいて「素晴らしい眺め」というコメント素材をコメントデータベース24から取得する。また、位置情報に基づいて、「観音崎」というコメント素材をコメントデータベース24から取得する。また、日時情報に基づいて「初夏」というコメント素材をコメントデータベース24から取得する。そして、コメント作成部26により、「素晴らしい眺め」、「観音崎」、「初夏」をつなぎ合わせた「初夏の観音崎の素晴らしい眺め」(文例5−1)というコメントを作成する。
いる場合とオフにされている場合とで異なるコメントを作成するようにしてもよい。例えば、図11(a)に示すように、GPS6による測位機能がオンにされ、風景モードで撮影が行われた場合、CPU4は、風景モードに基づいて「素晴らしい眺め」というコメント素材をコメントデータベース24から取得する。また、位置情報に基づいて、「観音崎」というコメント素材をコメントデータベース24から取得する。また、日時情報に基づいて「初夏」というコメント素材をコメントデータベース24から取得する。そして、コメント作成部26により、「素晴らしい眺め」、「観音崎」、「初夏」をつなぎ合わせた「初夏の観音崎の素晴らしい眺め」(文例5−1)というコメントを作成する。
一方、図11(b)に示すように、GPS6による測位機能がオフにされ、夕焼けモードで撮影が行われた場合、CPU4は、夕焼けモードに基づいて「美しい夕暮れ」というコメント素材をコメントデータベース24から取得する。また、撮影日時に基づいて「初夏」というコメント素材をコメントデータベース24から取得する。そして、コメント作成部26により、「美しい夕暮れ」と「初夏」をつなぎ合わせた「初夏の美しい夕暮れ」(文例6−1)というコメントを作成する。
また、上述の実施の形態において、操作者によりコメントファイルに記録されているコメントが編集された場合、コメントが編集された画像の前後に撮影された画像のコメントを更新するようにしてもよい。この場合、編集によって更新の対象となるコメントの範囲を、撮影時にステップS11で更新の対象となったコメントの範囲よりも広くするようにしてもよい。例えば、図12に示すように、4枚目の画像48のコメント「ごちそうにみんなにっこり」が操作者により「ごちそうにみんな大満足」のように編集されたとする。
ここで、画像48は、笑顔が認識された画像であるから、本来は10分前までに撮影された画像46のコメントが更新するコメントと決定されるが(図5参照)、編集がなされた場合には更新するコメントをそれよりも広い範囲で決定する。例えば、画像48の1時間前までに撮影された画像42、画像44、画像46(図5参照)のコメントを更新するコメントと決定する。そして、図12に示すように、画像42、画像44、画像46のコメントをそれぞれ更新する。コメントが編集される画像は一般的に操作者のお気に入りの画像である可能性が高いため、更新の対象となるコメントの範囲を広くすることにより、操作者が気に入っている画像のコメントの内容を広く前後のコメントに反映させることができる。
また、編集によりコメントに含まれるコメント素材が異なるコメント素材に変更された場合、コメントファイルに記録されている、同じコメント素材を含むコメントを全て変更するようにしてもよい。例えば、画像46コメント「素晴らしいW旅館の夕食」が「素晴らしいW旅館の夕餐」に編集されたとする。この場合、CPU4は、コメントファイルに記録されている「食」というコメント素材を含むコメントを全て「餐」というコメント素材を含むコメントに変更する。即ち、画像42のコメント「夕食前のすず音と大沼ビール」を「夕餐前のすず音と大沼ビール」のように変更し、また、画像44のコメント「夕食前のW旅館からの眺め」を「夕餐前のW旅館からの眺め」のように変更する。
また、上述の実施の形態において、コメントの語調を方言、男性言葉、女性言葉、敬語、ヤンキー言葉、ギャル語等に変更する編集が行われた場合、コメントデータに記録されている他のコメントの語調も合わせて変更するようにしてもよい。
また、上述の実施の形態において、予め人物の親密度や相関関係を登録しておき、コメントを作成、または更新する際に、人物の親密度や相関関係に基づいてコメントの語調を変化させるようにしてもよい。
また、上述の実施の形態においては、図5に示すように、更新するコメントの範囲を日時情報に基づいて、例えば、笑顔が認識された画像の前後10分のように決定しているが、位置情報や新密度に基づいて更新するコメントの範囲を決定してもよい。
また、上述の実施の形態においては、撮影モードが料理モードに設定されているか否により予備コメント素材を取得する必要性についての判定を行っているが、風景モード等、他の撮影モードに設定されているか否により必要性の判定を行ってもよい。また、位置情報や日時情報、及び画像データに基づく画像に含まれる被写体像の特徴等、他の条件を用いて必要性の判定を行ってもよい。
また、上述の実施の形態においては、撮影モードが料理モードに設定されていること、及び撮影された画像から笑顔が認識されたことの少なくとも一つに該当するか否かにより過去に撮影された画像のコメントを更新する必要性についての判定を行っているが、位置情報や日時情報等、他の条件を用いて必要性の判定を行ってもよい。
また、上述の実施の形態において、取得した予備コメント素材を、コメントファイルの複数の行に記録してもよい。例えば、ファイル名「DSC003.jpg」の画像46が撮影されて予備コメント素材が取得された場合、取得された予備コメント素材を、図3に示す4行目〜10行目に記録してもよい。これにより、例えば、画像46が撮影されてから所定の時間内に複数の画像が連続して撮影された場合においても、複数の画像に画像46のコメントを反映させることができる。
また、上述の実施の形態においては、図6に示すコメントテーブルを参照する場合、笑顔度に基づいてコメント素材の候補を選定しているが、他の条件に基づいてコメント素材の候補を選定してもよい。例えば、撮影時の気象条件に基づいて「A」、「B+」、「B」、「B−」、及び「C」の5段階の表現レベルを特定し、特定した表現レベルに対応するコメント素材の候補を図6に示すコメントテーブルを参照して選定するようにしてもよい。また、撮影時の位置情報に基づいて表現レベルを特定し、図6に示すコメントテーブルを参照してコメント素材の候補を選定するようにしてもよい。なお、位置情報を用いる場合、位置情報に基づく位置が観光地やレジャー施設のときには高い表現レベルを特定するようにしてもよい。
また、上述の実施の形態においては、コメントデータベース24からコメント素材を取得する場合を例に説明しているが、webサーバ内にコメントデータベースを記憶するようにしてもよい。そして、CPU4は、コメント素材を取得するために必要な位置情報等を無線通信部32を介してwebサーバに送信する。webサーバは、デジタルカメラ2から位置情報等を受信すると、位置情報等に基づいてコメント素材を検出し、検出したコメント素材をデジタルカメラ2に対して送信する。デジタルカメラ2は、コメント素材を無線通信部32を介してwebサーバから受信し、コメント作成部26により受信したコメント素材をつなぎ合わせてコメントを作成する。これにより、デジタルカメラ2内に記憶するデータの容量を少なくすることができる。
また、上述の実施の形態においては、デジタルカメラ2に組み込まれたプログラムを用いて一連の処理を行っているが、該プログラムをインターネット等のネットワークを介してダウンロードし、スマートフォンやタブレット端末等を構成するコンピュータに組み込むことによって、上述の処理を行うことができるようにコンピュータを機能させるようにしてもよい。
また、該プログラムはフレキシブルディスク、CD−ROM、DVD等のコンピュータ読み取り可能な記録媒体に記録されていてもよい。即ち、コンピュータ読み取り可能な記
録媒体から読み取り、コンピュータに組み込むことによって、上述の処理を行うことができるようにコンピュータを機能させるようにしてもよい。
録媒体から読み取り、コンピュータに組み込むことによって、上述の処理を行うことができるようにコンピュータを機能させるようにしてもよい。
2…デジタルカメラ、4…CPU、6…GPS、8…操作部、10…LCD表示部、12…表示制御部、14…撮像素子、16…メモリ、18…メモリカード、20…情報記憶部、22…ファイル記憶部、24…コメントデータベース、26…コメント作成部、27…テーブルデータベース
Claims (9)
- コンピュータに、
画像を取得する取得処理、
画像に基づいて前記画像に関するテキストを生成する生成処理、
前記生成処理により生成された第1画像に関するテキストを、前記第1画像の後に取得された第2画像を認識して更新する更新処理、
を実行させるためのプログラム。 - 請求項1に記載のプログラムであって、
前記更新処理において、前記第2画像が削除されると前記第1画像に関するテキストを更新する、
プログラム。 - 請求項1または請求項2に記載のプログラムであって、
前記第1画像及び前記第2画像は撮影により生成された画像であり、
前記第2画像の撮影時刻は、前記第1画像の撮影時刻よりも後である、
プログラム。 - 請求項3記載のプログラムであって、
前記更新処理において、前記第1画像を更新するか否かを前記第2画像に基づいて決定する、
プログラム。 - 請求項3または請求項4に記載のプログラムであって、
前記更新処理において、前記第1画像の撮影時刻と前記第2画像の撮影時刻との差に基づいて、前記第1画像に関するテキストを前記第2画像に基づいて更新するか否かを決定する、
プログラム。 - 請求項5に記載のプログラムであって、
前記更新処理において、前記第1画像の撮影時刻と前記第2画の撮影時刻との差が第1時間である場合には、前記第1画像に関するテキストを前記第2画像に基づいて更新し、前記第1画像の撮影時刻と前記第2画の撮影時刻との差が前記第1時間よりも長い第2時間である場合には、前記第1画像に関するテキストを前記第2画像に基づいて更新しない、
プログラム。 - 請求項1から請求項6のいずれか一項に記載のプログラムであって、
前記生成処理において、前記第1画像を認識した結果、前記第1画像の撮影時刻、前記第1画像の撮影場所及び前記第1画像の撮影で設定された設定情報の少なくとも1つに基づいてテキストを生成するプログラム。 - 請求項1から請求項7のいずれか一項に記載のプログラムであって、
前記更新処理において、前記第2画像の撮影時刻、前記第2画像の撮影場所及び前記第2画像の撮影で設定された設定情報の少なくとも1つに基づいて、前記第1画像に関するテキストを更新するプログラム。 - 請求項1から請求項7のいずれか一項に記載のプログラムを実行する電子機器。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019205485A JP2020053064A (ja) | 2019-11-13 | 2019-11-13 | プログラム及び電子機器 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019205485A JP2020053064A (ja) | 2019-11-13 | 2019-11-13 | プログラム及び電子機器 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018113254A Division JP2018190430A (ja) | 2018-06-14 | 2018-06-14 | テキスト生成装置、電子機器及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020053064A true JP2020053064A (ja) | 2020-04-02 |
Family
ID=69997434
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019205485A Pending JP2020053064A (ja) | 2019-11-13 | 2019-11-13 | プログラム及び電子機器 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2020053064A (ja) |
-
2019
- 2019-11-13 JP JP2019205485A patent/JP2020053064A/ja active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105653636B (zh) | 一种信息处理方法和装置、一种用于信息处理的装置 | |
KR101475939B1 (ko) | 이미지 처리 장치의 제어 방법과 이미지 처리 장치, 이미지파일 | |
US20120110432A1 (en) | Tool for Automated Online Blog Generation | |
JP2006279266A (ja) | 電子アルバム作成装置、電子アルバム作成システム、及び、電子アルバム作成プログラム | |
JPWO2010047336A1 (ja) | 画像撮影システム及び画像撮影方法 | |
US9973649B2 (en) | Photographing apparatus, photographing system, photographing method, and recording medium recording photographing control program | |
JP2007011637A (ja) | 画像管理装置 | |
US7578441B2 (en) | Data retrieval method and apparatus | |
JP4274226B2 (ja) | 情報処理装置および方法、並びにプログラム | |
US9824447B2 (en) | Information processing apparatus, information processing system, and information processing method | |
US9195312B2 (en) | Information processing apparatus, conference system, and information processing method | |
CN102855235B (zh) | 为电子文件建立相对时间信息的方法及设备 | |
JP2020053064A (ja) | プログラム及び電子機器 | |
JP6354140B2 (ja) | テキスト生成装置、電子機器、テキスト生成方法及びプログラム | |
JP2018190430A (ja) | テキスト生成装置、電子機器及びプログラム | |
JP2006285847A (ja) | 画像検索システム、およびプログラム | |
JP2007086546A (ja) | 広告印刷装置、広告印刷方法及び広告印刷プログラム | |
CN104978389A (zh) | 方法、系统、服务器和客户端 | |
CN113497971B (zh) | 一种获得菜谱的方法、装置、存储介质及终端 | |
CN110009646B (zh) | 一种电子相册的生成方法、装置、电子设备及存储介质 | |
JP2003157268A (ja) | 電子機器及び電子機器制御プログラム | |
KR102165339B1 (ko) | 전자장치에서 콘텐츠 재생 방법 및 장치 | |
JP2014182485A (ja) | 画像処理装置および方法ならびにプログラム、および画像処理装置を備えた撮像装置 | |
JP6916342B2 (ja) | 撮像装置及び画像処理方法 | |
JP2009016958A (ja) | ビデオカメラおよびイベント記録方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191113 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200915 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20201110 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20210309 |