JP5601401B2 - 撮像装置、画像生成方法、およびプログラム - Google Patents
撮像装置、画像生成方法、およびプログラム Download PDFInfo
- Publication number
- JP5601401B2 JP5601401B2 JP2013122426A JP2013122426A JP5601401B2 JP 5601401 B2 JP5601401 B2 JP 5601401B2 JP 2013122426 A JP2013122426 A JP 2013122426A JP 2013122426 A JP2013122426 A JP 2013122426A JP 5601401 B2 JP5601401 B2 JP 5601401B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- character string
- character
- imaging
- designated
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
Description
また、受信した音声データを文字データに変換し、同時に受信した画像の口元に文字列を表示する画像表示装置がある(例えば、特許文献2参照)。
請求項3記載の発明は、前記文字列絞込み手段は、音声により、前記指定された画像に関連付けて表示する文字列を絞り込む音声認識手段を備えることを特徴とする請求項2に記載の撮像装置を提供するものである。
請求項5記載の発明は、前記文字列取得手段によって取得された文字列と前記指定された画像とを視覚的に関連付けて合成し、記録媒体に記録する記録手段を備えることを特徴とする請求項1ないし4いずれかに記載の撮像装置を提供するものである。
請求項6記載の発明は、前記撮像装置は、携帯電話機であることを特徴とする請求項1ないし5いずれかに記載の撮像装置を提供するものである。
また、本発明は、撮像機能を備えた機器、例えば、デジタルカメラやカメラ付き携帯電話、カメラ付き携帯情報機器(PDA(Personal Digital Assistant))などに適用できる。以下、図面を参照して本発明の実施形態について説明する。
図1は、本発明の実施形態に係わる撮像装置の一実施例として用いるデジタルカメラ100の電子回路の構成例を示すブロック図である。
また、画像ブログ生成モード時には、上述したSETキー63に代えて、液晶モニタ173の中央部分(フォーカス領域)にある画像をプログ対象の画像(注目画像)として指定する注目画像指定キーとして機能させるようにしてもよい。
これらの属性のよる分類、画像パターンの登録と認識の技術は、基本的には顔認識の技術と同じものである。属性としてAさん、Bさん、・・・を分類・認識してもよい。画像の種類として人物個人の識別を行うか、人か動物かを識別するか、年代を識別するか、動植物の種類を識別するか、表情を識別するか・・・の違いである。
注目画像と関連付けて表示する言葉(文字列)は、(1)撮影者が事実を述べる場合と、(2)撮影者の意図に応じて注目画像の台詞を変える場合によって異なり、(3)指定した被写体の年齢層(高齢者、中年、青年、学生、高校生、中学生、小学生、幼児、乳幼児)に応じて言葉使い、(4)職業、(5)シチュエーション(仕事中、家庭内、友人と一緒、飲み屋、・・)、(6)話しかける相手(被写体が一人の場合はカメラ外の相手の属性)、(7)若しくは複数の画像間で会話している構成では対話相手の属性や感情)によって異なる。
さらに、上記各言葉について標準語、方言(秋田弁、青森弁、山形弁、名古屋弁、大阪弁、京都弁、広島弁、博多弁、長崎弁、鹿児島弁、琉球弁)等の別で表現したい場合もある。
文字列データベースは、このような、被写体の属性や対話相手との関係や、職業や、シチュエーション、標準語・方言の別、自動設定可能要素等を考慮してインデックスで検索可能に関係付けられた語句(文字列)の集まりで構成されている。
図5は、画像ブログ生成時の制御部10の制御動作例を示すフローチャートであり、画像ブログ生成プログラムによる制御動作に相当する。以下、本実施形態に係わる画像ブログ生成時の動作について図5と、図1、図3、および図4を基に説明する。
上記図6のフローチャートのステップS5−4で撮影者が選択した言葉の種類に属する文字列を文字列データベース20から取得するが、取得した文字列は、通常、複数あるので図5のフローチャートのステップS5で複数の文字列の中から所望の文字列を迅速に取得するための絞込みを行っている。文字列の絞り込みは公知の絞込み方法を用いることができるが、効率的な絞込みを行うために同音語句または同義語句(同じ意未を持つ語句)の中から選択可能に表示して所望の文字列を絞り込むといった連想的な絞込みを行うことが望ましい。
また、文字列データベース20には膨大な数の文字列が登録されているが、登録されている文字列では言葉として十分な表現ができない場合がある。このような場合に、絞り込まれた文字列の前後に文字を付加したり、文字列データベース20に未登録の表現がある場合には撮影者による文字列ができることが望ましい。
以下、文字選択による文字列絞込みおよび文字列変更時の撮影者のキー操作、制御部10の動作例および文字列表示例について図8〜図10を基に説明する。
また、さらに先頭から2番目の文字として五十音のうちの一文字を選択し、先頭文字によって表示された文字列の中から先頭から2番目の文字が選択された文字と一致する文字列を表示するようにして文字列を絞り込むこともできる。
上記実施形態1では撮像装置が音声入力装置を備えていない例を示したが、撮像装置を音声入力装置を備えるように構成し、音声/文字変換部(若しくは音声/文字変換プログラム)により、入力した音声を文字に変換し、注目画像に関連付けて表示するようにすることもできる。
具体的には、図5のフローチャートのステップS6を、「ユーザは、上記ステップS5の文字列種類自動表示処理により表示された文字列から所望の文字列を得るために、音声を発して所望の文字列を選択するので、制御部10は音声/変換部31を制御して音声入力部31からの入力音声信号を音声認識し、出力された文字列とステップS5の文字列種類自動表示処理で取得した文字列を比較し、一致した文字列(つまり、類似度が所定の閾値を越えた文字列)を注目画像に関連付けるべき言葉として、一時記憶メモリ16の特徴データ保持領域161のうちJ番目の領域に確保されている特徴データと対応付けて文字列保持領域162のうちJ番目の領域に保持(記憶)する(ステップS6)。」ように構成すればよい。
このように、文字列の絞込みを音声入力装置からの入力音声に基づいて行うよう構成することにより、カーソル操作で絞込みを行う場合に比べ簡単に文字列の絞込みを行うことができる。
<実施形態3>
なお、文字列の絞込みをキー操作(カーソル操作若しくは文字キーの操作による入力文字)で行うように構成する場合は音声/文字変換部351は不要である。
無線信号処理部332は無線送受信部331で受信した音声信号やデータを復調したり、無線送受信部331から送信する音声信号やデータを変調するなどの無線通信に必要な処理を行う。
画像プログ生成モード時には通信制御プログラムの制御によりインターネットと接続すると、無線送受信部331を介してウエブサイト(ホームページ)に画像ブログを送信できる。
具体的には、図5のフローチャートのステップS6を、「ユーザは、上記ステップS5の文字列種類自動表示処理により表示された文字列から所望の文字列を得るために、文字入力キーを操作して所望の文字列を選択するので、制御部10はキー入力部334からの入力文字列とテップS5の文字列種類自動表示処理で取得した文字列を比較し、一致した文字列(つまり、類似度が所定の閾値を越えた文字列)を注目画像に関連付けるべき言葉として、一時記憶メモリ16の特徴データ保持領域161のうちJ番目の領域に確保されている特徴データと対応付けて文字列保持領域162のうちJ番目の領域に保持(記憶)する(ステップS6)。」ように構成すればよい。
このように、文字列の絞込みを文字入力に基づいて行うよう構成することにより、カーソル操作で絞込みを行う場合に比べ簡単に文字列の絞込みを行うことができる。撮影者は、注目画像指定操作、音声出力、出力された文字列の確認操作といった簡単な操作で文字列を絞り込めば画像ブログを生成することができ、送信指示キーを押すだけで画像ブログをウエブサイトに送信できる。
また、表示部338に表示される被写体の属性や言葉の種類等の選択を入力装置からの入力音声に基づいて行うようにしてもよい(実施形態2参照)。
11、335 撮像部
12、336 画像データ処理部
13、349 画像認識処理部
14、350 画像データベース
15 プログラム格納メモリ
16、341 一時記憶メモリ
17 画像表示部
18 画像記録部
20、352 文字列データベース
31 音声入力部
32、351 音声/文字変換部
40 外部入出力部
60 操作部
100、200、200‘ デジタルカメラ
300 カメラ付き携帯電話機
345 マイクロフォン
Claims (8)
- 被写体像を取り込んで画像データに変換し、被写体画像をスルー表示する撮像系を備えるとともに、インターネットに接続可能な撮像装置において、
文字列を所定の感情に基づいて分類し、分類した各文字列を検索可能に記録した文字列データベースと、
前記撮像系によって撮像された画像のうちから合焦処理における合焦領域の画像を、文字列を関連付けて表示するための画像領域として指定する画像指定手段と、
前記指定された画像領域の感情を判別する判別手段と、
前記文字列データベースから前記画像指定作手段によって指定された画像領域に関連付けて表示するための、前記判別手段によって判別された感情に基づいた文字列を取得する文字列取得手段と、
前記文字列取得手段により取得された文字列と前記指定された画像領域とを視覚的に関連付けて表示する表示制御手段と、
前記文字列取得手段によって取得された文字列と前記指定された画像領域とを視覚的に関連付けて合成し、インターネットと接続しウエブサイトにアップロードする通信制御手段と、を備えたことを特徴とする撮像装置。 - 前記文字列取得手段は、取得された複数の文字列の中から前記指定された画像に関連付けて表示する文字列を絞り込むための文字列絞込み手段を備え、
前記通信制御手段は、前記文字列絞込み手段により絞込まれた文字列と前記指定された画像とを視覚的に関連付けて表示できるように合成し、インターネットと接続しウエブサイトにアップロードすることを特徴とする請求項1に記載の撮像装置。 - 前記文字列絞込み手段は、音声により、前記指定された画像に関連付けて表示する文字列を絞り込む音声認識手段を備えることを特徴とする請求項2に記載の撮像装置。
- 前記判別手段は、顔認識により前記指定された画像の感情を判別することを特徴とする請求項1ないし3いずれかに記載の撮像装置。
- 前記文字列取得手段によって取得された文字列と前記指定された画像とを視覚的に関連付けて合成し、記録媒体に記録する記録手段を備えることを特徴とする請求項1ないし4いずれかに記載の撮像装置。
- 前記撮像装置は、携帯電話機であることを特徴とする請求項1ないし5いずれかに記載の撮像装置。
- 被写体像を取り込んで画像データに変換し、被写体画像をスルー表示する撮像系を備えるとともに、インターネットに接続可能な撮像装置の画像生成方法において、
前記撮像系によって撮像された画像のうちから合焦ステップにおける合焦領域の画像を、文字列を関連付けて表示するための画像領域として指定する画像指定ステップと、
前記指定された画像領域の感情を判別する判別ステップと、
文字列を所定の感情に基づいて分類し、分類した各文字列を検索可能に記録した文字列データベースから、前記画像指定作手段によって指定された画像領域に関連付けて表示するための、前記判別手段によって判別された感情に基づいた文字列を取得する文字列取得ステップと、
前記文字列取得手段により取得された文字列と前記指定された画像領域とを視覚的に関連付けて表示する表示制御ステップと、
前記文字列取得手段によって取得された文字列と前記指定された画像領域とを視覚的に関連付けて合成し、インターネットと接続しウエブサイトにアップロードする通信制御ステップと、を含むことを特徴とする画像生成方法。 - 被写体像を取り込んで画像データに変換し、被写体画像をスルー表示する撮像系を備えるとともに、インターネットに接続可能な撮像装置のコンピュータを、
請求項1記載の各手段として機能させることを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013122426A JP5601401B2 (ja) | 2013-06-11 | 2013-06-11 | 撮像装置、画像生成方法、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013122426A JP5601401B2 (ja) | 2013-06-11 | 2013-06-11 | 撮像装置、画像生成方法、およびプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011167840A Division JP5304854B2 (ja) | 2011-07-30 | 2011-07-30 | 撮像装置、画像生成方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013229900A JP2013229900A (ja) | 2013-11-07 |
JP5601401B2 true JP5601401B2 (ja) | 2014-10-08 |
Family
ID=49677069
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013122426A Expired - Fee Related JP5601401B2 (ja) | 2013-06-11 | 2013-06-11 | 撮像装置、画像生成方法、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5601401B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230224571A1 (en) * | 2020-07-14 | 2023-07-13 | Sony Group Corporation | Imaging assistance control apparatus, imaging assistance control method, and imaging assistance system |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3866100B2 (ja) * | 2001-12-26 | 2007-01-10 | 株式会社バンダイナムコゲームス | 画像印刷装置、画像印刷装置の制御方法、及びその制御プログラム |
JP2005107751A (ja) * | 2003-09-29 | 2005-04-21 | Matsushita Electric Ind Co Ltd | 入力支援装置、入力支援方法及び入力支援プログラム |
JP4396216B2 (ja) * | 2003-10-17 | 2010-01-13 | 日産自動車株式会社 | 車載用情報提供対話装置、システムおよび方法 |
JP2006277227A (ja) * | 2005-03-29 | 2006-10-12 | Fuji Photo Film Co Ltd | 合成画像作成装置 |
JP2007096816A (ja) * | 2005-09-29 | 2007-04-12 | Fujifilm Corp | 画像合成装置、画像合成プログラム、および画像合成プログラム記憶媒体 |
JP4710550B2 (ja) * | 2005-10-31 | 2011-06-29 | セイコーエプソン株式会社 | 画像におけるコメントレイアウト |
JP2007158799A (ja) * | 2005-12-06 | 2007-06-21 | Sony Corp | 撮像装置 |
JP2007183821A (ja) * | 2006-01-06 | 2007-07-19 | Seiko Epson Corp | 画像に関連した文の設定 |
-
2013
- 2013-06-11 JP JP2013122426A patent/JP5601401B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2013229900A (ja) | 2013-11-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10289273B2 (en) | Display device providing feedback based on image classification | |
US8599251B2 (en) | Camera | |
JP4914778B2 (ja) | カメラ | |
KR101778135B1 (ko) | 오브젝트 정보 제공방법 및 이를 적용한 촬영장치 | |
JP5611829B2 (ja) | 情報処理装置の動作制御システム及び動作制御方法 | |
US20120062766A1 (en) | Apparatus and method for managing image data | |
JP4803147B2 (ja) | 撮像装置、画像生成方法、およびプログラム | |
US8462231B2 (en) | Digital camera with real-time picture identification functionality | |
WO2010047336A1 (ja) | 画像撮影システム及び画像撮影方法 | |
US9525841B2 (en) | Imaging device for associating image data with shooting condition information | |
JP6108755B2 (ja) | 撮影機器、撮影画像送信方法及び撮影画像送信プログラム | |
JP2009141516A (ja) | 画像表示装置,カメラ,画像表示方法,プログラム,画像表示システム | |
US9973649B2 (en) | Photographing apparatus, photographing system, photographing method, and recording medium recording photographing control program | |
JP5230959B2 (ja) | 文書自動作成装置及びプログラム | |
CN102918586B (zh) | 用于图像数据记录和再现的设备及其方法 | |
JP5601401B2 (ja) | 撮像装置、画像生成方法、およびプログラム | |
JP5304854B2 (ja) | 撮像装置、画像生成方法、およびプログラム | |
JP5478747B2 (ja) | 文書自動作成装置 | |
JP5023932B2 (ja) | 撮像装置、シナリオによる画像撮影方法、およびプログラム | |
JP2007156729A (ja) | 検索装置及び検索方法並びに検索装置を有するカメラ | |
JP6166070B2 (ja) | 再生装置および再生方法 | |
JP2005065191A (ja) | 動画メタデータ自動作成装置及び動画メタデータ自動作成プログラム | |
JP2020137050A (ja) | 撮像装置、撮像方法、撮像プログラム及び学習装置 | |
WO2022014143A1 (ja) | 撮像システム | |
JP2017211995A (ja) | 再生装置、再生方法、再生プログラム、音声要約装置、音声要約方法および音声要約プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140311 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140408 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140722 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140804 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5601401 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |