JP2011013384A - 画像処理装置および画像処理方法 - Google Patents
画像処理装置および画像処理方法 Download PDFInfo
- Publication number
- JP2011013384A JP2011013384A JP2009156273A JP2009156273A JP2011013384A JP 2011013384 A JP2011013384 A JP 2011013384A JP 2009156273 A JP2009156273 A JP 2009156273A JP 2009156273 A JP2009156273 A JP 2009156273A JP 2011013384 A JP2011013384 A JP 2011013384A
- Authority
- JP
- Japan
- Prior art keywords
- data
- comment
- image processing
- person
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 10
- 238000004458 analytical method Methods 0.000 claims abstract description 12
- 230000008921 facial expression Effects 0.000 claims description 48
- 239000003086 colorant Substances 0.000 claims description 5
- 230000010365 information processing Effects 0.000 claims description 4
- 230000005540 biological transmission Effects 0.000 claims 1
- 230000014509 gene expression Effects 0.000 abstract description 24
- 238000000034 method Methods 0.000 description 28
- 238000013500 data storage Methods 0.000 description 22
- 230000008451 emotion Effects 0.000 description 16
- 238000001514 detection method Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 11
- 230000015572 biosynthetic process Effects 0.000 description 10
- 238000003786 synthesis reaction Methods 0.000 description 10
- 238000010195 expression analysis Methods 0.000 description 9
- 238000004364 calculation method Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000007405 data analysis Methods 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 3
- 239000000470 constituent Substances 0.000 description 2
- 230000002996 emotional effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
- G10L13/02—Methods for producing synthetic speech; Speech synthesisers
- G10L13/027—Concept to speech synthesisers; Generation of natural phrases from machine-based concepts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
- G06V40/175—Static expression
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Studio Devices (AREA)
- Television Signal Processing For Recording (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
【解決手段】予め複数のコメントデータをHDD117に記憶する。画像処理アプリケーション201は、画像データに含まれる人物の表情を解析し、解析された人物情報の表情の解析結果に基づいて、HDD117に記憶されている複数のコメントデータから該当するコメントデータを読み出して音声データを作成し、作成された音声データを再生すると共に、元の画像データの表示を行うための再生データを出力する。
【選択図】 図2
Description
となり、近似度は、0.98と求められる。求められた近似度に基づいて、CPU111は、最も近い表情番号を決定する。
図12は、作成された再生データをLCD121及びスピーカ128を用いて再生処理を行う状態を模式的に示す図である。CPU111は、再生データの再生要求を受信すると、LCD121に元の画像データを表示すると共に、スピーカ128からセリフ優先度に従って音声データを順次出力する。例えば、まず、セリフ優先度1である表情番号1の音声データである「これでどうだー!!」が再生される(テンポ8、音の大きさ8)。続いて、セリフ優先度2である表情番号2及び表情番号Nの音声データである「何だかすごい自信だ」が2つの声色で同時に再生される(テンポ4、音の大きさ6)。例えば、嬉しいときには、大きな音で比較的早いテンポで再生し、悲しいときには小さな音でゆっくりしたテンポで再生する等を行うことができる。
Claims (6)
- 複数のコメントデータを記憶する記憶手段と、
画像データに含まれる人物の表情を解析する解析手段と、
前記解析手段によって解析された前記人物の表情に基づいて、前記記憶手段に記憶されている複数のコメントデータから特定のコメントデータを読み出し、当該コメントデータに基づいて音声データを作成する作成手段と、
前記作成手段によって作成された音声データの再生と共に、前記画像データの表示を行うための再生データを出力する出力手段と、
を具備することを特徴とする画像処理装置。 - 前記記憶手段には、前記音声データを再生するテンポを示すテンポ情報及び前記音声データを再生する音量を示す音量情報が記憶されており、前記作成手段は、前記人物の表情基づいて、前記記憶手段から該当するテンポ情報及び音量情報を読み出して、読み出したテンポ情報及び音量情報に従って前記コメントデータから音声データを作成することを特徴とする請求項1に記載の画像処理装置。
- 前記解析手段は、前記人物の人数及び表情の近似度の解析を行い、前記作成手段は、前記人物が複数で且つ前記近似度が閾値以上である場合は、前記記憶手段に記憶されている複数のコメントデータから同じコメントデータを選択して、選択されたコメントデータから前記人物それぞれの声色が異なる音声データを作成することを特徴とする請求項1に記載の画像処理装置。
- 前記作成手段は、前記人物が複数である場合、前記人物の表情に基づいて前記人物ごとのコメントデータに優先度を決定し、当該優先度に基づいて、前記音声データを作成することを特徴とする請求項3に記載の画像処理装置。
- 前記出力手段は、複数の画送データに関する再生データを連続して出力することによりスライドショーとして出力することを特徴とする請求項1に記載の画像処理装置。
- 画像データに音声データを付して再生を行う情報処理装置で用いられる画像処理方法であって、
前記情報処理装置は、複数のコメントデータを記憶し、
画像データに含まれる人物の表情を解析し、
前記解析によって解析された前記人物の表情に基づいて、記憶されている複数のコメントデータから特定のコメントデータを読み出し当該コメントデータに基づいて音声データを作成し、
前記作成された音声データを再生すると共に、前記画像データの再生と共に、前記画像データの表示を行うための再生データを出力することを特徴とする画像処理方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009156273A JP4660611B2 (ja) | 2009-06-30 | 2009-06-30 | 画像処理装置および画像処理方法 |
US12/791,779 US8391544B2 (en) | 2009-06-30 | 2010-06-01 | Image processing apparatus and method for processing image |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009156273A JP4660611B2 (ja) | 2009-06-30 | 2009-06-30 | 画像処理装置および画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011013384A true JP2011013384A (ja) | 2011-01-20 |
JP4660611B2 JP4660611B2 (ja) | 2011-03-30 |
Family
ID=43380776
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009156273A Expired - Fee Related JP4660611B2 (ja) | 2009-06-30 | 2009-06-30 | 画像処理装置および画像処理方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8391544B2 (ja) |
JP (1) | JP4660611B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2479496A2 (en) | 2011-01-25 | 2012-07-25 | NGK Spark Plug Co., Ltd. | Glow plug and method for manufacturing glow plug |
JP2012156647A (ja) * | 2011-01-24 | 2012-08-16 | Nikon Corp | デジタルカメラおよびカメラ付き電子機器 |
JP2013025725A (ja) * | 2011-07-26 | 2013-02-04 | Sony Corp | 情報処理装置、フレーズ出力方法及びプログラム |
KR101864439B1 (ko) * | 2017-04-13 | 2018-06-11 | 황대훈 | 가짜 뉴스 판별 가능한 게시글 그래픽 유저 인터페이스 화면창을 구비한 가짜 뉴스 판별 시스템 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW201206192A (en) * | 2010-07-23 | 2012-02-01 | Hon Hai Prec Ind Co Ltd | Detection device and method |
CN105245917B (zh) * | 2015-09-28 | 2018-05-04 | 徐信 | 一种多媒体语音字幕生成的系统和方法 |
CN109427341A (zh) * | 2017-08-30 | 2019-03-05 | 鸿富锦精密电子(郑州)有限公司 | 语音输入系统及语音输入方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002025633A1 (fr) * | 2000-09-20 | 2002-03-28 | Kaori Tsuruta | Procede/systeme de reproduction d'images, procede/systeme de mise en forme d'images, album electronique, et systeme de creation/d'emission/de distribution pour un tel album |
JP2003317074A (ja) * | 2002-04-25 | 2003-11-07 | Ricoh Co Ltd | 電子アルバムシアタサービス提供システム、電子アルバムシアタサービス提供方法、該システムの機能を実現するプログラム及び記録媒体 |
JP2009081785A (ja) * | 2007-09-27 | 2009-04-16 | Casio Comput Co Ltd | 撮像装置、画像生成方法、およびプログラム |
JP2009253931A (ja) * | 2008-04-11 | 2009-10-29 | Casio Comput Co Ltd | 電子データ編集装置、電子データ編集方法及びプログラム |
JP2010066844A (ja) * | 2008-09-09 | 2010-03-25 | Fujifilm Corp | 動画コンテンツの加工方法及び装置、並びに動画コンテンツの加工プログラム |
JP2010176224A (ja) * | 2009-01-27 | 2010-08-12 | Nikon Corp | 画像処理装置およびデジタルカメラ |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5325462A (en) * | 1992-08-03 | 1994-06-28 | International Business Machines Corporation | System and method for speech synthesis employing improved formant composition |
US7376696B2 (en) * | 2002-08-27 | 2008-05-20 | Intel Corporation | User interface to facilitate exchanging files among processor-based devices |
US20050096909A1 (en) * | 2003-10-29 | 2005-05-05 | Raimo Bakis | Systems and methods for expressive text-to-speech |
EP1845491A4 (en) | 2005-02-03 | 2008-02-13 | Pioneer Corp | Image processing device, image processing method, image processing program and computer readable recording medium |
JP4710550B2 (ja) | 2005-10-31 | 2011-06-29 | セイコーエプソン株式会社 | 画像におけるコメントレイアウト |
-
2009
- 2009-06-30 JP JP2009156273A patent/JP4660611B2/ja not_active Expired - Fee Related
-
2010
- 2010-06-01 US US12/791,779 patent/US8391544B2/en not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002025633A1 (fr) * | 2000-09-20 | 2002-03-28 | Kaori Tsuruta | Procede/systeme de reproduction d'images, procede/systeme de mise en forme d'images, album electronique, et systeme de creation/d'emission/de distribution pour un tel album |
JP2003317074A (ja) * | 2002-04-25 | 2003-11-07 | Ricoh Co Ltd | 電子アルバムシアタサービス提供システム、電子アルバムシアタサービス提供方法、該システムの機能を実現するプログラム及び記録媒体 |
JP2009081785A (ja) * | 2007-09-27 | 2009-04-16 | Casio Comput Co Ltd | 撮像装置、画像生成方法、およびプログラム |
JP2009253931A (ja) * | 2008-04-11 | 2009-10-29 | Casio Comput Co Ltd | 電子データ編集装置、電子データ編集方法及びプログラム |
JP2010066844A (ja) * | 2008-09-09 | 2010-03-25 | Fujifilm Corp | 動画コンテンツの加工方法及び装置、並びに動画コンテンツの加工プログラム |
JP2010176224A (ja) * | 2009-01-27 | 2010-08-12 | Nikon Corp | 画像処理装置およびデジタルカメラ |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012156647A (ja) * | 2011-01-24 | 2012-08-16 | Nikon Corp | デジタルカメラおよびカメラ付き電子機器 |
EP2479496A2 (en) | 2011-01-25 | 2012-07-25 | NGK Spark Plug Co., Ltd. | Glow plug and method for manufacturing glow plug |
JP2013025725A (ja) * | 2011-07-26 | 2013-02-04 | Sony Corp | 情報処理装置、フレーズ出力方法及びプログラム |
KR101864439B1 (ko) * | 2017-04-13 | 2018-06-11 | 황대훈 | 가짜 뉴스 판별 가능한 게시글 그래픽 유저 인터페이스 화면창을 구비한 가짜 뉴스 판별 시스템 |
Also Published As
Publication number | Publication date |
---|---|
US20100329505A1 (en) | 2010-12-30 |
JP4660611B2 (ja) | 2011-03-30 |
US8391544B2 (en) | 2013-03-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4660611B2 (ja) | 画像処理装置および画像処理方法 | |
US20220229536A1 (en) | Information processing apparatus display control method and program | |
WO2021135655A1 (zh) | 生成多媒体资源的方法及设备 | |
WO2021135678A1 (zh) | 生成剪辑模板的方法、装置、电子设备及存储介质 | |
US20230252964A1 (en) | Method and apparatus for determining volume adjustment ratio information, device, and storage medium | |
JP2016119600A (ja) | 編集装置及び編集方法 | |
WO2019127899A1 (zh) | 歌词添加方法及装置 | |
KR20170039379A (ko) | 전자 장치 및 이의 제어 방법 | |
JP2012098817A (ja) | 電子機器及び画像処理方法 | |
CN111625682A (zh) | 视频的生成方法、装置、计算机设备及存储介质 | |
JP2021141564A (ja) | コンテンツ配信装置、コンテンツ配信方法、コンテンツ配信システム、および、コンテンツ配信プログラム | |
US7809677B2 (en) | Data processing method, portable player and computer | |
JP2014130467A (ja) | 情報処理装置、情報処理方法及びコンピュータプログラム | |
JP2011217183A (ja) | 電子機器、画像出力方法及びプログラム | |
KR101523971B1 (ko) | 녹음 기능을 수행하는 단말기 및 그 단말기의 이미지 처리 방법 | |
US20060164937A1 (en) | Portable information processing apparatus, information processing method for portable information processing apparatus, and program | |
TWI299466B (en) | System and method for providing presentation files for an embedded system | |
JP5550446B2 (ja) | 電子機器及び動画像生成方法 | |
CN112738624B (zh) | 用于视频的特效渲染的方法和装置 | |
JP7263957B2 (ja) | 情報装置、自動設定方法及び自動設定プログラム | |
JP3409999B2 (ja) | データ編集装置及びデータ編集方法 | |
CN114282494A (zh) | 信息显示方法、装置、电子设备及存储介质 | |
JP5479198B2 (ja) | 電子機器及び画像処理プログラム | |
JP2009265714A (ja) | 画像表示方法、画像表示プログラム、および楽曲再生装置 | |
JP2014150435A (ja) | 再生装置および再生プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101112 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20101130 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20101228 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140107 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140107 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |