JP2009253931A5 - - Google Patents

Download PDF

Info

Publication number
JP2009253931A5
JP2009253931A5 JP2008103107A JP2008103107A JP2009253931A5 JP 2009253931 A5 JP2009253931 A5 JP 2009253931A5 JP 2008103107 A JP2008103107 A JP 2008103107A JP 2008103107 A JP2008103107 A JP 2008103107A JP 2009253931 A5 JP2009253931 A5 JP 2009253931A5
Authority
JP
Japan
Prior art keywords
image data
determined
data
facial expression
expression type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008103107A
Other languages
Japanese (ja)
Other versions
JP5120777B2 (en
JP2009253931A (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2008103107A priority Critical patent/JP5120777B2/en
Priority claimed from JP2008103107A external-priority patent/JP5120777B2/en
Publication of JP2009253931A publication Critical patent/JP2009253931A/en
Publication of JP2009253931A5 publication Critical patent/JP2009253931A5/ja
Application granted granted Critical
Publication of JP5120777B2 publication Critical patent/JP5120777B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (12)

被写体を撮像して画像データを取得する撮像手段と、
画像データ内の顔を検出し、この検出された顔の表情を識別して、複数のグループに分類される表情種別のいずれに該当するかを判定する判定手段と、
ユーザの操作に応じて任意のテキストデータを入力する手動入力手段と、
前記判定手段により判定可能な複数の表情種別の各々に対して、前記入力手段により予め入力されたテキストデータを対応付けて記憶する第1の記憶手段と、
テキストデータの入力が必要なときに前記撮像手段により画像データが取得されると、この取得された画像データを対象として前記判定手段による表情種別の判定を行い、この判定された表情種別に対応して前記第1の記憶手段に記憶されているテキストデータを自動的に入力する自動入力手段と、
を備えたことを特徴とする電子データ編集装置
Imaging means for capturing an image of a subject and acquiring image data;
Determining means for detecting a face in the image data, identifying the detected facial expression, and determining which of the facial expression types classified into a plurality of groups;
A manual input means for inputting arbitrary text data in accordance with a user operation;
First storage means for storing text data previously input by the input means in association with each of a plurality of facial expression types that can be determined by the determination means;
When image data is acquired by the imaging unit when text data needs to be input, the determination unit determines a facial expression type for the acquired image data, and corresponds to the determined facial expression type. Automatic input means for automatically inputting text data stored in the first storage means,
Electronic data editing apparatus characterized by comprising
前記撮像手段による画像データの取得と、前記手動入力手段によるテキストデータの入力を行い、この取得された画像データを対象として前記判定手段により判定された表情種別と、前記入力されたテキストデータとを対応付けて前記第1の記憶手段に追加登録する第1の登録手段と、The acquisition of image data by the imaging unit and the input of text data by the manual input unit, the facial expression type determined by the determination unit for the acquired image data, and the input text data First registration means for additionally registering in association with the first storage means;
を更に備えたことを特徴とする請求項1に記載の電子データ編集装置。The electronic data editing apparatus according to claim 1, further comprising:
複数の表情種別の各々に対して、顔の画像データまたは顔の特徴データを対応付けて記憶する第2の記憶手段を更に備え、A second storage means for storing facial image data or facial feature data in association with each of the plurality of facial expression types;
前記判定手段は、画像データ内より検出された顔の画像データまたは顔の特徴データを、前記第2の記憶手段に記憶されている顔の画像データまたは顔の特徴データと比較し、最も合致度の高い顔の画像データまたは顔の特徴データに対応して記憶されている表情種別を判定結果とすることを特徴とする請求項2に記載の電子データ編集装置。The determination unit compares the face image data or the facial feature data detected from the image data with the facial image data or the facial feature data stored in the second storage unit, and determines the degree of match. 3. The electronic data editing apparatus according to claim 2, wherein a facial expression type stored in correspondence with image data or facial feature data having a high face is used as a determination result.
前記表情種別を表す情報を入力する表情種別入力手段と、
前記撮像手段による画像データの取得と、前記表情種別入力手段による表情種別を表す情報の入力を行い、この取得された画像データ内より検出された顔の画像データまたは顔の特徴データと、前記入力された表情種別を表す情報とを対応付けて前記第2の記憶手段に追加登録する第2の登録手段と、
を更に備えたことを特徴とする請求項3に記載の電子データ編集装置。
An expression type input means for inputting information representing the expression type;
Acquisition of image data by the imaging unit, input of information representing an expression type by the expression type input unit, and detection of facial image data or facial feature data detected from the acquired image data, and the input Second registration means for associating with the information representing the performed facial expression type, and additionally registering in the second storage means;
The electronic data editing apparatus according to claim 3, further comprising:
前記第2の記憶手段は、複数の個人の各々に対応させて、前記表情種別と顔の画像データまたは顔の特徴データとを対応付けて記憶し、The second storage means stores the expression type and facial image data or facial feature data in association with each other in association with each of a plurality of individuals.
前記第2の登録手段は、前記撮像手段による画像データの取得と、前記表情種別入力手段による表情種別を表す情報の入力に加え、個人を識別する情報の入力を行い、この個人を識別する情報と、前記顔の画像データまたは顔の特徴データと、前記表情種別を表す情報とを対応付けて前記第2の記憶手段に追加登録し、The second registration means inputs the information for identifying the individual in addition to the acquisition of the image data by the imaging means and the input of the information indicating the expression type by the expression type input means, and the information for identifying the individual And additionally registering the face image data or face feature data and the information indicating the expression type in association with the second storage means,
前記判定手段は、前記第2の記憶手段の記憶情報に基づいて、個人毎に顔の表情を識別することを特徴とする請求項4に記載の電子データ編集装置。5. The electronic data editing apparatus according to claim 4, wherein the determination unit identifies a facial expression for each individual based on information stored in the second storage unit.
前記自動入力手段は、前記撮像手段による画像データの取得に応じて前記第1の記憶手段から読み出されたテキストデータを仮入力し、確定操作が行われるまでの間、前記撮像手段による新たな画像データの取得と、新たに取得された画像データに対応するテキストデータの読み出しを繰り返し実行することを特徴とする請求項5に記載の電子データ編集装置。The automatic input means provisionally inputs the text data read from the first storage means in response to the acquisition of the image data by the imaging means, and a new operation by the imaging means is performed until a confirmation operation is performed. 6. The electronic data editing apparatus according to claim 5, wherein acquisition of image data and reading of text data corresponding to newly acquired image data are repeatedly executed. 被写体を撮像して画像データを取得する撮像手段と、ユーザの操作に応じて任意のテキストデータを入力する手動入力手段と、を備えた電子データ編集装置の制御方法であって、An electronic data editing apparatus control method comprising: an imaging unit that images a subject to acquire image data; and a manual input unit that inputs arbitrary text data in accordance with a user operation,
前記電子データ編集装置のコンピュータに、In the computer of the electronic data editing device,
画像データ内の顔を検出し、この検出された顔の表情を識別して、複数のグループに分類される表情種別のいずれに該当するかを判定する判定処理と、A determination process for detecting a face in the image data, identifying an expression of the detected face, and determining which of the expression types classified into a plurality of groups;
前記判定処理により判定可能な複数の表情種別の各々に対して、前記入力手段により予め入力されたテキストデータを対応付けて記憶する記憶処理と、A storage process for storing the text data input in advance by the input means in association with each of a plurality of facial expression types that can be determined by the determination process;
テキストデータの入力が必要なときに前記撮像手段により画像データが取得されると、この取得された画像データを対象として前記判定処理による表情種別の判定を行い、この判定された表情種別に対応して前記記憶処理により記憶されたテキストデータを自動的に入力する自動入力処理と、When image data is acquired by the imaging means when text data needs to be input, the facial expression type is determined by the determination process for the acquired image data, and the facial expression type corresponding to the determined facial expression type is determined. Automatic input processing for automatically inputting the text data stored by the storage processing,
を実行させることを特徴とする電子データ編集方法。An electronic data editing method characterized in that
電子データ編集装置のコンピュータを、
画像データ内の顔を検出し、この検出された顔の表情を識別して、複数のグループに分類される表情種別のいずれに該当するかを判定する判定手段と、
ユーザの操作に応じて任意のテキストデータを入力する手動入力手段と、
前記判定手段により判定可能な複数の表情種別の各々に対して、前記入力手段により予め入力されたテキストデータを対応付けて記憶する第1の記憶手段と、
テキストデータの入力が必要なときに前記撮像手段により画像データが取得されると、この取得された画像データを対象として前記判定手段による表情種別の判定を行い、この判定された表情種別に対応して前記第1の記憶手段に記憶されているテキストデータを自動的に入力する自動入力手段
として機能させることを特徴とするプログラム。
Computer of electronic data editing device,
Determining means for detecting a face in the image data, identifying the detected facial expression, and determining which of the facial expression types classified into a plurality of groups;
A manual input means for inputting arbitrary text data in accordance with a user operation;
First storage means for storing text data previously input by the input means in association with each of a plurality of facial expression types that can be determined by the determination means;
When image data is acquired by the imaging unit when text data needs to be input, the determination unit determines a facial expression type for the acquired image data, and corresponds to the determined facial expression type. And a program for causing the text data stored in the first storage means to be automatically input .
電子メールの送信機能を備えた電子データ編集装置であって、An electronic data editing device having an e-mail transmission function,
画像データ内に検出されるヒトの顔の表情を識別して、複数のグループに分類される表情種別のいずれに該当するかを判定する判定手段と、Determining means for identifying facial expressions detected in the image data and determining which of the facial expression types classified into a plurality of groups;
前記判定手段により判定された表情種別に基づいて、電子メールに挿入可能な挿入データを選択する選択手段と、Selection means for selecting insertion data that can be inserted into an e-mail based on the expression type determined by the determination means;
送信対象となる電子メールに画像データが添付されているか否かを判定し、画像データが添付されていないと判定された場合は、そのまま電子メールを送信し、画像データが添付されていると判定された場合は、更に、この画像データ内に顔が含まれているか否かを判定し、顔が含まれていないと判定された場合は、そのまま電子メールを送信し、顔が含まれていると判定された場合は、この画像データを対象として前記判定手段による表情種別の判定を行い、この判定された表情種別に基づいて前記選択手段により選択される挿入データを前記送信対象となる電子メールに挿入して電子メールを送信する送信制御手段と、It is determined whether or not image data is attached to the e-mail to be transmitted. If it is determined that no image data is attached, the e-mail is transmitted as it is, and it is determined that the image data is attached. If it is determined, it is further determined whether or not a face is included in the image data. If it is determined that the face is not included, an e-mail is transmitted as it is and the face is included. If it is determined, the determination unit determines the facial expression type for the image data, and the insertion data selected by the selection unit based on the determined facial expression type is the email to be transmitted. A transmission control means for sending an e-mail inserted into
を備えたことを特徴とする電子データ編集装置。An electronic data editing apparatus comprising:
感情マークの自動挿入モードと感情文字の自動挿入モードを選択的に設定するモード設定手段を更に備え、A mode setting means for selectively setting an emotion mark automatic insertion mode and an emotion character automatic insertion mode;
前記選択手段は、前記モード設定手段により感情マークの自動挿入モードが設定されている場合には、前記判定手段により判定された表情種別に基づいて感情を表す画像データである感情マークを選択し、前記モード設定手段により感情文字の自動挿入モードが設定されている場合には、前記判定手段により判定された表情種別に基づいて感情を表す文字である感情文字を選択し、The selection means selects an emotion mark that is image data representing an emotion based on the facial expression type determined by the determination means when an automatic insertion mode of the emotion mark is set by the mode setting means, When the emotion character automatic insertion mode is set by the mode setting means, an emotion character that is a character representing an emotion is selected based on the facial expression type determined by the determination means;
前記送信制御手段は、前記モード設定手段により感情マークの自動挿入モードが設定されている場合には、前記選択手段により選択された感情マークを電子メールに添付する画像データの一部に合成して電子メールを送信し、前記モード設定手段により感情文字の自動挿入モードが設定されている場合には、前記選択手段により選択された感情文字を電子メールの件名または本文に挿入して電子メールを送信することを特徴とする請求項9に記載の電子データ編集装置。The transmission control unit combines the emotion mark selected by the selection unit with a part of the image data attached to the e-mail when the mode setting unit sets the emotion mark automatic insertion mode. Send an e-mail, and if the mode setting means is set to the emotion character automatic insertion mode, send the e-mail by inserting the emotion character selected by the selection means into the subject or body of the e-mail The electronic data editing apparatus according to claim 9, wherein
電子メールの送信機能を備えた電子データ編集装置の制御方法であって、A method of controlling an electronic data editing apparatus having an e-mail transmission function,
前記電子データ編集装置のコンピュータに、In the computer of the electronic data editing device,
画像データ内に検出されるヒトの顔の表情を識別して、複数のグループに分類される表情種別のいずれに該当するかを判定する判定処理と、A determination process for identifying facial expressions detected in the image data and determining which of the facial expression types classified into a plurality of groups,
前記判定処理により判定された表情種別に基づいて、電子メールに挿入可能な挿入データを選択する選択処理と、A selection process for selecting insertion data that can be inserted into an e-mail based on the expression type determined by the determination process;
送信対象となる電子メールに画像データが添付されているか否かを判定し、画像データが添付されていないと判定された場合は、そのまま電子メールを送信し、画像データが添付されていると判定された場合は、更に、この画像データ内に顔が含まれているか否かを判定し、顔が含まれていないと判定された場合は、そのまま電子メールを送信し、顔が含まれていると判定された場合は、この画像データを対象として前記判定処理による表情種別の判定を行い、この判定された表情種別に基づいて前記選択処理により選択される挿入データを前記送信対象となる電子メールに挿入して電子メールを送信する送信制御処理と、It is determined whether or not image data is attached to the e-mail to be transmitted. If it is determined that no image data is attached, the e-mail is transmitted as it is, and it is determined that the image data is attached. If it is determined, it is further determined whether or not a face is included in the image data. If it is determined that the face is not included, an e-mail is transmitted as it is and the face is included. If it is determined, the facial expression type is determined by the determination process for the image data, and the insertion data selected by the selection process based on the determined facial expression type is the email to be transmitted A transmission control process that inserts into and sends an email,
を実行させることを特徴とする電子データ編集方法。An electronic data editing method characterized in that
電子メールの送信機能を備えた電子データ編集装置のコンピュータを、A computer of an electronic data editing device having an e-mail transmission function,
画像データ内に検出されるヒトの顔の表情を識別して、複数のグループに分類される表情種別のいずれに該当するかを判定する判定手段と、Determining means for identifying facial expressions detected in the image data and determining which of the facial expression types classified into a plurality of groups;
前記判定手段により判定された表情種別に基づいて、電子メールに挿入可能な挿入データを選択する選択手段と、Selection means for selecting insertion data that can be inserted into an e-mail based on the expression type determined by the determination means;
送信対象となる電子メールに画像データが添付されているか否かを判定し、画像データが添付されていないと判定された場合は、そのまま電子メールを送信し、画像データが添付されていると判定された場合は、更に、この画像データ内に顔が含まれているか否かを判定し、顔が含まれていないと判定された場合は、そのまま電子メールを送信し、顔が含まれていると判定された場合は、この画像データを対象として前記判定手段による表情種別の判定を行い、この判定された表情種別に基づいて前記選択手段により選択される挿入データを前記送信対象となる電子メールに挿入して電子メールを送信する送信制御手段It is determined whether or not image data is attached to the e-mail to be transmitted. If it is determined that no image data is attached, the e-mail is transmitted as it is, and it is determined that the image data is attached. If it is determined, it is further determined whether or not a face is included in the image data. If it is determined that the face is not included, an e-mail is transmitted as it is and the face is included. If it is determined, the determination unit determines the facial expression type for the image data, and the insertion data selected by the selection unit based on the determined facial expression type is the email to be transmitted. Transmission control means for sending e-mails inserted in
として機能させることを特徴とするプログラム。A program characterized by functioning as
JP2008103107A 2008-04-11 2008-04-11 Electronic data editing apparatus, electronic data editing method and program Expired - Fee Related JP5120777B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008103107A JP5120777B2 (en) 2008-04-11 2008-04-11 Electronic data editing apparatus, electronic data editing method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008103107A JP5120777B2 (en) 2008-04-11 2008-04-11 Electronic data editing apparatus, electronic data editing method and program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2012135540A Division JP5548964B2 (en) 2012-06-15 2012-06-15 Electronic data editing apparatus, electronic data editing method and program

Publications (3)

Publication Number Publication Date
JP2009253931A JP2009253931A (en) 2009-10-29
JP2009253931A5 true JP2009253931A5 (en) 2011-03-03
JP5120777B2 JP5120777B2 (en) 2013-01-16

Family

ID=41314105

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008103107A Expired - Fee Related JP5120777B2 (en) 2008-04-11 2008-04-11 Electronic data editing apparatus, electronic data editing method and program

Country Status (1)

Country Link
JP (1) JP5120777B2 (en)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4660611B2 (en) * 2009-06-30 2011-03-30 株式会社東芝 Image processing apparatus and image processing method
JP5344623B2 (en) * 2010-01-06 2013-11-20 Necシステムテクノロジー株式会社 E-mail system, e-mail receiving apparatus and display method
KR101659022B1 (en) * 2010-03-02 2016-09-23 엘지전자 주식회사 Content control apparatus and method thereof
JP2011227560A (en) * 2010-04-15 2011-11-10 Nec Corp Input support apparatus, input support method, and program
JP2012169777A (en) * 2011-02-10 2012-09-06 Sony Corp Information processor, information processing method, and program
JP5825040B2 (en) * 2011-10-25 2015-12-02 富士通株式会社 Communication terminal device and computer program
EP2800351A4 (en) * 2011-11-24 2016-06-01 Ntt Docomo Inc Expression output device and expression output method
JP5845988B2 (en) * 2012-03-16 2016-01-20 大日本印刷株式会社 Image processing system, image processing method, server, and program
JP5790568B2 (en) * 2012-03-28 2015-10-07 株式会社デンソー Message decoration input system
JP5977697B2 (en) * 2013-03-14 2016-08-24 シャープ株式会社 Electronic device and method for controlling electronic device
JP2014167829A (en) * 2014-06-06 2014-09-11 Nec Corp Input support apparatus, input support method, and program
JP2015165407A (en) * 2015-03-25 2015-09-17 株式会社リコー network system
US10176619B2 (en) * 2015-07-30 2019-01-08 Intel Corporation Emotion augmented avatar animation
CN107193571A (en) * 2017-05-31 2017-09-22 广东欧珀移动通信有限公司 Method, mobile terminal and storage medium that interface is pushed
US20240104956A1 (en) * 2021-02-25 2024-03-28 Nec Corporation Image accumulation apparatus, method, and non-transitory computer-readable medium

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09138767A (en) * 1995-11-14 1997-05-27 Fujitsu Ten Ltd Communication equipment for feeling expression
JP4643054B2 (en) * 2001-04-19 2011-03-02 雅信 鯨田 Device for inputting text consisting of letters and emoticons
JP2007199908A (en) * 2006-01-25 2007-08-09 Fujifilm Corp Emoticon input apparatus

Similar Documents

Publication Publication Date Title
JP2009253931A5 (en)
KR101346539B1 (en) Organizing digital images by correlating faces
JP4900739B2 (en) ELECTROPHOTOGRAPH, ITS CONTROL METHOD AND PROGRAM
JP2017152037A5 (en)
EP1835472A3 (en) Object detection apparatus
JP2005293589A5 (en)
EP1621995A3 (en) Information processing apparatus, control method therefor, computer program, and computer-readable storage medium
EP1710671A3 (en) Method and apparatus for automatic calibration of a touch monitor
EP2023595A3 (en) Image-processing apparatus, image-processing method, and computer program
JP2009141781A5 (en)
EP2075712A3 (en) Persistent selection marks
JP2007047862A5 (en)
EP2015306A3 (en) Information processing apparatus, information processing method and computer program
JP2006325146A5 (en)
JP2009082442A5 (en)
JP2006312025A5 (en)
US20180220023A1 (en) Image scanning device
JP2011097194A5 (en)
JP2009239616A5 (en)
JP2009135685A5 (en)
CN108932970B (en) Method, device and equipment for acquiring CT image data and machine-readable storage medium
EP1574940A3 (en) Data management appartus and method used for flash memory
JP2011172092A5 (en) Electronic device, image reproduction method, image reproduction program, recording medium recording image reproduction program, and image reproduction apparatus
Wazirali et al. Steganographic image sharing app
JP2020005190A5 (en) Equipment, imaging equipment, model learning methods and programs