JP2016219061A - Information processing device and program - Google Patents

Information processing device and program Download PDF

Info

Publication number
JP2016219061A
JP2016219061A JP2016186413A JP2016186413A JP2016219061A JP 2016219061 A JP2016219061 A JP 2016219061A JP 2016186413 A JP2016186413 A JP 2016186413A JP 2016186413 A JP2016186413 A JP 2016186413A JP 2016219061 A JP2016219061 A JP 2016219061A
Authority
JP
Japan
Prior art keywords
image data
mark
image
acquired image
cut
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016186413A
Other languages
Japanese (ja)
Other versions
JP6337934B2 (en
Inventor
達司 市川
tatsuji Ichikawa
達司 市川
耕司 西谷
Koji Nishitani
耕司 西谷
文則 佐野
Fuminori Sano
文則 佐野
典嘉 勝村
Noriyoshi Katsumura
典嘉 勝村
山根 一快
Kazuyoshi Yamane
一快 山根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2016186413A priority Critical patent/JP6337934B2/en
Publication of JP2016219061A publication Critical patent/JP2016219061A/en
Application granted granted Critical
Publication of JP6337934B2 publication Critical patent/JP6337934B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To easily transmit image data obtained by imaging a recording medium to a predetermined transmission destination.SOLUTION: An information processing device (100) includes: imaging means (8) for imaging a recording medium to acquire image data; image recognition means (1 and 42) for recognizing identification information present within a range of an image based on the image data imaged by the imaging means; and mail transmission means (1 and 44) for transmitting mail including the imaged image data to a transmission destination corresponding to instruction content of the identification information recognized by the image recognition means.SELECTED DRAWING: Figure 2

Description

この発明は、情報処理装置及びプログラムに関する。   The present invention relates to an information processing apparatus and a program.

近年、情報機器の進歩にともなって、電子文書を作成し保存したり、電子メールをしたりすることが通常となっている。電子文書は紙媒体による手書文書に比べて、管理、整理の容易性、検索性、保存性が良いという特徴を有している。
しかしながら、手書文書は、電子文書に比べて、利便性、スピード等において優位性を有しているため、今後も無くなることはないと考えられる。そこで、手書文書をいかに整理し活用するかが課題となっている。
これに対し、会議中に会議の出席者によりメモが書き込まれた紙媒体のメモ情報と会議中に表示された会議資料画像とを関連付けて所定の記憶手段に登録する装置が開示されている(特許文献1)。この装置によれば、会議中に表示された会議資料画像の特定の表示画像とその特定画像が表示されている間に記録媒体に書き込まれたメモ情報の差分撮像画像とを関連付けを行うことができる。
In recent years, along with the advancement of information equipment, it has become common to create and store electronic documents and send e-mails. An electronic document is characterized by ease of management, organization, searchability, and storage, compared to a handwritten document using a paper medium.
However, handwritten documents are superior to electronic documents in terms of convenience, speed, and the like, and are not expected to disappear in the future. Therefore, how to organize and use handwritten documents is an issue.
On the other hand, an apparatus is disclosed in which a memo information on a paper medium in which a memo is written by a meeting attendee during a meeting is associated with a meeting material image displayed during the meeting and registered in a predetermined storage unit ( Patent Document 1). According to this apparatus, it is possible to associate a specific display image of a conference material image displayed during a meeting with a differential image of memo information written on a recording medium while the specific image is displayed. it can.

特開2010−176603号公報JP 2010-176603 A

しかしながら、手書きメモを所定の送付先に送るためには所定のメールソフトを起動し、画像取込みされた手書きメモを添付ファイルに指定して、更に送信先を指定して送信する必要があり、ユーザの手動の操作という操作負荷をかけてしまうという課題があった。   However, in order to send a handwritten memo to a predetermined destination, it is necessary to start a predetermined mail software, specify the image-written handwritten memo as an attached file, further specify the destination, and send it. There was a problem that an operation load of manual operation was applied.

本発明の課題は、記録媒体を撮像して取得した画像データから切り出す領域として指定されている領域を切り出した画像データあるいは取得した画像データの全体を、記録媒体に記録されたメール送信コマンドを示すマークに対応して予め定められた送信先アドレスに容易に送信できるようにすることである。   An object of the present invention is a mail transmission command in which image data obtained by cutting out an area designated as an area to be cut out from image data acquired by imaging a recording medium or the entire acquired image data is recorded on the recording medium. It is to enable easy transmission to a predetermined transmission destination address corresponding to the mark.

本発明の情報処理装置は、記録媒体を撮像して画像データを取得する撮像手段と、前記撮像手段により取得した画像データにメール送信コマンドを示すマークが含まれているか否かを認識する画像認識手段と、前記画像認識手段により前記取得した画像データに前記マークが含まれていることが認識された場合は、前記マークに対応して予め定められた送信先アドレスに、前記取得した画像データの少なくとも一部を含むメールを送信するメール送信手段と、を備え、前記画像認識手段は、前記取得した画像データに前記マークが含まれていることを認識した場合に、前記マークに対応させて切り出す領域の指定が前記取得した画像データに含まれているか否かを認識する切出領域認識手段を備え、前記メール送信手段は、前記切出領域認識手段により前記取得した画像データに前記マークに対応させて切り出す領域の指定が含まれていると認識された場合には、前記切り出す領域として指定されている領域を前記取得した画像データから切り出した画像データを送信し、前記取得した画像データに前記マークに対応させて切り出す領域の指定が含まれていると認識されなかった場合には、前記取得した画像データの全体を送信することを特徴とする。   An information processing apparatus according to the present invention includes an imaging unit that captures a recording medium and acquires image data, and image recognition that recognizes whether or not a mark indicating a mail transmission command is included in the image data acquired by the imaging unit. And the image recognizing unit recognize that the acquired image data includes the mark, the acquired image data is sent to a predetermined transmission destination address corresponding to the mark. Email transmission means for sending an email including at least a part thereof, and the image recognition means cuts out the image corresponding to the mark when the acquired image data is recognized to contain the mark. A cut-out area recognizing unit for recognizing whether or not an area designation is included in the acquired image data; When it is recognized that the acquired image data includes a designation of a region to be cut out corresponding to the mark, an image cut out from the acquired image data is designated as the region to be cut out Transmitting the data, and if the acquired image data is not recognized as including an area to be cut out corresponding to the mark, the entire acquired image data is transmitted. .

本発明によれば、記録媒体を撮像して取得した画像データから切り出す領域として指定されている領域を切り出した画像データあるいは取得した画像データの全体を、記録媒体に記録されたメール送信コマンドを示すマークに対応して予め定められた送信先アドレスに容易に送信することができる。   According to the present invention, a mail transmission command in which image data obtained by cutting out an area designated as an area to be cut out from image data acquired by imaging a recording medium or the entire acquired image data is recorded on the recording medium is shown. It is possible to easily transmit to a predetermined destination address corresponding to the mark.

本実施形態に係る情報処理装置の外観斜視図である。It is an appearance perspective view of an information processor concerning this embodiment. 本実施形態に係る情報処理装置の内部構成を示すブロック図である。It is a block diagram which shows the internal structure of the information processing apparatus which concerns on this embodiment. 情報処理装置におけるバインダの開閉状態を示す図である。(A)は、情報処理装置の第1のカバーと第2のカバーとが開いた状態を示す図、(B)は、第1のカバーの上に第2のカバーが重なり合う状態を示す図である。It is a figure which shows the open / close state of the binder in information processing apparatus. (A) is a figure which shows the state which the 1st cover and 2nd cover of information processing apparatus opened, (B) is a figure which shows the state in which a 2nd cover overlaps on a 1st cover. is there. 情報処理装置により実行されるコマンドによるメール送信のフローを示す図である。It is a figure which shows the flow of the mail transmission by the command performed by information processing apparatus. メール送信コマンドを示すマークを手書きメモ中に付加した例を示す図である。(A)は、「□のV」マークを手書きメモ中に記録した例である。(B)は、二次元バーコードが印刷された記録媒体に手書きメモを記録した例であるIt is a figure which shows the example which added the mark which shows a mail transmission command in the handwritten memo. (A) is an example in which the “□ V” mark is recorded in a handwritten memo. (B) is an example in which a handwritten memo is recorded on a recording medium on which a two-dimensional barcode is printed. メールプログラムにて予め登録されている、メール送信コマンドを示すマークと送信先アドレスの対応関係を示す図である。It is a figure which shows the correspondence of the mark which shows the mail transmission command previously registered with the mail program, and a transmission destination address. スケジューラの表示画面を示す図である。(A)はカレンダ表示の図、(B)は個々のスケジュール(イベント)を表示する図である。It is a figure which shows the display screen of a scheduler. (A) is a calendar display diagram, and (B) is a diagram displaying individual schedules (events). スケジューラにおいて第2記憶手段としての記憶部に記憶されているデータ構造を示す図である。It is a figure which shows the data structure memorize | stored in the memory | storage part as a 2nd memory | storage means in a scheduler. メール送信コマンドを示すマークに対する領域指定を説明するための図である。It is a figure for demonstrating area designation | designated with respect to the mark which shows a mail transmission command. 変形例に係る情報処理装置がバインダに立て掛けられた状態を示す図である。It is a figure showing the state where the information processor concerning a modification was leaned against a binder.

以下、本発明の実施の形態を図面に基づいて説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

図1は、本実施形態に係る情報処理装置100の外観斜視図である。また、図2は、本実施形態に係る情報処理装置100の内部構成を示すブロック図である。   FIG. 1 is an external perspective view of an information processing apparatus 100 according to the present embodiment. FIG. 2 is a block diagram showing an internal configuration of the information processing apparatus 100 according to the present embodiment.

情報処理装置100は、例えばA5サイズの大きさのタブレット型端末装置であり、本体部12と、筐体としてのバインダ13と、から構成されている。
本体部12には、画面表示及びタッチ入力のためのタッチ表示部5、撮像手段としての撮像部8等が設けられている。撮像部8は、タッチ表示部5の外側の部分のうち、ヒンジ部13cによる回転軸から遠い方の長手側の枠の中央部(図1では表面側の左側中央部)に配設されている。
The information processing apparatus 100 is, for example, a tablet terminal device having an A5 size, and includes a main body 12 and a binder 13 as a housing.
The main body unit 12 is provided with a touch display unit 5 for screen display and touch input, an imaging unit 8 as an imaging unit, and the like. The imaging unit 8 is disposed in the central part of the frame on the long side farther from the rotation axis by the hinge part 13c (the left central part on the front side in FIG. 1) of the outer part of the touch display part 5. .

筐体としてのバインダ13は、第1の筐体としての第1のカバー13aと第2の筐体としての第2のカバー13bとがヒンジ部13cを回転軸として開閉可能に連結されて構成されている。第1のカバー13aには記録媒体15が配置され、第2のカバー13bには本体部12が設けられている。本体部12、記録媒体15は、留め具、フック等により、バインダ13に着脱可能に装着されている。   The binder 13 as a housing is configured by connecting a first cover 13a as a first housing and a second cover 13b as a second housing so that the hinge portion 13c can be opened and closed. ing. The recording medium 15 is disposed on the first cover 13a, and the main body 12 is provided on the second cover 13b. The main body 12 and the recording medium 15 are detachably attached to the binder 13 by fasteners, hooks, and the like.

なお、本実施形態において、記録媒体15とは、撮像すべき情報が記録されている媒体を示すものであり、情報が記録されている被写体を意味している。記録媒体15は、ユーザがメモを取る際に使用するノートやレポート用紙、又は、資料が印刷されている用紙、書籍等である。ただし、記録媒体15は、撮像すべき情報が記録されている媒体であればよく、素材は紙に限定されない。記録媒体15は、1枚のシート状の用紙であってもよいし、冊子状に綴じられていてもよい。また、記録媒体15には、情報を電子的に表示可能な電子ペーパーも含まれる。   In the present embodiment, the recording medium 15 indicates a medium on which information to be imaged is recorded, and means a subject on which information is recorded. The recording medium 15 is a notebook or report sheet used when a user takes notes, a sheet on which a document is printed, a book, or the like. However, the recording medium 15 may be a medium on which information to be imaged is recorded, and the material is not limited to paper. The recording medium 15 may be a sheet of paper, or may be bound in a booklet form. The recording medium 15 also includes electronic paper that can display information electronically.

第1のカバー13a及び第2のカバー13bは、平板長方形状に構成され、ヒンジ部13cにより、本や手帳を開閉するように、開閉可能となっている。図1は、第1のカバー13aと第2のカバー13bとのなす角度が180°である状態(開いた状態)を図示している。ユーザは、この状態でタッチ表示部5に表示される画面の参照及びタッチ入力を行い、記録媒体15に文字や図表等を記入する。   The 1st cover 13a and the 2nd cover 13b are comprised by flat rectangular shape, and can be opened and closed by the hinge part 13c so that a book and a notebook may be opened and closed. FIG. 1 illustrates a state in which the angle formed by the first cover 13a and the second cover 13b is 180 ° (open state). In this state, the user refers to the screen displayed on the touch display unit 5 and performs touch input, and enters characters, diagrams, and the like on the recording medium 15.

ヒンジ部13cには、第1のカバー13aと第2のカバー13bとのなす角度を検出する開閉角度センサ14が設けられている。開閉角度センサ14は、ヒンジ部13cの軸の回転を検出するロータリーエンコーダや、ホール素子等を用いて開閉状態を検出する磁気センサによって構成されている。ここで開閉角度センサ14は、検出手段として機能している。   The hinge part 13c is provided with an opening / closing angle sensor 14 for detecting an angle formed by the first cover 13a and the second cover 13b. The opening / closing angle sensor 14 includes a rotary encoder that detects the rotation of the shaft of the hinge portion 13c and a magnetic sensor that detects the opening / closing state using a hall element or the like. Here, the opening / closing angle sensor 14 functions as a detecting means.

図2に示すように、情報処理装置100は、機器の全体的な制御を行うCPU(Central Processing Unit)1と、操作キーを有する操作部6と、CPU1に作業用のメモリ空間を提供するRAM(Random Access Memory)3と、表示パネル5aにタッチパネル5bを積層配設した構造のタッチ表示部5と、CPU1が実行する制御プログラムや制御データ等を格納した記憶部4と、無線通信部7と、被写体の光学像を撮像する撮像部8と、現在日時を計時する計時部9、第1のカバー13aと第2のカバー13bとのなす角度を検出する開閉角度センサ14等を備えている。CPU1、操作部6、RAM3、タッチ表示部5、記憶部4、無線通信部7、撮像部8、計時手段としての計時部9、開閉角度センサ14は、バス10を介して接続されている。   As shown in FIG. 2, the information processing apparatus 100 includes a CPU (Central Processing Unit) 1 that performs overall control of the device, an operation unit 6 that includes operation keys, and a RAM that provides the CPU 1 with a working memory space. (Random Access Memory) 3, a touch display unit 5 having a structure in which a touch panel 5b is stacked on a display panel 5a, a storage unit 4 storing a control program executed by the CPU 1, control data, and the like, and a wireless communication unit 7 An image pickup unit 8 that picks up an optical image of the subject, a timer unit 9 that measures the current date and time, an opening / closing angle sensor 14 that detects an angle formed by the first cover 13a and the second cover 13b, and the like are provided. The CPU 1, the operation unit 6, the RAM 3, the touch display unit 5, the storage unit 4, the wireless communication unit 7, the imaging unit 8, the time measuring unit 9 as a time measuring unit, and the opening / closing angle sensor 14 are connected via a bus 10.

CPU1は、操作部6やタッチパネル5bから入力される操作信号又は無線通信部7により受信される指示信号に応じて情報処理装置100の各部の処理動作を統括的に制御する。具体的には、CPU1は、記憶部4に記憶されている各種処理プログラムを読み出してRAM3に展開し、当該プログラムとの協働により各種処理を行う。   The CPU 1 comprehensively controls the processing operation of each unit of the information processing apparatus 100 according to an operation signal input from the operation unit 6 or the touch panel 5 b or an instruction signal received by the wireless communication unit 7. Specifically, the CPU 1 reads out various processing programs stored in the storage unit 4, develops them in the RAM 3, and performs various processes in cooperation with the programs.

電源部(二次電池)2は各部に電源を供給する。   A power supply unit (secondary battery) 2 supplies power to each unit.

記憶部4は、例えば、書換式のROM(Read Only Memory)、フラッシュメモリなどを有する構成で、各種データ及び各種プログラムを読み出し及び書き込み可能に記憶する。記憶部4には、スケジューラプログラム41、OCR(Optical Character Recognition)(光学文字認識)プログラム42、画像管理プログラム43、タグ付けプログラム44が記憶されている。なお、記憶部4は、例えば、SDカード、ICカードなど、着脱自在な可搬型メモリ(記録メディア)を含む構成であってもよく、図示しないが、通信機能を介してネットワークに接続されている状態においては所定のサーバ装置側の記憶領域を含むものであってもよい。   The storage unit 4 includes, for example, a rewritable ROM (Read Only Memory), a flash memory, and the like, and stores various data and various programs in a readable and writable manner. The storage unit 4 stores a scheduler program 41, an OCR (Optical Character Recognition) program 42, an image management program 43, and a tagging program 44. The storage unit 4 may include a removable portable memory (recording medium) such as an SD card or an IC card, and is connected to a network via a communication function (not shown). The state may include a storage area on a predetermined server device side.

タッチ表示部5は、表示パネル5aにタッチパネル5bを積層配設した構造で、表示手段としての表示パネル5aは、縦横比(例えば、横4:縦3)の異なる画面を有した高精細液晶ディスプレイであり、タッチパネル5bは、撮像者の指などでタッチ操作された位置を検知してその座標データを入力するタッチスクリーンを構成するもので、例えば、静電容量方式あるいは抵抗膜方式を採用しているが、その他の方式であってもよい。ここで、タッチパネル5bは操作手段として機能している。   The touch display unit 5 has a structure in which a touch panel 5b is stacked on a display panel 5a, and the display panel 5a as a display means has a high-definition liquid crystal display having screens with different aspect ratios (for example, horizontal 4: vertical 3). The touch panel 5b constitutes a touch screen that detects the position touched by the photographer's finger and inputs coordinate data. For example, the touch panel 5b employs a capacitance method or a resistance film method. However, other methods may be used. Here, the touch panel 5b functions as an operation means.

操作部6は、図示省略したが、電源をオン/オフさせる電源キーなどの押しボタン式のキーを備え、CPU1は、この操作部6から操作キーに対応して出力される入力操作信号に応じた処理を行う。ここで、操作部6は、操作手段として機能している。   Although not shown, the operation unit 6 includes a push button type key such as a power key for turning on / off the power, and the CPU 1 responds to an input operation signal output from the operation unit 6 corresponding to the operation key. Process. Here, the operation unit 6 functions as an operation means.

無線通信部7は、高速大容量の通信が可能な無線通信モジュールであり、例えば、最寄りの無線LAN(Local Area Network)ルータ(図示省略)を介してインターネットに接続可能となっている。   The wireless communication unit 7 is a wireless communication module capable of high-speed and large-capacity communication. For example, the wireless communication unit 7 can be connected to the Internet via a nearby wireless LAN (Local Area Network) router (not shown).

撮像部8は、被写体の光学像を撮像するもので、図示省略したが、光学レンズからの被写体像が撮像素子(CCDやCMOSなど)に結像されることにより被写体を高精細に撮像可能なデジタルカメラ部で、例えば、ズームレンズおよび付属するズーム駆動部、合焦駆動部と、CCD(Charge Coupled Device)やCMOS(Complementary Metal-oxide Semiconductor)等のイメージセンサと、タイミング発生器と、ドライバ等を備え、撮像された光学像を二次元の画像信号に変換する。画像読取機能の動作時に、例えば、フレームレートが秒15コマ(15fps)の連続撮像(高速像)が可能となっている。ここで、CPU1、撮像部8は撮像手段として機能している。   Although the imaging unit 8 captures an optical image of a subject and is not shown, the subject image from the optical lens is imaged on an image sensor (CCD, CMOS, etc.), so that the subject can be captured with high definition. In a digital camera unit, for example, a zoom lens and an accompanying zoom driving unit, a focusing driving unit, an image sensor such as a charge coupled device (CCD) or a complementary metal-oxide semiconductor (CMOS), a timing generator, a driver, etc. And converting the captured optical image into a two-dimensional image signal. During operation of the image reading function, for example, continuous imaging (high-speed image) with a frame rate of 15 frames per second (15 fps) is possible. Here, the CPU 1 and the imaging unit 8 function as imaging means.

計時部9は、図示しない発振回路部から入力される信号を計数して、内部時刻等を得る。そして当該内部時刻をCPU1に出力する。ここで、内部時刻とは、計時部9で計時される現在日時のことをいう。   The timer unit 9 counts signals input from an oscillation circuit unit (not shown) to obtain internal time and the like. Then, the internal time is output to the CPU 1. Here, the internal time refers to the current date and time measured by the time measuring unit 9.

スケジューラプログラム41は、時間や日程を管理するためのプログラムである。スケジュール、そのスケジュールの開始・終了時刻、出席者等を入力、編集、表示をすることができるプログラムである。
ここで、スケジュールとしてのイベントおよびイベントに関連する日時、又は/および出席者等を含む情報をイベント情報という。
ここで、CPU1、スケジューラプログラム41、および記憶部4は、スケジューラ(管理手段)として機能している。
The scheduler program 41 is a program for managing time and schedule. This program can input, edit, and display a schedule, start / end times of the schedule, attendees, and the like.
Here, information including the event as a schedule and the date and time related to the event and / or attendees is referred to as event information.
Here, the CPU 1, the scheduler program 41, and the storage unit 4 function as a scheduler (management means).

OCRプログラム42は、画像処理により入力画像を2値化された画像データに認識処理し、予め記憶されたパターンとの照合により文字、符号を特定し、文字・符号データを出力するプログラムである。
ここで、CPU1、OCRプログラム42は撮像部8により撮像された画像データに基づく画像の範囲内に存在する識別情報を認識する画像認識手段として機能している。
The OCR program 42 is a program that recognizes an input image into binarized image data by image processing, specifies characters and codes by collation with a previously stored pattern, and outputs character / code data.
Here, the CPU 1 and the OCR program 42 function as image recognition means for recognizing identification information existing within an image range based on image data captured by the imaging unit 8.

画像管理プログラム43は、撮像部6で撮像されたメモ画像の画像データを表示・管理等するためのプログラムである。
ここで、CPU1、画像管理プログラム43は送信用画像データを生成する画像編集手段として機能する。
The image management program 43 is a program for displaying / managing image data of a memo image captured by the imaging unit 6.
Here, the CPU 1 and the image management program 43 function as image editing means for generating image data for transmission.

メールプログラム44は、撮像部6で撮像されたメモ画像を電子メールするためのプログラムである。
ここで、CPU1、メールプログラム44は、メール送信手段として機能している。
The mail program 44 is a program for e-mailing the memo image captured by the imaging unit 6.
Here, the CPU 1 and the mail program 44 function as mail transmission means.

次に、本実施形態に係る情報処理装置100の動作について説明する。図3は、情報処理装置100におけるバインダ13の開閉状態を示す図である。図3(A)は、情報処理装置100の第1のカバー13aと第2のカバー13bとが開いた状態を示す図を、図3(B)は、第1のカバー13aの上に第2のカバー13bが重なり合う状態を示す図である。   Next, the operation of the information processing apparatus 100 according to the present embodiment will be described. FIG. 3 is a diagram illustrating an open / closed state of the binder 13 in the information processing apparatus 100. FIG. 3A is a diagram illustrating a state in which the first cover 13a and the second cover 13b of the information processing apparatus 100 are opened, and FIG. 3B is a diagram illustrating the second cover on the first cover 13a. It is a figure which shows the state in which the cover 13b overlaps.

ユーザは、例えば、バインダ13を180度開いた状態において情報処理装置100を使用したり、記録媒体15に図表などを書き入れたりすることができる。また、情報処理100及び記録媒体15を使用しないときには、第1のカバー13aと第2のカバー13bとを閉じてバインダ13を完全に閉じる(開閉角度は0度。)ことができる。   For example, the user can use the information processing apparatus 100 in a state where the binder 13 is opened 180 degrees, or can write a chart or the like on the recording medium 15. When the information processing 100 and the recording medium 15 are not used, the first cover 13a and the second cover 13b can be closed to completely close the binder 13 (opening / closing angle is 0 degree).

図4は、情報処理装置100により実行されるコマンドによるメール送信のフローを示す図である。以下、情報処理装置100によるコマンドによるメール送信について図5を参照して説明する。これらの処理は、CPU11と記憶部4に記憶されている各種プログラムとの協働により実行される。   FIG. 4 is a diagram illustrating a flow of mail transmission by a command executed by the information processing apparatus 100. Hereinafter, mail transmission by a command by the information processing apparatus 100 will be described with reference to FIG. These processes are executed in cooperation with the CPU 11 and various programs stored in the storage unit 4.

このコマンドによるメール送信が開始される前提として、例えば、情報処理装置100が起動されている状態で記録媒体15に手書きメモを記録し、記録した後で情報処理装置100のバインダ13を閉じる動作が行われるものとする。コマンドによるメール送信では、撮影に最適な角度として、開閉角度略70度が設定されている。具体的には、CPU1は、開閉角度センサ8によって第1のカバー13aと第2のカバー13bとの角度(撮影に最適な角度)として略70度が検出された際に、撮像部6により生成されたメモ画像を取得することになる。また、撮影に最適な角度(略70度)に合わせてフォーカス、露出などの撮影条件が設定されている。   As a premise that mail transmission by this command is started, for example, an operation of recording a handwritten memo on the recording medium 15 in a state where the information processing apparatus 100 is activated, and closing the binder 13 of the information processing apparatus 100 after the recording is performed. Shall be done. In mail transmission by a command, an opening / closing angle of approximately 70 degrees is set as an optimum angle for photographing. Specifically, the CPU 1 generates the image by the imaging unit 6 when the opening / closing angle sensor 8 detects approximately 70 degrees as the angle between the first cover 13a and the second cover 13b (an optimum angle for photographing). The acquired memo image is acquired. Also, shooting conditions such as focus and exposure are set in accordance with an angle (approximately 70 degrees) optimum for shooting.

コマンドによるメール送信の処理が開始されると、ステップS1では、CPU1は、開閉角度センサ8によって第1のカバー部13aと第2のカバー部13bとの角度(撮影に最適な角度)として略70度が検出された際に、撮像部6に手書きメモを撮像させる。すなわち、ステップS1では、CPU1は、情報処理装置が閉じられる動作に連動して撮像部8を制御して記録媒体15の手書きメモを撮像させ、撮像部8により生成されたメモ画像をRAM3に格納する。   When the mail transmission process by the command is started, in step S1, the CPU 1 uses the opening / closing angle sensor 8 to set the angle between the first cover portion 13a and the second cover portion 13b (an angle optimal for photographing) to approximately 70. When the degree is detected, the imaging unit 6 is caused to image a handwritten memo. That is, in step S1, the CPU 1 controls the imaging unit 8 in conjunction with the operation of closing the information processing apparatus to capture a handwritten memo on the recording medium 15, and stores the memo image generated by the imaging unit 8 in the RAM 3. To do.

ステップS2では、CPU1は、OCRプログラム42を制御して、撮像されたメモ画像の範囲内において、メール送信コマンドを示すマークが記録されているか否かを検索する。ここで、メール送信コマンドを示すマークは識別情報として機能している。   In step S2, the CPU 1 controls the OCR program 42 to search whether or not a mark indicating a mail transmission command is recorded within the range of the captured memo image. Here, the mark indicating the mail transmission command functions as identification information.

図5は、メール送信コマンドを示すマークを手書きメモ中に手書きにて記録した例を示す図である。図5(A)は、「□のV」マークを手書きメモ中に記録した例である。図5(B)は、二次元バーコードが印刷された記録媒体15に手書きメモを記録した例である。図5(A)の例では、マークの近傍にメールアドレスが手書きにて記録されている例を示している。マークには、メールプログラム44にて予め送信先アドレスが登録されていてもよい。マークには1つの送信先アドレスが割り当てられていてもよいし、複数の送信先アドレスが1つのマークに対して割り当てられていてもよい。   FIG. 5 is a diagram illustrating an example in which a mark indicating a mail transmission command is recorded by handwriting in a handwritten memo. FIG. 5A shows an example in which the “□ V” mark is recorded in a handwritten memo. FIG. 5B shows an example in which a handwritten memo is recorded on the recording medium 15 on which a two-dimensional barcode is printed. In the example of FIG. 5A, an example in which an e-mail address is recorded by handwriting near the mark is shown. In the mark, a transmission destination address may be registered in advance by the mail program 44. One destination address may be assigned to the mark, or a plurality of destination addresses may be assigned to one mark.

また、2次元バーコードはメモ用紙に予め印刷された状態であってもよい。手書きメモは、2次元バーコードが印刷された所定形状の用紙に記録することになる。   In addition, the two-dimensional barcode may be pre-printed on a memo paper. The handwritten memo is recorded on a sheet of a predetermined shape on which a two-dimensional barcode is printed.

図6は、メールプログラム44にて予め登録されている、メール送信コマンドを示すマークと送信先アドレスの対応関係を示す図である。図6に示すように、メール送信コマンドを示すマークが複数用意されており、ユーザはその中から所望のマークを使用してもよい。例えば、メール送信コマンドを示すマークを3個用意し、1個目のマークは「□のV1」であり、送信先アドレスとしてAさんのアドレスが割り当てられており、2個目のマークは「□のV2」であり、送信先アドレスとしてBさんのアドレスが割り当てられており、3個目のマークは「□のV3」であり、送信先アドレスとしてCさんのアドレスが割り当てられているように構成してもよい。一方、これらのマークには、送信先が割り当てられていなくてもよい。   FIG. 6 is a diagram showing a correspondence relationship between a mark indicating a mail transmission command and a transmission destination address registered in advance in the mail program 44. As shown in FIG. 6, a plurality of marks indicating mail transmission commands are prepared, and the user may use a desired mark from among them. For example, three marks indicating mail transmission commands are prepared, the first mark is “V1 of □”, the address of Mr. A is assigned as the transmission destination address, and the second mark is “□ "V2", the address of Mr. B is assigned as the destination address, the third mark is "V3 of □", and the address of Mr. C is assigned as the destination address May be. On the other hand, a transmission destination may not be assigned to these marks.

図4に戻り、ステップS3では、CPU1は、メール送信コマンドを示すマークが記録されていることが発見できたか判断し、発見されたと判断された場合には「YES」へ分岐してステップS4に移行する。発見されたと判断されなければ「NO」へ分岐してコマンドによるメール送信処理を終了する。   Returning to FIG. 4, in step S <b> 3, the CPU 1 determines whether or not a mark indicating a mail transmission command has been recorded. If it is determined that the mark has been detected, the process branches to “YES” and proceeds to step S <b> 4. Transition. If it is not determined that it has been found, the process branches to “NO” and the mail transmission process by the command is terminated.

ステップS4では、CPU1は、メール送信コマンドを示すマークの近傍に有効なメールアドレスがあるか否か確認する。有効なアドレスが発見できた場合には、「YES」へ分岐してステップS7に移行する。発見できなかった場合には「NO」へ分岐してステップS5に移動する。   In step S4, the CPU 1 checks whether there is a valid mail address in the vicinity of the mark indicating the mail transmission command. If a valid address is found, the process branches to “YES” and proceeds to step S7. If not found, the process branches to “NO” and moves to step S5.

ステップS5では、CPU1は、図6に示すような、予め送信先アドレスが登録されているか確認する。すなわち、予めメール送信コマンドを示すマークに送信先アドレスが割り当てられているかを確認する。登録されている判断された場合には、「YES」へ分岐してステップS7に移行する。登録されていると判断されなければ「NO」へ分岐してステップS6に移行する。   In step S5, the CPU 1 checks whether a transmission destination address is registered in advance as shown in FIG. That is, it is confirmed in advance whether a transmission destination address is assigned to a mark indicating a mail transmission command. If it is determined that it is registered, the process branches to “YES” and proceeds to step S7. If it is not determined that it is registered, the process branches to "NO" and proceeds to step S6.

ステップS6では、CPU1は、関連するイベントの出席者のアドレスを取得する。具体的には、先ず、CPU1は、現在日時を計時部9から取得する。現在日時とは、CPU1がステップS6を実行している際の日時であり、実質的に手書きメモが撮像され、メモ画像が取得された際の日時である。   In step S6, CPU1 acquires the address of the attendee of the related event. Specifically, first, the CPU 1 acquires the current date and time from the timer unit 9. The current date and time is the date and time when the CPU 1 is executing step S6, and is the date and time when the handwritten memo is substantially captured and the memo image is acquired.

次に、CPU1は、手書きメモを撮像した際の現在日時に関連するイベントがあるか否かを、スケジューラを制御して検索する。
図7は、CPU1とスケジューラプログラム41によるスケジューラ表示画面を示す図である。図7(A)はカレンダ表示411を示す図、図7(B)は個々のイベント(スケジュール)表示412を示す図である。図7(A)の画面には撮像アイコン51、登録アイコン52が表示されている。ユーザは、登録アイコン52を用いて、図7に示すスケジューラ表示画面から個々のイベントを登録することができる。
Next, the CPU 1 searches the scheduler to determine whether there is an event related to the current date and time when the handwritten memo is captured.
FIG. 7 is a diagram showing a scheduler display screen by the CPU 1 and the scheduler program 41. 7A shows a calendar display 411, and FIG. 7B shows an individual event (schedule) display 412. FIG. An imaging icon 51 and a registration icon 52 are displayed on the screen of FIG. The user can register individual events from the scheduler display screen shown in FIG.

図8は、管理手段としてのスケジューラ1、4、41において第2記憶手段としての記憶部4に記憶されているデータ構造を示す図である。個々のイベント毎に、ID、イベント名、日時(開始日時、終了日時)、出席者、メールアドレスが登録されている。図8に示すように、個々のイベント情報中に出席者等のメール送信先アドレスを含む様なデータ構造を採用してもよい。また、スケジューラ1、4、41においては、第2記憶手段中に、メール送信先アドレスを例えば別のアドレス帳として登録し、イベント情報の出席者と対応づけるように構成してもよい。   FIG. 8 is a diagram showing a data structure stored in the storage unit 4 as the second storage means in the schedulers 1, 4, and 41 as the management means. For each individual event, an ID, event name, date and time (start date and time, end date and time), attendees, and e-mail address are registered. As shown in FIG. 8, a data structure in which individual event information includes a mail transmission destination address of an attendee or the like may be adopted. In addition, the schedulers 1, 4, and 41 may be configured to register the mail transmission destination address as, for example, another address book in the second storage unit, and associate it with the attendee of the event information.

関連するイベントとは、その現在日時が登録されているイベントの登録時間(イベントの開催時刻と終了予定時刻で指定される)に含まれている場合におけるそのイベントをいう。ただし、たとえば会議等のイベントの開催時間がイベントの予定時間よりも延びてしまった、または早く開始された等の事情発生を考慮して、現在時間またはメモ画像に記録されている日時はイベントの登録時間に対して多少の遅れ・進みを許容している。例えば、現在日時またはメモ画像に記録されている日時より少し遡った登録時間で登録されているイベントがある場合には、そのイベントを関連するイベントと判断する。   The related event refers to an event when the current date and time is included in the registered time of the registered event (specified by the event holding time and the scheduled end time). However, taking into account the occurrence of events such as meetings being held longer than the scheduled time of the event or starting earlier, the current time or date and time recorded in the memo image is Some delay / advance is allowed for registration time. For example, when there is an event registered with a registration time slightly later than the current date and time or the date and time recorded in the memo image, the event is determined to be a related event.

図4に戻り、関連するイベントが有る場合には、CPU1は、そのメモ画像の画像データとイベント情報とを関連付けて第1記憶手段としての記憶部4に記憶する。
そして、そのイベントに登録されている出席者のアドレスを取得する。
Returning to FIG. 4, when there is a related event, the CPU 1 associates the image data of the memo image and the event information and stores them in the storage unit 4 as the first storage unit.
Then, the address of the attendee registered for the event is acquired.

ステップS7では、CPU1は、メール送信コマンドを示すマークに対する領域指定があるか否かを判断する。メール送信コマンドを示すマークに対する領域指定があると判断されれば「YES」へ分岐してステップS8に移行する。メール送信コマンドのマークに対する領域指定がないと判断されれば「NO」へ分岐してステップS9に移行する。   In step S7, the CPU 1 determines whether or not there is an area designation for the mark indicating the mail transmission command. If it is determined that there is an area designation for the mark indicating the mail transmission command, the process branches to “YES” and proceeds to step S8. If it is determined that there is no area designation for the mark of the mail transmission command, the process branches to “NO” and proceeds to step S9.

ステップS8では、CPU1は、画像管理プログラム43を制御して、指定領域のみを切り出した画像を作成させる。   In step S8, the CPU 1 controls the image management program 43 to create an image in which only the designated area is cut out.

なお、ステップS7、S8において、複数のメール送信コマンドのマークに対する複数の領域指定を検出した場合、CPU1は、画像管理プログラム43を制御して、複数の指定領域を切り出した画像を作成させる。
図9は、メール送信コマンドを示すマークに対する領域指定を説明するための図である。図9において、CPU1は、線で囲まれた閉じられた領域をメール送信コマンドを示すマークに対する領域指定と認識する。線の種類は例えば実線である。領域指定には、ある程度の制約を課すことが認識誤りを防止するために必要である。すなわち、手書きした文字や符号等と重ならないことである。また、実質的に閉じた線であることである。
In Steps S7 and S8, when a plurality of area designations for a plurality of mail transmission command marks are detected, the CPU 1 controls the image management program 43 to create an image obtained by cutting out the plurality of designated areas.
FIG. 9 is a diagram for explaining area designation for a mark indicating a mail transmission command. In FIG. 9, the CPU 1 recognizes a closed area surrounded by a line as an area designation for a mark indicating a mail transmission command. The type of line is, for example, a solid line. In order to prevent recognition errors, it is necessary to impose certain restrictions on the area designation. That is, it does not overlap with handwritten characters or codes. It is also a substantially closed line.

ステップS9では、CPU1は、メモ画像全体(ページ全体)を送信画面に設定する。   In step S9, the CPU 1 sets the entire memo image (entire page) as a transmission screen.

ステップS10では、CPU1は、ステップS8またはステップS9で指定された画像を添付して所定の送信先アドレスへメール送信する。
ここで、送信先は、ステップS3又はステップS5又はステップS6にて指定された送信先アドレスである。
In step S10, the CPU 1 attaches the image designated in step S8 or step S9 and sends it by e-mail to a predetermined destination address.
Here, the transmission destination is the transmission destination address designated in step S3 or step S5 or step S6.

[変形例]
次に本実施形態の変形例に係る情報処理装置100Aについて説明する。なお、下記の説明において、本実施形態に係る情報処理装置100と同一の構成については同一の符号を付し、詳細な説明は省略する。
[Modification]
Next, an information processing apparatus 100A according to a modification of the present embodiment will be described. In the following description, the same components as those of the information processing apparatus 100 according to the present embodiment are denoted by the same reference numerals, and detailed description thereof is omitted.

図10は、変形例に係る情報処理装置100Aがバインダ13Aに立て掛けられた状態を示す図である。情報処理装置100Aの前に記録媒体15が置かれた状態を示す図である。変形例では、記録媒体15は複数のページからなる冊子伏に構成されており、記録媒体15のページをめくるタイミングで、撮像部8により記録媒体15の手書きメモが撮像される。情報処理装置100Aの上下端と記録媒体15の上端とを合わせるように記録媒体15を置くと、撮像部8の画角及びピントが記録媒体15に合うように予め設定されている。   FIG. 10 is a diagram illustrating a state in which the information processing apparatus 100A according to the modification is leaned against the binder 13A. It is a figure which shows the state by which the recording medium 15 was placed in front of information processing apparatus 100A. In the modification, the recording medium 15 is configured as a booklet composed of a plurality of pages, and the handwritten memo of the recording medium 15 is imaged by the imaging unit 8 at the timing of turning the page of the recording medium 15. When the recording medium 15 is placed so that the upper and lower ends of the information processing apparatus 100 </ b> A are aligned with the upper end of the recording medium 15, the angle of view and the focus of the imaging unit 8 are set in advance so as to match the recording medium 15.

情報処理装置100Aは、第1の実施の形態に示した情報処理装置100との比較において、開閉角度センサ20が不要である点が異なるが、その他の構成については情報処理装置100と同様であるため、図1を援用し、説明を省略する。以下、変形例に特徴的な構成及び動作について説明する。   The information processing apparatus 100A is different from the information processing apparatus 100 shown in the first embodiment in that the opening / closing angle sensor 20 is unnecessary, but the other configuration is the same as that of the information processing apparatus 100. Therefore, FIG. 1 is used and description is abbreviate | omitted. Hereinafter, a configuration and operation characteristic of the modification will be described.

変形例に係る情報処理装置100Aにおいては、CPU1は、記録媒体15の複数のページを撮像させ、撮像が完了させる。そして、記録媒体15の最初のページに記録されているメール送信コマンドを示すマークに応じて所定の送信先アドレスにメール送信する。ここで、所定のマークは複数のページの途中又は最後のページに記録されていてもよい。   In the information processing apparatus 100A according to the modification, the CPU 1 captures a plurality of pages of the recording medium 15 and completes the imaging. Then, mail is transmitted to a predetermined transmission destination address in accordance with the mark indicating the mail transmission command recorded on the first page of the recording medium 15. Here, the predetermined mark may be recorded in the middle or the last page of a plurality of pages.

次に手書きメモの撮像について説明する。まず、ユーザのタッチパネル5bからの操作により、撮像モードを開始する旨の指示が行われると、CPU1は、撮像部8により動画像データを連続的に取り込み、この動画像データを解析することにより、撮像されている記録媒体15のページめくり動作を検出する。撮像部8から出力される画像データが変化しつつある間は、記録媒体15の各ページや、ユーザの指等が移動中であると推測される。CPU1は、撮像部8により撮像された動画像データを取り込み続け、画像が静止した場合に、ページめくり動作が行われたと判断する。
CPU1は、記録媒体15のページめくり動作が検出されたタイミングで、撮像部8に撮像を行わせる。CPU11は、撮像部8を制御して、記録媒体15に記録された手書きメモの撮像を行わせ、撮像部8により生成されたメモ画像(静止画像)をRAM3に格納する。
Next, imaging of a handwritten memo will be described. First, when an instruction to start the imaging mode is given by the user's operation from the touch panel 5b, the CPU 1 continuously captures moving image data by the imaging unit 8, and analyzes the moving image data. A page turning operation of the imaged recording medium 15 is detected. While the image data output from the imaging unit 8 is changing, it is estimated that each page of the recording medium 15, the user's finger, and the like are moving. The CPU 1 continues to capture the moving image data picked up by the image pickup unit 8 and determines that the page turning operation has been performed when the image is still.
The CPU 1 causes the imaging unit 8 to perform imaging at the timing when the page turning operation of the recording medium 15 is detected. The CPU 11 controls the imaging unit 8 to image a handwritten memo recorded in the recording medium 15 and stores the memo image (still image) generated by the imaging unit 8 in the RAM 3.

次に、CPU1は、ユーザのタッチパネル5bからの操作により、撮像モードを終了する旨の指示があったか否かを判断する。CPU1は、撮像モードを終了する旨の指示がない場合、撮像されている記録媒体15のページめくり動作の検出処理を継続する。めくり動作が検出されると、CPU1は、記録媒体15に記録された手書きメモの撮像およびメモ画像の画像データのRAM3への格納を行う。
一方、撮影モードを終了する旨の指示があった場合には記録媒体の撮像処理を終了する。
Next, the CPU 1 determines whether or not there is an instruction to end the imaging mode by an operation from the touch panel 5b of the user. When there is no instruction to end the imaging mode, the CPU 1 continues the detection process of the page turning operation of the recording medium 15 being imaged. When the turning operation is detected, the CPU 1 captures the handwritten memo recorded in the recording medium 15 and stores the image data of the memo image in the RAM 3.
On the other hand, when there is an instruction to end the shooting mode, the recording medium imaging process ends.

変形例における、送信先アドレスの取得方法は、実施形態の場合と同様である。   The method for obtaining the transmission destination address in the modification is the same as that in the embodiment.

また、例えば、メール送信コマンドを示すマークは2次元バーコードであって、記録媒体15は、それぞれのページに二次元バーコードが印刷された複数ページがセットになっており、例えば、このページは1枚目、このページは2ページ目、このページは3ページ目、このページは最終ページだから1〜3ページを合体させてここに送れという様に、ページと送信先の指示が図6と同じように登録されており、撮像が完了した際に、複数ページを所定の送信先に送ることもできる。   Further, for example, the mark indicating the mail transmission command is a two-dimensional barcode, and the recording medium 15 is a set of a plurality of pages each having a two-dimensional barcode printed on each page. The first page, this page is the second page, this page is the third page, and since this page is the last page, the pages and destination instructions are the same as in FIG. When the imaging is completed, a plurality of pages can be sent to a predetermined transmission destination.

以上のように、本実施形態に係る情報処理装置100によれば、記録媒体15を撮像して手書きメモの画像データを取得する撮像部8と、撮像部8により撮像された画像データに基づく画像の範囲内に存在する識別情報(メール送信コマンドを示すマーク)を認識する画像認識手段1、42と、画像認識手段1、42により認識された識別情報の指示内容に応じた送信先に、撮像された画像データを含むメールを送信するメール送信手段1、44と、を備えている。
したがって、記録媒体の撮像した画像データを所定の送信先に容易に送信することができる。
As described above, according to the information processing apparatus 100 according to the present embodiment, the imaging unit 8 that captures the image of the recording medium 15 to acquire the image data of the handwritten memo, and the image based on the image data captured by the imaging unit 8 The image recognition means 1 and 42 for recognizing the identification information (mark indicating the mail transmission command) existing within the range of the image and the transmission destination according to the instruction content of the identification information recognized by the image recognition means 1 and 42 Mail transmitting means 1 and 44 for transmitting mail including the image data.
Therefore, the image data captured by the recording medium can be easily transmitted to a predetermined transmission destination.

また、記録媒体15が配置される第1の筐体としての第1のカバー13aと、ヒンジ部13cにより第1のカバー13aと開閉可能に連結され、本体部12が設けられた第2の筐体としての第2のカバー13bと、第1のカバー13aと第2のカバー13bとが所定の状態まで閉じられたことを検出する開閉角度センサ14と、を備え、撮像部8は、本体部12の第1のカバー13aに対向する位置に設けられており、開閉角度センサ14により第1のカバー13aと第2のカバー13bとが所定の状態まで閉じられたことが検出されたタイミングで前記画像データを取得する。これにより、情報処理装置100のバインダ13が閉じられるタイミングで手書きメモを撮像し、自動的にメール送信をすることができる。   Further, a first cover 13a as a first casing in which the recording medium 15 is disposed, and a second casing that is connected to the first cover 13a by a hinge portion 13c so as to be openable and closable, and in which the main body portion 12 is provided. A second cover 13b as a body, and an opening / closing angle sensor 14 for detecting that the first cover 13a and the second cover 13b are closed to a predetermined state. 12 at a position facing the first cover 13a, and at the timing when the opening / closing angle sensor 14 detects that the first cover 13a and the second cover 13b are closed to a predetermined state. Get image data. Thereby, a handwritten memo can be imaged at the timing when the binder 13 of the information processing apparatus 100 is closed, and mail can be automatically transmitted.

また、画像認識手段1、42は、識別情報が認識された画像内に送信先情報を抽出し、メール送信手段1、44は、抽出された送信先情報に基づく送信先にメールを送信する。
これにより、手書きメモに記録された送信先にメールを送信することができる。
Further, the image recognition means 1 and 42 extract transmission destination information from the image whose identification information is recognized, and the mail transmission means 1 and 44 transmit mail to the transmission destination based on the extracted transmission destination information.
Thereby, mail can be transmitted to the transmission destination recorded on the handwritten memo.

また、メール送信手段1、44は、認識された識別情報に予め対応付けられている送信先にメールを送信する。これにより、手書きメモに送信先を記録しなくても所定の送信先に送信することができる。   Moreover, the mail transmission means 1 and 44 transmit mail to the transmission destination previously matched with the recognized identification information. Thereby, even if it does not record a transmission destination in a handwritten memo, it can transmit to a predetermined transmission destination.

また、イベントに関連する日時を含むイベント情報を登録してスケジュール管理を行う管理手段としてのスケジューラ1、4、41と、画像データとイベント情報とを関連付けて記憶する第1記憶手段4と、イベント情報とメール送信先アドレスとを対応付けて記憶する第2記憶手段4と、をさらに備え、メール送信手段は、送信する画像データに関連付けられたイベント情報に対応付けられたメール送信先に前記メールを送信する。
これにより、手書きメモのメモ画像に関連するイベントに関連する送信先に、メモ画像を送信することができる。
Also, schedulers 1, 4, and 41 as management means for registering event information including date and time related to the event and performing schedule management, a first storage means 4 for storing image data and event information in association with each other, an event A second storage unit that stores information and a mail transmission destination address in association with each other, and the mail transmission unit sends the mail to the mail transmission destination associated with the event information associated with the image data to be transmitted. Send.
Thereby, the memo image can be transmitted to the transmission destination related to the event related to the memo image of the handwritten memo.

また、画像認識手段1、42は、識別情報が認識された画像内に線分で略閉じられた領域を認識し、線分で略閉じられた領域を切り出した送信用画像データを生成する画像編集手段1、43を更に備え、メール送信手段1、44は、画像編集手段1、43により生成された送信用画像データを含むメールを送信先に送信する。
これにより、手書き文書内で指定された、線分で略閉じられた領域内だけの手書きメモの内容を送信することができる。
Further, the image recognition means 1 and 42 recognize an area substantially closed by a line segment in an image whose identification information has been recognized, and generate image data for transmission by cutting out the area substantially closed by a line segment The editing means 1 and 43 are further provided, and the mail transmission means 1 and 44 transmit the mail including the transmission image data generated by the image editing means 1 and 43 to the transmission destination.
Thereby, it is possible to transmit the contents of the handwritten memo specified only in the handwritten document and only in the region substantially closed by the line segment.

また、画像認識手段1、42は、複数の識別情報を認識した場合において、各々の識別情報に対応する線分で略閉じられた領域を認識し、画像編集手段1、43は、各々の線分で略閉じられた領域を複数の識別情報に対応して切り出して送信用画像データを生成する。これにより、複数の略閉じられた領域内の記録内容をそれぞれ送信することができる。   Further, when recognizing a plurality of pieces of identification information, the image recognition units 1 and 42 recognize a region that is substantially closed by a line segment corresponding to each piece of identification information, and the image editing units 1 and 43 The image data for transmission is generated by cutting out the region substantially closed in minutes corresponding to the plurality of pieces of identification information. As a result, the recorded contents in a plurality of substantially closed areas can be transmitted.

なお、本発明は、上記実施の形態に限られるものではなく、様々な変更が可能である。例えば、メール送信は決まっていても、アドレス空欄なら、送信するときにアドレス帳が参照され、ユーザが送信先を選ぶように構成されてもよい。   The present invention is not limited to the above-described embodiment, and various modifications can be made. For example, even if e-mail transmission is determined, if the address is blank, the address book may be referred to when transmitting, and the user may select a destination.

本発明の実施形態を説明したが、本発明の範囲は上述の実施の形態に限定するものではなく、特許請求の範囲に記載された発明とその均等の範囲に含まれる。以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
[付記]
<請求項1>
記録媒体を撮像して画像データを取得する撮像手段と、
前記撮像手段により撮像された画像データに基づく画像の範囲内に存在する識別情報を認識する画像認識手段と、
画像認識手段により認識された識別情報の指示内容に応じた送信先に、前記撮像された画像データを含むメールを送信するメール送信手段と、
を備えることを特徴とする情報処理装置。
<請求項2>
前記記録媒体が配置される第1の筐体と、
ヒンジ部により前記第1の筐体と開閉可能に連結され、本体部が設けられた第2の筐体と、
前記第1の筐体と前記第2の筐体とが所定の状態まで閉じられたことを検出する検出手段と、
を備え、
前記撮像手段は、前記本体部の前記第1の筐体に対向する位置に設けられており、前記検出手段により前記第1の筐体と前記第2の筐体とが前記所定の状態まで閉じられたことが検出されたタイミングで前記画像データを取得することを特徴とする請求項1に記載の情報処理装置。
<請求項3>
前記画像認識手段は、前記識別情報が認識された前記画像内に送信先情報を抽出し、
前記メール送信手段は、前記抽出された送信先情報に基づく送信先に前記メールを送信することを特徴とする請求項1または2に記載の情報処理装置。
<請求項4>
前記メール送信手段は、前記認識された識別情報に予め対応付けられている送信先に前記メールを送信することを特徴とする請求項1または2に記載の情報処理装置。
<請求項5>
イベントに関連する日時を含むイベント情報を登録してスケジュール管理を行う管理手段と、前記画像データとイベント情報とを関連付けて記憶する第1記憶手段と、イベント情報とメール送信先アドレスとを対応付けて記憶する第2記憶手段と、をさらに備え、
前記メール送信手段は、送信する画像データに関連付けられたイベント情報に対応付けられたメール送信先に前記メールを送信することを特徴とする請求項1〜4の何れか一項に記載の情報処理装置。
<請求項6>
前記画像認識手段は、前記識別情報が認識された前記画像内に線分で略閉じられた領域を認識し、
前記線分で略閉じられた領域を切り出した送信用画像データを生成する画像編集手段を更に備え、
前記メール送信手段は、前記画像編集手段により生成された送信用画像データを含むメールを送信先に送信することを特徴とする請求項1〜5の何れか一項に記載の情報処理装置。
<請求項7>
前記画像認識手段は、複数の前記識別情報を認識した場合において、各々の前記識別情報に対応する線分で略閉じられた領域を認識し、
前記画像編集手段は、各々の前記線分で略閉じられた領域を前記複数の識別情報に対応して切り出して送信用画像データを生成することを特徴とする請求項6記載の情報処理装置。
<請求項8>
コンピュータを、
記録媒体を撮像して画像データを取得する撮像手段、
前記撮像手段により撮像された画像データに基づく画像の範囲内に存在する識別情報を認識する画像認識手段、
画像認識手段により認識された識別情報の指示内容に応じた送信先に、前記撮像された画像データを含むメールを送信するメール送信手段、
として機能させるためのプログラム。
Although the embodiment of the present invention has been described, the scope of the present invention is not limited to the above-described embodiment, and is included in the invention described in the claims and the equivalent scope thereof. Hereinafter, the invention described in the scope of claims of the present application will be appended.
[Appendix]
<Claim 1>
Imaging means for capturing a recording medium and acquiring image data;
Image recognition means for recognizing identification information existing within a range of an image based on image data imaged by the imaging means;
A mail transmission unit that transmits a mail including the imaged image data to a transmission destination according to the instruction content of the identification information recognized by the image recognition unit;
An information processing apparatus comprising:
<Claim 2>
A first housing in which the recording medium is disposed;
A second housing which is connected to the first housing by a hinge portion so as to be openable and closable and provided with a main body portion;
Detecting means for detecting that the first casing and the second casing are closed to a predetermined state;
With
The imaging means is provided at a position of the main body portion facing the first casing, and the first casing and the second casing are closed to the predetermined state by the detecting means. The information processing apparatus according to claim 1, wherein the image data is acquired at a timing when it is detected.
<Claim 3>
The image recognition means extracts transmission destination information in the image in which the identification information is recognized;
The information processing apparatus according to claim 1, wherein the mail transmission unit transmits the mail to a transmission destination based on the extracted transmission destination information.
<Claim 4>
The information processing apparatus according to claim 1, wherein the mail transmission unit transmits the mail to a transmission destination associated in advance with the recognized identification information.
<Claim 5>
Management means for registering event information including date and time related to an event and managing the schedule, first storage means for storing the image data and event information in association with each other, event information and mail destination address Second storage means for storing
5. The information processing according to claim 1, wherein the mail transmission unit transmits the mail to a mail transmission destination associated with event information associated with image data to be transmitted. apparatus.
<Claim 6>
The image recognition means recognizes an area substantially closed by a line segment in the image in which the identification information is recognized;
Further comprising image editing means for generating image data for transmission obtained by cutting out an area substantially closed by the line segment,
The information processing apparatus according to claim 1, wherein the mail transmission unit transmits a mail including transmission image data generated by the image editing unit to a transmission destination.
<Claim 7>
When the image recognition means recognizes a plurality of pieces of the identification information, the image recognition means recognizes a region substantially closed by a line segment corresponding to each of the identification information,
The information processing apparatus according to claim 6, wherein the image editing unit generates image data for transmission by cutting out a region substantially closed by each of the line segments corresponding to the plurality of pieces of identification information.
<Claim 8>
Computer
Imaging means for capturing a recording medium and acquiring image data;
Image recognition means for recognizing identification information existing within a range of an image based on image data picked up by the image pickup means;
A mail transmission unit that transmits a mail including the captured image data to a transmission destination according to the instruction content of the identification information recognized by the image recognition unit;
Program to function as.

100、100A 情報処理装置
1 CPU(撮像手段、画像認識手段、メール送信手段、管理手段、画像編集手段)
2 電源部
3 RAM
4 記憶部(第1記憶手段、第2記憶手段、管理手段)
5 タッチ表示部
5a 表示パネル(表示手段)
5b タッチパネル(操作手段)
6 操作部(操作手段)
7 無線通信部
8 撮像部(撮像手段)
9 計時部
10 バス
12 情報処理装置本体
13 バインダ
13a 第1のカバー
13b 第2のカバー
13c ヒンジ部
14 開閉角度センサ(検出手段)
15 記録媒体
41 スケジューラプログラム(管理手段)
42 OCRプログラム(画像認識手段)
43 画像管理プログラム(画像編集手段)
44 メールプログラム(メール送信手段)
51 撮像アイコン
52 登録アイコン
411 カレンダ表示
412 イベント(スケジュール)表示
100, 100A Information processing apparatus 1 CPU (imaging means, image recognition means, mail transmission means, management means, image editing means)
2 Power supply 3 RAM
4 storage section (first storage means, second storage means, management means)
5 Touch display part 5a Display panel (display means)
5b Touch panel (operating means)
6 Operation part (operation means)
7 Wireless communication unit 8 Imaging unit (imaging means)
9 Timekeeping section 10 Bus 12 Information processing apparatus main body 13 Binder 13a First cover 13b Second cover 13c Hinge section 14 Opening / closing angle sensor (detection means)
15 Recording medium 41 Scheduler program (management means)
42 OCR program (image recognition means)
43 Image management program (image editing means)
44 Mail program (Mail sending means)
51 Imaging Icon 52 Registration Icon 411 Calendar Display 412 Event (Schedule) Display

本発明の課題は、処理対象の画像の画像内容に基づいた特定処理を自動実行できるようにすることある。 An object of the present invention is to be able to automatically execute a specific processing based on the image content of the image to be processed.

請求項1記載の発明は、画像に対して処理を行う情報処理装置であって、処理対象の画像内に特定領域があるか否かを判別する判別手段と、前記判別手段で前記特定領域があると判別された場合には、前記画像内における当該特定領域を特定処理の処理対象として特定し、その特定領域に対して前記特定処理を実行する第1処理手段と、前記判別手段で前記特定領域があると判別されなかった場合には、前画像全体を前記特定処理の処理対象として特定し、その画像全体に対して前記特定処理を実行する第2処理手段と、を具備したことを特徴とする。 The invention of claim 1 wherein is an information processing apparatus for performing processing on the image, discriminating means for discriminating whether or not a specific region there Luke in the image to be processed, the specific area in said discrimination means If it is determined that there Ru identifies the specific area in the image as a processing target of a particular process, a first processing means for executing the specific process for that particular area, in the determination means when it is not determined that the specific area there Ru identifies the entire pre-Symbol image as a processing target of the specific process, anda second processing means for executing the specific processing for the entire image characterized in that it was.

本発明によれば、処理対象の画像の画像内容に基づいた特定処理を自動実行することが可能となる。

According to the present invention, it is possible to automatically perform a specific processing based on the image content of the image to be processed and that Do.

Claims (6)

記録媒体を撮像して画像データを取得する撮像手段と、
前記撮像手段により取得した画像データにメール送信コマンドを示すマークが含まれているか否かを認識する画像認識手段と、
前記画像認識手段により前記取得した画像データに前記マークが含まれていることが認識された場合は、前記マークに対応して予め定められた送信先アドレスに、前記取得した画像データの少なくとも一部を含むメールを送信するメール送信手段と、
を備え、
前記画像認識手段は、前記取得した画像データに前記マークが含まれていることを認識した場合に、前記マークに対応させて切り出す領域の指定が前記取得した画像データに含まれているか否かを認識する切出領域認識手段を備え、
前記メール送信手段は、前記切出領域認識手段により前記取得した画像データに前記マークに対応させて切り出す領域の指定が含まれていると認識された場合には、前記切り出す領域として指定されている領域を前記取得した画像データから切り出した画像データを送信し、前記取得した画像データに前記マークに対応させて切り出す領域の指定が含まれていると認識されなかった場合には、前記取得した画像データの全体を送信することを特徴とする情報処理装置。
Imaging means for capturing a recording medium and acquiring image data;
Image recognition means for recognizing whether or not a mark indicating a mail transmission command is included in the image data acquired by the imaging means;
When it is recognized by the image recognition means that the acquired image data includes the mark, at least a part of the acquired image data is sent to a transmission destination address predetermined corresponding to the mark. An email sending means for sending an email containing
With
When the image recognition means recognizes that the mark is included in the acquired image data, it is determined whether or not the acquired image data includes a designation of a region to be cut out corresponding to the mark. It has a cut-out area recognition means to recognize,
The mail transmission means is designated as the cut-out area when the cut-out area recognition means recognizes that the acquired image data includes a cut-out area specification corresponding to the mark. When the image data cut out from the acquired image data is transmitted and it is not recognized that the acquired image data includes the designation of the region to be cut out corresponding to the mark, the acquired image An information processing apparatus that transmits the entire data.
前記切出領域認識手段は、前記取得した画像データに前記マークを略囲むような線分が含まれていた場合に、前記指定が含まれていると認識し、
前記メール送信手段は、前記取得した画像データから前記線分で略囲まれた領域を切り出した画像データを送信することを特徴とする請求項1に記載の情報処理装置。
The cutout area recognition means recognizes that the designation is included when the acquired image data includes a line segment that substantially surrounds the mark,
The information processing apparatus according to claim 1, wherein the mail transmission unit transmits image data obtained by cutting out an area substantially surrounded by the line segment from the acquired image data.
前記記録媒体が配置される第1の筐体と、
ヒンジ部により前記第1の筐体と開閉可能に連結され、本体部が設けられた第2の筐体と、
前記第1の筐体と前記第2の筐体とが所定の状態まで閉じられたことを検出する検出手段と、
を備え、
前記撮像手段は、前記本体部の前記第1の筐体に対向する位置に設けられており、前記検出手段により前記第1の筐体と前記第2の筐体とが前記所定の状態まで閉じられたことが検出されたタイミングで前記画像データを取得することを特徴とする請求項1または2に記載の情報処理装置。
A first housing in which the recording medium is disposed;
A second housing which is connected to the first housing by a hinge portion so as to be openable and closable and provided with a main body portion;
Detecting means for detecting that the first casing and the second casing are closed to a predetermined state;
With
The imaging means is provided at a position of the main body portion facing the first casing, and the first casing and the second casing are closed to the predetermined state by the detecting means. The information processing apparatus according to claim 1, wherein the image data is acquired at a timing when it is detected.
前記マークは、夫々異なる複数のマークが定められ、複数のマークの夫々に対応して前記送信先アドレスが予め登録されており、
前記メール送信手段は、前記マークに対応して予め登録された前記送信先アドレスに前記メールを送信することを特徴とする請求項1〜3の何れか一項に記載の情報処理装置。
A plurality of different marks are defined for each of the marks, and the destination address is registered in advance corresponding to each of the plurality of marks,
The information processing apparatus according to claim 1, wherein the mail transmission unit transmits the mail to the transmission destination address registered in advance corresponding to the mark.
イベントに関連する日時を含むイベント情報を登録してスケジュール管理を行う管理手段と、前記画像データとイベント情報とを関連付けて記憶する第1記憶手段と、イベント情報と前記送信先アドレスとを対応付けて記憶する第2記憶手段と、をさらに備え、
前記メール送信手段は、送信する画像データに関連付けられたイベント情報に対応付けられた前記送信先アドレスに前記メールを送信することを特徴とする請求項1〜4の何れか一項に記載の情報処理装置。
Management means for registering event information including date and time related to an event and managing schedules, first storage means for storing the image data and event information in association with each other, event information and the destination address are associated with each other Second storage means for storing
The information according to any one of claims 1 to 4, wherein the mail transmission unit transmits the mail to the transmission destination address associated with event information associated with image data to be transmitted. Processing equipment.
コンピュータを、
記録媒体を撮像して画像データを取得する撮像手段、
前記撮像手段により取得した画像データにメール送信コマンドを示すマークが含まれているか否かを認識する画像認識手段、
前記画像認識手段により前記取得した画像データに前記マークが含まれていることが認識された場合は、前記マークに対応して予め定められた送信先アドレスに、前記取得した画像データの少なくとも一部を含むメールを送信するメール送信手段、
として機能させるためのプログラムであって、
前記画像認識手段は、前記取得した画像データに前記マークが含まれていることを認識した場合に、前記マークに対応させて切り出す領域の指定が前記取得した画像データに含まれているか否かを認識する切出領域認識手段を備え、
前記メール送信手段は、前記切出領域認識手段により前記取得した画像データに前記マークに対応させて切り出す領域の指定が含まれていると認識された場合には、前記切り出す領域として指定されている領域を前記取得した画像データから切り出した画像データを送信し、前記取得した画像データに前記マークに対応させて切り出す領域の指定が含まれていると認識されなかった場合には、前記取得した画像データの全体を送信することを特徴とするプログラム。
Computer
Imaging means for capturing a recording medium and acquiring image data;
Image recognition means for recognizing whether the image data acquired by the imaging means includes a mark indicating a mail transmission command;
When it is recognized by the image recognition means that the acquired image data includes the mark, at least a part of the acquired image data is sent to a transmission destination address predetermined corresponding to the mark. Email sending means for sending email containing
Is a program for functioning as
When the image recognition means recognizes that the mark is included in the acquired image data, it is determined whether or not the acquired image data includes a designation of a region to be cut out corresponding to the mark. It has a cut-out area recognition means to recognize,
The mail transmission means is designated as the cut-out area when the cut-out area recognition means recognizes that the acquired image data includes a cut-out area specification corresponding to the mark. When the image data cut out from the acquired image data is transmitted and it is not recognized that the acquired image data includes the designation of the region to be cut out corresponding to the mark, the acquired image A program characterized by transmitting the entire data.
JP2016186413A 2016-09-26 2016-09-26 Information processing apparatus and program Active JP6337934B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016186413A JP6337934B2 (en) 2016-09-26 2016-09-26 Information processing apparatus and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016186413A JP6337934B2 (en) 2016-09-26 2016-09-26 Information processing apparatus and program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2012165318A Division JP6019885B2 (en) 2012-07-24 2012-07-26 Information processing apparatus and program

Publications (2)

Publication Number Publication Date
JP2016219061A true JP2016219061A (en) 2016-12-22
JP6337934B2 JP6337934B2 (en) 2018-06-06

Family

ID=57581642

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016186413A Active JP6337934B2 (en) 2016-09-26 2016-09-26 Information processing apparatus and program

Country Status (1)

Country Link
JP (1) JP6337934B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7433991B2 (en) 2019-11-28 2024-02-20 三菱重工業株式会社 Information management device, information management system, information management method and program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08242326A (en) * 1995-03-06 1996-09-17 Matsushita Electric Ind Co Ltd Facsimile type electronic mail equipment
JP2009027243A (en) * 2007-07-17 2009-02-05 Fuji Xerox Co Ltd Image processor, image processing method, and image processing program
JP2009077278A (en) * 2007-09-21 2009-04-09 Kyocera Mita Corp Image forming apparatus

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08242326A (en) * 1995-03-06 1996-09-17 Matsushita Electric Ind Co Ltd Facsimile type electronic mail equipment
JP2009027243A (en) * 2007-07-17 2009-02-05 Fuji Xerox Co Ltd Image processor, image processing method, and image processing program
JP2009077278A (en) * 2007-09-21 2009-04-09 Kyocera Mita Corp Image forming apparatus

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7433991B2 (en) 2019-11-28 2024-02-20 三菱重工業株式会社 Information management device, information management system, information management method and program

Also Published As

Publication number Publication date
JP6337934B2 (en) 2018-06-06

Similar Documents

Publication Publication Date Title
JP5120777B2 (en) Electronic data editing apparatus, electronic data editing method and program
US9536140B2 (en) Information processing apparatus and computer readable medium
EP1990744B1 (en) User interface for editing photo tags
JP5754653B2 (en) Image control apparatus and program
CN102945377A (en) Method and device for obtaining content in paper notebook
EP2040185A1 (en) User Interface for Selecting a Photo Tag
JP6019885B2 (en) Information processing apparatus and program
JP6337934B2 (en) Information processing apparatus and program
CN103581549B (en) Information processor and information processing method
JP5796747B2 (en) Information processing apparatus and program
JP5971003B2 (en) Information processing apparatus and program
JP5849886B2 (en) Information processing apparatus and program
JP6380567B2 (en) Information processing apparatus and program
JP6024330B2 (en) Information processing apparatus and program
JP6439738B2 (en) Image processing apparatus and program
JP6094660B2 (en) Information processing apparatus and program
JP6149905B2 (en) Information processing apparatus and program
JP3924581B2 (en) Electronic notebook
CN103037154A (en) Image taking apparatus
JP4246650B2 (en) Image input device and image data management device
JP6176382B2 (en) Information processing apparatus and program
JP5962975B2 (en) Information processing apparatus and program
JP6677410B2 (en) Information processing apparatus, control method for information processing apparatus, and program
Oh et al. Understanding mobile document capture and correcting orientation errors
KR20170048758A (en) mobile system for acquiring information of identification for electric contract

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161017

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161017

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170831

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171017

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171122

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180410

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180423

R150 Certificate of patent or registration of utility model

Ref document number: 6337934

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150