JP2010015250A - Handwritten information input support apparatus - Google Patents

Handwritten information input support apparatus Download PDF

Info

Publication number
JP2010015250A
JP2010015250A JP2008172558A JP2008172558A JP2010015250A JP 2010015250 A JP2010015250 A JP 2010015250A JP 2008172558 A JP2008172558 A JP 2008172558A JP 2008172558 A JP2008172558 A JP 2008172558A JP 2010015250 A JP2010015250 A JP 2010015250A
Authority
JP
Japan
Prior art keywords
information
input
computer
writing
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008172558A
Other languages
Japanese (ja)
Other versions
JP5112194B2 (en
Inventor
Rikio Nakamura
利喜雄 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2008172558A priority Critical patent/JP5112194B2/en
Publication of JP2010015250A publication Critical patent/JP2010015250A/en
Application granted granted Critical
Publication of JP5112194B2 publication Critical patent/JP5112194B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a handwritten information input support apparatus for storing input information handwritten by a pilot in the storage device of an airplane in association with an event log. <P>SOLUTION: The handwritten information input support apparatus includes: the storage device 8; sensors; an apparatus body 2 which generates the event log concerning events collected during flight by using sensor information from the sensors and is worn by the body of the pilot of the plane mounting a computer 6 for storing the event log in the storage device 8; a pen input device 3 arranged in the apparatus body 2 and having a writing surface; and an interface part 4 arranged in the apparatus body 2 so as to generate written information from input information which is handwritten and inputted by the pilot onto the writing surface of the pen input device 3 and to output the written information to the computer 6. The written information to be outputted from the interface part 4 is outputted to the computer 6 and concurrently stored in the storage device 8 by the computer 6. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は手書き情報入力支援装置に関する。   The present invention relates to a handwritten information input support device.

警戒などの任務を行うための回転翼航空機にはミッションコンピュータシステムが搭載されている。ミッションコンピュータは、機体に取り付けられたセンサ類からのセンサ情報を用いてミッションログを生成し、このミッションログを機体に設けられた記録装置に記録する。ミッションコンピュータは、機体センサからの検出データに基づいて自機の飛行諸元を算出してミッションログに記憶する。飛行諸元とは、自機の位置や姿勢、速度、加速度、高度などである。ミッションログには、レーダセンサから放射されたレーダ波の諸元や、目標物が検出された場合のこの目標物の飛行諸元及び操縦員が行った操作内容なども記憶される。操作内容とはポインティングデバイスや装置機器類へ入力した指令や情報を指す。ミッションコンピュータは、飛行中に発生した全ての事象についてこれらの飛行諸元などのデータをミッションログに残す。   A mission computer system is installed in a rotorcraft for missions such as vigilance. The mission computer generates a mission log using sensor information from sensors attached to the aircraft, and records the mission log in a recording device provided in the aircraft. The mission computer calculates the flight specifications of the aircraft based on the detection data from the body sensor and stores it in the mission log. The flight specifications are the position, posture, speed, acceleration, altitude, etc. of the aircraft. The mission log also stores specifications of radar waves radiated from the radar sensor, flight specifications of the target when the target is detected, and details of operations performed by the pilot. The operation content refers to a command or information input to a pointing device or apparatus. The mission computer leaves data such as these flight specifications in the mission log for all events that occurred during the flight.

ミッションコンピュータシステム、又は地上施設に設けられた読み出し専用の解析装置は、後刻、このミッションログを用いて飛行中に発生した全ての事象について事後解析を行う。操縦員はこのミッションログを参照しながら飛行作業を実施した結果を報告書としてまとめる。   A read-only analysis device provided in the mission computer system or the ground facility will later perform post-mortem analysis on all events that occurred during the flight using this mission log. The pilot summarizes the results of the flight operations while referring to this mission log as a report.

任務飛行中、操縦員は、事象について気が付いたことをアノテーションとして、脚に取り付けたボード上の紙に鉛筆等により筆記する。アノテーションとは操縦員が気づいた注釈やコメントであり、手書きの文字、記号や線図などを指す。操縦員がミッションコンピュータシステムから目標物が発見されたことを通知された場合、操縦員はこの目標物の外観の特徴をアノテーションとしてメモ書きする。このアノテーションは、システム系が直接データとして記録することのできない情報であり、人間系によって紙の上の付帯情報として残されるものである。   During the mission flight, the pilot notes on the paper on the board attached to the leg with a pencil, etc. as an annotation that he noticed the event. Annotations are annotations and comments that have been noticed by the pilot, such as handwritten characters, symbols and diagrams. When the pilot is notified from the mission computer system that the target has been found, the pilot notes the appearance features of the target as annotations. This annotation is information that the system system cannot directly record as data, and is left as supplementary information on paper by the human system.

また、発生した事象に応じて、必要な飛行諸元、操作内容あるいは変化した飛行諸元は異なる。どの事象についてどういった飛行諸元や操作内容が記録されるかについては、ミッションコンピュータに予め設定されてある。報告書の作成時、操縦員は、システムの解析機能又は解析装置から打ち出されたミッションログと自分が筆記したアノテーションとをすり合わせて状況を思い出しながら、これらのミッションログとアノテーションとを対応付けする作業を行う。   Further, depending on the event that has occurred, the required flight specifications, operation details, or changed flight specifications are different. It is preset in the mission computer that what flight specifications and operation details are recorded for which event. When creating a report, the pilot works to associate the mission logs with annotations while recalling the situation by combining the mission logs launched from the system analysis function or analysis device with the annotations written by him. I do.

通常、時刻経過に伴って筆記入力されるアノテーションと、回転翼航空機のシステム上に予め設定された特徴的な事象が発生した場合に筆記入力されるアノテーションとは、操縦員が脚に取り付けたボード上の紙に手書きして、これら場面の状況を保持し、後の判断等に用いられている。   Usually, annotations that are entered as time passes and annotations that are entered when a characteristic event that has been set in advance on a rotary wing aircraft system occurs are the boards attached to the legs by the pilot. The situation of these scenes is held by handwriting on the upper paper and used for later judgments.

システムが終了した後、事後解析として時刻経過、飛行中に発生した事象、及びアノテーションについてそれぞれ操縦員が、整理、把握、分析等を実施し、得られた情報を関係者に報告する。報告書を作成するための時間が無制限にある状況下では、飛行終了から報告書作成へ至る作業にそれほど問題はない。   After the system is finished, the pilot organizes, grasps, analyzes, etc. about the passage of time, the events that occurred during the flight, and annotations as post-mortem analysis, and reports the obtained information to the concerned parties. In the situation where the time to create a report is unlimited, there is not much problem in the work from the end of the flight to the report creation.

従来、任意のコメントを音声または画像として入力するコメント入力手段を備えたコメント入力機能付測定装置が知られている(特許文献1参照)。この特許文献1に記載の測定装置は、血糖値を測定する測定手段を有し、血液の濃度値を測定データとして表示し、日時情報と測定データとを関連付けて記憶部に記憶する。この測定装置は、コメントの入力の要否を問うメッセージを表示し、患者はコメントを音声により入力可能とされている。また、手書き入力に使うボードに関しては、パイロット又は機上操作員などが膝上に取り付けて航空機の各種データを電子的に記録し、あるいは出力することを可能とする飛行業務用電子式ニーボードが知られている(特許文献2参照)。携帯情報端末装置を操作者の大腿部に固定する携帯情報端末装置固定方法も知られている(特許文献3参照)。
特開2005−169128号公報 特開平7−306832号公報 特開平11−282570号公報
2. Description of the Related Art Conventionally, a measuring apparatus with a comment input function that includes comment input means for inputting an arbitrary comment as sound or an image is known (see Patent Document 1). The measuring device described in Patent Document 1 has a measuring means for measuring a blood glucose level, displays a blood concentration value as measurement data, and stores date / time information and measurement data in association with each other. This measuring device displays a message asking whether or not it is necessary to input a comment, and the patient can input the comment by voice. Regarding the board used for handwriting input, there is an electronic knee board for flight service that can be installed on the lap by a pilot or on-board operator to electronically record or output various aircraft data. (See Patent Document 2). A portable information terminal device fixing method for fixing a portable information terminal device to an operator's thigh is also known (see Patent Document 3).
JP 2005-169128 A Japanese Patent Laid-Open No. 7-306832 JP-A-11-282570

しかし、帰投後、速やかにこれらの整理等の作業を操縦員が実施して報告書を作成しなければならない状況下においては、操縦員が作成の作業にかけることのできる時間は限定される。さらに事後解析にあまりにも時間を要してしまう場合には情報が陳腐化してしまう。   However, under the circumstances where the pilot must carry out work such as organizing these items immediately after returning home and create a report, the time that the pilot can spend on the work is limited. Furthermore, if the post-analysis takes too much time, the information becomes obsolete.

従来、システム系の記録と人間系の記録とが分離されており、これらのシステム系及び人間系の各記録間に関連性は無いため、操縦員によって筆記されただけのアノテーションをシステム系にデータとして記録することができない。ミッションログは、諸元データの数値、人の機器への操作内容や状況を表す略号が事象毎にまとめられた状態で羅列されるというデータ形式を有する。ミッションログは、これを人が読むには十分なデータ形式を持っているとはいえない。   Conventionally, system records and human records have been separated, and there is no relationship between these system records and human records, so annotations that are only written by the pilot are stored in the system records. Can not be recorded as. The mission log has a data format in which numerical values of specification data, abbreviations indicating operation contents and situations of human devices are listed in a state where each event is collected. Mission logs do not have enough data format for people to read them.

このため、操縦員が報告書を作成するにあたっては、アノテーションと、ミッションログとを人が逐一整合する必要がある。操縦員が複数のアノテーションを筆記した場合、操縦員は、各アノテーションに対応する事象を、数値や略号の列の中から探して見つけ出さなければならない。アノテーションとミッションログとを比較対照する作業には時間を要する。アノテーションを筆記した回数が多い場合や筆記された紙の枚数が多い場合、元のアノテーションを報告書に写し書きする過程で人の誤りが生じる可能性がある。   For this reason, when the pilot prepares a report, it is necessary for a person to match the annotation and the mission log one by one. When the pilot has written a plurality of annotations, the pilot must find out the event corresponding to each annotation from a column of numerical values and abbreviations. It takes time to compare and contrast annotations and mission logs. If the annotation has been written many times or if the number of written papers is large, human error may occur in the process of copying the original annotation to the report.

上述した従来技術では、事象が発生した時にこの事象についてのアノテーションを、事象発生時点におけるミッションログと対応付けてシステム系にデータとして保存することができない。   In the prior art described above, when an event occurs, an annotation for this event cannot be stored as data in the system system in association with the mission log at the time of event occurrence.

そこで、本発明は、上記の課題に鑑み、操縦員により手書きされた入力情報を、事象ログに対応付けて航空機の記憶装置に記憶することが可能な手書き情報入力支援装置を提供することを目的とする。   SUMMARY OF THE INVENTION In view of the above problems, an object of the present invention is to provide a handwritten information input support device capable of storing input information handwritten by a pilot in an aircraft storage device in association with an event log. And

このような課題を解決するため、本発明の一態様によれば、記憶装置、センサ類、及びこのセンサ類からのセンサ情報を用いて飛行中に収集された事象についての事象ログを生成してこれをこの記憶装置に記憶する計算機を搭載した航空機の操縦員の身体に装着される装置本体と、この装置本体に設けられて、筆記面を有するペン入力デバイスと、前記装置本体に設けられて、このペン入力デバイスの前記筆記面にこの操縦員が手書き入力した入力情報から筆記情報を生成し、この筆記情報をこの計算機に対して出力するインターフェース部と、を備え、このインターフェース部が出力する前記筆記情報は、この筆記情報が前記計算機へ出力されると同時に、この計算機によって前記記憶装置へ記憶されることを特徴とする手書き情報入力支援装置が提供される。   In order to solve such a problem, according to one aspect of the present invention, an event log is generated for an event collected during a flight using a storage device, sensors, and sensor information from the sensors. An apparatus main body to be mounted on the body of an aircraft operator equipped with a computer for storing this in the storage device, a pen input device provided on the apparatus main body and having a writing surface, and provided on the apparatus main body An interface unit that generates writing information from the input information handwritten by the operator on the writing surface of the pen input device and outputs the writing information to the computer. The interface unit outputs the writing information. The handwritten information input support is characterized in that the handwritten information is stored in the storage device by the computer at the same time that the handwritten information is output to the computer. Apparatus is provided.

本発明によれば、操縦員により手書きされた入力情報を、航空機の記憶装置に記憶された事象ログに対応付けて記憶することができるようになる。   According to the present invention, input information handwritten by a pilot can be stored in association with an event log stored in an aircraft storage device.

以下、本発明の実施の形態に係る手書き情報入力支援装置について、図1乃至図3を参照しながら説明する。尚、各図において同一箇所については同一の符号を付すとともに、重複した説明は省略する。   Hereinafter, a handwritten information input support apparatus according to an embodiment of the present invention will be described with reference to FIGS. 1 to 3. In the drawings, the same portions are denoted by the same reference numerals, and redundant description is omitted.

本実施形態に係る手書き情報入力支援装置は操縦員用のアノテーション入力支援装置である。このアノテーション入力支援装置はタッチ式のペン入力デバイスであるタッチパッドを有し、操縦員がこのタッチパッドに紙を留めた状態で紙に筆記したアノテーションをデータ化して筆記情報データを生成し、この筆記情報データを回転翼航空機のシステムに送出するものである。   The handwritten information input support device according to the present embodiment is an annotation input support device for a pilot. This annotation input support device has a touch pad, which is a touch-type pen input device, and generates annotation information data by converting annotations written on paper with the operator holding paper on the touch pad. Written information data is sent to a rotary wing aircraft system.

操縦員は、操縦室においてアノテーション入力支援装置を脚に装着した状態で飛行作業を行っており、紙を介してアノテーションを手書き入力するようにしている。アノテーション入力支援装置は信号ケーブルによって回転翼航空機のミッションコンピュータシステムに接続されており、これらのアノテーション入力支援装置とこのミッションコンピュータシステムとが機内でオンライン化されている。   The pilot performs the flight work with the annotation input support device attached to the leg in the cockpit, and inputs the annotation by hand through paper. The annotation input support device is connected to the mission computer system of the rotary wing aircraft by a signal cable, and the annotation input support device and this mission computer system are brought online in the aircraft.

回転翼航空機は、ミッションログ(事象ログ)が記録される記録装置と、機体に取り付けられたセンサ類と、ミッションコンピュータ(計算機)とを設けている。センサ類には、自機の緯度及び経度を示す位置、姿勢、速度、加速度や高度といった自機の飛行諸元を算出するためのデータを検出する計器や装置と、レーダ波を放射し、目標物にて反射されたレーダ波を受信検波するレーダセンサとが含まれる。ミッションコンピュータは主に信号処理装置によって構成されており、センサ類からのセンサ情報を用いて、自機の飛行諸元、目標物の位置、姿勢、速度、加速度や高度といった目標物の飛行諸元、及びレーダ波の諸元、及び操縦員が行った操作内容などの履歴を記録装置に記録するようにしている。   The rotary wing aircraft includes a recording device for recording a mission log (event log), sensors attached to the airframe, and a mission computer (computer). Sensors include instruments and devices that detect data for calculating flight parameters such as position, attitude, speed, acceleration, and altitude, indicating the latitude and longitude of the aircraft, and radar waves that emit target waves. And a radar sensor that receives and detects a radar wave reflected by an object. The mission computer is mainly composed of a signal processing device. Using the sensor information from the sensors, the flight specifications of the target, such as its flight specifications, target position, attitude, speed, acceleration, and altitude. In addition, the history of the radar wave specifications and the operations performed by the pilot is recorded in the recording device.

図1はアノテーション入力支援装置を含む機体搭載システムの構成例を示す図である。図2はこのアノテーション入力支援装置の外観を示す斜視図である。アノテーション入力支援装置1は、長方形の平面形状を有するボード状の装置本体2と、この装置本体2に配設されて、タッチパッド3、図示しないインターフェース回路及びスイッチを有する手書き入力部4と、このインターフェース回路に接続された信号ケーブル5とを備えている。このアノテーション入力支援装置1は、この信号ケーブル5を介して情報記録部6との間でデータを授受可能にされている。   FIG. 1 is a diagram illustrating a configuration example of an airframe mounting system including an annotation input support device. FIG. 2 is a perspective view showing the appearance of the annotation input support apparatus. The annotation input support device 1 includes a board-like device main body 2 having a rectangular plane shape, a handwriting input unit 4 provided on the device main body 2 and having a touch pad 3, an interface circuit (not shown), and a switch, And a signal cable 5 connected to the interface circuit. The annotation input support device 1 can exchange data with the information recording unit 6 via the signal cable 5.

この情報記録部6はミッションコンピュータの一部であり、信号処理装置7及び記録装置8から構成されている。情報記録部6はアノテーション入力支援装置1に筆記入力された入力情報である筆記情報を、この筆記情報が操縦員の手書きしたときに演算されたミッションログと対応づけて記録装置8に記録するようにしている。   The information recording unit 6 is a part of a mission computer and includes a signal processing device 7 and a recording device 8. The information recording unit 6 records the writing information, which is input information written to the annotation input support device 1, in the recording device 8 in association with the mission log calculated when the writing information is handwritten by the operator. I have to.

信号処理装置7は、事象毎に必要なセンサ情報を用いて信号処理演算を行ってミッションログを算出する。信号処理装置7には図示しないシステム側インターフェース回路が接続されている。このシステム側インターフェース回路は、手書き入力部4に対し、この手書き入力部4から入力されるアノテーションを信号処理装置7が受け付けられる状態であることを表す制御情報を通知するものである。信号処理装置7は、このシステム側インターフェース回路及び信号ケーブル5を介して手書き入力部4との間でデータを授受可能にされている。   The signal processing device 7 performs a signal processing calculation using sensor information necessary for each event and calculates a mission log. A system-side interface circuit (not shown) is connected to the signal processing device 7. The system-side interface circuit notifies the handwriting input unit 4 of control information indicating that the signal processing device 7 is ready to accept annotations input from the handwriting input unit 4. The signal processing device 7 can exchange data with the handwriting input unit 4 via the system side interface circuit and the signal cable 5.

信号処理装置7にはDSPやマイクロプロセッサ、ROM及びRAMが用いられる。記録装置8は機体に設けられた外部記録装置や磁気ディスク装置などの記録媒体である。記録装置8は具体的にはカード型の記録媒体あるいは記憶媒体である。   For the signal processing device 7, a DSP, a microprocessor, a ROM, and a RAM are used. The recording device 8 is a recording medium such as an external recording device or a magnetic disk device provided in the machine body. The recording device 8 is specifically a card-type recording medium or storage medium.

装置本体2は、図示しないベルトによって、服の上から操縦員の膝頭に取り付けられている。この装置本体2の端部にはクリップ9が設けられており、このクリップ9によって紙10の端部が手書き入力部4の上面において留められるようになっている。装置本体2の本体上面には矩形の開口部が形成されており、この開口部を介してタッチパッド3が視認可能にされている。   The apparatus body 2 is attached to the pilot's kneecap from above the clothes by a belt (not shown). A clip 9 is provided at the end of the apparatus main body 2, and the end of the paper 10 is fastened on the upper surface of the handwriting input unit 4 by the clip 9. A rectangular opening is formed in the upper surface of the main body 2 of the apparatus, and the touch pad 3 is visible through the opening.

このタッチパッド3は検出面を有し、この検出面にはシート状の保護部材11が装着されている。鉛筆やペンなどの筆記具を用いて紙10に筆記されると、タッチパッド3は、保護部材11を介して検出面に加えられた押圧力を検知し、この筆記具と紙10との接触部位に対応する座標値を検出して、1点又は複数点の座標の座標データを出力するようにしている。タッチパッド3の出力側にはメモリバッファや図示しないインターフェース回路が設けられている。   The touch pad 3 has a detection surface, and a sheet-like protection member 11 is mounted on the detection surface. When writing is performed on the paper 10 using a writing instrument such as a pencil or a pen, the touch pad 3 detects the pressing force applied to the detection surface via the protection member 11, and detects a contact portion between the writing instrument and the paper 10. Corresponding coordinate values are detected, and coordinate data of coordinates of one point or a plurality of points are output. A memory buffer and an interface circuit (not shown) are provided on the output side of the touch pad 3.

このインターフェース回路は、手書き入力部4に設けられたスイッチが押下された場合、手書き入力が完了したことの通知を情報記録部6へ出力する通知処理と、情報記録部6との間で制御信号を送受信するインターフェース処理と、タッチパッド3からの座標データを筆記情報に変換しこれをメモリバッファに記憶しこれを情報記録部6へ出力する処理とを行う。インターフェース回路は、スイッチの押下を検知可能にされており、アノテーションの入力操作が完了した旨を示す制御メッセージ信号を、操縦員側から情報記録部6側へ通知するようにしている。また、このスイッチが押下されると、インターフェース回路は、メモリバッファの筆記情報も情報記録部6へ出力するようにしている。このインターフェース回路にはCPU、ROMやRAMが用いられる。   This interface circuit provides a control signal between the information recording unit 6 and a notification process for outputting a notification that the handwriting input is completed to the information recording unit 6 when a switch provided in the handwriting input unit 4 is pressed. Interface processing for transmitting / receiving and coordinate data from the touch pad 3 are converted into writing information, stored in a memory buffer, and output to the information recording unit 6. The interface circuit is configured to detect pressing of the switch, and notifies the control message signal indicating that the annotation input operation is completed from the pilot side to the information recording unit 6 side. When this switch is pressed, the interface circuit also outputs the writing information of the memory buffer to the information recording unit 6. A CPU, ROM, or RAM is used for this interface circuit.

情報記録部6は、インターフェース回路からの入力完了通知を受けると、アノテーション情報と発生事象とを対応付けて記録装置8へ記憶するようにしている。あるいは、情報記録部6は、インターフェース回路からの入力完了通知を受けると、アノテーション情報をシステムの時刻情報とを対応付けて記録装置8へ記憶するようにしている。   When the information recording unit 6 receives an input completion notification from the interface circuit, the information recording unit 6 associates the annotation information with the occurrence event and stores them in the recording device 8. Alternatively, when receiving an input completion notification from the interface circuit, the information recording unit 6 stores the annotation information in the recording device 8 in association with the system time information.

アノテーション入力支援装置1では、筆記具によって加えられる筆圧、および筆記具の紙10への接触部分の筆跡が検知され、筆記面へ入力される筆記情報は筆記情報として感知されてこの筆記情報が情報記録部6に記録される。手書き入力部4の筆記面に紙10が固定可能である。筆記面はタッチパッド3などで実現されており、紙10を固定する部分はこの筆記面に対して紙10を押さえつけるクリップ形状の板または棒で実現されている。   In the annotation input support device 1, the writing pressure applied by the writing tool and the handwriting of the contact portion of the writing tool with the paper 10 are detected, and the writing information input to the writing surface is detected as writing information, and this writing information is recorded as information. Part 6 is recorded. The paper 10 can be fixed to the writing surface of the handwriting input unit 4. The writing surface is realized by the touch pad 3 or the like, and the portion for fixing the paper 10 is realized by a clip-shaped plate or stick that presses the paper 10 against the writing surface.

また、システムには事後解析機能が実装されており、あるいは地上の施設には、ミッションログ読み出し専用の解析装置が設けられている。システム又は解析装置は、この記録装置8から、レーダ諸元の履歴や運動諸元の履歴であるミッションログを読み取り、このミッションログを人が読める形式の情報データに変換し、変換したデータをプリント出力するようにされている。   In addition, a post-analysis function is implemented in the system, or an analysis device dedicated to reading a mission log is provided in a facility on the ground. The system or analysis device reads a mission log, which is a history of radar specifications and a history of motion specifications, from this recording device 8, converts this mission log into information data that can be read by humans, and prints the converted data. It is designed to output.

次にこの実施形態に係るアノテーション入力支援装置1の動作を図3に示すフローチャートを用いて説明する。図3はアノテーション入力支援装置1が行うアノテーション入力から記録装置6へのアノテーションの記録までのシーケンスを示すフローチャートである。このアノテーション入力支援装置1への指示及びアノテーションの入力は筆記具により実施される。   Next, the operation of the annotation input support apparatus 1 according to this embodiment will be described using the flowchart shown in FIG. FIG. 3 is a flowchart showing a sequence from the annotation input performed by the annotation input support apparatus 1 to the annotation recording to the recording apparatus 6. Instructions and annotations are input to the annotation input support device 1 using a writing instrument.

操縦員は手書き入力部4に紙10を固定し(ステップS1)、図示しないボタンなどを用いてアノテーション入力支援装置1を起動して、アノテーション入力支援装置1の状態を、入力データ検知可能な状態にする。この状態で任意の時刻あるいは事象が発生した時に操縦員は紙10にアノテーションを手書きする。文字列、記号や手書き図といったアノテーションが紙10に筆記されて、この紙10に筆記された文字列、記号あるいは手書き図と同じ入力情報がアノテーション入力支援装置1に取込まれる。   The pilot fixes the paper 10 to the handwriting input unit 4 (step S1), activates the annotation input support device 1 using a button or the like (not shown), and the state of the annotation input support device 1 can be detected as input data. To. When an arbitrary time or event occurs in this state, the pilot writes an annotation on the paper 10 by hand. An annotation such as a character string, a symbol, or a handwritten drawing is written on the paper 10, and the same input information as the character string, symbol, or handwritten drawing written on the paper 10 is taken into the annotation input support apparatus 1.

手書き入力部4がアノテーションの入力を検知すると(ステップS2)、筆記情報を情報記録部6に転送する。一例として、操縦員がアノテーションを書き終わった後、アノテーション入力完了スイッチを押下してアノテーション入力完了をアノテーション入力装置1へ指示すると、手書き入力部4はこの押下を検知して、アノテーション入力完了メッセージを情報記録部6へ通知する(ステップS3)。情報記録部6は、このメッセージを受けると、筆記情報を読込むことによって、入力されたアノテーションを画像として保持する(ステップS4)。これにより、記録装置8にはアノテーションがミッションログとともに記録される。   When the handwriting input unit 4 detects the input of the annotation (step S2), the writing information is transferred to the information recording unit 6. As an example, after the operator finishes writing the annotation, when the annotation input completion switch is pressed to instruct the annotation input device 1 to complete the annotation input, the handwriting input unit 4 detects this pressing and displays an annotation input completion message. Information is notified to the information recording unit 6 (step S3). Upon receipt of this message, the information recording unit 6 reads the written information and holds the input annotation as an image (step S4). Thereby, the annotation is recorded together with the mission log in the recording device 8.

一例として、目標物の発見という事象が発生した場合、情報記録部6は、レーダ波の諸元、目標物の位置や速度を記録する。発見された後、目標物の位置や速度は時々刻々とミッションログの一つとして記録装置8に記録され続ける。目標物の機影が捉えられると、操縦員は、時々刻々と変わるレーダ情報について気づいたことをアノテーション入力支援装置1に入力する。このアノテーションは操縦員が筆記入力すると即座にミッションログに関連付けられて記録される。   As an example, when an event of discovery of a target occurs, the information recording unit 6 records the specifications of the radar wave, the position and speed of the target. After being discovered, the position and speed of the target are continuously recorded in the recording device 8 as one of the mission logs. When the image of the target is captured, the pilot inputs to the annotation input support apparatus 1 that he / she has noticed the radar information that changes from moment to moment. This annotation is recorded in association with the mission log as soon as the pilot inputs it.

目標物が消失したという事象が得られた場合、情報記録部6は、以後、ミッションログへの目標物の位置や速度の記録を行わない。この機影が消失した場合、操縦員は追跡を中止した旨をアノテーション入力支援装置1に筆記する。システムに筆記情報が記録されると同時に、中止の旨や目標物について気づいた点をアノテーション入力し、このアノテーションはミッションログに関連付けされて記録される。   When an event that the target has disappeared is obtained, the information recording unit 6 does not record the position and speed of the target in the mission log thereafter. When this shadow disappears, the pilot writes in the annotation input support apparatus 1 that the tracking is stopped. At the same time as writing information is recorded in the system, an annotation is entered to indicate that it has been canceled and the target has been noticed, and this annotation is recorded in association with the mission log.

警戒海域の通過を許可されていない船舶が航行していることが、ミッションコンピュータにより検知されると、操縦員は、船舶の外形、舶体の汚れ、又は乗船している人数などをアノテーション入力支援装置1に手書き入力する。この手書き入力と同時に外形や汚れ、人数などのアノテーションがミッションログに関連付けられて記録される。   When the mission computer detects that a ship that is not allowed to pass through the alert sea area is navigating, the pilot supports the annotation input of the outline of the ship, dirt on the ship, or the number of people on board. A handwritten input is made to the device 1. Simultaneously with this handwritten input, annotations such as the outline, dirt, number of people, etc. are recorded in association with the mission log.

このようにして、機影が捉えられたこと、機影が消失したこと、又は目標物が視認されたことなどの事象が発生した場合、操縦員はこれらの事象についてのアノテーションを、アノテーション入力支援装置1にクリップされた紙に鉛筆等で書くとともに、このアノテーションは即座にシステムにデータとして記録されるようになる。   In this way, when an event occurs, such as when a shadow is captured, when the shadow disappears, or when a target is visually recognized, the pilot supports annotation input for annotations about these events. While writing with a pencil or the like on the paper clipped to the apparatus 1, this annotation is immediately recorded as data in the system.

従って、アノテーション入力支援装置1により、紙への筆記の操作と同時にこの筆記によって手書き入力されたアノテーションがシステム情報として記録されるようになる。事象の発生時にこの事象について人間系により入力されたアノテーションが、システム系にも保存されるようになり、この保存が事象の発生と同時に行えるようになる。   Therefore, the annotation input support device 1 records the annotation input by handwriting as the system information simultaneously with the writing operation on the paper. Annotation entered by the human system for the event at the time of occurrence of the event is also stored in the system system, and this storage can be performed simultaneously with the occurrence of the event.

回転翼航空機が基地に戻った後、ミッションコンピュータシステム又は解析装置はミッションログの事後解析を行う。このシステム又は装置は、ミッションログを人間が見える形式の情報データに変換して出力する。この情報データを参照することによって、操縦員は報告書の作成を行う。   After the rotorcraft returns to the base, the mission computer system or analysis device performs a post-analysis of the mission log. This system or apparatus converts the mission log into information data in a form that can be seen by humans, and outputs it. By referring to this information data, the pilot creates a report.

人間系によってその場その場で紙に書いて取得された情報が、紙への筆記と同時にシステム系に取込めることができるようになり、システム系により入力された情報と、人間系により入力された情報とが関連付けされる。これにより、報告書作成時に、ミッションログと、メモとを見比べてまとめるという作業が不要となる。人が複数の事象についてのアノテーションを、ミッションログと付き合わせて整合をとる作業をする必要がなくなる。各事象と、これらの事象についてのアノテーションとが正確に対応付けされて保存できるようになる。   The information obtained by writing on paper on the spot by the human system can be taken into the system system at the same time as writing on the paper. The information input by the system system and the information input by the human system are now available. Associated with the information. This eliminates the need to compare and summarize the mission log and memo when creating a report. It is no longer necessary for humans to coordinate annotations for multiple events with the mission log. Each event and annotations about these events can be stored in association with each other accurately.

また、ミッションログがプリント出力されることによって、飛行中に発生した全ての事象と、これらの事象についてのアノテーションとを直に参照できる。例えば複数の船舶が発見された場合、これらの船舶毎についてそれぞれ船舶の特徴や発見時の状況などのアノテーションを帰投後直ちに取得することができる。   Also, by printing out the mission log, all events that occurred during the flight and annotations about these events can be referenced directly. For example, when a plurality of ships are discovered, annotations such as the characteristics of the ships and the situation at the time of discovery can be acquired immediately after returning for each of these ships.

また、操縦員が、筆記入力されたアノテーションを、ミッションログと比較対照する作業が不要となるため、比較対照作業に要する時間が省かれて業務の効率化も図れる。アノテーションを写し間違えるといったヒューマンエラーがなくなるため、任務終了後における報告書の内容の正確性を期することができる。操縦員は、帰投後、速やかにこれらの整理等の作業を行えて迅速に報告書を作成することができるようになる。情報の陳腐化も防止される。   In addition, since it is not necessary for the operator to compare and compare the written annotation with the mission log, the time required for the comparison operation can be saved and the work efficiency can be improved. Since there is no human error such as mistakes in annotations, the accuracy of the report contents after the mission can be expected. After returning to the pilot, the pilot can quickly sort out the work and create a report quickly. Obsolete information is also prevented.

また、保護部材11が設けられているため、先端部が尖っている筆記具を用いて操縦員が筆記入力した場合でも、筆記面の表面が傷つけられない。特に、機体が揺れて大きな慣性力がこの機体に加わる場合、大きな筆圧がタッチパッド3の表面にかかることもあり得るが、この保護部材11が設けられているため、筆記面を傷つけることが防止される。保護部材11の代わりに筆記面自体が保護されたタッチパッド3を用いてもよい。   Moreover, since the protective member 11 is provided, even when a pilot performs writing input using a writing tool with a sharp tip, the surface of the writing surface is not damaged. In particular, when the aircraft is shaken and a large inertial force is applied to the aircraft, a large writing pressure may be applied to the surface of the touch pad 3, but since the protective member 11 is provided, the writing surface may be damaged. Is prevented. Instead of the protective member 11, the touch pad 3 whose writing surface itself is protected may be used.

また、アノテーション入力支援装置1によれば、操縦員席という狭い空間においてもアノテーションをシステムへ登録することが可能となる。アノテーション入力支援装置1という入力装置によって、紙10に筆記された情報を筆記と同時にシステム系に記録することができる。アノテーション入力支援装置1は小型形状を有するため、操縦室内での計器類などの操作を煩わせることなく操縦員のアノテーション入力を可能にすることができる。   Further, according to the annotation input support device 1, it is possible to register an annotation in the system even in a narrow space such as a pilot seat. Information written on the paper 10 can be recorded in the system simultaneously with writing by an input device called the annotation input support device 1. Since the annotation input support device 1 has a small shape, it is possible to input the annotation of the pilot without troublesome operation of instruments and the like in the cockpit.

また、手首を装置本体2に対して位置決めするため、装置本体2には手首を載せるための窪み部が形成されてもよい。このようにすれば、筆記中の手首から先の部位の姿勢が正しく保たれる。   Further, in order to position the wrist with respect to the apparatus main body 2, the apparatus main body 2 may be formed with a recess for placing the wrist. In this way, the posture of the part ahead of the wrist being written can be maintained correctly.

(変形例)
上記の実施形態では、操縦員は、1枚の紙に筆記していたが、本発明の実施の形態に係るアノテーション入力支援装置は、ロール紙を装着した状態で使用するようにもできる。
(Modification)
In the above embodiment, the pilot writes on a piece of paper, but the annotation input support device according to the embodiment of the present invention can be used with the roll paper attached.

本発明の実施形態の変形例に係るアノテーション入力支援装置は、情報記録部6と手書き入力部4とを備えている。更にこのアノテーション入力支援装置は、装置本体2に取り付けられてロール紙を供給する図示しないロール紙供給部と、このロール紙をタッチパッド3の筆記面の上下いずれか一端側から他端側に向かって筆記面上で搬送させる図示しない搬送部と、搬送されたロール紙を巻き取る図示しないロール紙巻き取り部と、これらのロール紙供給部及びロール紙巻き取り部を駆動する図示しない駆動部と、この駆動部の駆動を制御する図示しない制御部とを備えている。この制御部は、インターフェース部が筆記情報をミッションコンピュータへ出力するタイミングに基づいて駆動を制御するようにしている。制御部にはマイクロプロセッサやROM、RAMが用いられる。   An annotation input support apparatus according to a modification of the embodiment of the present invention includes an information recording unit 6 and a handwriting input unit 4. Further, the annotation input support device is attached to the apparatus main body 2 and supplies a roll paper (not shown), and the roll paper is directed from one end side to the other end side of the writing surface of the touch pad 3. A transport unit (not shown) that transports the paper on the writing surface, a roll paper take-up unit (not shown) that winds up the transported roll paper, a drive unit (not shown) that drives the roll paper supply unit and the roll paper take-up unit, And a control unit (not shown) that controls driving of the drive unit. This control unit controls driving based on the timing at which the interface unit outputs the writing information to the mission computer. A microprocessor, ROM, and RAM are used for the control unit.

このような構成によって、操縦員が紙10に筆記した後、リセットスイッチを押下すると、制御部は、情報記録部6に対して筆記情報を出力するとともに、駆動部に対してリセット信号を通知する。駆動部がロール紙供給部及びロール紙巻き取り部を駆動すると、タッチパッド3の筆記面の上下長さよりも長い距離を搬送されて、ロール紙は紙送りされる。これにより、再度、筆記面に白地の紙面が現れた状態にセットされる。   With such a configuration, when the operator writes down on the paper 10 and then presses the reset switch, the control unit outputs the writing information to the information recording unit 6 and notifies the drive unit of the reset signal. . When the drive unit drives the roll paper supply unit and the roll paper take-up unit, the roll paper is transported by a distance longer than the vertical length of the writing surface of the touch pad 3. As a result, the white paper surface is again set on the writing surface.

この変形例に係るアノテーション入力支援装置によれば、メモ用紙を取り替える手間が不要となり、用紙を取り替える作業によって生じうる筆記入力の機会の喪失の可能性が排除されるようになる。   According to the annotation input support device according to this modified example, the trouble of replacing the memo paper becomes unnecessary, and the possibility of losing the opportunity of writing input that can be caused by the work of replacing the paper is eliminated.

尚、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。上記の実施形態では、操縦員によるアノテーション入力について説明したが、アノテーション入力支援装置1にフライトハンドブックに記載された試験項目の情報などを登録することや、各種の計算機能等を装備することにより、機体内に持ち込む文書、機器を削減することができ、省スペース、軽量化につながる。   Note that the present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage. In the above embodiment, the annotation input by the pilot was described. However, by registering the information of the test items described in the flight handbook in the annotation input support device 1, and equipped with various calculation functions, Documents and equipment brought into the aircraft can be reduced, leading to space saving and light weight.

また、本発明の実施の形態に係る手書き情報入力支援装置は回転翼航空機などの航空機に限らず、狭い空間に椅子に座った状態の作業環境下(自動車、自動二輪等)で作業をしている人に装着されて使用されることも有効である。この場合、手書き情報入力支援装置とミッションコンピュータとの間を例えば無線により接続する。   In addition, the handwritten information input support device according to the embodiment of the present invention is not limited to an aircraft such as a rotary wing aircraft, and works in a working environment (car, motorcycle, etc.) in a state where a chair is sitting in a narrow space. It is also effective to be worn and used by a person. In this case, the handwritten information input support device and the mission computer are connected, for example, wirelessly.

また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。   In addition, various inventions can be formed by appropriately combining a plurality of components disclosed in the embodiment. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, constituent elements over different embodiments may be appropriately combined.

本発明の一実施形態に係る手書き情報入力支援装置を含む機体搭載システムの構成例を示す図である。It is a figure which shows the structural example of the body mounting system containing the handwritten information input assistance apparatus which concerns on one Embodiment of this invention. 本発明の一実施形態に係る手書き情報入力支援装置の外観を示す斜視図である。It is a perspective view which shows the external appearance of the handwritten information input assistance apparatus which concerns on one Embodiment of this invention. 本発明の一実施形態に係る手書き情報入力支援装置が行うアノテーション入力から記録装置へのアノテーションの記録までのシーケンスを示すフローチャートである。It is a flowchart which shows the sequence from the annotation input which the handwritten information input assistance apparatus which concerns on one Embodiment of this invention performs to recording of the annotation to a recording device.

符号の説明Explanation of symbols

1…アノテーション入力支援装置(手書き情報入力支援装置)、2…装置本体、3…タッチパッド(ペン入力デバイス)、4…手書き入力部(インターフェース部)、5…信号ケーブル、6…情報記録部(計算機)、7…信号処理装置、8…記録装置(記憶装置)、9…クリップ、10…紙、11…保護部材。   DESCRIPTION OF SYMBOLS 1 ... Annotation input assistance apparatus (handwriting information input assistance apparatus), 2 ... Apparatus main body, 3 ... Touchpad (pen input device), 4 ... Handwriting input part (interface part), 5 ... Signal cable, 6 ... Information recording part ( (Computer), 7 ... signal processing device, 8 ... recording device (storage device), 9 ... clip, 10 ... paper, 11 ... protective member.

Claims (4)

記憶装置、センサ類、及びこのセンサ類からのセンサ情報を用いて飛行中に収集された事象についての事象ログを生成してこれをこの記憶装置に記憶する計算機を搭載した航空機の操縦員の身体に装着される装置本体と、
この装置本体に設けられて、筆記面を有するペン入力デバイスと、
前記装置本体に設けられて、このペン入力デバイスの前記筆記面にこの操縦員が手書き入力した入力情報から筆記情報を生成し、この筆記情報をこの計算機に対して出力するインターフェース部と、を備え、
このインターフェース部が出力する前記筆記情報は、この筆記情報が前記計算機へ出力されると同時に、この計算機によって前記記憶装置へ記憶されることを特徴とする手書き情報入力支援装置。
The body of an aircraft operator equipped with a storage device, sensors, and a computer that uses the sensor information from these sensors to generate event logs for events collected during flight and store them in this storage device An apparatus main body mounted on
A pen input device provided on the apparatus body and having a writing surface;
An interface unit that is provided in the apparatus main body, generates writing information from input information handwritten by the operator on the writing surface of the pen input device, and outputs the writing information to the computer. ,
The handwritten information input support device, wherein the writing information output by the interface unit is stored in the storage device by the computer at the same time as the writing information is output to the computer.
前記装置本体には前記入力情報が手書き入力されたことの完了を通知するためのスイッチが設けられて、前記インターフェース部は、このスイッチの状態を検出する機能と、このスイッチが押下された場合、この手書き入力が完了したことを示す入力完了通知を前記計算機へ出力する機能とを有し、
前記計算機によってこの入力完了通知が受信されると、前記筆記情報は、システム時刻に対応付けられて前記記憶装置へ記憶されることを特徴とする請求項1記載の手書き情報入力支援装置。
The device body is provided with a switch for notifying that the input information has been input by handwriting, and the interface unit has a function of detecting the state of the switch, and when this switch is pressed, A function of outputting an input completion notification indicating completion of the handwriting input to the computer;
2. The handwritten information input support device according to claim 1, wherein when the input completion notification is received by the computer, the writing information is stored in the storage device in association with a system time.
前記装置本体には前記入力情報が手書き入力されたことの完了を通知するためのスイッチが設けられて、前記インターフェース部は、このスイッチの状態を検出する機能と、このスイッチが押下された場合、この手書き入力が完了したことを示す入力完了通知を前記計算機へ出力する機能と、前記計算機から予め設定された特定の事象が発生したことの報知を受信する機能とを有し、
前記計算機によってこの入力完了通知が受信されると、前記筆記情報は、この特定の事象に対応付けられて前記記憶装置へ記憶されることを特徴とする請求項1記載の手書き情報入力支援装置。
The device body is provided with a switch for notifying that the input information has been input by handwriting, and the interface unit has a function of detecting the state of the switch, and when this switch is pressed, A function of outputting an input completion notification indicating that the handwriting input has been completed to the computer, and a function of receiving a notification that a preset specific event has occurred from the computer,
The handwritten information input support device according to claim 1, wherein when the input completion notification is received by the computer, the handwritten information is stored in the storage device in association with the specific event.
前記装置本体に取り付けられてロール紙を供給するロール紙供給部と、このロール紙を前記筆記面の上下いずれか一端側から他端側に向かってこの筆記面上で搬送させる搬送部と、搬送されたロール紙を巻き取るロール紙巻き取り部と、これらのロール紙供給部及びロール紙巻き取り部を駆動する駆動部と、この駆動部の駆動を制御する制御部と、を備え、
この制御部は、前記インターフェース部が前記筆記情報を前記計算機へ出力するタイミングに基づいて前記駆動を制御することを特徴とする請求項1記載の手書き情報入力支援装置。
A roll paper supply unit that is attached to the apparatus main body and supplies roll paper; a conveyance unit that conveys the roll paper from one of the upper and lower sides of the writing surface toward the other end of the writing surface; A roll paper winding unit that winds up the rolled paper, a driving unit that drives the roll paper supply unit and the roll paper winding unit, and a control unit that controls the driving of the driving unit,
The handwriting information input support device according to claim 1, wherein the control unit controls the driving based on a timing at which the interface unit outputs the writing information to the computer.
JP2008172558A 2008-07-01 2008-07-01 Handwritten information input support device Expired - Fee Related JP5112194B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008172558A JP5112194B2 (en) 2008-07-01 2008-07-01 Handwritten information input support device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008172558A JP5112194B2 (en) 2008-07-01 2008-07-01 Handwritten information input support device

Publications (2)

Publication Number Publication Date
JP2010015250A true JP2010015250A (en) 2010-01-21
JP5112194B2 JP5112194B2 (en) 2013-01-09

Family

ID=41701332

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008172558A Expired - Fee Related JP5112194B2 (en) 2008-07-01 2008-07-01 Handwritten information input support device

Country Status (1)

Country Link
JP (1) JP5112194B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019169170A (en) * 2016-02-16 2019-10-03 タレリス・グローバル・エルエルピーTaleris Global LLP Interrelation of multiple data streams

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07306832A (en) * 1994-05-13 1995-11-21 Japan Aircraft Mfg Co Ltd Electronic knee board for flight operation
JPH11245588A (en) * 1998-03-04 1999-09-14 Matsushita Electric Ind Co Ltd Electronic blackboard apparatus
JP2001344249A (en) * 2000-06-02 2001-12-14 Fuji Electric Co Ltd Portable terminal, and aiding system using the portable terminal
JP2006163969A (en) * 2004-12-09 2006-06-22 Dainippon Printing Co Ltd Server, electronic pen, form for electronic pen, and program

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07306832A (en) * 1994-05-13 1995-11-21 Japan Aircraft Mfg Co Ltd Electronic knee board for flight operation
JPH11245588A (en) * 1998-03-04 1999-09-14 Matsushita Electric Ind Co Ltd Electronic blackboard apparatus
JP2001344249A (en) * 2000-06-02 2001-12-14 Fuji Electric Co Ltd Portable terminal, and aiding system using the portable terminal
JP2006163969A (en) * 2004-12-09 2006-06-22 Dainippon Printing Co Ltd Server, electronic pen, form for electronic pen, and program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019169170A (en) * 2016-02-16 2019-10-03 タレリス・グローバル・エルエルピーTaleris Global LLP Interrelation of multiple data streams

Also Published As

Publication number Publication date
JP5112194B2 (en) 2013-01-09

Similar Documents

Publication Publication Date Title
US9701140B1 (en) Method and system to calculate line feed error in labels on a printer
KR101037240B1 (en) Universal computing device
JP2004303254A (en) Electronic document handling system, electronic document handling method, and writing instrument
US20070080955A1 (en) Electronic acquisition of a hand formed expression and a context of the expression
US10026227B2 (en) Portable augmented reality
US8290313B2 (en) Electronic acquisition of a hand formed expression and a context of the expression
US8787706B2 (en) Acquisition of a user expression and an environment of the expression
US9063650B2 (en) Outputting a saved hand-formed expression
WO2008150919A1 (en) Electronic annotation of documents with preexisting content
US8416218B2 (en) Cyclical creation, transfer and enhancement of multi-modal information between paper and digital domains
SE516281C2 (en) Product and method for information management, where a removable writing surface with absolute position coding pattern is written and read
JP5112194B2 (en) Handwritten information input support device
TW298634B (en)
JP2000222155A (en) Device and method for print control and recording medium
JP2008242723A (en) Printing system
JPWO2021149593A5 (en)
JP5112193B2 (en) Handwritten information processing system and handwritten information processing method in handwritten information processing system
US20180157378A1 (en) Operation assistance apparatus and operation assistance method
EP1380006B1 (en) Handwritten character recording and recognition device
EP4177713A1 (en) Tactile presentation device, tactile presentation system, control device, and non-transitory computer-readable medium
JP6287079B2 (en) Inspection support device, inspection support system and program
CN202320790U (en) Fixed type pilot lap board
JP4990704B2 (en) Document position information processing system and document position information processing method
JP2000292196A (en) Position-inputting device for vehicle
US20210334049A1 (en) Information processing apparatus, information processing system, and method for processing information

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101224

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120131

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120402

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120911

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121010

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151019

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 5112194

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151019

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees