JPH10154163A - Portable behavior recording device - Google Patents

Portable behavior recording device

Info

Publication number
JPH10154163A
JPH10154163A JP8313751A JP31375196A JPH10154163A JP H10154163 A JPH10154163 A JP H10154163A JP 8313751 A JP8313751 A JP 8313751A JP 31375196 A JP31375196 A JP 31375196A JP H10154163 A JPH10154163 A JP H10154163A
Authority
JP
Japan
Prior art keywords
data
user
mobile terminal
action
stored
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP8313751A
Other languages
Japanese (ja)
Inventor
Toru Yamakita
徹 山北
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP8313751A priority Critical patent/JPH10154163A/en
Publication of JPH10154163A publication Critical patent/JPH10154163A/en
Pending legal-status Critical Current

Links

Landscapes

  • Mobile Radio Communication Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a portable behavior recording device which suppresses amount of information to be recorded and efficiently helps a person (user). SOLUTION: A CPU 302 acquires data such as a place, air temperature and atmospheric pressure from a device that is connected to a general interface 319 via the interface 319. It acquires data of the date and time from a timer that is provided by itself. When there is data that changes a lot from what is acquired the last time among those data, the data that is acquired this time is stored as data of behavior record in memory 303, etc. An image and a voice are also taken in by using a camera 202 and a microphone 203 and stored in accordance with a user's operation of a touch panel 308. The stored data is transmitted and stored through a communication controlling part 318 and any of transceivers 320 to 322.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、ユーザの行動を記
録する技術に関する。
The present invention relates to a technique for recording a user's action.

【0002】[0002]

【従来の技術および発明が解決しようとする課題】近
年、携帯型情報通信機器が数多く製品化されている。特
に最近では、通信機能の強化や軽量・小型化が進んでい
ることもあり、消費者の需要(市場)が大きく拡大する
傾向にある。例えば携帯電話機やページャの加入者は大
幅に増えている。
2. Description of the Related Art In recent years, many portable information communication devices have been commercialized. In particular, recently, the communication function has been strengthened and the weight and size have been reduced, and the demand (market) of consumers tends to greatly expand. For example, the number of mobile phone and pager subscribers has increased significantly.

【0003】その携帯型情報通信機器では、携帯電話機
といったこれまでにあった用途以外の用途の模索が行わ
れている。それによって浮かび上がった候補として、人
(ユーザ)の補助に主眼を置いた機器(アシスタント)
という用途がある。人の補助のより具体的な中身として
は、人間はよく物事を忘れることから、人の行動を記録
して記憶の補助を行うことが考えられている。現在で
は、その方向で研究が進められており、試作機(携帯型
行動記録装置)を製作し、その試作機を通して記憶を補
助する方策が探求されている。
[0003] In the portable information communication device, a search for a use other than the use which has been used so far, such as a portable telephone, is being made. Devices (assistants) focused on assisting people (users) as candidates that emerged as a result
There is a use called. As more specific contents of human assistance, humans often forget things, so it is considered to record human actions and assist memory. At present, research is proceeding in that direction, and a method of manufacturing a prototype (portable behavior recorder) and assisting memory through the prototype is being explored.

【0004】その試作機としては、例えば研究所内にお
けるユーザの行動として、ユーザが出会った人、いた部
屋、電話番号、電子メールや文書のやりとりをデータと
して逐一記録し、その記録したデータを、ユーザが検索
して表示できるようにしたものが製作されている。
[0004] As the prototype, for example, as a user's action in a research institute, the person the user met, the room where the user met, the telephone number, the exchange of e-mails and documents were recorded one by one as data, and the recorded data was recorded by the user. Has been produced that can be searched and displayed.

【0005】しかし、ユーザの行動を逐一記録する方式
には、記録すべき情報量は膨大となり、装置のコストの
上昇や大型化、重量の増加を招くという問題点がある。
ユーザが常に携帯することを考えれば、その問題点は深
刻である。
However, the method of recording user's actions one by one has a problem that the amount of information to be recorded is enormous, which leads to an increase in cost, size, and weight of the apparatus.
The problem is serious given that the user always carries it.

【0006】本発明の課題は、記録すべき情報量を抑え
つつ、効率的に人(ユーザ)を補助する携帯型行動記録
装置を提供することにある。
It is an object of the present invention to provide a portable action recording device for efficiently assisting a person (user) while suppressing the amount of information to be recorded.

【0007】[0007]

【課題を解決するための手段】本発明の第1の態様の携
帯型行動記録装置は、携帯しているユーザの行動を記録
することを前提とし、日時、場所、気温、及び気圧のな
かの少なくとも一つを環境データとして検出する環境デ
ータ検出手段と、環境データ検出手段が検出した環境デ
ータを、該環境データ検出手段が過去に検出した環境デ
ータと比較して、環境データのなかで所定値以上変化し
たデータが存在していた場合に、現時点における環境デ
ータを行動記録のデータとして記録する制御手段と、を
具備している。
The portable behavior recording apparatus according to the first aspect of the present invention is based on the premise that the behavior of a user who carries the portable behavior recording apparatus is recorded. Environmental data detecting means for detecting at least one as environmental data; comparing the environmental data detected by the environmental data detecting means with the environmental data detected in the past by the environmental data detecting means; And control means for recording the environmental data at the present time as the data of the action record when the changed data exists.

【0008】本発明の第2の態様の携帯型行動記録装置
は、上記第1の態様の構成に加えて、画像、及び音声の
少なくとも一方を、ユーザの周辺の状況を表す周辺デー
タとして取り込む取込手段を更に具備し、制御手段は、
環境データのなかで所定値以上変化したデータが存在し
ていた場合に、取込手段に画像、及び音声の少なくとも
一方を取り込ませ、該取込手段が取り込んだ周辺データ
と環境データを行動記録のデータとして記録する。
According to a second aspect of the present invention, in addition to the configuration of the first aspect, the portable action recording device according to the first aspect further includes a device for capturing at least one of an image and a voice as peripheral data representing a situation around the user. And a control unit,
When there is data that has changed by a predetermined value or more in the environmental data, the capturing means captures at least one of an image and a sound, and the surrounding data and the environmental data captured by the capturing means are recorded in the action record. Record as data.

【0009】なお、上記第1或いは第2の態様の構成に
おいて、制御手段は、行動記録のデータを、所定の通信
手段を介して接続される外部装置に送信して格納させ
る、ことが望ましい。
[0009] In the configuration of the first or second aspect, it is desirable that the control means transmits and stores the data of the action record to an external device connected via predetermined communication means.

【0010】本発明の第3の態様の携帯型行動記録装置
は、上記第1或いは第2の態様の構成に加えて、周辺デ
ータを再生する再生手段、及び環境データを表示する表
示手段の少なくとも一方と、行動記録のデータの検索条
件を入力するための入力手段と、入力手段により入力さ
れた検索条件に従って行動記録のデータを検索し、該検
索条件に該当するデータを、再生手段により再生、或い
は表示手段に表示させる検索手段と、を更に具備してい
る。
A portable action recording device according to a third aspect of the present invention has at least one of a playback device for playing back peripheral data and a display device for displaying environmental data, in addition to the configuration of the first or second embodiment. On the other hand, input means for inputting a search condition of the data of the action record, and data of the action record are searched according to the search condition input by the input means, and data corresponding to the search condition is reproduced by the reproduction means. Alternatively, the information processing apparatus further comprises a search means for displaying the information on the display means.

【0011】本発明は、環境データを構成する各データ
の変化に基づいて、ユーザの行動を記録すべきか否かの
選別を行い、その変化が大きかった場合に、ユーザの行
動を記録する。
According to the present invention, a decision is made as to whether or not the user's action should be recorded based on the change in each piece of data constituting the environment data. If the change is large, the user's action is recorded.

【0012】データの変化が大きいことは、普通、ユー
ザが置かれている環境(状況)が大きく変化した(して
いる)ことを意味する。環境が大きく変化しているとき
には、そうでないときと比較して、ユーザはより多くの
情報を環境から受け取る。情報が多くなる程、それを思
い出させるきっかけが増える。これらのことから、上記
のような選別は、ユーザに記憶を思い出させるのに効果
的な情報を選んで記録することになる。換言すれば、記
録するデータ量が少なくとも大きな効果が得られ、人の
補助に大きく貢献することができるようになる。
A large change in data usually means that the environment (situation) in which the user is placed has changed greatly. When the environment is changing significantly, the user receives more information from the environment than when it is not. The more information you have, the more opportunities to remind it. From these facts, the above-mentioned selection selects and records information effective for reminding the user of the memory. In other words, the amount of data to be recorded at least has a large effect, and can greatly contribute to human assistance.

【0013】その記録したデータを他の機器に格納させ
るようにした場合には、データの格納に必要なメモリ容
量が低減し、コストや装置の大型化、重量の増加等を抑
えられるようになる。上記の他の機器には、サーバーや
ホストといった位置づけの装置を容易に適用させること
が可能である。他の機器に格納された分を含むデータを
見ることができるようにした場合には、より利便性の高
い装置としてユーザに提供できるようになる。
When the recorded data is stored in another device, the memory capacity required for storing the data is reduced, and the cost, the size of the device, and the increase in weight can be suppressed. . It is possible to easily apply a device such as a server or a host to the other devices. When data including data stored in another device can be viewed, the device can be provided to the user as a more convenient device.

【0014】[0014]

【発明の実施の形態】以下、図面を参照しながら、本発
明の実施の形態につき詳細に説明する。図1は、本実施
の形態による携帯型行動記録装置が採用されたシステム
構成図である。本実施の形態では、携帯型行動記録装置
を移動端末装置(以降、単に移動端末と記す)として実
現させている。
Embodiments of the present invention will be described below in detail with reference to the drawings. FIG. 1 is a system configuration diagram in which the portable action recording device according to the present embodiment is employed. In the present embodiment, the portable behavior recording device is realized as a mobile terminal device (hereinafter simply referred to as a mobile terminal).

【0015】図1に示すように、ネットワーク(ワイド
エリアネットワーク(WAN)やローカルエリアネット
ワーク(LAN))には、移動端末用制御パーソナルコ
ンピュータ(PC)101、個人用パーソナルコンピュ
ータ(PC)102が接続されている。また、他のネッ
トワークとの接続のために、NCU(網制御装置)10
3と回線104、無線通信を行うアンテナ基地局10
5、各エリア内で操作される移動端末108をネットワ
ークに接続するための端子106、及び光リンクユニッ
ト107がネットワークに接続されている。移動端末1
08は、端子106、光リンクユニット107、或いは
アンテナ基地局108を利用することで、移動端末制御
用PC101や個人用PC102との通信が行えるよう
に構成されている。
As shown in FIG. 1, a mobile terminal control personal computer (PC) 101 and a personal personal computer (PC) 102 are connected to a network (wide area network (WAN) or local area network (LAN)). Have been. Also, for connection with another network, an NCU (network control device) 10
3 and line 104, antenna base station 10 for wireless communication
5. A terminal 106 for connecting a mobile terminal 108 operated in each area to a network, and an optical link unit 107 are connected to the network. Mobile terminal 1
08 is configured to communicate with the mobile terminal control PC 101 and the personal PC 102 by using the terminal 106, the optical link unit 107, or the antenna base station 108.

【0016】図2は、上記移動端末108の外観図であ
る。次に、この図2を参照して、移動端末108の外観
構成について説明する。図2に示すように、移動端末1
08は、全体として薄い箱状の形状であり、その一面
に、LCD表示部201、カメラ202、マイク20
3、及びスピーカ207が備えられている。また、その
側面には、汎用のIF(インターフェイス)コネクタ2
04、無線(光)通信用のセンサ窓205、有線通信用
ソケット206、及び無線通信用アンテナ208が備え
られている。汎用IFコネクタ204には、例えば気温
や気圧等を検出する各種センサや現在の場所を検出する
GPS(グローバル・ポジショニング・システム)を備
えた装置208を装着することができる。以降、各種セ
ンサやGPSを備えた装置209を、単にGPSと呼ぶ
ことにする。
FIG. 2 is an external view of the mobile terminal 108. Next, an external configuration of the mobile terminal 108 will be described with reference to FIG. As shown in FIG.
Reference numeral 08 denotes a thin box-like shape as a whole, and the LCD display unit 201, the camera 202, the microphone 20
3 and a speaker 207 are provided. In addition, a general-purpose IF (interface) connector 2
04, a sensor window 205 for wireless (optical) communication, a socket 206 for wired communication, and an antenna 208 for wireless communication. The general-purpose IF connector 204 can be equipped with a device 208 including various sensors for detecting, for example, temperature and pressure, and a GPS (global positioning system) for detecting the current location. Hereinafter, the device 209 including various sensors and GPS will be simply referred to as GPS.

【0017】図3は、その移動端末108の構成図であ
る。バス301にはCPU302、メモリ(ROM及び
RAM)303が接続されており、CPU302は、基
本的にはメモリ303のROM内に格納されているプロ
グラムを実行することにより、端末108全体の制御を
行う。
FIG. 3 is a configuration diagram of the mobile terminal 108. A CPU 302 and memories (ROM and RAM) 303 are connected to the bus 301, and the CPU 302 basically controls the entire terminal 108 by executing a program stored in the ROM of the memory 303. .

【0018】LCD304に表示すべき情報は、メモリ
306に格納される。LCDドライバ305は、そのメ
モリ306に格納されている情報に従ってLCD304
を駆動し、LCD304上にその情報を表示する。LC
D制御部307は、LCDドライバ305に制御コマン
ドを送出して、メモリ306内で表示すべき情報の選択
や、その表示タイミングの制御を行う。CPU302
は、メモリ306に表示させるべき情報を転送したり、
LCD制御部307に制御コマンドを送出することによ
り、LCD304による情報の表示を制御する。
Information to be displayed on LCD 304 is stored in memory 306. The LCD driver 305 operates according to the information stored in the memory 306.
To display the information on the LCD 304. LC
The D control unit 307 sends a control command to the LCD driver 305 to select information to be displayed in the memory 306 and control the display timing. CPU 302
Transfers information to be displayed in the memory 306,
By transmitting a control command to the LCD control unit 307, the display of information on the LCD 304 is controlled.

【0019】上記LCD304には、その全体を覆うよ
うに、タッチパネル308が設けられている。上述した
LCD表示部201は、LCD304と、このタッチパ
ネル48とから構成されている。タッチパネル制御部3
09は、ユーザが指(ここでは器具を含む)を接触させ
たタッチパネル308上の位置を検出する。その検出結
果は、バス301を介してCPU302に送出される。
CPU302は、LCD304に表示させている情報、
及びタッチパネル308上で指がタッチされている位置
から、ユーザの指示内容を解釈し、ユーザの指示に従っ
て端末108を制御する。
The LCD 304 is provided with a touch panel 308 so as to cover the whole. The above-described LCD display unit 201 includes an LCD 304 and the touch panel 48. Touch panel control unit 3
09 detects a position on the touch panel 308 at which the user has touched a finger (including an appliance in this case). The detection result is sent to the CPU 302 via the bus 301.
The CPU 302 displays information displayed on the LCD 304,
Then, the content of the user's instruction is interpreted from the position where the finger is touched on the touch panel 308, and the terminal 108 is controlled according to the user's instruction.

【0020】図2に示すカメラ202は、例えばCCD
カメラである。そのカメラ202が出力したアナログビ
デオ信号は、A/Dコンバータ310でデジタルデータ
に変換された後、メモリ311に格納される。カメラ制
御部312は、CPU302からの指示に従って、カメ
ラ202を構成する各素子に蓄えられた電荷の取り出し
や、取り出した信号に対する補正、デジタル化されたビ
デオ(画像)データのメモリ311への格納といった制
御を行う。メモリ311に格納されたビデオデータは、
CPU302によって読み出され、例えばネットワーク
に接続されている移動端末制御用PC101に伝送され
る。
The camera 202 shown in FIG.
Camera. The analog video signal output by the camera 202 is converted into digital data by the A / D converter 310 and stored in the memory 311. The camera control unit 312 extracts an electric charge stored in each element constituting the camera 202, corrects the extracted signal, and stores digitized video (image) data in the memory 311 in accordance with an instruction from the CPU 302. Perform control. The video data stored in the memory 311 is
The data is read by the CPU 302 and transmitted to, for example, the mobile terminal control PC 101 connected to the network.

【0021】マイク203が出力したアナログの音声信
号は、A/Dコンバータ313によりデジタル化された
後、マイク制御部314に出力される。マイク制御部3
14は、CPU302の指示に従い、A/Dコンバータ
313が出力するデジタルの音声データを特定のサンプ
リング周期で取り込む。その取り込んだ音声データに対
し、例えばADPCM方式等の圧縮を施してバス301
に出力する。
The analog audio signal output from the microphone 203 is digitized by the A / D converter 313 and then output to the microphone control unit 314. Microphone control unit 3
14 takes in digital audio data output from the A / D converter 313 at a specific sampling cycle in accordance with an instruction from the CPU 302. The captured audio data is compressed by, for example, the ADPCM method, and
Output to

【0022】バス301に接続されているスピーカ制御
部316は、例えばCPU302から音声データを受け
取り、その音声データをD/Aコンバータ315に出力
する。そのD/Aコンバータ315は、音声データをア
ナログの音声信号に変換してスピーカ207に出力す
る。スピーカ207は、そのアナログの音声信号を音声
出力として出力する。
The speaker control unit 316 connected to the bus 301 receives audio data from, for example, the CPU 302 and outputs the audio data to the D / A converter 315. The D / A converter 315 converts the audio data into an analog audio signal and outputs it to the speaker 207. Speaker 207 outputs the analog audio signal as an audio output.

【0023】バス301に接続されているICカードイ
ンターフェイス317、通信制御部318、及び汎用イ
ンターフェイス319が接続されている。ICカードイ
ンターフェイス317にICカード323を接続するこ
とで、そのICカード323を補助記憶装置として使用
することができる。
The IC card interface 317, communication control unit 318, and general-purpose interface 319 connected to the bus 301 are connected. By connecting the IC card 323 to the IC card interface 317, the IC card 323 can be used as an auxiliary storage device.

【0024】通信制御部318は、通信を行うための制
御部であり、有線トランシーバ320、無線トランシー
バ321、322が接続されている。有線トランシーバ
320は、例えばMODEMであり、図1におけるネッ
トワーク上の端子106、或いは例えば回線104に接
続されている他のネットワーク(例えば電話回線網)と
接続して、データの送受信を行う。無線トランシーバ3
21は、光リンクユニット107と光でリンクして、デ
ータの送受信を行う。無線トランシーバ322は、アン
テナ基地局105を介したデータの送受信を行う。これ
らのトランシーバ320〜322、及び通信制御部31
8により、移動端末108はネットワークに接続されて
いる機器との通信を行うことができる。
The communication control unit 318 is a control unit for performing communication, and is connected to the wired transceiver 320 and the wireless transceivers 321 and 322. The wired transceiver 320 is, for example, a MODEM, and transmits and receives data by connecting to the terminal 106 on the network in FIG. 1 or another network (for example, a telephone network) connected to, for example, the line 104. Wireless transceiver 3
Reference numeral 21 optically links the optical link unit 107 to transmit and receive data. The wireless transceiver 322 transmits and receives data via the antenna base station 105. These transceivers 320 to 322 and communication control unit 31
8 allows the mobile terminal 108 to communicate with devices connected to the network.

【0025】各トランシーバ320〜322を介した通
信は、通信するデータをフレームに構成して行ってい
る。図4は、そのフレームの構成図である。図4に示す
ように、フレームは、ヘッダ部とデータ部とから構成さ
れている。データ部には、相手先(送信)先に送信すべ
きデータが格納され、ヘッダ部には、そのデータ部に格
納されたデータを送る相手(送信)先のアドレス、送信
元(端末)のアドレス、相手先に対する要求内容(コマ
ンド)等が格納される。
Communication via each of the transceivers 320 to 322 is performed by composing data to be communicated into frames. FIG. 4 is a configuration diagram of the frame. As shown in FIG. 4, the frame includes a header section and a data section. The data section stores data to be transmitted to the destination (transmission) destination, and the header section stores the address of the transmission destination (transmission destination) and the address of the transmission source (terminal) to which the data stored in the data section is transmitted. , A request content (command) for the destination, and the like are stored.

【0026】汎用インターフェイス319は、図2に示
す汎用インターフェイスコネクタ204を介して、その
コネクタ204に装着された装置とのデータのやりとり
を行う。コネクタ204にGPS209が接続されてい
る場合には、このGPS209から、気温、気圧、場所
といった環境を表すデータ(パラメータ)が、汎用イン
ターフェイス319を介してCPU302に送られる。
日時については、例えばCPU302は自身が備えてい
るリアルタイムクロックから取得する。
The general-purpose interface 319 exchanges data with a device mounted on the general-purpose interface connector 204 shown in FIG. When the GPS 209 is connected to the connector 204, data (parameters) indicating the environment such as the temperature, the atmospheric pressure, and the location are transmitted from the GPS 209 to the CPU 302 via the general-purpose interface 319.
For the date and time, for example, the CPU 302 obtains it from a real-time clock provided for itself.

【0027】なお、CPU302が実行するプログラム
は、例えばネットワークを介して他の機器から取得して
も良く、ICカード323等の端末108に着脱自在に
装着される記憶媒体から取得するようにしても良い。ま
た、メモリ303のROMもしくはRAMなどの記憶媒
体から取得しても良い。
The program executed by the CPU 302 may be obtained from another device via a network, for example, or may be obtained from a storage medium such as an IC card 323 detachably mounted on the terminal 108. good. Alternatively, it may be obtained from a storage medium such as a ROM or a RAM of the memory 303.

【0028】以上の構成において、その動作を説明す
る。CPU302は、端末108の電源がオンされる
と、メモリ303のROM内に格納されているプログラ
ムを読み出し、それを実行することでその制御を開始す
る。その後は、ユーザがタッチパネル308に対して行
った操作に応じて、ユーザが所望する処理を実現するた
めの制御を行う。その制御により、LCD304に表示
させる情報の切り換え、カメラ202を用いた画像の取
り込み、マイク203が拾った音声の取り込み、スピー
カ207による音声出力が行われる。また、ネットワー
クに接続された機器との通信が行われる。
The operation of the above configuration will be described. When the power of the terminal 108 is turned on, the CPU 302 reads out a program stored in the ROM of the memory 303 and starts the control by executing the program. After that, in accordance with an operation performed on the touch panel 308 by the user, control for realizing a process desired by the user is performed. Under the control, switching of information to be displayed on the LCD 304, capturing of an image using the camera 202, capturing of sound picked up by the microphone 203, and sound output by the speaker 207 are performed. Further, communication with a device connected to the network is performed.

【0029】その一方でCPU302は、ユーザの行動
の記録を行う。その行動の記録は、例えばユーザが場所
を移動するといった環境の変化を検出した場合に行う。
本実施の形態では、日時(何月日、及び時刻)、場所、
気温、及び気圧を環境を表すデータ(環境データ)とし
て採用し、その環境データのなかで大きく変化したデー
タが一つでもあったときに、ユーザの行動を記録するよ
うにしている。CPU302は、上述したように、日時
をリアルタイムクロックから取得し、日時を除く環境デ
ータを汎用インターフェイスコネクタ204に装着され
たGPS204から取得する。
On the other hand, the CPU 302 records the behavior of the user. The recording of the action is performed, for example, when a change in the environment such as the user moving from place to place is detected.
In the present embodiment, the date and time (month and date and time), location,
The temperature and the atmospheric pressure are adopted as data representing the environment (environmental data), and the behavior of the user is recorded when any one of the environment data greatly changes. As described above, the CPU 302 obtains the date and time from the real-time clock, and obtains environmental data excluding the date and time from the GPS 204 attached to the general-purpose interface connector 204.

【0030】行動を記録する場合には、ユーザがその時
点での状況をより容易に思い出せるように、ユーザの周
辺の状態を表す周辺データとして画像、及び音声を所定
時間取り込み、その周辺データを環境データと合わせて
レコードとして格納する。図5は、そのレコードの構成
図である。なお、画像、及び音声は、そのデータ量が大
きいことから、他の項目のデータとは異なり、それが格
納されているファイル名をレコードに格納させている。
そのレコード(データ)は、メモリ303のRAM、或
いはICカード323等に格納される。
When recording an action, images and sounds are captured for a predetermined period of time as peripheral data representing the state of the surroundings of the user so that the user can easily remember the situation at that time, and the peripheral data is stored in the environment. Store as a record along with the data. FIG. 5 is a configuration diagram of the record. It should be noted that, since the data amount of the image and the sound is large, unlike the data of other items, the file name in which the data is stored is stored in the record.
The record (data) is stored in the RAM of the memory 303, the IC card 323, or the like.

【0031】場所や気温などが大きく変化した場合、ユ
ーザ(移動端末108保持者)の環境が大きく変化した
と考えることができる。そのような環境が大きく変化し
た時点(以降、行動変化点と記す)では、人は普段より
も緊張している状態となっていることが多い。緊張状態
では、そうでないときと比較して、周りからの情報を多
く取り込んでいる。このため、行動変化点での環境を表
示した場合には、効率的に記憶を呼び起こさせることが
できる。更には周りの映像や音声を再生した場合には、
より効率的に記憶を呼び起こさせることができる。この
ように、人の記憶を呼び起こせる可能性が高い時点での
行動を選択して記録することで、少ないデータ量であっ
ても人の補助において大きく貢献することができる。
When the location, the temperature, and the like change significantly, it can be considered that the environment of the user (the holder of the mobile terminal 108) has changed significantly. When such an environment changes significantly (hereinafter referred to as an action change point), a person is often more nervous than usual. In a nervous state, they take in more information from around than when they are not. For this reason, when the environment at the action change point is displayed, it is possible to efficiently evoke the storage. Furthermore, when the surrounding video and audio are played,
Recall can be made more efficiently. As described above, by selecting and recording an action at a time when there is a high possibility that the memory of the person can be recalled, even a small amount of data can greatly contribute to assisting the person.

【0032】また、本実施の形態では、その記録したデ
ータを、ネットワークに接続されている移動端末制御用
PC101に転送して格納させている。このため、記録
したデータを格納するための必要な容量を小さくするこ
とができ、そのコストの上昇や、大型化、重量の増加を
抑えることができる。そのユーザ以外の人にとっては、
ユーザからの連絡がなくとも居場所を把握することがで
きるようになる。また、当然のことながら、その他の種
々のデータ分析の基本データとして活用することもでき
る。
Further, in the present embodiment, the recorded data is transferred to and stored in the mobile terminal control PC 101 connected to the network. For this reason, the capacity required for storing the recorded data can be reduced, and the increase in cost, size, and weight can be suppressed. For anyone other than that user,
The location can be grasped without a contact from the user. Of course, it can also be used as basic data for various other data analysis.

【0033】上記のようにして記録したデータは、移動
端末108で検索することができる。ユーザが検索条件
をタッチパネル308上で入力した場合、CPU302
は、その検索条件に該当するレコードをRAM、ICカ
ード323、更には移動端末制御用PC101から取得
して、それをLCD304に表示させる。
The data recorded as described above can be searched by the mobile terminal 108. When the user inputs a search condition on the touch panel 308, the CPU 302
Acquires the record corresponding to the search condition from the RAM, the IC card 323, and the mobile terminal control PC 101, and displays the record on the LCD 304.

【0034】図6は、そのようにして検索された行動記
録の表示例を示す図である。この表示例は、検索条件と
して年月日(1997/10/07)を入力した場合の
ものである。
FIG. 6 is a diagram showing a display example of the action record searched as described above. This display example is a case where the date (1997/10/07) is input as a search condition.

【0035】また、本実施の形態では、行動変化点で画
像や音声を記録させるか否か、即ち画像と音声をメモと
して記録するか否かをユーザが選択できるようにしてい
る。画像と音声の欄(項目)において、“有”はそのデ
ータを記録したことを示し、“無”はそれを記録してい
ないことを示している。画像と音声は、タッチパネル3
08によりレコードを指定し、それの再生を指示するこ
とで再生させることができる。検索条件は、一つだけで
なく、複数入力することもできる。
In this embodiment, the user can select whether or not to record an image or a sound at the action change point, that is, whether or not to record the image and the sound as a memo. In the image and audio columns (items), “present” indicates that the data has been recorded, and “absent” indicates that the data has not been recorded. Image and sound are on the touch panel 3
A record can be reproduced by designating a record by 08 and instructing reproduction of the record. Not only one search condition but also a plurality of search conditions can be input.

【0036】図6には、検索条件に該当する5つのレコ
ードが表形式で表示されている。この日におけるユーザ
の各時刻での行動は、例えば以下のようなものである。
ユーザは、8時38分には会社内におり、その後外出し
て10時38分に外出先の画像と音声をメモがわりに記
録し(気温の変化による記録)、12時38分頃に帰社
(気温の変化による記録)。一旦会社に戻った後、得意
先に出かけ、13時30分に得意先で画像と音声をメモ
として記録し(場所の変化による記録)、17時30分
頃に帰社(場所の変化による記録)。
FIG. 6 shows five records corresponding to the search condition in a table format. The behavior of the user at each time on this day is, for example, as follows.
The user is inside the company at 8:38, then goes out and records the image and sound of the destination at 10:38 with a memo (recording due to temperature change), and returns to the office at about 12:38. (Recorded by changes in temperature). After returning to the company once, go to the customer, record the image and sound as a memo at 13:30 at the customer (recording due to change of location), and return at around 17:30 (recording due to change of location) .

【0037】このように、移動端末108上で記録した
データを見ることができるようになっている。それによ
り、ユーザは、いつでもどこでも、必要に応じて記憶を
思い出すために記録されているデータを見ることができ
るため、移動端末108を非常に利便性の高い機器とし
てユーザに提供することができる。
As described above, the data recorded on the mobile terminal 108 can be viewed. Thereby, the user can view the recorded data to recall the memory whenever and where necessary, so that the mobile terminal 108 can be provided to the user as a very convenient device.

【0038】次に、図7、及び図8を参照して、上記移
動端末108の動作を詳細に説明する。図7は、移動端
末108の全体処理のフローチャートである。先ず、こ
の図7を参照して、その全体処理について詳細に説明す
る。この全体処理は、端末108の電源がオンされた
後、CPU302が、記憶媒体、例えばメモリ303の
ROMもしくはRAM内に格納されているプログラムを
読み出して実行することで実現される処理である。な
お、ここでは、本発明の理解を容易とするために、本発
明に特に関わる部分を抽出して示している。
Next, the operation of the mobile terminal 108 will be described in detail with reference to FIG. 7 and FIG. FIG. 7 is a flowchart of the entire process of the mobile terminal 108. First, the overall processing will be described in detail with reference to FIG. This overall processing is realized by the CPU 302 reading and executing a program stored in a storage medium, for example, a ROM or a RAM of the memory 303, after the power of the terminal 108 is turned on. Here, in order to facilitate understanding of the present invention, parts particularly related to the present invention are extracted and shown.

【0039】先ず、ステップ701では、キー入力が行
われたか否か判定する。ユーザが、タッチパネル308
に対して何らかの操作を行った場合、その判定はYES
となってステップ702に移行する。そうでない場合に
は、その判定はNOとなってステップ706に移行す
る。
First, in step 701, it is determined whether a key input has been performed. When the user touches the touch panel 308
If any operation is performed on, the determination is YES
And the process proceeds to step 702. Otherwise, the determination is no and the process moves to step 706.

【0040】ステップ702では、そのキー入力が指定
した内容を解析し、それがモード指定のためのものであ
るか否か判定する。ユーザがモードを指定するキー入力
を行った場合、その判定はYESとなってステップ70
3に移行する。そうでない場合には、その判定はNOと
なってステップ704に移行する。ステップ703で
は、ユーザが指定したモード、例えば画像・音声の取込
モードの設定を行い、その後、ステップ701に戻る。
In step 702, the contents designated by the key input are analyzed, and it is determined whether or not the contents are for mode designation. If the user has made a key input to specify the mode, the determination is YES and step 70
Move to 3. Otherwise, the determination is no and the process moves to step 704. In step 703, the mode specified by the user, for example, the image / sound capture mode is set, and then the process returns to step 701.

【0041】他方のステップ704では、キー入力が行
動記録したデータの読み出しや検索のためのものである
か否か判定する。ユーザがタッチパネル308上で検索
条件等を入力した場合、その判定はYESとなってステ
ップ705に移行する。そうでない場合には、その判定
はNOとなってステップ701に戻る。ステップ705
では、検索条件等はデータ部に、その検索条件に該当す
るレコードの検索を相手先に要求する行動読出コマンド
をヘッダ部にそれぞれ格納したフレームを作成し、それ
を送信する。本実施の形態では、行動記録したデータは
移動端末制御PC101が格納するようにしているの
で、作成したフレームを移動端末制御PC101を相手
先として送信する。それが終了した後、ステップ701
に戻る。
In the other step 704, it is determined whether or not the key input is for reading or retrieving data on which the action is recorded. If the user inputs a search condition or the like on the touch panel 308, the determination is YES and the process moves to step 705. Otherwise, the determination is no and the process returns to step 701. Step 705
Then, a frame in which an action read command for requesting the other party to search for a record corresponding to the search condition is created in the data portion and the header portion is created and transmitted, respectively. In the present embodiment, the mobile terminal control PC 101 stores the data on which the action has been recorded, so that the created frame is transmitted to the mobile terminal control PC 101 as the destination. After that, step 701
Return to

【0042】行動読出コマンド、及び検索条件を格納し
たフレームを移動端末制御PC101に送信すると、後
述するように、移動端末制御PC101は、検索条件に
該当するレコードを抽出して、それを移動端末108に
送信する。このように、移動端末制御PC101を記憶
装置として利用し、必要に応じて移動端末制御PC10
1からデータを取得することで、移動端末108で必要
とするメモリ容量を小さくすることができ、また、コス
ト高や大型化、重量の増大を抑えることができる。
When the action read command and the frame storing the search condition are transmitted to the mobile terminal control PC 101, the mobile terminal control PC 101 extracts a record corresponding to the search condition and sends it to the mobile terminal 108, as described later. Send to As described above, the mobile terminal control PC 101 is used as a storage device, and the mobile terminal control PC
By acquiring the data from No. 1, the memory capacity required for the mobile terminal 108 can be reduced, and the cost, size, and weight can be suppressed.

【0043】ユーザがキー入力を行っていない場合、ス
テップ701の判定がNOとなり、ステップ706に移
行する。そのステップ706では、受信したデータの有
無を判定する。例えば移動端末制御PC101が移動端
末108にデータを送信した場合、受信したデータが有
りとして、ステップ707に移行する。
If the user has not performed a key input, the determination in step 701 is NO, and the flow shifts to step 706. In step 706, the presence or absence of the received data is determined. For example, when the mobile terminal control PC 101 transmits data to the mobile terminal 108, it is determined that there is received data, and the process proceeds to step 707.

【0044】ステップ707では、受信したデータをL
CD304に表示させ、そのLCD304に表示させた
データを、ユーザのタッチパネル308に対する操作に
応じて修正・編集する処理を行う。このステップ707
を実行することにより、図6に示すような行動記録が表
示されることになる。続くステップ708では、その修
正・編集が行われたか否か判定する。ユーザが表示され
ているデータの修正や編集を行わなかった場合、ステッ
プ701に戻る。そうでない場合には、ステップ709
に移行する。
In step 707, the received data is
A process of displaying the data on the CD 304 and correcting / editing the data displayed on the LCD 304 in accordance with a user operation on the touch panel 308 is performed. This step 707
Is executed, an action record as shown in FIG. 6 is displayed. In a succeeding step 708, it is determined whether or not the correction / edit has been performed. If the user has not modified or edited the displayed data, the process returns to step 701. Otherwise, step 709
Move to

【0045】なお、LCD304へのデータの表示は、
例えば、CPU302が、トランシーバ320〜322
のなかの何れか、通信制御部318を介して受け取った
データをビットマップパターンに展開してメモり306
に格納するとともに、LCD制御部307に、その格納
したデータの表示を指示することで実現される。表示さ
せたデータの修正(例えばより正確な時刻の入力)等
は、タッチパネル制御部309から受け取ったユーザの
指の位置に関する情報を基に、ユーザの指示内容を解析
し、その解析に従ってメモり306内に格納したデータ
を変更することで実現される。
The display of data on the LCD 304 is as follows.
For example, the CPU 302 may use the transceivers 320 to 322
The data received via the communication control unit 318 is developed into a bitmap pattern and
And the LCD control unit 307 is instructed to display the stored data. Correction of the displayed data (for example, input of a more accurate time) or the like is performed based on the information on the position of the user's finger received from the touch panel control unit 309, and the contents of the user's instruction are analyzed. It is realized by changing the data stored in.

【0046】ステップ709では、修正・編集を反映さ
せたデータをデータ部に、そのデータを行動記録のデー
タとして格納することを相手先(ここでは移動端末制御
PC101)に要求する行動記録コマンドをヘッダ部に
それぞれ格納したフレームを作成する。続くステップ7
10では、その作成したフレームを相手先に送信すると
ともに、その送信したデータが不要である場合には消去
する。それが終了した後、ステップ701に戻る。
In step 709, an action record command requesting the destination (here, the mobile terminal control PC 101) to store the data reflecting the correction / edit in the data section and storing the data as action record data in the header. Create frames stored in each section. Next step 7
In step 10, the created frame is transmitted to the other party, and the transmitted data is deleted when unnecessary. After that, the process returns to step 701.

【0047】一方、移動端末制御PC101が格納する
ようにしているので、作成したフレームを移動端末制御
PC101を相手先として送信する。それが終了した
後、ステップ701に戻る。
On the other hand, since the mobile terminal control PC 101 stores the data, the created frame is transmitted to the mobile terminal control PC 101 as the destination. After that, the process returns to step 701.

【0048】ユーザがキー入力を行っておらず、また、
移動端末制御PC101からデータが送られてきていな
い場合、ステップ706の判定がNOとなり、ステップ
711に移行する。そのステップ711では、行動記録
としてメモリ303のRAM等に格納したデータ量(レ
コード数)が一定量以上有るか無いか判定する。その一
定量以上行動記録のデータが無い場合には、ステップ7
01に戻る。そうでない場合には、ステップ709に移
行する。そのステップ709では、蓄えられているデー
タをデータ部に格納したフレームを作成し、ステップ7
10でその作成したフレームの送信を行う。一定量以上
蓄えた行動記録のデータを送信した場合には、その送信
が終了した後、それを消去する。これにより、移動端末
108で必要とするメモリ容量の低減化が実現される。
The user has not entered any key, and
If data has not been sent from the mobile terminal control PC 101, the determination in step 706 is NO, and the process moves to step 711. In step 711, it is determined whether or not the amount of data (the number of records) stored in the RAM or the like of the memory 303 as the action record is equal to or more than a certain amount. If there is no action record data exceeding the certain amount, step 7
Return to 01. Otherwise, the process proceeds to step 709. In step 709, a frame in which the stored data is stored in the data section is created, and step 7 is executed.
In step 10, the created frame is transmitted. When the action record data stored for a certain amount or more is transmitted, the data is deleted after the transmission is completed. As a result, a reduction in the memory capacity required for the mobile terminal 108 is realized.

【0049】なお、フレームの送信は、CPU302
が、フレームを通信制御部318に送り、通信制御部3
18がそのフレームを、トランシーバ320〜322の
何れかを介してネットワーク上に出力することで行われ
る。
The frame is transmitted by the CPU 302.
Sends the frame to the communication control unit 318,
18 outputs the frame to the network via any of the transceivers 320-322.

【0050】上記したように、本実施の形態では、行動
記録としてストアしたデータが一定量以上となった場合
にそれを移動端末制御PC101(ホストコンピュー
タ)に送っている。これは、通信コストを抑えるため
と、データ送信にかかる負荷を低減するためである。
As described above, in this embodiment, when the amount of data stored as an action record exceeds a certain amount, it is sent to the mobile terminal control PC 101 (host computer). This is to reduce communication costs and reduce the load on data transmission.

【0051】図8は、移動端末108のタイマインタラ
プト処理のフローチャートである。この処理は、CPU
302が、例えば自身が備えたタイマ機能による割り込
みの発生に応じて、メモリ303のROM内に格納され
たそれに対応するプログラムを読み出して実行すること
で行われる処理である。そのタイマ機能による割り込み
は、例えば数分から数十分間隔で発生するように設定さ
れる。その割り込み間隔は、ユーザが自身の行動パター
ンを考慮して、任意に設定できるようにしても良い。
FIG. 8 is a flowchart of the timer interrupt process of the mobile terminal 108. This processing is performed by the CPU
A process 302 is performed by reading and executing a corresponding program stored in the ROM of the memory 303 in response to, for example, occurrence of an interrupt due to a timer function provided therein. The interruption by the timer function is set, for example, to occur at intervals of several minutes to several tens minutes. The interruption interval may be arbitrarily set by the user in consideration of his / her own behavior pattern.

【0052】先ず、ステップ801では、データの取り
込みを行う。このステップ801において、CPU30
2は、汎用インターフェイス319を介してGPS20
9から場所、気温、気圧の各データ、自身のリアルタイ
ムクロックから日時データを取り込む。続くステップ8
02では、ステップ801で取り込んだ現時点の環境デ
ータを記憶する。その後、ステップ803に移行する。
First, at step 801, data is fetched. In this step 801, the CPU 30
2 is a GPS 20 via a general-purpose interface 319
From 9, data of location, temperature, and atmospheric pressure, and date and time data from its own real-time clock are taken. Next Step 8
In step 02, the current environment data captured in step 801 is stored. Thereafter, the process proceeds to step 803.

【0053】ステップ803では、現時点の環境データ
を前回に取り込んだ環境データと比較する。続くステッ
プ804では、環境データの何れかに一定値以上の差が
有るか否か判定する。それらの環境データの間におい
て、即ち場所、気温、気圧、日時の各データ間におい
て、それぞれのデータ毎に予め定められた値以上の差が
有った場合、その判定はYESとなってステップ805
に移行する。そうでない場合には、その判定はNOとな
って一連の処理を終了する。
In step 803, the current environmental data is compared with the previously captured environmental data. In the following step 804, it is determined whether or not any of the environmental data has a difference equal to or more than a certain value. If there is a difference between these environmental data, that is, between the data of the place, the temperature, the atmospheric pressure, and the date and time, which is greater than or equal to a predetermined value for each data, the determination is YES and step 805 is performed.
Move to Otherwise, the determination is NO and the series of processing ends.

【0054】ステップ805〜811では、ユーザの行
動変化点を検出したとして、その時点における環境デー
タ、及び画像や音声の周辺データの記録、即ち行動記録
が行われる。
In steps 805 to 811, it is assumed that a user's action change point has been detected, and recording of environmental data and peripheral data of images and sounds at that time, that is, action recording is performed.

【0055】先ず、ステップ805では、画像・音声の
取込モードが設定されているか否か判定する。ユーザが
画像や音声の取込モードに設定していた場合、その判定
はNOとなってステップ809に移行する。そうでない
場合には、その判定はYESとなってステップ806に
移行する。
First, in step 805, it is determined whether or not the image / audio capture mode is set. If the user has set the image or audio capture mode, the determination is no and the process moves to step 809. Otherwise, the determination is yes and the process moves to step 806.

【0056】ステップ806〜808では、取込モード
が設定されており、画像と音声の取り込みが行えること
から、ユーザのその場の判断に応じた画像と音声の取り
込みが行われる。
In steps 806 to 808, since the capture mode is set and the image and the voice can be captured, the capture of the image and the voice according to the judgment of the user at that time is performed.

【0057】先ず、ステップ806では、行動変化点の
検出に伴って画像と音声の取り込みを行うための取り込
みモードに移行した旨をユーザに報知する。これは、例
えばスピーカ207、及びLCD304を用いてその旨
の報知する。それが終了した後、ステップ807に移行
する。
First, at step 806, the user is informed that the mode has been shifted to the capture mode for capturing images and sounds in response to the detection of the action change point. This is reported using, for example, the speaker 207 and the LCD 304. After that, the process moves to step 807.

【0058】なお、LCD304による報知は、CPU
302が、その旨を意味するデータをメモリ306に格
納し、LCD制御部307にそのデータの表示を指示す
ることで実現される。スピーカ207による報知は、C
PU302が、その旨を表す音声データを例えばメモり
303のROMから取得し、その音声データをスピーカ
制御部316に出力することで実現される。
The notification by the LCD 304 is made by the CPU.
302 is realized by storing data indicating this in the memory 306 and instructing the LCD control unit 307 to display the data. The notification by the speaker 207 is C
This is realized by the PU 302 acquiring audio data indicating the fact from, for example, the ROM of the memory 303 and outputting the audio data to the speaker control unit 316.

【0059】ステップ807では、ユーザが画像と音声
の取り込みを指示する操作を行うのを一定時間待つ。ユ
ーザにその操作を行わせるのは、行動変化点を検出した
際に移動端末108がどのような状態(鞄の中に収納さ
れている場合もある)となっているかわからないため
と、ユーザが適当に周囲の画像や音声をメモとして取り
込ませることができるようにするためである。一定時間
その操作が行われなかった場合、ユーザが画像や音声を
取り込ませる必要がないと考えているとして、ステップ
809に移行する。そうでない場合には、ステップ80
8に移行する。そのステップ808では、ユーザが行っ
た操作により、画像と音声を周辺データとして取り込
み、それを記憶する処理が行われる。その後、ステップ
809に移行する。
In step 807, the apparatus waits for a predetermined time for the user to perform an operation for instructing the capture of an image and a sound. The reason that the user performs the operation is that the mobile terminal 108 does not know what state (it may be stored in a bag) when the behavior change point is detected. This is to allow the user to capture surrounding images and sounds as notes. If the operation has not been performed for a certain period of time, it is determined that there is no need for the user to capture images and sounds, and the process proceeds to step 809. If not, step 80
Move to 8. In step 808, a process of capturing images and sounds as peripheral data and storing the peripheral data is performed by an operation performed by the user. Thereafter, the process proceeds to step 809.

【0060】ステップ809では、ステップ802、及
び808で記憶した各データ、及び変化点記録コマンド
から成るレコードを作成する。続くステップ810で
は、その作成したレコードを、移動端末制御PC101
に送信すべきデータとしてストアする。その後、ステッ
プ811において、前回の環境データを今回(現時点)
の環境データに置き換える。次にこのインタラプト処理
を実行した場合には、その環境データとそのときに取り
込んだ環境データとから、行動変化点の検出が行われ
る。その環境データの置き換えが終了した後、一連の処
理が終了する。
In step 809, a record including the data stored in steps 802 and 808 and the change point recording command is created. In the following step 810, the created record is stored in the mobile terminal control PC 101.
And store it as data to be transmitted. Then, in step 811, the previous environmental data is
Replace with environmental data. Next, when this interrupt processing is executed, a behavior change point is detected from the environmental data and the environmental data captured at that time. After the replacement of the environment data ends, a series of processing ends.

【0061】このようにして、移動端末108における
行動記録が行われる。次に、図9を参照して、移動端末
108から行動記録のデータが送信される移動端末制御
PC101(ホスト)側の動作について詳細に説明す
る。
[0061] In this manner, the action recording in the mobile terminal 108 is performed. Next, with reference to FIG. 9, the operation of the mobile terminal control PC 101 (host) side to which the data of the action record is transmitted from the mobile terminal 108 will be described in detail.

【0062】なお、この図9は、本発明の理解を容易と
するために、本発明(移動端末108)に関わる部分の
みを抽出して示したものである。この図9に示す処理
は、移動端末制御PC101に備えられたCPUが、P
C101に接続、或いは搭載されている記憶媒体、例え
ばハードディスクに格納されているプログラムを読み出
して実行することで行われる処理である。
FIG. 9 shows only parts related to the present invention (mobile terminal 108) in order to facilitate understanding of the present invention. The processing shown in FIG. 9 is executed when the CPU provided in the mobile terminal control PC 101
This processing is performed by reading and executing a program stored in a storage medium connected to or mounted on the C101, for example, a hard disk.

【0063】先ず、ステップ901では、移動端末10
8からのデータを受信するのを待つ。移動端末108が
移動端末制御PC101にデータを送信した場合に、ス
テップ902に移行する。
First, in step 901, the mobile terminal 10
Wait for the data from 8 to be received. When the mobile terminal 108 has transmitted data to the mobile terminal control PC 101, the process proceeds to step 902.

【0064】ステップ902では、フレームのヘッダ部
に格納されているコマンドの解析を行う。続くステップ
903では、そのコマンドが行動記録コマンドか否か判
定する。移動端末108がフレームのデータ部に格納さ
れているデータのストアを要求していた場合、その判定
はYESとなってステップ904に移行する。そうでな
い場合には、ステップ905に移行する。
In step 902, the command stored in the header of the frame is analyzed. In a succeeding step 903, it is determined whether or not the command is an action recording command. If the mobile terminal 108 has requested storage of the data stored in the data portion of the frame, the determination is YES and the process moves to step 904. Otherwise, the process proceeds to step 905.

【0065】ステップ904では、ヘッダ部に格納され
ている送信元のアドレスから、データを送信した移動端
末108を特定し、その移動端末別にデータをハードデ
ィスク等にストアする。ユーザは修正等を行ったデータ
であった場合には、それをその修正前のデータに置き換
えが行われる。それが終了した後、ステップ901に戻
る。
In step 904, the mobile terminal 108 that has transmitted the data is specified from the address of the transmission source stored in the header section, and the data is stored in a hard disk or the like for each mobile terminal. If the user has modified the data, the data is replaced with the data before the modification. After that, the process returns to step 901.

【0066】ステップ905では、ヘッダ部に格納され
ていたコマンドが行動読出コマンドか否か判定する。移
動端末108がフレームのデータ部に格納されている検
索条件に該当するデータ(レコード)の送信を要求して
いた場合、その判定はYESとなってステップ906に
移行する。そうでない場合には、その判定はNOとなっ
てステップ907に移行する。
In step 905, it is determined whether or not the command stored in the header is an action read command. If the mobile terminal 108 has requested transmission of data (record) corresponding to the search condition stored in the data portion of the frame, the determination is YES and the process moves to step 906. Otherwise, the determination is no and the process moves to step 907.

【0067】ステップ906では、ヘッダ部に格納され
ている送信元のアドレスから、データを送信した移動端
末108を特定し、その移動端末108に、検索条件を
満たす行動記録データ(レコード)を送信する。その
後、ステップ901に戻る。他方のステップ907で
は、移動端末108のそれら以外の要求、個人用PC1
02等からの要求等に対処するためのその他の処理を実
行し、その後、ステップ901に戻る。
In step 906, the mobile terminal 108 that has transmitted the data is specified from the source address stored in the header section, and the action record data (record) that satisfies the search condition is transmitted to the mobile terminal 108. . Thereafter, the process returns to step 901. In the other step 907, other requests of the mobile terminal 108, the personal PC 1
Other processing for responding to a request or the like from 02 or the like is performed, and thereafter, the process returns to step 901.

【0068】このように、移動端末制御PC101が動
作することにより、移動端末108が記録したデータを
移動端末制御PC101に随時格納することができ、ま
た、格納したデータを移動端末108上で検索して、そ
れの表示や再生を随時行うことができる。
As described above, when the mobile terminal control PC 101 operates, the data recorded by the mobile terminal 108 can be stored in the mobile terminal control PC 101 at any time, and the stored data is searched on the mobile terminal 108. Thus, it can be displayed and reproduced at any time.

【0069】なお、本実施の形態では、画像と音声の両
方を共に取り込めるようにしているが、それらのなかの
一方だけを選択して取り込めるようにしても良い。ま
た、行動変化点で記録したデータ(レコード)に対して
は、ユーザがテキスト情報のコメントを添えられるよう
にしても良い。行動変化点の検出については、ユーザが
自身の行動パターンを考慮して、それを判断する基準
(例えば気温の変化が何度以上であれば行動変化点と判
断させるかといった基準)、データ等を設定できるよう
にしても良い。行動変化点を判断するための環境データ
としては、上述したデータの他に、或いは替わりとして
明るさや湿度、周りの音量等を採用しても良い。
In this embodiment, both the image and the sound can be captured. However, only one of them may be selected and captured. In addition, the user may be able to attach a comment of text information to data (record) recorded at the action change point. Regarding the detection of an action change point, the user considers his / her own action pattern and determines a criterion (for example, a criterion for determining whether or not the temperature change is more than how many times the temperature is changed to an action change point), data, etc. It may be settable. As the environmental data for determining the action change point, in addition to the above-described data, or alternatively, brightness, humidity, surrounding volume, and the like may be adopted.

【0070】また、本実施の形態では、今回と前回の環
境データを比較することで行動変化点を検出するように
しているが、より多くの過去に検出した環境データを参
照して行動変化点を検出するようにしても良い。これに
より、比較的に緩やかで継続的な変化を検出することが
できるので、より現実に即した行動の記録を取ることが
できるようになる。
In this embodiment, the action change point is detected by comparing the current and previous environmental data. However, the action change point is referred to by referring to more environmental data detected in the past. May be detected. As a result, a relatively gradual and continuous change can be detected, and a more realistic action record can be recorded.

【0071】また、記録したデータの送信においては、
本実施の形態では、ある程度以上まとまってから一括し
て送信しているが、移動端末の置かれている状況に応じ
て、例えば自社の通信システムを使用できる場合には逐
一記録したデータを送信するようにしても良い。
In transmitting the recorded data,
In the present embodiment, the data is transmitted collectively after being collected to a certain degree or more, but according to the situation where the mobile terminal is placed, for example, when the communication system of the company can be used, the recorded data is transmitted one by one. You may do it.

【0072】また、本実施の形態では、移動端末装置
(携帯型情報通信機器)に本発明を適用させているが、
例えば常時ノート型のパーソナルコンピュータを携帯し
ているような人に対しては、本発明の機能を実現させる
プログラムをインストールさせて、そのコンピュータに
行動の記録を取らせるようにすることも可能である。
In the present embodiment, the present invention is applied to a mobile terminal device (portable information communication device).
For example, for a person who always carries a notebook personal computer, it is also possible to install a program for realizing the functions of the present invention and have the computer keep a record of actions. .

【0073】[0073]

【発明の効果】以上説明したように本発明は、環境デー
タを構成する各データの変化に基づいて、ユーザの行動
を記録すべきか否かの選別を行い、その変化が大きかっ
た場合に、ユーザの行動を記録する。これにより、ユー
ザに記憶を思い出させるのに効果的な情報を選んで記録
するため、記録するデータ量が少なくとも効率的に人の
記憶を思い出させることができる。
As described above, according to the present invention, whether or not the user's action should be recorded is selected based on the change of each data constituting the environmental data. Record your actions. Thereby, since the information effective to remind the user of the memory is selected and recorded, the amount of data to be recorded can at least efficiently remind the memory of the person.

【0074】また、記憶したデータを、通信システムを
介して他の装置に格納させるため、データの記憶に必要
なメモリ容量を低減することができる。それにより、装
置のコスト、大型化、重量等を抑えることができる。
Further, since the stored data is stored in another device via the communication system, the memory capacity required for storing the data can be reduced. As a result, the cost, size, weight, etc. of the device can be reduced.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本実施の形態が採用されたシステム構成図であ
る。
FIG. 1 is a system configuration diagram in which the present embodiment is adopted.

【図2】本実施の形態による移動端末の外観図である。FIG. 2 is an external view of a mobile terminal according to the present embodiment.

【図3】本実施の形態による移動端末の構成図である。FIG. 3 is a configuration diagram of a mobile terminal according to the present embodiment.

【図4】フレームの構成図である。FIG. 4 is a configuration diagram of a frame.

【図5】レコードの構成図である。FIG. 5 is a configuration diagram of a record.

【図6】行動記録の表示例を示す図である。FIG. 6 is a diagram showing a display example of an action record.

【図7】移動端末の全体処理のフローチャートである。FIG. 7 is a flowchart of an overall process of the mobile terminal.

【図8】移動端末のタイマインタラプト処理のフローチ
ャートである。
FIG. 8 is a flowchart of a timer interrupt process of the mobile terminal.

【図9】移動端末制御PCの全体処理のフローチャート
である。
FIG. 9 is a flowchart of an overall process of a mobile terminal control PC.

【符号の説明】[Explanation of symbols]

101 移動端末制御PC 103 NCU 105 アンテナ基地局 106 端子 107 光リンクユニット 108 移動端末 201 LCD表示部 202 カメラ 203 マイク 204 汎用インターフェイスコネクタ 208 無線通信用アンテナ 209 GPS 302 CPU 303 メモリ 101 Mobile terminal control PC 103 NCU 105 Antenna base station 106 Terminal 107 Optical link unit 108 Mobile terminal 201 LCD display unit 202 Camera 203 Microphone 204 General-purpose interface connector 208 Wireless communication antenna 209 GPS 302 CPU 303 Memory

Claims (4)

【特許請求の範囲】[Claims] 【請求項1】 携帯しているユーザの行動を記録する装
置であって、 日時、場所、気温、及び気圧のなかの少なくとも一つを
環境データとして検出する環境データ検出手段と、 前記環境データ検出手段が検出した環境データを、該環
境データ検出手段が過去に検出した環境データと比較し
て、前記環境データのなかで所定値以上変化したデータ
が存在していた場合に、現時点における前記環境データ
を行動記録のデータとして記録する制御手段と、 を具備したことを特徴とする携帯型行動記録装置。
1. An apparatus for recording the behavior of a user who is carrying an environment data detecting means for detecting at least one of a date and time, a place, a temperature, and an atmospheric pressure as environment data; The environmental data detected by the means is compared with the environmental data detected by the environmental data detecting means in the past, and if there is data that has changed by a predetermined value or more in the environmental data, the environmental data at the present time is detected. And control means for recording the action record data as action record data.
【請求項2】 画像、及び音声の少なくとも一方を、ユ
ーザの周辺の状況を表す周辺データとして取り込む取込
手段を更に具備し、 前記制御手段は、前記環境データのなかで所定値以上変
化したデータが存在していた場合に、前記取込手段に画
像、及び音声の少なくとも一方を取り込ませ、該取込手
段が取り込んだ周辺データと前記環境データを行動記録
のデータとして記録する、 ことを特徴とする請求項1記載の携帯型行動記録装置。
2. The image processing apparatus according to claim 1, further comprising: a capturing unit that captures at least one of an image and a voice as peripheral data representing a situation around the user. If there is, the capturing means captures at least one of an image and a sound, and records the surrounding data and the environmental data captured by the capturing means as data of an action record. The portable behavior recording device according to claim 1.
【請求項3】 前記制御手段は、前記行動記録のデータ
を、所定の通信手段を介して接続される外部装置に送信
して格納させる、 ことを特徴とする請求項1、または2記載の携帯型行動
記録装置。
3. The mobile phone according to claim 1, wherein the control unit transmits the action record data to an external device connected via a predetermined communication unit and stores the data. Type behavior recorder.
【請求項4】 前記周辺データを再生する再生手段、及
び前記環境データを表示する表示手段の少なくとも一方
と、 前記行動記録のデータの検索条件を入力するための入力
手段と、 前記入力手段により入力された検索条件に従って前記行
動記録のデータを検索し、該検索条件に該当するデータ
を、前記再生手段により再生、或いは前記表示手段に表
示させる検索手段と、 を更に具備していることを特徴とする請求項1、2、ま
たは3記載の携帯型行動記録装置。
4. An at least one of a reproducing unit for reproducing the peripheral data and a display unit for displaying the environmental data, an input unit for inputting a search condition of data of the action record, and an input by the input unit. Search means for searching the data of the action record in accordance with the search condition, and reproducing the data corresponding to the search condition by the reproduction means or displaying the data on the display means. The portable action recording device according to claim 1, 2 or 3, wherein
JP8313751A 1996-11-25 1996-11-25 Portable behavior recording device Pending JPH10154163A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP8313751A JPH10154163A (en) 1996-11-25 1996-11-25 Portable behavior recording device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP8313751A JPH10154163A (en) 1996-11-25 1996-11-25 Portable behavior recording device

Publications (1)

Publication Number Publication Date
JPH10154163A true JPH10154163A (en) 1998-06-09

Family

ID=18045103

Family Applications (1)

Application Number Title Priority Date Filing Date
JP8313751A Pending JPH10154163A (en) 1996-11-25 1996-11-25 Portable behavior recording device

Country Status (1)

Country Link
JP (1) JPH10154163A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000155757A (en) * 1998-11-18 2000-06-06 Fujitsu Ltd Device and method for extracting characteristic of moving body and program recording medium thereof
JP2005514879A (en) * 2001-12-31 2005-05-19 利男 早川 Multimedia system incorporating portable computer, television and mobile phone
JP2010081213A (en) * 2008-09-25 2010-04-08 Infocom Corp Time stamp device, and time stamp system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0555251U (en) * 1991-12-25 1993-07-23 カシオ計算機株式会社 Portable electronic devices
JPH0659317A (en) * 1992-08-10 1994-03-04 Konica Corp Automatic image recorder
JPH08122093A (en) * 1994-10-13 1996-05-17 Roehm Properties Bv Portable position detector,daily-report prepairing device and travelling-expense liquidation-statement prepairing device
JPH08235198A (en) * 1995-02-23 1996-09-13 Hitachi Ltd Multimedia information management system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0555251U (en) * 1991-12-25 1993-07-23 カシオ計算機株式会社 Portable electronic devices
JPH0659317A (en) * 1992-08-10 1994-03-04 Konica Corp Automatic image recorder
JPH08122093A (en) * 1994-10-13 1996-05-17 Roehm Properties Bv Portable position detector,daily-report prepairing device and travelling-expense liquidation-statement prepairing device
JPH08235198A (en) * 1995-02-23 1996-09-13 Hitachi Ltd Multimedia information management system

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000155757A (en) * 1998-11-18 2000-06-06 Fujitsu Ltd Device and method for extracting characteristic of moving body and program recording medium thereof
JP2005514879A (en) * 2001-12-31 2005-05-19 利男 早川 Multimedia system incorporating portable computer, television and mobile phone
JP2010081213A (en) * 2008-09-25 2010-04-08 Infocom Corp Time stamp device, and time stamp system

Similar Documents

Publication Publication Date Title
JP7324313B2 (en) Voice interaction method and device, terminal, and storage medium
EP2249228B1 (en) Terminal device with standby state, regenerating voice data on entry into normal working state
JP4860365B2 (en) Information processing device, information processing method, information processing program, and portable terminal device
JP2008526101A (en) System and method for predicting user input to a mobile terminal
CN110989847B (en) Information recommendation method, device, terminal equipment and storage medium
CN110557565A (en) Video processing method and mobile terminal
CN109814952A (en) A kind of application interface quickly starting control processing method, device and mobile terminal
US20100056116A1 (en) Method and system for displaying information collected by portable terminals
CN108763104A (en) The method, apparatus and storage medium of pre-read file page
CN109895092A (en) Information processing unit, information processing method and computer-readable medium
CN106777204B (en) Picture data processing method and device and mobile terminal
JPH09212331A (en) Portable information collector and its information managing method
EP1419645B1 (en) Portable electronic device having recording capability
CN108763193A (en) Literal processing method, device, mobile terminal and storage medium
JP3671385B2 (en) Device comprising portable behavior detection device and behavior analysis device, and behavior analysis device
JPH10154163A (en) Portable behavior recording device
CN109922199B (en) Contact information processing method and terminal
JP5011497B2 (en) INPUT PROCESSING DEVICE, INPUT PROCESSING METHOD, INPUT PROCESSING PROGRAM, AND PORTABLE TERMINAL DEVICE
JP4399379B2 (en) Device comprising portable behavior detection device and behavior analysis device
JP2008033454A (en) Information processor, information processing method, information processing program, and portable terminal device
CN108681567A (en) A kind of information recommendation method and device
CN112489619A (en) Voice processing method, terminal device and storage medium
JP2003085530A (en) Display method, and display device
KR20130132189A (en) Operation method based on a portrait photo and device supporting the same
JP4399378B2 (en) Device comprising portable behavior detection device and behavior analysis device

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061018

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070118

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070122

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070118