JP2021152879A - Information processor, information processing method and program - Google Patents

Information processor, information processing method and program Download PDF

Info

Publication number
JP2021152879A
JP2021152879A JP2021010020A JP2021010020A JP2021152879A JP 2021152879 A JP2021152879 A JP 2021152879A JP 2021010020 A JP2021010020 A JP 2021010020A JP 2021010020 A JP2021010020 A JP 2021010020A JP 2021152879 A JP2021152879 A JP 2021152879A
Authority
JP
Japan
Prior art keywords
information
information processing
user
processing device
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021010020A
Other languages
Japanese (ja)
Inventor
敦 渋谷
Atsushi Shibuya
敦 渋谷
直彦 保田
Naohiko Yasuda
直彦 保田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to US17/199,916 priority Critical patent/US20210294570A1/en
Publication of JP2021152879A publication Critical patent/JP2021152879A/en
Priority to JP2022181477A priority patent/JP2023001366A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

To select and output information which may be necessary for a user.SOLUTION: An information processor includes: various sensors 18 to 21 for detecting at least one of a position and an attitude angle of a list terminal 10 to a body of a user; and a processor 11 for outputting sound information related to a certain action state of the user or a certain operation state of the list terminal 10 when detecting that the list terminal 10 becomes the predetermined position and attitude angle under the certain action state of the user or the certain operation state of the list terminal 10.SELECTED DRAWING: Figure 1

Description

本発明は、情報処理装置、情報処理方法およびプログラムに関する。 The present invention relates to information processing devices, information processing methods and programs.

ユーザ端末のハードウェアおよびソフトウェアを複雑化することなく、配信された情報の再生を簡単な操作により行えるようにすることを目的とした技術が提案されている。(例えば、特許文献1) A technique has been proposed for the purpose of enabling the reproduction of distributed information by a simple operation without complicating the hardware and software of the user terminal. (For example, Patent Document 1)

特開2002−335575号公報JP-A-2002-335575

特許文献1に記載された技術を含めて、配信された情報を再生させるための操作を簡易化してユーザに提供する技術はある程度確立されているものと考えられる。 It is considered that the technology for simplifying the operation for reproducing the distributed information and providing it to the user, including the technology described in Patent Document 1, has been established to some extent.

しかしながら、例えばユーザに提供できる情報が複数あり、それら複数の情報を順次端末で再生させる場合、その時点でユーザが必要としている情報以外の情報も合わせて再生される可能性が有り、ユーザにとっては不都合で煩雑な動作となることもあり得る。 However, for example, when there is a plurality of information that can be provided to the user and the plurality of information are sequentially reproduced on the terminal, there is a possibility that information other than the information required by the user at that time is also reproduced, and the user may be able to reproduce the information. It may be an inconvenient and complicated operation.

本発明は上記のような実情に鑑みてなされたもので、その目的とするところは、ユーザに必要と思われる情報を選択して出力することが可能な情報処理装置、情報処理方法およびプログラムを提供することにある。 The present invention has been made in view of the above circumstances, and an object of the present invention is to provide an information processing device, an information processing method, and a program capable of selecting and outputting information deemed necessary by a user. To provide.

本発明の一態様は、ユーザが所持する情報処理装置であって、前記ユーザの体に対する前記情報処理装置の位置および姿勢角度の少なくとも一方を検出する検出手段と、前記ユーザの或る行動状況または前記情報処理装置の或る動作状況下において、前記検出手段により前記情報処理装置が所定の位置および姿勢角度の少なくとも一方となったことを検出した場合、前記ユーザの或る行動状況または前記情報処理装置の或る動作状況に関連した音情報を出力する情報出力手段と、を備える。 One aspect of the present invention is an information processing device possessed by a user, which is a detection means for detecting at least one of a position and an attitude angle of the information processing device with respect to the user's body, and a certain behavioral situation of the user. When the detection means detects that the information processing device is at least one of a predetermined position and attitude angle under a certain operating condition of the information processing device, the user's certain behavioral situation or the information processing An information output means for outputting sound information related to a certain operating condition of the device is provided.

本発明によれば、ユーザに必要と思われる情報を選択して出力することが可能となる。 According to the present invention, it is possible to select and output information that is considered necessary by the user.

本発明の一実施形態に係るリスト端末の電子回路の機能構成を示すブロック図。The block diagram which shows the functional structure of the electronic circuit of the wrist terminal which concerns on one Embodiment of this invention. 同実施形態に係る音声情報を再生させる際の各種動作条件の対応関係を例示する図。The figure which illustrates the correspondence relation of various operating conditions at the time of reproducing the audio information which concerns on the same embodiment. 同実施形態に係る第1の動作例における自動再生モード設定下でのプロセッサによる処理内容を示すフローチャート。The flowchart which shows the processing content by the processor under the automatic play mode setting in the 1st operation example which concerns on the same Embodiment. 同実施形態に係る第2の動作例における情報提供側での処理内容を示すフローチャート。The flowchart which shows the processing content on the information providing side in the 2nd operation example which concerns on the same Embodiment. 同実施形態に係る第2の動作例における自動再生モード設定下でのプロセッサによる処理内容を示すフローチャート。The flowchart which shows the processing content by the processor under the automatic play mode setting in the 2nd operation example which concerns on the same embodiment.

以下、本発明を、スマートフォン等の外部の携帯情報端末(図示せず)と連携して、該ユーザの手首に装着して使用する腕時計型のリスト端末に適用した場合の一実施形態について、図面を参照して詳細に説明する。 Hereinafter, an embodiment of the present invention when the present invention is applied to a wristwatch-type wrist terminal worn on the wrist of the user in cooperation with an external mobile information terminal (not shown) such as a smartphone is shown in the drawings. Will be described in detail with reference to.

[構成]
図1は、同実施形態に係るリスト端末10の電子回路の機能構成を示すブロック図である。同図において、このリスト端末10は、プロセッサ11、RAM12、及びROM13を中心として動作する。
[composition]
FIG. 1 is a block diagram showing a functional configuration of an electronic circuit of the wrist terminal 10 according to the embodiment. In the figure, the list terminal 10 operates around the processor 11, the RAM 12, and the ROM 13.

プロセッサ11は、フラッシュメモリ等のROM13に記憶されている動作プログラムや各種固定データ、パラメータ等を読み出し、SRAM等で構成されるRAM12に展開して保持させた上で、その動作プログラムを順次実行することで、後述する動作等を統括して制御する。 The processor 11 reads out an operation program, various fixed data, parameters, etc. stored in a ROM 13 such as a flash memory, expands and holds the operation program in a RAM 12 composed of an SRAM or the like, and then sequentially executes the operation program. As a result, the operations and the like described later are controlled in an integrated manner.

なおROM13は、動作プログラムや各種固定データ、パラメータ等を記憶するプログラムメモリと、アプリケーションソフトで取扱う各種データを随時記憶するストレージ部とを兼ねるものとする。 The ROM 13 also serves as a program memory for storing operation programs, various fixed data, parameters, and the like, and a storage unit for storing various data handled by the application software at any time.

これらプロセッサ11、RAM12、及びROM13に対し、バスBを介して、表示部14、タッチ入力部15、音声入出力部16、加速度センサ17、角速度センサ18、心拍センサ19、温度センサ20、湿度センサ21、操作部22、バイブレータ23、無線通信部24、およびGPS受信部25が接続される。 Display unit 14, touch input unit 15, voice input / output unit 16, acceleration sensor 17, angular velocity sensor 18, heart rate sensor 19, temperature sensor 20, humidity sensor for these processors 11, RAM 12, and ROM 13 via bus B. 21, the operation unit 22, the vibrator 23, the wireless communication unit 24, and the GPS receiving unit 25 are connected.

表示部14は、自発光素子である有機ELあるいはバックライト付きのカラーTFT液晶パネルとその駆動回路とで構成され、プロセッサ11から与えられる表示情報に基づいた表示を行なう。 The display unit 14 is composed of an organic EL which is a self-luminous element or a color TFT liquid crystal panel with a backlight and a drive circuit thereof, and displays based on display information given from the processor 11.

タッチ入力部15は、表示部14の上部に一体的に構成される、透明電極を形成したタッチパネルとその駆動回路とで構成され、ユーザの手指等による押圧操作があった場合に時系列の座標位置情報を検出してプロセッサ11へ送出する。 The touch input unit 15 is composed of a touch panel forming a transparent electrode and a drive circuit thereof, which is integrally formed on the upper part of the display unit 14, and has time-series coordinates when a pressing operation is performed by a user's finger or the like. The position information is detected and sent to the processor 11.

音声入出力部16は、マイクロホン26を介して入力される音声をデジタルデータ化して音声情報を得る一方で、ROM13に記憶された、またはプロセッサ11で生成された音声情報を、プロセッサ11の制御の下に読み出してアナログ信号化し、スピーカ27により拡声、放音させる。 The audio input / output unit 16 digitizes the audio input via the microphone 26 to obtain audio information, while the audio information stored in the ROM 13 or generated by the processor 11 is controlled by the processor 11. It is read down and converted into an analog signal, which is then loudened and emitted by the speaker 27.

マイクロホン26およびスピーカ27は、例えばリスト端末10の筐体側周面に配置される。 The microphone 26 and the speaker 27 are arranged, for example, on the housing side peripheral surface of the wrist terminal 10.

加速度センサ17は、互いに直交する3軸加速度センサを有し、ユーザに装着されたリスト端末10に加わる加速度を検出して、加速度データを出力する。この加速度センサ17から出力される加速度データを、例えばプロセッサ11において処理することで、リスト端末10を装着しているユーザの手首の体に対する位置や姿勢角度(重力加速度方向を含む)を検出する。 The acceleration sensor 17 has a three-axis acceleration sensor that is orthogonal to each other, detects the acceleration applied to the wrist terminal 10 worn by the user, and outputs acceleration data. By processing the acceleration data output from the acceleration sensor 17, for example, in the processor 11, the position and posture angle (including the gravitational acceleration direction) of the wrist of the user wearing the wrist terminal 10 with respect to the body is detected.

角速度センサ18は、互いに直交する3軸角速度センサを有し、ユーザに装着されたリスト端末10に加わる角速度を検出して、角速度データを出力する。この角速度センサ18から出力される角速度データを、例えばプロセッサ11において処理することで、リスト端末10を装着しているユーザの手首の回転動作を検出する。 The angular velocity sensor 18 has a triaxial angular velocity sensor orthogonal to each other, detects an angular velocity applied to the wrist terminal 10 worn by the user, and outputs angular velocity data. By processing the angular velocity data output from the angular velocity sensor 18 in, for example, the processor 11, the rotation motion of the wrist of the user wearing the wrist terminal 10 is detected.

心拍センサ19は、リスト端末10の筐体の裏面に配置された光学式センサで構成され、リスト端末10を装着したユーザの手首部分の外皮と接触して、当該手首部分の血管の血流量の変化を感知して心拍数を測定する。 The heart rate sensor 19 is composed of an optical sensor arranged on the back surface of the housing of the wrist terminal 10, and comes into contact with the outer skin of the wrist portion of the user wearing the wrist terminal 10 to measure the blood flow of blood vessels in the wrist portion. Detect changes and measure heart rate.

温度センサ20は、温度を検出する。湿度センサ21は、湿度を検出する。加速度センサ17、角速度センサ18、心拍センサ19、温度センサ20および湿度センサ21それぞれが検出したデータは、適時プロセッサ11へ送出される。 The temperature sensor 20 detects the temperature. The humidity sensor 21 detects the humidity. The data detected by each of the acceleration sensor 17, the angular velocity sensor 18, the heart rate sensor 19, the temperature sensor 20, and the humidity sensor 21 is sent to the processor 11 in a timely manner.

操作部22は、リスト端末10の筐体外面に備える、ユーザが直接手指で操作するキーの入力を受け付けて、キー操作信号をプロセッサ11へ送出する。 The operation unit 22 receives the input of the key directly operated by the user with the fingers provided on the outer surface of the housing of the list terminal 10, and sends the key operation signal to the processor 11.

バイブレータ23は、偏心したウエイトを回転軸に取り付けたモータと、その駆動部とで構成され、アラーム時等に駆動され振動を発生させて、リスト端末10全体を揺動させる。 The vibrator 23 is composed of a motor having an eccentric weight attached to a rotating shaft and a driving unit thereof, and is driven at the time of an alarm or the like to generate vibration to swing the entire wrist terminal 10.

無線通信部24は、例えばアンテナ28を介してLTE(登録商標)(Long Term Evolution)規格に則った移動体通信仕様での情報通信と、アンテナ29を介してIEEE802.11a/11b/11g/11n規格に則った無線LANの情報通信と、アンテナ30を介してBLE(登録商標)(Bluetooth(登録商標) Low Energy)規格の近距離無線通信技術に則った情報通信とを選択的に実行する。 The wireless communication unit 24 uses, for example, information communication with mobile communication specifications in accordance with the LTE® (Long Term Evolution) standard via the antenna 28, and IEEE802.11a / 11b / 11g / 11n via the antenna 29. Wireless LAN information communication according to the standard and information communication according to the short-range wireless communication technology of the BLE (registered trademark) (Bluetooth (registered trademark) Low Energy) standard are selectively executed via the antenna 30.

BLE(登録商標)規格での近距離無線通信では、リスト端末10を例えばスマートフォンなどの外部の携帯情報端末と事前にペアリング設定しておくことで、後述するようにスマートフォンで実行されるアプリケーションソフトと連携した動作を実現可能とする。 In short-range wireless communication based on the BLE (registered trademark) standard, application software that is executed on a smartphone by setting the list terminal 10 in advance to pair with an external mobile information terminal such as a smartphone, as described later. It is possible to realize the operation in cooperation with.

GPS(Global Positioning System:全地球測位システム)受信部25は、GPSアンテナ31を介して、図示しない複数のGPS衛星からの到来電波を受信し、現在位置の3次元座標(緯度、経度、高度)と現在時刻とを算出し、算出結果をプロセッサ11へ出力する。 The GPS (Global Positioning System) receiver 25 receives incoming radio waves from a plurality of GPS satellites (not shown) via the GPS antenna 31, and has three-dimensional coordinates (latitude, longitude, altitude) of the current position. And the current time are calculated, and the calculation result is output to the processor 11.

[第1の動作例]
次に上記実施形態の動作について説明する。
なお本実施形態でリスト端末10を動作させる際、適宜リスト端末10とは別にユーザが所持する外部の携帯情報端末、例えばスマートフォンにおいても各種アプリケーションソフトが実行中であり、当該スマートフォンとペアリング設定されているリスト端末10との間でアプリケーションソフトや各種着信時等に応じて情報通信を実行するものとする。
[First operation example]
Next, the operation of the above embodiment will be described.
When operating the list terminal 10 in the present embodiment, various application software is being executed on an external mobile information terminal owned by the user, for example, a smartphone, in addition to the list terminal 10, and pairing is set with the smartphone. It is assumed that information communication is executed with the list terminal 10 in accordance with application software, various incoming calls, and the like.

図2は、本実施形態において、リスト端末10のユーザがリスト端末10を耳の位置に上げた場合に、ユーザに対してリスト端末10が所定の位置または姿勢角度となったものと判断して、音声情報を再生させる際の各種動作条件の対応関係を例示するものである。 FIG. 2 shows that when the user of the list terminal 10 raises the list terminal 10 to the ear position in the present embodiment, it is determined that the list terminal 10 has a predetermined position or posture angle with respect to the user. , Correspondence relationship of various operating conditions when reproducing voice information is illustrated.

ここでは「ユーザや端末の状況」「状況の確認方法」および「再生させる情報」の対応関係を6例に渡って例示している。 Here, the correspondence between "the situation of the user or the terminal", "the method of confirming the situation", and "the information to be reproduced" is illustrated in six cases.

第1の例では、ユーザおよびリスト端末10がランニング等の「運動中」の状況について説明する。この状況の確認方法としては、例えば加速度センサ17や心拍センサ19等のセンサ部の出力により、ユーザの体の上下動や徒歩以上の移動速度が検出できること、走行により心拍数の高い状態が検出できることの他、リスト端末10の機能やリスト端末10にインストールされたアプリケーションソフト等でランニングに関する計測が実行中であり、タイム、走行距離、ラップタイム、目標タイムとの誤差等の計測中であること、の少なくともいずれか1つをプロセッサ11等が検出することで確認できる。さらには、図示してしないが、GPS受信部25による現在位置の経時変化又は現在位置の経時変化から得られる移動速度でも確認できる。この第1の例で示す「運動中」であると確認ができた場合は、ランニングに関する(計測中の)積算タイムや走行距離、ラップタイムや目標タイムとの誤差などのランニングに関する情報を音声情報として音声入出力部16から出力する。 In the first example, the situation where the user and the wrist terminal 10 are “exercising” such as running will be described. As a method of confirming this situation, for example, the output of the sensor unit such as the acceleration sensor 17 or the heart rate sensor 19 can detect the vertical movement of the user's body or the movement speed higher than walking, and the state of high heart rate can be detected by running. In addition, the function of the list terminal 10 and the application software installed on the list terminal 10 are executing the measurement related to running, and the time, mileage, lap time, error from the target time, etc. are being measured. It can be confirmed by detecting at least one of them by the processor 11 or the like. Further, although not shown, the movement speed obtained from the time-dependent change of the current position by the GPS receiving unit 25 or the time-dependent change of the current position can also be confirmed. If it can be confirmed that it is "exercising" shown in this first example, information related to running such as the accumulated time (during measurement), mileage, lap time, and error from the target time related to running is used as voice information. Output from the audio input / output unit 16.

第2の例では、スキー、スノーボード等の「運動中」の状況について説明する。この状況の確認方法としては、GPS受信部25による現在位置や高度の情報から、例えばリスト端末10のROM13に記憶されている地図データを参照することによりユーザがスキー場のような冬山にいること、加速度センサ17や角速度センサ18等のセンサ部の出力によるユーザの体の上下動や滑走動作等が検出されること、リスト端末10にインストールされたアプリケーションソフトで例えばスキーの滑走計測ソフトが実行中であり、滑走状態等が計測中であること、の少なくともいずれか1つをプロセッサ11等が検出することで確認できる。また、GPS受信部25が取得した現在位置や高度と地図データを参照することで、ユーザがスキー場にいることを検出したが、温度センサ20や湿度センサ21が取得したデータを組み合わせて検出してもよい。この第2の例で示す「運動中」であると確認ができた場合は、ユーザの滑走時の最高速度や滑走距離、ユーザの現在位置にあるコースの斜度などの情報を音声情報として音声入出力部16から出力する。 In the second example, the situation of "exercising" such as skiing and snowboarding will be described. As a method of confirming this situation, the user is in a winter mountain such as a ski resort by referring to the map data stored in the ROM 13 of the list terminal 10, for example, from the current position and altitude information by the GPS receiver 25. , The vertical movement and gliding motion of the user's body are detected by the output of the sensor unit such as the acceleration sensor 17 and the angular velocity sensor 18, and the application software installed on the list terminal 10, for example, the ski gliding measurement software is running. Therefore, it can be confirmed by detecting at least one of at least one of the gliding state and the like being measured by the processor 11 and the like. Further, the user was detected to be at the ski resort by referring to the current position and altitude acquired by the GPS receiver 25 and the map data, but the data acquired by the temperature sensor 20 and the humidity sensor 21 were combined and detected. You may. If it can be confirmed that the user is "exercising" shown in the second example, information such as the user's maximum speed at the time of gliding, the gliding distance, and the slope of the course at the user's current position is voiced as voice information. Output from the input / output unit 16.

またこの第2の例の変形例として、ゴルフ等の「運動中」の状況である場合にも適用できる。この場合の確認方法としては、GPS受信部25による現在位置や高度の情報から、例えばリスト端末10のROM13に記憶されている地図データを参照することによりユーザがゴルフ場にいること、加速度センサ17や角速度センサ18等のセンサ部の出力によるユーザのスイング動作等が検出されること、の少なくともいずれか1つをプロセッサ11等が検出することで確認できる。この第2の例の変形例で示す「運動中」であると確認ができた場合は、ユーザがいるゴルフ場のコース、ホールなどの情報を音声情報として音声入出力部16から出力する。 Further, as a modification of this second example, it can be applied to a situation of "exercising" such as golf. In this case, as a confirmation method, the user is at the golf course by referring to the map data stored in the ROM 13 of the list terminal 10, for example, from the current position and altitude information by the GPS receiver 25, and the acceleration sensor 17 It can be confirmed by detecting at least one of the user's swing motion and the like detected by the output of the sensor unit such as the angular velocity sensor 18 and the angular velocity sensor 18 by the processor 11 or the like. When it can be confirmed that the player is "exercising" shown in the modified example of the second example, the audio input / output unit 16 outputs information such as the course and hole of the golf course where the user is located as audio information.

第3の例は、「スケジュール」の状況について説明する。この状況の確認方法としては、リスト端末10またはリスト端末10に外部接続したスマートフォン等のスケジュール管理機能で、カレンダに記録されている予定の情報と、現在時刻をプロセッサ11等が検出することで確認できる。この第3の例で示す「スケジュール」に該当する、あるいは予め設定した予告時間、例えば「10分前」となった場合は、スケジュールに関する時刻、場所、スケジュール内容などの情報を音声情報として音声入出力部16から出力する。 The third example describes the "schedule" situation. As a method of confirming this situation, the schedule management function of the list terminal 10 or a smartphone externally connected to the list terminal 10 is used to confirm the schedule information recorded in the calendar and the current time by the processor 11 or the like. can. If the "schedule" shown in this third example corresponds to the "schedule" or the preset advance notice time, for example, "10 minutes before", information such as the time, place, and schedule contents related to the schedule is input as audio information. Output from the output unit 16.

第4の例は、「メッセージ着信」の状況について説明する。この状況の確認方法としては、リスト端末10またはリスト端末10に外部接続したスマートフォンに対して、電子メールや各種SNS(Social Networking Service)によるメッセージの着信があったことをプロセッサ11等が検出することで確認できる。この第4の例では、着信のあったメッセージの送信者やメッセージ内容などの情報を音声情報として音声入出力部16から出力する。 The fourth example describes the situation of "incoming message". As a method of confirming this situation, the processor 11 or the like detects that the list terminal 10 or the smartphone externally connected to the list terminal 10 has received an e-mail or a message by various SNS (Social Networking Services). You can check with. In this fourth example, information such as the sender of the received message and the content of the message is output from the voice input / output unit 16 as voice information.

第5の例は、自動車や鉄道などによる「移動中」の状況について説明する。この状況の確認方法としては、加速度センサ17、角速度センサ18等のセンサ部の出力、あるいはGPS受信部25による現在位置の経時変化から得られる移動速度、GPS受信部25による現在位置の情報から、例えばリスト端末10のROM13に記憶されている地図データを参照することで、ユーザが道路上や線路上を移動していること、の少なくともいずれか1つをプロセッサ11等が検出することで確認できる。なお、第5の例の自動車や鉄道による移動速度としては、例えば予め決められた所定の速度を超えた場合を自動車や鉄道による移動と判断する。第5の例では、道路交通情報や該当する電車運行情報などの情報を音声情報として音声入出力部16から出力する。 The fifth example describes the situation of "moving" by a car, a railroad, or the like. As a method of confirming this situation, the output of the sensor units such as the acceleration sensor 17 and the angular velocity sensor 18, the moving speed obtained from the time-dependent change of the current position by the GPS receiving unit 25, and the information of the current position by the GPS receiving unit 25 are used. For example, by referring to the map data stored in the ROM 13 of the list terminal 10, it can be confirmed that the processor 11 or the like detects at least one of the fact that the user is moving on the road or the track. .. As for the moving speed of the fifth example by automobile or railroad, for example, when the moving speed exceeds a predetermined speed determined in advance, it is determined that the moving speed is by automobile or railroad. In the fifth example, information such as road traffic information and corresponding train operation information is output as voice information from the voice input / output unit 16.

第6の例は、「歩行中」の状況について説明する。この状況の確認方法としては、加速度センサ17、角速度センサ18等のセンサ部の出力、あるいはGPS受信部25による現在位置の経時変化から得られる移動速度、GPS受信部25による現在位置の情報から、例えばリスト端末10のROM13に記憶されている地図データを参照することで、ユーザが道路等を移動していること、の少なくともいずれか1つをプロセッサ11等が検出することで確認できる。なお、第6の例の歩行による移動速度としては、予め決められた所定の範囲内による移動を歩行による移動と判断する。第6の例では、ユーザの現在位置に関する、食事や観光地などのお勧め情報や、休憩場所等の情報を音声情報として音声入出力部16から出力する。 A sixth example describes a "walking" situation. As a method of confirming this situation, the output of the sensor units such as the acceleration sensor 17 and the angular velocity sensor 18, the moving speed obtained from the time-dependent change of the current position by the GPS receiving unit 25, and the information of the current position by the GPS receiving unit 25 are used. For example, by referring to the map data stored in the ROM 13 of the list terminal 10, it can be confirmed that the processor 11 or the like detects at least one of the fact that the user is moving on the road or the like. As for the movement speed by walking in the sixth example, the movement within a predetermined range determined in advance is determined to be the movement by walking. In the sixth example, the voice input / output unit 16 outputs recommended information such as meals and sightseeing spots and information such as resting places regarding the user's current position as voice information.

図3は、リスト端末10において自動で音声情報を再生するモードが設定されている場合の、主としてプロセッサ11による処理内容を示すフローチャートである。 FIG. 3 is a flowchart showing the processing contents mainly by the processor 11 when the mode for automatically reproducing the voice information is set in the list terminal 10.

プロセッサ11は、予め設定された計測タイミング、例えば0.5[秒]毎に加速度センサ17、角速度センサ18、心拍センサ19、温度センサ20、および湿度センサ21の各センサ出力と、設定によりGPS受信部25での現在位置の測定も行なうものとしている場合にはGPS受信部25からの現在位置の情報とを取得する(ステップS101)。 The processor 11 receives GPS reception by setting the sensor outputs of the acceleration sensor 17, the angular velocity sensor 18, the heart rate sensor 19, the temperature sensor 20, and the humidity sensor 21 at preset measurement timings, for example, every 0.5 [seconds]. When the measurement of the current position by the unit 25 is also performed, the information of the current position from the GPS receiving unit 25 is acquired (step S101).

プロセッサ11は、取得した各センサの出力の中から、特に加速度センサ17および角速度センサ18の出力データにより、ユーザに装着されたリスト端末10がユーザの耳周辺に近付けられたか否かを判断する(ステップS102)。 From the output of each of the acquired sensors, the processor 11 determines whether or not the wrist terminal 10 worn by the user is brought close to the vicinity of the user's ear, particularly based on the output data of the acceleration sensor 17 and the angular velocity sensor 18 ( Step S102).

リスト端末10がユーザの耳周辺には近付けられていないと判断した場合(ステップS102のNO)、プロセッサ11はステップS101からの処理に戻って、計測タイミングに基づいて各センサの出力データを取得する。 When it is determined that the list terminal 10 is not close to the user's ear (NO in step S102), the processor 11 returns to the process from step S101 and acquires the output data of each sensor based on the measurement timing. ..

ステップS101、S102の処理を繰り返し実行することにより、各種センサ等の出力を検出しながら、リスト端末10がユーザの耳周辺に近付くまで待機する。 By repeatedly executing the processes of steps S101 and S102, while detecting the outputs of various sensors and the like, the wrist terminal 10 waits until it approaches the vicinity of the user's ear.

ステップS102において、リスト端末10がユーザの耳周辺に近付けられたと判断した場合(ステップS102のYES)、プロセッサ11は、例えば図2に示したように、リスト端末10の各センサから出力された出力データ、リスト端末10で実行中のアプリケーションの動作状況、またはリスト端末が受信したメッセージ等の情報に基づいて、ユーザや端末の状況を検出と、自動再生すべき音声情報の取得とを実行する(ステップS103)。 When it is determined in step S102 that the list terminal 10 is close to the user's ear (YES in step S102), the processor 11 outputs the output output from each sensor of the list terminal 10, for example, as shown in FIG. Based on the data, the operating status of the application running on the list terminal 10, or the information such as the message received by the list terminal, the status of the user or the terminal is detected and the voice information to be automatically played is acquired (). Step S103).

次に自動再生すべき音声情報があるか否かを判断する(ステップS104)。自動再生すべき音声情報がないと判断した場合(ステップS104のNO)、プロセッサ11はステップS101からの処理に戻る。 Next, it is determined whether or not there is audio information to be automatically reproduced (step S104). When it is determined that there is no audio information to be automatically reproduced (NO in step S104), the processor 11 returns to the process from step S101.

またステップS104において、自動再生すべき音声情報があると判断した場合(ステップS104のYES)、プロセッサ11は取得した音声情報を、音声入出力部16、スピーカ27から再生させた上で(ステップS105)、ステップS101からの処理に戻る。 If it is determined in step S104 that there is audio information to be automatically reproduced (YES in step S104), the processor 11 reproduces the acquired audio information from the audio input / output unit 16 and the speaker 27 (step S105). ), Returning to the process from step S101.

この音声情報の自動再生を行なう際、事前にペアリング設定されている近距離無線通信技術(BLE(登録商標)規格等)に則った他の外部機器、例えばスマートフォンやイヤホン等が存在する場合には、音声入出力部16、スピーカ27での音声出力に代えて、音声情報を当該外部機器へ無線通信部24を介して送信することで、リスト端末10のスピーカ27から音声を出力するのではなく、ユーザの使用環境に合わせた音声の出力動作が実現できる。 When performing automatic playback of this audio information, when there are other external devices, such as smartphones and earphones, that comply with the short-range wireless communication technology (BLE (registered trademark) standard, etc.) that has been paired in advance. Is to output audio from the speaker 27 of the list terminal 10 by transmitting audio information to the external device via the wireless communication unit 24 instead of the audio output by the audio input / output unit 16 and the speaker 27. It is possible to realize an audio output operation that matches the user's usage environment.

なお、前述した音声情報の自動再生にあたって、複数の音声情報が取得された場合には、その動作環境に応じた優先度をその時点での動作環境から算出して判断した上で、高い優先度であると判断した音声情報から順番に再生させることで、ユーザにより適切と思われる情報から順に提示できる。 In the automatic reproduction of the above-mentioned audio information, when a plurality of audio information is acquired, the priority according to the operating environment is calculated from the operating environment at that time and determined, and then the high priority is obtained. By playing back in order from the voice information determined to be, it is possible to present the information in order from the information considered to be more appropriate by the user.

また、リスト端末10がユーザの耳周辺に近付けられたと判断された場合に、音声情報の自動再生を開始するだけではなく、一旦バイブレータ23による振動などで、自動再生する音声情報があることをユーザに事前に予告するものとしてもよい。 Further, when it is determined that the list terminal 10 is brought close to the user's ear, the user not only starts the automatic reproduction of the audio information but also that the user has the audio information to be automatically reproduced by vibration caused by the vibrator 23. It may be given in advance notice.

こうすることで、ユーザはバイブレータ23による振動により予告の通知がない場合、自動再生される音声情報がないことを認識することができる。 By doing so, the user can recognize that there is no automatically reproduced voice information when there is no notice of notice due to vibration by the vibrator 23.

また、バイブレータ23での振動による予告動作の後に、リスト端末10がユーザの耳周辺に近付けられた際に自動再生した音声情報に関しては、一定時間、再度の自動再生を行わなかった場合に、ROM13に記憶されている音声情報を自動的に削除するようにしても良い。この場合、情報を削除するまでの一定時間は、ユーザが事前に任意に設定できるものとすることで、ユーザの設定によりROM13の記憶容量を有効に活用できる。 Further, regarding the voice information automatically reproduced when the wrist terminal 10 is brought close to the user's ear after the warning operation due to the vibration of the vibrator 23, the ROM 13 is not automatically reproduced for a certain period of time. The voice information stored in may be automatically deleted. In this case, the storage capacity of the ROM 13 can be effectively utilized by the user's setting by allowing the user to arbitrarily set the fixed time until the information is deleted in advance.

[第2の動作例]
第2の動作例では、図1に示した構成を有するリスト端末10が複数台、例えば2台が、インターネットを含むネットワークおよびサーバ装置(共に図示せず)を介して連携して動作する場合について説明する。
[Second operation example]
In the second operation example, a case where a plurality of list terminals 10 having the configuration shown in FIG. 1, for example, two terminals operate in cooperation with each other via a network including the Internet and a server device (both not shown) explain.

この場合、第1のリスト端末10と第2のリスト端末10は、互いにどのような音声情報をどのような環境下でやり取りするのか、について事前に設定が完了しているものとする。 In this case, it is assumed that the first list terminal 10 and the second list terminal 10 have been set in advance as to what kind of voice information is exchanged with each other under what kind of environment.

図4は、第1のリスト端末10と第2のリスト端末10とで互いに、共有するべき音声情報を図示しないサーバ装置にアップロードする、情報提供側としての処理内容を示すフローチャートである。 FIG. 4 is a flowchart showing processing contents as an information providing side, in which the first list terminal 10 and the second list terminal 10 upload voice information to be shared to each other to a server device (not shown).

2台のリスト端末10の各プロセッサ11では、図2に示したユーザやリスト端末10の状況を検出した上で(ステップS201)、サーバ装置にアップロードするべき音声情報があるか否かを判断する(ステップS202)。 Each processor 11 of the two list terminals 10 detects the status of the user and the list terminal 10 shown in FIG. 2 (step S201), and then determines whether or not there is voice information to be uploaded to the server device. (Step S202).

この判断は、例えば図2の第1の例で説明したランニングのアプリケーションソフトの動作を併用した「運動中」に、ランニングを開始してから所定の距離(例えば1[km]単位)のラップタイムを報告するなど、事前に当該アプリケーションソフトで設定しておいた状況となったか否かにより判断する。 This determination is made, for example, by setting a lap time of a predetermined distance (for example, in units of 1 [km]) from the start of running during "exercise" in which the operation of the running application software described in the first example of FIG. 2 is used together. Judgment is made based on whether or not the situation has been set in advance by the application software, such as by reporting.

サーバ装置にアップロードすべき音声情報がないと判断した場合(ステップS202のNO)、プロセッサ11はステップS201からの処理に戻って、アップロードすべき音声情報が取得できるまでステップS201とステップS202の処理を繰り返す。 If it is determined that there is no audio information to be uploaded to the server device (NO in step S202), the processor 11 returns to the process from step S201 and performs the processes of steps S201 and S202 until the audio information to be uploaded can be acquired. repeat.

ステップS202において、サーバ装置にアップロードすべき音声情報があると判断した場合(ステップS202のYES)、プロセッサ11はユーザの動作状況の情報(例えば、ランニング動作中の距離情報や計測中のラップタイムなど)と、ユーザ情報(ユーザIDやリスト端末10の端末IDなど)を対応付けて当該サーバ装置に送信し(ステップS203)、それから次のアップロードに備えてステップS201からの処理に戻る。 When it is determined in step S202 that there is audio information to be uploaded to the server device (YES in step S202), the processor 11 uses information on the user's operating status (for example, distance information during running operation, lap time during measurement, and the like). And the user information (user ID, terminal ID of the list terminal 10, etc.) are associated with each other and transmitted to the server device (step S203), and then the process returns to the process from step S201 in preparation for the next upload.

図5は、第1のリスト端末10と第2のリスト端末10とが互いに、共有するべき音声情報を図示しないサーバ装置からダウンロードする、情報共有条件下での自動再生モードの処理内容を示すフローチャートである。 FIG. 5 is a flowchart showing the processing contents of the automatic playback mode under the information sharing condition in which the first list terminal 10 and the second list terminal 10 download the voice information to be shared with each other from a server device (not shown). Is.

リスト端末10のプロセッサ11は、予め設定された計測タイミング、例えば0.5[秒]毎に加速度センサ17、角速度センサ18、心拍センサ19、温度センサ20、および湿度センサ21の各センサ出力と、設定によりGPS受信部25での現在位置の測定も行なうものとしている場合にはGPS受信部25からの現在位置の情報とを取得する(ステップS301)。 The processor 11 of the wrist terminal 10 comprises the sensor outputs of the acceleration sensor 17, the angular velocity sensor 18, the heart rate sensor 19, the temperature sensor 20, and the humidity sensor 21 at preset measurement timings, for example, every 0.5 [second]. When the current position is also measured by the GPS receiving unit 25 by the setting, the information of the current position from the GPS receiving unit 25 is acquired (step S301).

プロセッサ11は、取得した各センサの出力データのうち、特に加速度センサ17および角速度センサ18の出力により、リスト端末10がユーザの耳周辺に近付けられたか否かを判断する(ステップS302)。 The processor 11 determines whether or not the wrist terminal 10 is brought close to the user's ear area based on the outputs of the acceleration sensor 17 and the angular velocity sensor 18 among the acquired output data of each sensor (step S302).

リスト端末10がユーザの耳周辺には近付けられていないと判断した場合(ステップS302のNO)、プロセッサ11はステップS301からの処理に戻って、計測タイミングに基づいて各センサの出力データを取得する。 When it is determined that the list terminal 10 is not close to the user's ear (NO in step S302), the processor 11 returns to the process from step S301 and acquires the output data of each sensor based on the measurement timing. ..

ステップS301、S302の処理を繰り返し実行することにより、各種センサ等の出力を検出しながら、リスト端末10がユーザの耳周辺に近付くまで待機する。 By repeatedly executing the processes of steps S301 and S302, while detecting the outputs of various sensors and the like, the wrist terminal 10 waits until it approaches the vicinity of the user's ear.

ステップS302において、リスト端末10がユーザの耳周辺に近付けられたと判断した場合(ステップS302のYES)、プロセッサ11は他のユーザと情報共有を行なう設定がなされているか否かを判断する(ステップS303)。 In step S302, when it is determined that the list terminal 10 is brought close to the user's ear (YES in step S302), the processor 11 determines whether or not the information sharing with other users is set (step S303). ).

他のユーザと情報共有を行なう設定がなされていないと判断した場合(ステップS303のNO)、プロセッサ11は音声情報のダウンロードを行なう必要がないものとして、次の自動再生処理に備えてステップS301からの処理に戻る。 When it is determined that the setting for sharing information with other users is not made (NO in step S303), it is assumed that the processor 11 does not need to download the audio information, and the processor 11 does not need to download the audio information, and prepares for the next automatic playback process from step S301. Return to the processing of.

またステップS303において、他のユーザと情報共有を行なう設定がなされていると判断した場合(ステップS303のYES)、プロセッサ11は無線通信部24によりネットワークを介して所定のサーバ装置にアクセスし、他のユーザからの音声情報がアップロードされていれば、その音声情報を受信動作によりダウンロードする(ステップS304)。 Further, in step S303, when it is determined that the setting for sharing information with another user is made (YES in step S303), the processor 11 accesses the predetermined server device via the network by the wireless communication unit 24, and the other If the voice information from the user is uploaded, the voice information is downloaded by the receiving operation (step S304).

続けてプロセッサ11は、自動再生させる音声情報があるか否かを判断する(ステップS305)。自動再生すべき音声情報がないと判断した場合(ステップS305のNO)、プロセッサ11はステップS301からの処理に戻る。 Subsequently, the processor 11 determines whether or not there is audio information to be automatically reproduced (step S305). When it is determined that there is no audio information to be automatically reproduced (NO in step S305), the processor 11 returns to the process from step S301.

またステップS305において、ダウンロードにより取得された音声情報が、自動再生すべき音声情報であると判断した場合(ステップS305のYES)、プロセッサ11はダウンロードにより取得された音声情報を、音声入出力部16、スピーカ27から再生させた上で(ステップS306)、次の自動再生処理に備えてステップS301からの処理に戻る。 Further, in step S305, when it is determined that the audio information acquired by the download is the audio information to be automatically reproduced (YES in step S305), the processor 11 inputs the audio information acquired by the download to the audio input / output unit 16. After reproducing from the speaker 27 (step S306), the process returns to the process from step S301 in preparation for the next automatic reproduction process.

なお、ステップS302において、リスト端末10がユーザの耳周辺に近付けられたと判断した場合、さらに予め設定された追加動作、例えばユーザがリスト端末10を装着した手首を所定回数連続して捻るような動作がなされた後に、音声情報の自動再生動作に移行するものとしても良い。このような追加動作を組み合わせて設定しておくことで、不用意に音声情報の自動再生が開始されるようなことを未然に防止できる。なお、プロセッサ11は、リスト端末10を装着した手首の捻り動作を、角速度センサ18からの出力データを用いて、検出する。また、このような不用意に音声情報の自動再生が開始されることを防ぐための、ユーザの動作とその動作回数としては、手首を捻る動作に限定されず、リスト端末10に設定されている動作の中から、例えば手首のスナップ等を選択してもよいし、その動作回数についてもユーザが任意に設定してもよい。 In step S302, when it is determined that the list terminal 10 is brought close to the user's ear, a preset additional operation, for example, an operation in which the user twists the wrist on which the list terminal 10 is attached continuously a predetermined number of times. After this is done, the operation may shift to the automatic reproduction operation of the voice information. By setting a combination of such additional operations, it is possible to prevent the automatic reproduction of voice information from being accidentally started. The processor 11 detects the twisting motion of the wrist on which the wrist terminal 10 is attached by using the output data from the angular velocity sensor 18. Further, the user's action and the number of such actions for preventing the automatic reproduction of the voice information from being carelessly started are not limited to the wrist twisting action, and are set in the list terminal 10. For example, a wrist snap may be selected from the movements, or the user may arbitrarily set the number of movements.

また、リスト端末10がユーザの耳周辺に近付けられたと判断する基準に関しても、加速度センサ17および角速度センサ18の出力データから一律に判断するのではなく、リスト端末10を所持するユーザの個人差等を考慮して事前に調整できるようにすることで、よりユーザ一人一人に、より適切なタイミングで音声情報を自動再生させることが可能となる。 Further, regarding the criterion for determining that the list terminal 10 is brought close to the user's ear, it is not uniformly determined from the output data of the acceleration sensor 17 and the angular velocity sensor 18, but the individual difference of the user who owns the list terminal 10 and the like. By making it possible to make adjustments in advance in consideration of the above, it becomes possible for each user to automatically reproduce the voice information at a more appropriate timing.

さらに、自動再生する音声情報に関しては、RAM12またはROM13に記憶されている音声情報に紐づけられたタイムスタンプ等を自動的に更新して、例えば一定期間以上経過した音声情報は削除するように管理することで、記憶容量に制限のあるRAM12またはROM13を有効に活用して、新規の音声情報が記憶できない、といった事態となるのを未然に回避できる。 Further, regarding the voice information to be automatically reproduced, the time stamp or the like associated with the voice information stored in the RAM 12 or the ROM 13 is automatically updated, and for example, the voice information after a certain period of time is managed to be deleted. By doing so, it is possible to effectively utilize the RAM 12 or ROM 13 having a limited storage capacity and prevent a situation in which new voice information cannot be stored.

また、音声情報の自動再生時に、併せて表示部14に音声情報の内容を表示し、自動再生される音声情報をユーザが見ることで、ユーザは音声情報の内容を確実に確認することができる。ここで、スピーカ27から出力される音声情報と、表示部14に出力される音声情報の内容を併せて、音情報と呼称する。また、自動再生させる音声情報をプロセッサ11が取得した場合、その音声情報が再生される前に、バイブレータ23を振動させる、および、スピーカ27から所定のアラーム音やビープ音を鳴らす等の少なくとも一方により、自動させる音声情報があることを、ユーザに通知することができる。 Further, when the audio information is automatically reproduced, the content of the audio information is also displayed on the display unit 14, and the user can see the automatically reproduced audio information, so that the user can surely confirm the content of the audio information. .. Here, the audio information output from the speaker 27 and the content of the audio information output to the display unit 14 are collectively referred to as sound information. Further, when the processor 11 acquires the audio information to be automatically reproduced, the vibrator 23 is vibrated or the speaker 27 emits a predetermined alarm sound or beep sound before the audio information is reproduced. , It is possible to notify the user that there is voice information to be automated.

さらに、一度自動再生した音声情報を、再生後に即時削除するのではなく、所定時間内であれば再度自動再生可能とすることで、音声の内容を聞き逃した場合や、確認を行なう場合などにも対処できる。なお、この所定時間、再度自動再生させる回数については、ユーザが任意に設定することができるようにしてもよい。 Furthermore, the audio information that has been automatically played once is not deleted immediately after playback, but can be automatically played again within a predetermined time, so that the content of the audio can be missed or confirmed. Can also be dealt with. It should be noted that the user may arbitrarily set the number of times of automatic reproduction for this predetermined time.

なお自動再生させる音声情報は、予め設定された音量で再生するのではなく、マイクロホン26で集音した周囲の音量に基づいて、例えば騒がしい場所では音量を上げたり、静かな場所では音量を下げたりすることで、周囲の環境に合わせた音量で音声情報を再生させることができる。 Note that the audio information to be automatically played is not played at a preset volume, but is raised in a noisy place or lowered in a quiet place based on the surrounding volume collected by the microphone 26. By doing so, the audio information can be reproduced at a volume suitable for the surrounding environment.

[実施形態の効果]
以上詳述した如く本実施形態によれば、ユーザに必要と思われる情報を選択して出力することが可能となる。
[Effect of Embodiment]
As described in detail above, according to the present embodiment, it is possible to select and output information that is considered necessary by the user.

なお、本実施形態では説明しなかったが、自動再生により出力する音声情報に関して、予め用意した複数の声の種類から、ユーザが任意に1つを選択できるようにすることで、ユーザ好みの声での音声出力が実現できる。 Although not described in the present embodiment, the voice information output by the automatic playback can be arbitrarily selected by the user from a plurality of voice types prepared in advance, so that the voice of the user's preference can be selected. Audio output can be realized.

さらに、音声情報の内容(例えば種類、分野)に応じて複数の声の種類から1つを割り当てて設定することで、ユーザは再生された音声情報を聞くことで、どの分野に属する音声情報であるのかを容易に理解することができる。 Furthermore, by assigning and setting one of a plurality of voice types according to the content (for example, type, field) of the voice information, the user can listen to the reproduced voice information and use the voice information belonging to any field. You can easily understand if there is one.

また本実施形態では、リスト端末10がユーザの耳周辺に近付けられたと判断した場合に音声情報を自動再生させることに代えてまたは加えて、例えば椅子に座っていた状態から立ち上がった場合などを特定のユーザの動作として選択的に設定できるようにしても良く、各ユーザ個人の要望に応じたカスタマイズが実現可能となる。 Further, in the present embodiment, instead of or in addition to automatically playing back the voice information when it is determined that the wrist terminal 10 is brought close to the user's ear, for example, when the wrist terminal 10 stands up from a sitting state is specified. It may be possible to selectively set the operation of the user, and customization according to each user's individual request can be realized.

なお本実施形態は、ユーザの手首に装着して使用する腕時計型のリスト端末に適用した場合について説明したが、ユーザが携帯する情報端末であれば、スマートフォンやその他の各種ウェアラブルデバイスなどにも同様に適用可能である。 Although this embodiment has been described when applied to a wristwatch-type wrist terminal worn on the wrist of a user and used, the same applies to smartphones and various other wearable devices as long as the information terminal is carried by the user. Applicable to.

上記の例では、ユーザに必要と思われる情報を選択して出力することができるものであるが、これに代えてまたは加えて、当該情報を所定の外部装置に自動的に送信するようにしてもよい。この場合、リスト端末10の無線通信部24を介して、所定の外部装置に当該情報を送信する。例えば、第1の例である運動中の場合、ランニングにおいて計測されたタイムや走行距離等の情報を、所定の外部装置に送信する。また、例えば、第5の例である車や電車による移動中の場合、道路交通情報や電車運行情報の情報を、所定の外部装置に送信する。この際、ランニングや車、電車による移動のように、ユーザの移動を伴う場合には上記の情報に加えて、移動した経路の情報を送るようにしてもよい。リスト端末10から送信される情報は、所定の1の外部装置に送信されてよい。また、ユーザや端末の状況の種類に応じて、情報の送信先となる1または複数の外部装置を予め対応付けた対応情報をリスト端末10の記憶部に記憶させ、ユーザや端末の状況の種類と当該対応情報から送信先となる外部装置を特定し、特定された外部装置に情報を送信するようにしてもよい。なお、外部装置に送信される情報を音声情報であってもよいし、音声情報をテキスト情報に変換したものであってもよい。 In the above example, the information that the user thinks is necessary can be selected and output, but instead or in addition to this, the information is automatically transmitted to a predetermined external device. May be good. In this case, the information is transmitted to a predetermined external device via the wireless communication unit 24 of the list terminal 10. For example, in the case of exercise, which is the first example, information such as time and mileage measured in running is transmitted to a predetermined external device. Further, for example, in the case of moving by a car or a train, which is the fifth example, information on road traffic information and train operation information is transmitted to a predetermined external device. At this time, in the case where the user moves, such as running, moving by car, or train, information on the moved route may be sent in addition to the above information. The information transmitted from the list terminal 10 may be transmitted to a predetermined external device 1. Further, depending on the type of the situation of the user or the terminal, the corresponding information in which one or a plurality of external devices to which the information is transmitted is associated in advance is stored in the storage unit of the list terminal 10, and the type of the situation of the user or the terminal is stored. And the external device to be the transmission destination may be specified from the corresponding information, and the information may be transmitted to the specified external device. The information transmitted to the external device may be voice information, or the voice information may be converted into text information.

また、上記の実施例のその他の例として、第7の例では、ユーザや端末の状況として「勤務状態」の状況について説明する。この状況の確認方法としては、リスト端末10またはリスト端末10に外部接続したスマートフォン等のスケジュール管理機能や勤務管理機能で、勤務管理として記録されている勤務の開始と終了時刻や休憩(時刻を含む)、会議(時刻を含む)等の情報を取得することで確認することができる。第7の例では、取得した勤務の開始と終了時刻や休憩(時刻を含む)、会議(時刻を含む)等の情報を音声情報として音声入出力部16から出力する。また、上記で示したように音声情報または音声情報をテキスト変換した情報を所定の外部装置に送信するようにしてもよい。この場合、GPS受信部25によって取得した現在位置が勤務場所として予め設定された位置と一致し、且つ、プロセッサ11等から取得した現在時刻が勤務の開始時間付近であると特定した場合、リスト端末10のユーザが勤務を開始したことを示す情報を所定の外部装置に送信するようにしてもよい。なお、勤務開始だけでなく、勤務終了や休憩開始、会議開始等の情報を送信できることは言うまでもない。また、例えば、勤務を開始したことを示す情報に加えて、リスト端末10の図示しない体温センサで、その時のユーザの体温を測定し、測定結果も併せて送信するようにしてもよい。体温の測定タイミングとしては、ユーザが予め設定してもよい。なお、体温センサだけでなく、心拍センサ19で測定された測定結果を送信するようにしてもよい。 In addition, as another example of the above embodiment, in the seventh example, the situation of "working state" as the situation of the user or the terminal will be described. As a method of confirming this situation, the schedule management function or work management function of the list terminal 10 or a smartphone externally connected to the list terminal 10 is used, and the start and end times of work and breaks (including time) recorded as work management are recorded. ), Meeting (including time), etc. can be confirmed by acquiring information. In the seventh example, the acquired information such as the start and end times of work, breaks (including time), and meetings (including time) is output as voice information from the voice input / output unit 16. Further, as shown above, the voice information or the text-converted information of the voice information may be transmitted to a predetermined external device. In this case, if the current position acquired by the GPS receiving unit 25 matches the position preset as the work place and the current time acquired from the processor 11 or the like is specified to be near the start time of work, the list terminal Information indicating that the 10 users have started work may be transmitted to a predetermined external device. Needless to say, it is possible to send information such as the end of work, the start of a break, and the start of a meeting as well as the start of work. Further, for example, in addition to the information indicating that the work has started, the body temperature of the user at that time may be measured by a body temperature sensor (not shown) of the list terminal 10, and the measurement result may also be transmitted. The measurement timing of the body temperature may be set in advance by the user. In addition to the body temperature sensor, the measurement result measured by the heart rate sensor 19 may be transmitted.

その他、本願発明は、上記実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、各実施形態は可能な限り適宜組み合わせて実施してもよく、その場合組み合わせた効果が得られる。更に、上記実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適当な組み合わせにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成が発明として抽出され得る。 In addition, the present invention is not limited to the above-described embodiment, and can be variously modified at the implementation stage without departing from the gist thereof. In addition, each embodiment may be carried out in combination as appropriate as possible, and in that case, the combined effect can be obtained. Further, the above-described embodiment includes inventions at various stages, and various inventions can be extracted by an appropriate combination in a plurality of disclosed constitutional requirements. For example, even if some constituent requirements are deleted from all the constituent requirements shown in the embodiment, the problem described in the column of the problem to be solved by the invention can be solved, and the effect described in the column of effect of the invention can be solved. If is obtained, a configuration in which this configuration requirement is deleted can be extracted as an invention.

以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
[請求項1]
ユーザが所持する情報処理装置であって、
前記ユーザの体に対する前記情報処理装置の位置および姿勢角度の少なくとも一方を検出する検出手段と、
前記ユーザの或る行動状況または前記情報処理装置の或る動作状況下において、前記検出手段により前記情報処理装置が所定の位置および姿勢角度の少なくとも一方となったことを検出した場合、前記ユーザの或る行動状況または前記情報処理装置の或る動作状況に関連した音情報を出力する情報出力手段と、
を備える情報処理装置。
[請求項2]
前記情報出力手段は、前記情報処理装置と設定された他の外部機器へ前記音情報を出力する、
請求項1に記載の情報処理装置。
[請求項3]
前記情報出力手段による前記音情報の出力前に、前記音情報を取得したことを示す報知情報を出力する報知手段をさらに備える、
請求項1または2に記載の情報処理装置。
[請求項4]
前記検出手段は、前記ユーザの体に対して前記情報処理装置が所定の位置および姿勢角度の少なくとも一方となった後に、予め設定された前記情報処理装置の位置および姿勢角度の少なくとも一方を検出する、
請求項1乃至3のいずれか一項に記載の情報処理装置。
[請求項5]
前記検出手段は、前記ユーザの体に対する前記情報処理装置の所定の位置および姿勢角度の少なくとも一方を調整させることを可能とする、
請求項1乃至4のいずれか一項に記載の情報処理装置。
[請求項6]
前記音情報を取得した取得日時に関する情報を管理する情報管理手段をさらに備える、
請求項1乃至5のいずれか一項に記載の情報処理装置。
[請求項7]
前記情報出力手段により出力された前記音情報の内容を示す情報を表示する表示手段をさらに備える、
請求項1乃至6のいずれか一項に記載の情報処理装置。
[請求項8]
前記情報出力手段による前記音情報の出力は、初回の出力以降、予め設定された時間内である場合、前記音情報を再度出力することが可能である、
請求項1乃至7のいずれか一項に記載の情報処理装置。
[請求項9]
前記情報処理装置の周囲の音量を取得する音量取得手段と、
前記音量取得手段で取得した前記音量に基づいて、前記情報出力手段により出力させる前記音情報の再生音量を調整する出力調整手段と、
をさらに備える、
請求項1乃至8のいずれか一項に記載の情報処理装置。
[請求項10]
ユーザが所持する情報処理装置でなされる情報処理方法であって、
前記ユーザの体に対する前記情報処理装置の位置および姿勢角度の少なくとも一方を検出する検出工程と、
前記ユーザの或る行動状況または前記情報処理装置の或る動作状況下において、前記検出工程により前記情報処理装置が所定の位置および姿勢角度の少なくとも一方となったことを検出した場合、前記ユーザの或る行動状況または前記情報処理装置の或る動作状況に関連した音情報を出力する情報出力工程と、
を有する情報処理方法。
[請求項11]
ユーザが所持する情報処理装置が内蔵するプロセッサが実行するプログラムであって、前記プロセッサを、
前記ユーザの体に対する前記情報処理装置の位置および姿勢角度の少なくとも一方を検出する検出手段と、
前記ユーザの或る行動状況または前記情報処理装置の或る動作状況下において、前記検出手段により前記情報処理装置が所定の位置および姿勢角度の少なくとも一方となったことを検出した場合、前記ユーザの或る行動状況または前記情報処理装置の或る動作状況に関連した音情報を出力する情報出力手段と、
して機能させるプログラム。
The inventions described in the claims of the original application of the present application are described below.
[Claim 1]
An information processing device owned by the user
A detection means for detecting at least one of the position and the posture angle of the information processing device with respect to the user's body.
When the detection means detects that the information processing apparatus is at least one of a predetermined position and an attitude angle under a certain behavioral condition of the user or a certain operating condition of the information processing apparatus, the information processing apparatus of the user An information output means for outputting sound information related to a certain action situation or a certain operation state of the information processing device, and
Information processing device equipped with.
[Claim 2]
The information output means outputs the sound information to another external device set as the information processing device.
The information processing device according to claim 1.
[Claim 3]
A notification means for outputting notification information indicating that the sound information has been acquired is further provided before the sound information is output by the information output means.
The information processing device according to claim 1 or 2.
[Claim 4]
The detection means detects at least one of the preset position and posture angle of the information processing device after the information processing device has at least one of a predetermined position and posture angle with respect to the user's body. ,
The information processing device according to any one of claims 1 to 3.
[Claim 5]
The detection means makes it possible to adjust at least one of a predetermined position and posture angle of the information processing device with respect to the user's body.
The information processing device according to any one of claims 1 to 4.
[Claim 6]
Further provided with information management means for managing information regarding the acquisition date and time when the sound information was acquired.
The information processing device according to any one of claims 1 to 5.
[Claim 7]
A display means for displaying information indicating the content of the sound information output by the information output means is further provided.
The information processing device according to any one of claims 1 to 6.
[Claim 8]
When the sound information is output by the information output means within a preset time after the first output, the sound information can be output again.
The information processing device according to any one of claims 1 to 7.
[Claim 9]
A volume acquisition means for acquiring the volume around the information processing device, and
An output adjusting means for adjusting the reproduction volume of the sound information to be output by the information output means based on the volume acquired by the volume acquiring means, and an output adjusting means.
Further prepare,
The information processing device according to any one of claims 1 to 8.
[Claim 10]
It is an information processing method performed by the information processing device owned by the user.
A detection step of detecting at least one of the position and the posture angle of the information processing device with respect to the user's body.
When it is detected by the detection step that the information processing apparatus is at least one of a predetermined position and an attitude angle under a certain behavioral condition of the user or a certain operating condition of the information processing apparatus, the information processing apparatus of the user An information output process that outputs sound information related to a certain action situation or a certain operation state of the information processing device, and
Information processing method having.
[Claim 11]
A program executed by a processor built in an information processing device owned by a user.
A detection means for detecting at least one of the position and the posture angle of the information processing device with respect to the user's body.
When the detection means detects that the information processing apparatus is at least one of a predetermined position and an attitude angle under a certain behavioral condition of the user or a certain operating condition of the information processing apparatus, the information processing apparatus of the user An information output means for outputting sound information related to a certain action situation or a certain operation state of the information processing device, and
A program that works.

10…リスト端末
11…プロセッサ
12…RAM
13…ROM
14…表示部
15…タッチ入力部
16…音声入出力部
17…加速度センサ
18…角速度センサ
19…心拍センサ
20…温度センサ
21…湿度センサ
22…操作部
23…バイブレータ
24…無線通信部
25…GPS受信部
26…マイクロホン
27…スピーカ
28…(LTE(登録商標))アンテナ
29…(無線LAN)アンテナ
30…(BLE(登録商標))アンテナ
31…GPSアンテナ
B…バス
10 ... List terminal 11 ... Processor 12 ... RAM
13 ... ROM
14 ... Display unit 15 ... Touch input unit 16 ... Voice input / output unit 17 ... Acceleration sensor 18 ... Angle speed sensor 19 ... Heart rate sensor 20 ... Temperature sensor 21 ... Humidity sensor 22 ... Operation unit 23 ... Vibrator 24 ... Wireless communication unit 25 ... GPS Receiver 26 ... Microphone 27 ... Speaker 28 ... (LTE (registered trademark)) Antenna 29 ... (Wireless LAN) Antenna 30 ... (BLE (registered trademark)) Antenna 31 ... GPS antenna B ... Bus

Claims (11)

ユーザが所持する情報処理装置であって、
前記ユーザの体に対する前記情報処理装置の位置および姿勢角度の少なくとも一方を検出する検出手段と、
前記ユーザの或る行動状況または前記情報処理装置の或る動作状況下において、前記検出手段により前記情報処理装置が所定の位置および姿勢角度の少なくとも一方となったことを検出した場合、前記ユーザの或る行動状況または前記情報処理装置の或る動作状況に関連した音情報を出力する情報出力手段と、
を備える情報処理装置。
An information processing device owned by the user
A detection means for detecting at least one of the position and the posture angle of the information processing device with respect to the user's body.
When the detection means detects that the information processing apparatus is at least one of a predetermined position and an attitude angle under a certain behavioral condition of the user or a certain operating condition of the information processing apparatus, the information processing apparatus of the user An information output means for outputting sound information related to a certain action situation or a certain operation state of the information processing device, and
Information processing device equipped with.
前記情報出力手段は、前記情報処理装置と設定された他の外部機器へ前記音情報を出力する、
請求項1に記載の情報処理装置。
The information output means outputs the sound information to another external device set as the information processing device.
The information processing device according to claim 1.
前記情報出力手段による前記音情報の出力前に、前記音情報を取得したことを示す報知情報を出力する報知手段をさらに備える、
請求項1または2に記載の情報処理装置。
A notification means for outputting notification information indicating that the sound information has been acquired is further provided before the sound information is output by the information output means.
The information processing device according to claim 1 or 2.
前記検出手段は、前記ユーザの体に対して前記情報処理装置が所定の位置および姿勢角度の少なくとも一方となった後に、予め設定された前記情報処理装置の位置および姿勢角度の少なくとも一方を検出する、
請求項1乃至3のいずれか一項に記載の情報処理装置。
The detection means detects at least one of the preset position and posture angle of the information processing device after the information processing device has at least one of a predetermined position and posture angle with respect to the user's body. ,
The information processing device according to any one of claims 1 to 3.
前記検出手段は、前記ユーザの体に対する前記情報処理装置の所定の位置および姿勢角度の少なくとも一方を調整させることを可能とする、
請求項1乃至4のいずれか一項に記載の情報処理装置。
The detection means makes it possible to adjust at least one of a predetermined position and posture angle of the information processing device with respect to the user's body.
The information processing device according to any one of claims 1 to 4.
前記音情報を取得した取得日時に関する情報を管理する情報管理手段をさらに備える、
請求項1乃至5のいずれか一項に記載の情報処理装置。
Further provided with information management means for managing information regarding the acquisition date and time when the sound information was acquired.
The information processing device according to any one of claims 1 to 5.
前記情報出力手段により出力された前記音情報の内容を示す情報を表示する表示手段をさらに備える、
請求項1乃至6のいずれか一項に記載の情報処理装置。
A display means for displaying information indicating the content of the sound information output by the information output means is further provided.
The information processing device according to any one of claims 1 to 6.
前記情報出力手段による前記音情報の出力は、初回の出力以降、予め設定された時間内である場合、前記音情報を再度出力することが可能である、
請求項1乃至7のいずれか一項に記載の情報処理装置。
When the sound information is output by the information output means within a preset time after the first output, the sound information can be output again.
The information processing device according to any one of claims 1 to 7.
前記情報処理装置の周囲の音量を取得する音量取得手段と、
前記音量取得手段で取得した前記音量に基づいて、前記情報出力手段により出力させる前記音情報の再生音量を調整する出力調整手段と、
をさらに備える、
請求項1乃至8のいずれか一項に記載の情報処理装置。
A volume acquisition means for acquiring the volume around the information processing device, and
An output adjusting means for adjusting the reproduction volume of the sound information to be output by the information output means based on the volume acquired by the volume acquiring means, and an output adjusting means.
Further prepare,
The information processing device according to any one of claims 1 to 8.
ユーザが所持する情報処理装置でなされる情報処理方法であって、
前記ユーザの体に対する前記情報処理装置の位置および姿勢角度の少なくとも一方を検出する検出工程と、
前記ユーザの或る行動状況または前記情報処理装置の或る動作状況下において、前記検出工程により前記情報処理装置が所定の位置および姿勢角度の少なくとも一方となったことを検出した場合、前記ユーザの或る行動状況または前記情報処理装置の或る動作状況に関連した音情報を出力する情報出力工程と、
を有する情報処理方法。
It is an information processing method performed by the information processing device owned by the user.
A detection step of detecting at least one of the position and the posture angle of the information processing device with respect to the user's body.
When it is detected by the detection step that the information processing apparatus is at least one of a predetermined position and an attitude angle under a certain behavioral condition of the user or a certain operating condition of the information processing apparatus, the information processing apparatus of the user An information output process that outputs sound information related to a certain action situation or a certain operation state of the information processing device, and
Information processing method having.
ユーザが所持する情報処理装置が内蔵するプロセッサが実行するプログラムであって、前記プロセッサを、
前記ユーザの体に対する前記情報処理装置の位置および姿勢角度の少なくとも一方を検出する検出手段と、
前記ユーザの或る行動状況または前記情報処理装置の或る動作状況下において、前記検出手段により前記情報処理装置が所定の位置および姿勢角度の少なくとも一方となったことを検出した場合、前記ユーザの或る行動状況または前記情報処理装置の或る動作状況に関連した音情報を出力する情報出力手段と、
して機能させるプログラム。
A program executed by a processor built in an information processing device owned by a user.
A detection means for detecting at least one of the position and the posture angle of the information processing device with respect to the user's body.
When the detection means detects that the information processing apparatus is at least one of a predetermined position and an attitude angle under a certain behavioral condition of the user or a certain operating condition of the information processing apparatus, the information processing apparatus of the user An information output means for outputting sound information related to a certain action situation or a certain operation state of the information processing device, and
A program that works.
JP2021010020A 2020-03-19 2021-01-26 Information processor, information processing method and program Pending JP2021152879A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US17/199,916 US20210294570A1 (en) 2020-03-19 2021-03-12 Information processing device, information processing method, and storage medium
JP2022181477A JP2023001366A (en) 2020-03-19 2022-11-14 Information processor, information processing method and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020049706 2020-03-19
JP2020049706 2020-03-19

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022181477A Division JP2023001366A (en) 2020-03-19 2022-11-14 Information processor, information processing method and program

Publications (1)

Publication Number Publication Date
JP2021152879A true JP2021152879A (en) 2021-09-30

Family

ID=77887383

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021010020A Pending JP2021152879A (en) 2020-03-19 2021-01-26 Information processor, information processing method and program

Country Status (1)

Country Link
JP (1) JP2021152879A (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002524905A (en) * 1998-08-29 2002-08-06 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Personal communication device
JP2007233435A (en) * 2006-02-27 2007-09-13 Kddi Corp Electronic mail reading-out system, server, mobile apparatus, computer program and electronic mail reading-out method
JP2008263277A (en) * 2007-04-10 2008-10-30 Toru Fukushima Compatible function assisting model for mobile phone
US20090164219A1 (en) * 2007-12-19 2009-06-25 Enbiomedic Accelerometer-Based Control of Wearable Devices
JP2015139132A (en) * 2014-01-23 2015-07-30 株式会社ファインウェル Notification device
JP2017207848A (en) * 2016-05-17 2017-11-24 レノボ・シンガポール・プライベート・リミテッド Portable information terminal, method of determining worn arm, method of determining worn direction, and program
JP2019083036A (en) * 2014-09-02 2019-05-30 アップル インコーポレイテッドApple Inc. Compact interface for managing alert

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002524905A (en) * 1998-08-29 2002-08-06 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Personal communication device
JP2007233435A (en) * 2006-02-27 2007-09-13 Kddi Corp Electronic mail reading-out system, server, mobile apparatus, computer program and electronic mail reading-out method
JP2008263277A (en) * 2007-04-10 2008-10-30 Toru Fukushima Compatible function assisting model for mobile phone
US20090164219A1 (en) * 2007-12-19 2009-06-25 Enbiomedic Accelerometer-Based Control of Wearable Devices
JP2015139132A (en) * 2014-01-23 2015-07-30 株式会社ファインウェル Notification device
JP2019083036A (en) * 2014-09-02 2019-05-30 アップル インコーポレイテッドApple Inc. Compact interface for managing alert
JP2017207848A (en) * 2016-05-17 2017-11-24 レノボ・シンガポール・プライベート・リミテッド Portable information terminal, method of determining worn arm, method of determining worn direction, and program

Similar Documents

Publication Publication Date Title
US8793031B2 (en) Data selection and sharing between a vehicle and a user device
RU2406151C2 (en) Improved information device for training, server, system and method
US9277349B2 (en) Method of processing an incoming communication signal at a mobile communication device
US11181376B2 (en) Information processing device and information processing method
CN102037314A (en) Navigation apparatus and method for recording image data
CN108051010B (en) Method for determining time of arrival at destination and mobile terminal
CN108364498A (en) A kind of parking reminding method, server and terminal
CN107192395A (en) A kind of air navigation aid and device, terminal, server, system
WO2012104725A2 (en) Systems and methods for audio roaming for mobile devices, group information server among mobile devices, and defining group of users with mobile devices
CN103063221A (en) Navigation system with non-native dynamic navigator mechanism and method of operation thereof
US20190143995A1 (en) Content selection system, content playback device, content selection server, and content selection method
CN110290059A (en) The method and apparatus for sending social content
WO2009157076A1 (en) Communication environment prediction terminal, communication environment prediction method and communication environment prediction program
CN109708657B (en) Reminding method and mobile terminal
JP5463852B2 (en) Mobile device
US11595519B2 (en) Electronic apparatus and processing system
JP6559921B1 (en) Audio information providing system, information processing terminal control method, information processing terminal control program, audio output device control method, and audio output device control program
JP2021152879A (en) Information processor, information processing method and program
JP2013054027A (en) Course guide device, course guide method, and program
JP2023001366A (en) Information processor, information processing method and program
JP5268708B2 (en) Portable terminal device, server device, and ranking notification system
JP5893373B2 (en) Display device, program, and display method
WO2021253926A1 (en) Method and apparatus for giving alarm regarding child being left in vehicle, and wearable device
US12008989B2 (en) Electronic apparatus and processing system
CN108055393A (en) Speed based reminding method, device and computer readable storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210526

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220317

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220419

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220620

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20221018