JP2017126218A - Information terminal, information system, acoustic member, information processing method, and program - Google Patents

Information terminal, information system, acoustic member, information processing method, and program Download PDF

Info

Publication number
JP2017126218A
JP2017126218A JP2016005463A JP2016005463A JP2017126218A JP 2017126218 A JP2017126218 A JP 2017126218A JP 2016005463 A JP2016005463 A JP 2016005463A JP 2016005463 A JP2016005463 A JP 2016005463A JP 2017126218 A JP2017126218 A JP 2017126218A
Authority
JP
Japan
Prior art keywords
sound
information terminal
recording
recorded
detected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016005463A
Other languages
Japanese (ja)
Inventor
眞 遠藤
Makoto Endo
眞 遠藤
知成 津坂
Tomonari Tsusaka
知成 津坂
高橋 直人
Naoto Takahashi
直人 高橋
君夫 熊田
Kimio Kumada
君夫 熊田
厚男 杉浦
Atsuo Sugiura
厚男 杉浦
明彦 池田
Akihiko Ikeda
明彦 池田
奥本 健二
Kenji Okumoto
健二 奥本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Singapore Pte Ltd
Original Assignee
Lenovo Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Singapore Pte Ltd filed Critical Lenovo Singapore Pte Ltd
Priority to JP2016005463A priority Critical patent/JP2017126218A/en
Publication of JP2017126218A publication Critical patent/JP2017126218A/en
Pending legal-status Critical Current

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide an information terminal for achieving a one-hand operation that is easily executed by a user while suppressing cost by associating executable operations in accordance with generated sound when an uneven shape part provided at a bezel part of a touch panel is slid by a finger, and to provide an information system, an acoustic member, an information processing method and a program.SOLUTION: The information terminal includes a sound detection part 101 for detecting sound echoing due to a touch action performed to a housing by a user, a determination part 102 for determining whether the sound detected by the sound detection part 101 coincides with record sound recorded in association with a prescribed command in advance, and a command execution part 104 for executing a prescribed command corresponding to the record sound determined to be coincident in the case that the determination part 102 determines that the sound detected by the sound detection part 101 coincides with the record sound.SELECTED DRAWING: Figure 3

Description

本発明は、情報端末、情報システム、音響部材、情報処理方法、及び、プログラムに関する。   The present invention relates to an information terminal, an information system, an acoustic member, an information processing method, and a program.

近年、例えばスマートフォン、タブレットPC又はスレートPCなどの情報端末を、例えば電車の車内等で利用するユーザの姿が多く見られるようになってきている。スマートフォン等の普及に伴って、これらの情報端末には操作性を向上させる各種の機能が次々と盛り込まれてきている。   In recent years, for example, users who use information terminals such as smartphones, tablet PCs, and slate PCs in trains are often seen. With the spread of smartphones and the like, various functions for improving operability have been incorporated in these information terminals one after another.

例えば特許文献1には、タブレットPCの傾きを検出し、その検出結果に基づいて画面上のポインタを移動させる技術が開示されている。特許文献1に開示された技術によれば、ユーザは、例えば片方の手で荷物を持っている場合等のように、片方の手を使用できない状況においても、片手の簡単な操作で高速にポインタを移動することができる。   For example, Patent Document 1 discloses a technique for detecting the tilt of a tablet PC and moving a pointer on the screen based on the detection result. According to the technique disclosed in Patent Document 1, even when a user cannot use one hand, for example, when holding a baggage with one hand, the user can quickly perform a pointer operation with a simple operation of one hand. Can be moved.

特開2015−5250号公報Japanese Patent Laying-Open No. 2015-5250

他方、特許文献1には、片手で操作できる端末側の動作としてポインタを移動させることは開示されている。他方、ユーザが望む片手での操作はポインタ操作に限られるものではない。例えばスマートフォンやタブレット等の情報端末にはタッチパネルが搭載されており、これらを片手で所持しつつ、片手でスワイプ等の操作を行う場合や、筐体の正面に設けられたハードウェアボタン等を片手で操作する場合もある。しかし、これらの片手操作は誤入力や指が届かない等、不便な一面もある。   On the other hand, Patent Document 1 discloses that the pointer is moved as a terminal-side operation that can be operated with one hand. On the other hand, the operation with one hand desired by the user is not limited to the pointer operation. For example, information terminals such as smartphones and tablets are equipped with touch panels. When you hold them with one hand and perform operations such as swiping with one hand, you can use the hardware buttons provided on the front of the housing with one hand. There is also a case where it operates with. However, these one-handed operations have some inconvenient aspects such as incorrect input and finger not reaching.

そこで、これらの片手操作を支援するために、筐体の背面や側面に例えばタッチパッドやジョグダイヤル等の補助デバイスを追加で設けたり、音声認識機能を設け、音声によりコマンドを入力したりすることが行われている。   Therefore, in order to support these one-handed operations, an auxiliary device such as a touchpad or jog dial may be additionally provided on the back or side of the housing, or a voice recognition function may be provided to input commands by voice. Has been done.

しかし、上記のタッチパッドやジョグダイヤル等を追加することは、筐体のコスト増につながる。また、音声によるコマンド入力は、例えば電車等の公共の場において憚られることが多く、これを実行することは難しい。   However, the addition of the touch pad, the jog dial, etc. leads to an increase in the cost of the housing. In addition, voice command input is often performed in public places such as trains, and it is difficult to execute this.

本発明は、このような実情に鑑みてなされたものであって、コストを抑えてユーザが実行しやすい片手操作を実現することを目的とする。   The present invention has been made in view of such circumstances, and an object of the present invention is to realize a one-handed operation that can be easily performed by a user at a reduced cost.

上記の課題を解決するため、本発明の情報端末は、ユーザが筐体に対して行う接触行為によって響く音を検出する音検出手段と、音検出手段により検出された音が予め所定のコマンドに対応づけて記録された記録音と一致するか否かを判定する判定手段と、判定手段により、音検出手段により検出された音が記録音と一致すると判定された場合、一致すると判定された該記録音に対応する所定のコマンドを実行するコマンド実行手段とを備えることを特徴とする。   In order to solve the above-described problems, an information terminal according to the present invention includes a sound detection unit that detects a sound reverberated by a contact act performed by a user on a housing, and a sound detected by the sound detection unit is set in advance as a predetermined command. The determination means for determining whether or not the recorded sound matches the recorded sound, and the determination means determines that the sound detected by the sound detection means matches the recorded sound. Command execution means for executing a predetermined command corresponding to the recording sound is provided.

本発明によれば、コストを抑えてユーザが実行しやすい片手操作を実現することができる。   According to the present invention, it is possible to realize a one-handed operation that can be easily performed by a user while reducing costs.

本発明の実施形態における情報端末の概略図である。It is the schematic of the information terminal in embodiment of this invention. 本発明の実施形態における情報端末のハードウェア構成図である。It is a hardware block diagram of the information terminal in embodiment of this invention. 本発明の実施形態における情報端末の機能ブロック図である。It is a functional block diagram of the information terminal in the embodiment of the present invention. 本発明の実施形態における情報端末に記録される記録音とコマンドの対応関係を規定するテーブル例である。It is an example table which prescribes | regulates the correspondence of the recording sound and command which are recorded on the information terminal in embodiment of this invention. 本発明の実施形態における情報端末における操作例を示す模式図である。It is a schematic diagram which shows the example of operation in the information terminal in embodiment of this invention. 本発明の実施形態における情報端末における操作例について説明する図である。It is a figure explaining the example of operation in the information terminal in the embodiment of the present invention. 本発明の実施形態における処理手順を示すフローチャートである。It is a flowchart which shows the process sequence in embodiment of this invention.

本発明の実施形態の情報端末について図面を用いて以下説明する。なお、各図中、同一又は相当する部分には同一の符号を付しており、その重複説明は適宜に簡略化乃至省略する。また、以下に記載する実施形態は本発明の最良の形態であって、本発明に係る特許請求の範囲を限定するものではない。   An information terminal according to an embodiment of the present invention will be described below with reference to the drawings. In addition, in each figure, the same code | symbol is attached | subjected to the part which is the same or it corresponds, The duplication description is simplified thru | or abbreviate | omitted suitably. The embodiment described below is the best mode of the present invention, and does not limit the scope of the claims according to the present invention.

なお、以下の説明においては、本実施形態における情報端末としてタブレットPCを例に説明するが、本発明における情報端末はタブレットPCに限定されず、スマートフォン、ノートPC、スレートPC、PDA、その他の片手で操作することが有用な端末全般に適用可能であってよい。   In the following description, a tablet PC is described as an example of the information terminal in the present embodiment. However, the information terminal in the present invention is not limited to the tablet PC, and is a smartphone, a notebook PC, a slate PC, a PDA, or other one hand. It may be applicable to all terminals that are useful to operate with.

<本実施形態における情報端末について>
本実施形態における情報端末について図1を参照して説明する。本実施形態における情報端末1は、図1(a)に示すように、筐体の表面に例えば液晶ディスプレイ等の表示画面3を有している。また、本実施形態における情報端末1は、表示画面3の周囲に配されるベゼル5(のここでは右側部)に波板形状10aが設けられている。なお、本発明において「波板形状」は「凹凸形状」に含まれる概念とする。凹凸形状部分にユーザが指等を摺動、擦過、あるいは滑らせることによって、所定周波数の音が発生する。また、波形状のピッチや、凹凸の段差や、凹凸の外形等の凹凸形状を変えることにより、ユーザが指等を滑らせた場合に発生する音が変化することを利用して、凹凸形状を変えた異なる2以上の波板形状を情報端末1の筐体に設けてもよい。なお、上記の凹凸形状は、ユーザが片手で操作しやすい個所に設けられることが好ましい。その意味で、図1(a)で示した情報端末1のベゼル5の右側部分に波板形状10aが設けられている構造は一例にすぎず、ベゼル5の左側部分や上下部分に設けられていてもよい。
<Information terminal in this embodiment>
The information terminal in this embodiment is demonstrated with reference to FIG. As shown in FIG. 1A, the information terminal 1 according to the present embodiment has a display screen 3 such as a liquid crystal display on the surface of a housing. Further, in the information terminal 1 according to the present embodiment, a corrugated plate shape 10 a is provided on the bezel 5 (here, the right side portion) disposed around the display screen 3. In the present invention, “corrugated plate shape” is a concept included in “uneven shape”. When the user slides, rubs, or slides a finger or the like on the uneven portion, a sound having a predetermined frequency is generated. In addition, by changing the pitch of waves, uneven steps such as uneven steps, and uneven shapes such as the outer shape of uneven portions, the uneven shape can be changed by utilizing the fact that the sound generated when the user slides a finger etc. Two or more different corrugated plate shapes may be provided in the housing of the information terminal 1. In addition, it is preferable that said uneven | corrugated shape is provided in the location where a user can operate easily with one hand. In that sense, the structure in which the corrugated plate shape 10a is provided on the right side portion of the bezel 5 of the information terminal 1 shown in FIG. 1A is merely an example, and is provided on the left side portion and the upper and lower portions of the bezel 5. May be.

なお、本発明においては、情報端末1等の端末の筐体に対して、叩いたり、擦ったり、滑らせたりする等の「ユーザが筐体に対して行う接触行為」によって「音が響く」の概念に「音が鳴る」「音が発生する」等の表現が含まれるものとする。また、本発明における「音が発生する」の概念には、予め筐体内のメモリ等に記録された音声がスピーカ等から出力される概念は含まれないものとする。   In the present invention, “sound is heard” by “contact action performed by the user on the housing” such as hitting, rubbing, or sliding against the housing of the terminal such as the information terminal 1. It is assumed that expressions such as “sound” and “sound is generated” are included in the concept. In addition, the concept of “sound is generated” in the present invention does not include a concept in which sound recorded in advance in a memory or the like in a housing is output from a speaker or the like.

また、図1(b)に示すように、波板形状10bを情報端末1の筐体の側面7(上下左右いずれ側でもよい)に設けてもよい。筐体の側面に波板形状10bのような凹凸形状を設けたとしても片手操作しやすくなる。   Moreover, as shown in FIG.1 (b), you may provide the corrugated plate shape 10b in the side surface 7 (it may be up and down, right and left either side) of the housing | casing of the information terminal 1. FIG. Even if a concave and convex shape such as the corrugated plate shape 10b is provided on the side surface of the housing, it is easy to operate with one hand.

また、図1(c)に示すように、波板形状10cを情報端末1の筐体の裏面9に設けてもよい。また、波板形状と異なる形状の凹凸形状10dを設けてもよい。なお、波板形状10a〜10c、凹凸形状10dの長さ、幅、面積、又はその数や位置等は図1(a)〜図1(c)に示したものに限定されず、筐体のベゼル部分、裏面の広さに応じて適宜変更可能に構成することができる。また、複数の波形形状や凹凸形状をベゼル5、側面7、裏面9に設けてもよい。ただし、波板形状10cや凹凸形状10dは、片手(の親指や人差し指等)のみによって操作可能な位置に設けることが好ましい。   Further, as shown in FIG. 1C, a corrugated plate shape 10 c may be provided on the back surface 9 of the casing of the information terminal 1. Moreover, you may provide the uneven | corrugated shape 10d of a shape different from a corrugated shape. In addition, the length, width, area, or the number and position of the corrugated shapes 10a to 10c and the concavo-convex shape 10d are not limited to those shown in FIGS. 1 (a) to 1 (c). It can be configured to be appropriately changeable according to the width of the bezel portion and the back surface. A plurality of corrugated shapes and uneven shapes may be provided on the bezel 5, the side surface 7, and the back surface 9. However, it is preferable that the corrugated shape 10c and the concavo-convex shape 10d are provided at positions that can be operated only with one hand (such as the thumb or index finger).

また、図1(d)に示すように、本実施形態における情報端末1は、内部に中空構造6aや6bを有してもよい。斜線部は、情報端末1の液晶ディスプレイやCPU等が載せられたチップセット等が配されている様子を示している。つまり、中空構造6aや6bはこれらの部品等が設けられていない筐体の空隙部分を指す。この斜線部の両側に配された中空構造6aや6bの筐体表面側をユーザが叩くことにより、筐体内部が共鳴し、特定の共振周波数を有する音が発生する。   Moreover, as shown in FIG.1 (d), the information terminal 1 in this embodiment may have the hollow structures 6a and 6b inside. The hatched portion indicates a state in which a liquid crystal display of the information terminal 1, a chip set on which a CPU, etc. are mounted are arranged. That is, the hollow structures 6a and 6b indicate void portions of the casing in which these components and the like are not provided. When the user hits the housing surface side of the hollow structures 6a and 6b arranged on both sides of the hatched portion, the inside of the housing resonates and a sound having a specific resonance frequency is generated.

さらに、図1(e)に示すように、本実施形態における情報端末1aとして、例えばその筐体の長手方向を側面から見た場合に、その肉厚を一方の端部を薄く、他方の端部を厚くするように形成されるようにしてもよい。この場合、筐体の厚みの薄い部分Aを叩くことによって響く音(あるいは周波数)と、筐体の厚みの厚い部分Bを叩くことによって響く音(あるいは周波数)は異なる。このように筐体の厚みを変化させることで異なる音を発生させることができる。   Furthermore, as shown in FIG. 1 (e), as the information terminal 1a in the present embodiment, for example, when the longitudinal direction of the housing is viewed from the side, the thickness is reduced at one end and the other end is decreased. You may make it form so that a part may be thickened. In this case, the sound (or frequency) reverberated by hitting the thin part A of the housing is different from the sound (or frequency) resonated by hitting the thicker part B of the housing. In this way, different sounds can be generated by changing the thickness of the housing.

さらに、図1(f)に示すように、本実施形態における情報端末1bの例えばその筐体の裏面9bに、波板形状を有する音響部材10c'や凹凸形状を有する音響部材10’を脱着可能に構成してもよい。なお、本発明においては、これらの音響部材と情報端末を含む構成を情報システムとする。音響部材を情報端末から脱着可能にすることにより、凹凸の外形や材質等の凹凸形状を変化させて、様々な(音を発生させる)バリエーションの音響部材を提供することが可能となる。   Further, as shown in FIG. 1 (f), the acoustic member 10c ′ having a corrugated shape and the acoustic member 10 ′ having an uneven shape can be attached to and detached from, for example, the back surface 9b of the housing of the information terminal 1b in the present embodiment. You may comprise. In the present invention, a configuration including these acoustic members and an information terminal is an information system. By making the acoustic member detachable from the information terminal, it is possible to provide various (sound generating) variations of the acoustic member by changing the concave / convex shape of the concave / convex shape and material.

<本実施形態における情報端末のハードウェア構成について>
本実施形態における情報端末1のハードウェア構成について図2を参照して説明する。本実施形態における情報端末1は、ハードウェア構成として、CPU11と、RAM12と、ROM13と、NW I/F14と、HDD15と、入力部16と、表示部17と、マイク18を備えている。なお、これらは、情報端末1が後述する機能(処理)を実行するための構成の一例を示したものであり、これら以外のハードウェアを排除するものではない。また、これらの構成を全て備える必要もない。例えば、HDD15は必須の構成でなくてもよい。
<About the hardware configuration of the information terminal in this embodiment>
A hardware configuration of the information terminal 1 in the present embodiment will be described with reference to FIG. The information terminal 1 in this embodiment includes a CPU 11, a RAM 12, a ROM 13, an NW I / F 14, an HDD 15, an input unit 16, a display unit 17, and a microphone 18 as a hardware configuration. Note that these are examples of a configuration for the information terminal 1 to execute a function (processing) described later, and hardware other than these is not excluded. Moreover, it is not necessary to provide all of these configurations. For example, the HDD 15 may not be an essential configuration.

CPU11は、情報端末1における後述する各処理を実現するためのメイン制御部である。CPU11は、ROM13に格納された各処理を規定する処理プログラムがRAM12に読み込まれたものを実行することで、情報端末1における各機能を実現する。   The CPU 11 is a main control unit for realizing each process to be described later in the information terminal 1. The CPU 11 realizes each function in the information terminal 1 by executing a program in which a processing program defining each processing stored in the ROM 13 is read into the RAM 12.

RAM12は、上記のようにCPU11のワークメモリとして機能する記憶部である。ROM13は、上記のように各処理を規定した処理プログラムやその他情報端末1の制御に要する各種パラメータ等を記憶する記憶部である。   The RAM 12 is a storage unit that functions as a work memory of the CPU 11 as described above. The ROM 13 is a storage unit that stores a processing program that defines each process as described above, various parameters required for controlling the information terminal 1, and the like.

NW I/F14は、情報端末1がインターネット等に接続するためのネットワークインタフェースである。HDD15は、例えばドキュメントやコンテンツ等を記憶する大容量記憶部である。   The NW I / F 14 is a network interface for the information terminal 1 to connect to the Internet or the like. The HDD 15 is a large-capacity storage unit that stores, for example, documents and contents.

入力部16は、例えばユーザのタッチ操作を受け付けるタッチパネル等の入力デバイスである。表示部17は、例えば液晶ディスプレイ等である。   The input unit 16 is an input device such as a touch panel that accepts a user's touch operation. The display unit 17 is, for example, a liquid crystal display.

マイク18は、ユーザが筐体に対して行う接触行為によって響く音、つまり空気の振動をダイヤフラム等で受け止め、これを電気信号に変換する機器であり、マイクロフォンの略称である。   The microphone 18 is a device that receives a sound reverberated by a contact action performed by the user with respect to the housing, that is, vibration of air with a diaphragm or the like, and converts it into an electric signal, and is an abbreviation for a microphone.

また、上記のユニット以外に、例えば「Wi Fi(登録商標)」等により無線通信を行う無線LAN通信デバイスを備えてもよい。   In addition to the above units, for example, a wireless LAN communication device that performs wireless communication by “Wi Fi (registered trademark)” or the like may be provided.

<本実施形態における情報端末の機能ブロックについて>
本実施形態における情報端末1の機能ブロックについて図3(a)を参照して説明する。本実施形態における情報端末1は、機能ブロックとして、音検出部101と、判定部102と、記憶部103と、コマンド実行部104を備える。
<Regarding Functional Blocks of Information Terminal in this Embodiment>
Functional blocks of the information terminal 1 in the present embodiment will be described with reference to FIG. The information terminal 1 in this embodiment includes a sound detection unit 101, a determination unit 102, a storage unit 103, and a command execution unit 104 as functional blocks.

音検出部101は、ユーザが筐体に対して行う接触行為によって響く音(周波数)を検出する音検出手段であり、図2に示したマイク18によりその機能が実現される。例えば、音検出部101は、ユーザが情報端末1の筐体における上述した中空構造6aや6bを叩くことによって響く音(共振周波数)を検出することができる。また例えば、音検出部101は、ユーザが情報端末1の筐体における上述した凹凸形状10dを擦ることによって発生する音(摺動音あるいは擦過音)を検出することができる。   The sound detection unit 101 is a sound detection unit that detects sound (frequency) reverberated by a contact act performed by the user on the housing, and the function is realized by the microphone 18 illustrated in FIG. 2. For example, the sound detection unit 101 can detect a sound (resonance frequency) that resonates when the user strikes the above-described hollow structures 6 a and 6 b in the casing of the information terminal 1. Further, for example, the sound detection unit 101 can detect a sound (sliding sound or rubbing sound) generated when the user rubs the above-described uneven shape 10 d in the casing of the information terminal 1.

判定部102は、音検出部101により検出された音が予め所定のコマンドに対応づけて記録された記録音と一致するか否かを判定する判定手段であり、図2に示したCPU11、RAM12、ROM13、HDD15によりその機能が実現される。「所定のコマンド」としては、例えば、図2に示した表示部17に表示される画面上の文字や画を上下左右に動かしながら表示するスクロール操作や、筐体が有する表示部17に表示される画面上の文字や画を拡大又は縮小する拡大・縮小操作などがある。   The determination unit 102 is a determination unit that determines whether or not the sound detected by the sound detection unit 101 matches a recorded sound that is recorded in advance in association with a predetermined command. The CPU 11 and the RAM 12 illustrated in FIG. The function is realized by the ROM 13 and the HDD 15. As the “predetermined command”, for example, a scroll operation for displaying characters and images on the screen displayed on the display unit 17 shown in FIG. There are enlargement / reduction operations for enlarging or reducing characters and images on the screen.

記録部103は、音検出部101により予め検出された音を記録音として記録する記録手段であり、図2に示したCPU11、ROM13、HDD15によりその機能が実現される。また、記録部103は、音検出部101により予め検出された音の回数、発生間隔、連続発生時間を記録音として、それぞれ異なるコマンドに対応づけて記録することが好適である。   The recording unit 103 is a recording unit that records a sound detected in advance by the sound detection unit 101 as a recording sound, and the function is realized by the CPU 11, the ROM 13, and the HDD 15 shown in FIG. Moreover, it is preferable that the recording unit 103 records the number of sounds, the generation interval, and the continuous generation time detected in advance by the sound detection unit 101 as recording sounds in association with different commands.

情報端末1の筐体における対向する位置に2つの音検出部101を備える場合、判定部102は、2つの音検出部101によりそれぞれ検出された音の音量の差に基づいて、ユーザが筐体に対して行った接触行為の位置を判定することができる。   When the two sound detection units 101 are provided at opposing positions in the casing of the information terminal 1, the determination unit 102 determines whether the user has the case based on the difference in sound volume detected by the two sound detection units 101. The position of the contact act performed with respect to can be determined.

<記録音とコマンドの対応関係について>
上述した記録音とコマンドとの対応関係を規定したテーブルについて図4を参照して説明する。なお、本テーブルは一例であって本発明の範囲を限定するものではない。本テーブルは、一番左の列に主なアプリケーションを並べ、一番上の行に操作音を並べ、各操作音が、各アプリケーションにおけるどのコマンドに対応しているかを示している。
<Correspondence between recorded sound and command>
A table defining the correspondence between the recording sound and the command will be described with reference to FIG. Note that this table is an example and does not limit the scope of the present invention. In this table, main applications are arranged in the leftmost column, operation sounds are arranged in the top row, and each operation sound corresponds to which command in each application.

ここでは、左列第2行目から「Web Browser」「Mail」「Music Player」「OS」の各アプリケーションを示し、最も上の行に「タッピング1」「タッピング2」「タッピング3」「タッピング4」「タッピング5」「摺動音1」「摺動音2」の各操作音を示している。これらの操作音は、図1で説明したように中空構造6aや6bを叩いたときの音の違いや、筐体の厚みが異なる部分を叩いたときの音の違いや、音の回数の違いや、発生間隔の違いや、連続発生時間の違いや、また、これらの要素を組み合わせること等により、違いを持たせることができる。   Here, the applications “Web Browser”, “Mail”, “Music Player”, and “OS” are shown from the second row on the left column, and “tapping 1”, “tapping 2”, “tapping 3”, and “tapping 4” are shown in the top row. The operation sounds of “tapping 5”, “sliding sound 1”, and “sliding sound 2” are shown. As described in FIG. 1, these operation sounds are different in sound when hitting the hollow structures 6a and 6b, different in sound when hitting a portion having a different thickness of the case, and different in the number of sounds. Differences can be made by different generation intervals, different continuous generation times, or by combining these elements.

アプリケーション「Web Browser」について、音検出部101により検出された音が、記録部103に記録された「タッピング1」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「ページ送り」コマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング2」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「ページ戻し」コマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング3」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「リンクボタンの選択を先に移動」するコマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング4」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「リンクボタンの選択を後に移動」するコマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング5」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「リンクを開く」コマンドを実行する。さらに、音検出部101により検出された音が、記録部103に記録された「摺動音1」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「上下スクロール」コマンドを実行する。さらに、音検出部101により検出された音が、記録部103に記録された「摺動音2」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「左右スクロール」コマンドを実行する。   For the application “Web Browser”, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “tapping 1” recorded in the recording unit 103, the command execution unit 104 displays “ Execute the "Page feed" command. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the “tapping 2” operation sound recorded in the recording unit 103, the command execution unit 104 issues a “page return” command. Run. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the “tapping 3” operation sound recorded in the recording unit 103, the command execution unit 104 selects “link button selection”. Execute the command to “move forward”. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the “tapping 4” operation sound recorded in the recording unit 103, the command execution unit 104 selects “link button selection”. Execute command to “move to later”. When the sound detected by the sound detecting unit 101 matches the operation sound of “tapping 5” recorded in the recording unit 103 by the determining unit 102, the command executing unit 104 executes an “open link” command. Execute. Further, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “sliding sound 1” recorded in the recording unit 103, the command execution unit 104 performs “up / down scrolling”. Execute a command. Further, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “sliding sound 2” recorded in the recording unit 103, the command execution unit 104 performs “left / right scroll”. Execute a command.

アプリケーション「Mail」について、音検出部101により検出された音が、記録部103に記録された「タッピング1」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「次のメールを開く」コマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング2」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「前のメールを開く」コマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング3」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「選択メールを削除」するコマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング4」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「選択メールを未読にする」コマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング5」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「添付ファイルを保存」コマンドを実行する。さらに、音検出部101により検出された音が、記録部103に記録された「摺動音1」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「上下スクロール」コマンドを実行する。さらに、音検出部101により検出された音が、記録部103に記録された「摺動音2」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「左右スクロール」コマンドを実行する。   For the application “Mail”, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “tapping 1” recorded in the recording unit 103, the command execution unit 104 performs “next”. Execute "Open Mail" command. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the “tapping 2” operation sound recorded in the recording unit 103, the command execution unit 104 “opens the previous mail”. "Execute a command. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the “tapping 3” operation sound recorded in the recording unit 103, the command execution unit 104 “deletes the selected mail”. Execute the command to be executed. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the “tapping 4” operation sound recorded in the recording unit 103, the command execution unit 104 reads “unread selected mail”. Execute the "Yes" command. In addition, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the “tapping 5” operation sound recorded in the recording unit 103, the command execution unit 104 “stores the attached file”. Execute a command. Further, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “sliding sound 1” recorded in the recording unit 103, the command execution unit 104 performs “up / down scrolling”. Execute a command. Further, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “sliding sound 2” recorded in the recording unit 103, the command execution unit 104 performs “left / right scroll”. Execute a command.

アプリケーション「Music Player」について、音検出部101により検出された音が、記録部103に記録された「タッピング1」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「次の曲へ送る」コマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング2」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「前の曲に戻る」コマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング3」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「曲を止める」するコマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング4」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「曲を始める」コマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング5」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「スクロール」コマンドを実行する。さらに、音検出部101により検出された音が、記録部103に記録された「摺動音1」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「音量を上げる」コマンドを実行する。さらに、音検出部101により検出された音が、記録部103に記録された「摺動音2」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「音量を下げる」コマンドを実行する。   For the application “Music Player”, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “tapping 1” recorded in the recording unit 103, the command execution unit 104 selects “ Execute "Send to next song" command. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the “tapping 2” operation sound recorded in the recording unit 103, the command execution unit 104 “returns to the previous song”. "Execute a command. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the “tapping 3” operation sound recorded in the recording unit 103, the command execution unit 104 “stops the song”. Execute a command. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the “tapping 4” operation sound recorded in the recording unit 103, the command execution unit 104 performs a “start song” command. Execute. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “tapping 5” recorded in the recording unit 103, the command execution unit 104 executes the “scroll” command. To do. Further, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound of “sliding sound 1” recorded in the recording unit 103, the command execution unit 104 increases the volume. "Execute a command. Further, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “sliding sound 2” recorded in the recording unit 103, the command execution unit 104 “decreases the volume”. "Execute a command.

アプリケーション「OS」について、音検出部101により検出された音が、記録部103に記録された「タッピング1」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「次のアイコンを選択」するコマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング2」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「前のアイコンを選択」するコマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング3」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「選択したアイコンを実行」するコマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング4」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「HOMEのページに戻る」コマンドを実行する。また、音検出部101により検出された音が、記録部103に記録された「タッピング5」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「スクロール」コマンドを実行する。さらに、音検出部101により検出された音が、記録部103に記録された「摺動音1」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「次のページに送る」コマンドを実行する。さらに、音検出部101により検出された音が、記録部103に記録された「摺動音2」の操作音に一致すると判定部102により判定されたとき、コマンド実行部104は「前のページに戻る」コマンドを実行する。   For the application “OS”, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “tapping 1” recorded in the recording unit 103, the command execution unit 104 performs “next”. Execute the command to “select icon”. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the “tapping 2” operation sound recorded in the recording unit 103, the command execution unit 104 selects the “previous icon”. ”Is executed. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “tapping 3” recorded in the recording unit 103, the command execution unit 104 executes “execute the selected icon”. ”Is executed. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the “tapping 4” operation sound recorded in the recording unit 103, the command execution unit 104 returns to the “HOME page”. "Execute a command. When the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “tapping 5” recorded in the recording unit 103, the command execution unit 104 executes the “scroll” command. To do. Furthermore, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “sliding sound 1” recorded in the recording unit 103, the command execution unit 104 displays “next page”. Execute the "Send to" command. Furthermore, when the determination unit 102 determines that the sound detected by the sound detection unit 101 matches the operation sound “sliding sound 2” recorded in the recording unit 103, the command execution unit 104 determines that “the previous page Run the "Return to" command.

<本実施形態における情報端末におけるスクロール操作例について>
本実施形態における情報端末1におけるスクロール操作例について図5を参照して説明する。図5(a)では、情報端末1の表示画面3に表示された「Web Browser」によるWeb画面を矢印『C⇔D』方向にスクロールさせる場合の操作例を紹介する。ユーザは右手200で情報端末1の右側のベゼル5辺りを把持しており、右手200の親指で情報端末1の右側のベゼル5に設けられた波板形状10aを矢印『c⇔d』方向に擦る動作により摺動音が発生する。この摺動音を情報端末1の音検出部101が検出し、記録部103に記録された摺動音1に一致すると判定部102が判定した場合、コマンド実行部104は「上下スクロール」コマンドを実行する。なお、ここではユーザが右手で情報端末1の右側のベゼル5辺りを把持する例を示しているが、情報端末1の左側のベゼル辺りをユーザが左手で把持し、左手親指で左側のベゼル5に設けられた波板形状を擦る動作によっても「上下スクロール」コマンドを実行できることは言うまでもない。また、検出音の連続発生時間に応じてスクロール量を決定してもよい。
<Example of scroll operation in information terminal in this embodiment>
An example of the scroll operation in the information terminal 1 in the present embodiment will be described with reference to FIG. FIG. 5A introduces an operation example in the case where the Web screen by “Web Browser” displayed on the display screen 3 of the information terminal 1 is scrolled in the arrow “C⇔D” direction. The user is holding the right bezel 5 around the right bezel 5 of the information terminal 1 with the right hand 200, and the corrugated plate shape 10 a provided on the right bezel 5 of the information terminal 1 with the thumb of the right hand 200 in the direction of the arrow “c』 d ”. A sliding noise is generated by the rubbing operation. When the sound detection unit 101 of the information terminal 1 detects this sliding sound and the determination unit 102 determines that the sliding sound matches the sliding sound 1 recorded in the recording unit 103, the command execution unit 104 issues an “up / down scroll” command. Run. Here, an example is shown in which the user grips around the right bezel 5 of the information terminal 1 with the right hand, but the user grips the left bezel around the information terminal 1 with the left hand and the left bezel 5 with the left hand thumb. It goes without saying that the “up / down scroll” command can also be executed by an operation of rubbing the corrugated plate shape provided on the screen. Further, the scroll amount may be determined according to the continuous generation time of the detection sound.

また、図5(b)では、情報端末1の表示画面3に表示された「Web Browser」によるWeb画面を矢印『C’⇔D’』方向にスクロールさせる場合の操作例を紹介する。ユーザは右手200で情報端末1の下側のベゼル5’辺りを把持しており、右手200の親指で下側のベゼル5’に設けられた波板形状10a’を矢印『c⇔d』方向に擦る動作により摺動音が発生する。この摺動音を情報端末1の音検出部101が検出し、記録部103に記録された摺動音2に一致すると判定部102が判定した場合、コマンド実行部104は「左右スクロール」コマンドを実行する。なお、ここではユーザが右手で情報端末1の下側のベゼル5’辺りを把持する例を示しているが、情報端末1の上側のベゼル辺りをユーザが把持し、親指で上側のベゼルに設けられた波板形状を擦る動作によっても「左右スクロール」コマンドを実行できることは言うまでもない。   FIG. 5B introduces an operation example in the case of scrolling the Web screen by “Web Browser” displayed on the display screen 3 of the information terminal 1 in the direction of the arrow “C ′『 D ′ ”. The user grips the lower bezel 5 ′ of the information terminal 1 with the right hand 200, and the corrugated plate shape 10 a ′ provided on the lower bezel 5 ′ with the thumb of the right hand 200 in the direction of the arrow “c⇔d”. A sliding noise is generated by the rubbing action. When the sound detection unit 101 of the information terminal 1 detects this sliding sound and the determination unit 102 determines that the sliding sound matches the sliding sound 2 recorded in the recording unit 103, the command execution unit 104 issues a “left / right scroll” command. Run. Here, an example is shown in which the user grips the lower bezel 5 ′ of the information terminal 1 with the right hand, but the user grips the upper bezel of the information terminal 1 and provides the upper bezel with the thumb. Needless to say, the “left / right scroll” command can also be executed by rubbing the corrugated plate shape.

<本実施形態における情報端末におけるカーソル移動操作例について>
本実施形態における情報端末1cにおけるカーソル移動操作例について図6を参照して説明する。ここでは、情報端末1cの表示画面3cに表示されたWeb画面上にカーソル300が表示されており、このカーソル300を移動させる操作例を紹介する。情報端末1cは筐体下部の対向する左右側付近にマイク18L及びマイク18Rを備えている。ユーザは、情報端末1cにおけるベゼル5c上下左右のEFGH辺りをタッピング操作することにより、カーソル300をefgh方向へ移動させる。情報端末1cの判定部102は、マイク18L及びマイク18Rにより検出された左右の音の音量差に基づいて、ユーザがベゼル5におけるEFGHのどの部分をタッピングしたか、その位置を判定する。例えば、判定部102によりユーザがFの位置をタッピングしたと判定された場合、カーソル300は矢印f方向へ移動される。この場合、マイク18Rにより検出された音の音量が大きく、マイク18Lにより検出された音の音量が小さいことによる音量差に基づいて、判定部102はFの位置がタッピングされたと判定する。また、例えば、判定部102によりユーザがEの位置をタッピングしたと判定された場合、カーソル300は矢印e方向へ移動される。この場合、マイク18Rにより検出された音の音量が小さく、マイク18Lにより検出された音の音量が大きいことによる音量差に基づいて、判定部102はEの位置がタッピングされたと判定する。さらに、例えば、判定部102によりユーザがHの位置をタッピングしたと判定された場合、カーソル300は矢印h方向へ移動される。この場合、マイク18Rとマイク18Lにより検出された音の音量差はないが、音量が共に大きいことにより、判定部102はHの位置がタッピングされたと判定する。さらに、例えば、判定部102によりユーザがGの位置をタッピングしたと判定された場合、カーソル300は矢印g方向へ移動される。この場合、マイク18Rとマイク18Lにより検出された音の音量差はないが、音量が共に小さいことにより、判定部102はGの位置がタッピングされたと判定する。なお、タッピング音として検出される検出音の回数や発生間隔等に応じてカーソル300を段階的に移動させることも可能である。
<Example of cursor movement operation in information terminal in this embodiment>
An example of cursor movement operation in the information terminal 1c in the present embodiment will be described with reference to FIG. Here, the cursor 300 is displayed on the Web screen displayed on the display screen 3c of the information terminal 1c, and an operation example for moving the cursor 300 will be introduced. The information terminal 1c includes a microphone 18L and a microphone 18R in the vicinity of opposite left and right sides of the lower part of the housing. The user moves the cursor 300 in the efgh direction by performing a tapping operation around the top, bottom, left, and right EFGHs in the information terminal 1c. The determination unit 102 of the information terminal 1c determines which part of the EFGH on the bezel 5 the user has tapped based on the volume difference between the left and right sounds detected by the microphone 18L and the microphone 18R. For example, when the determination unit 102 determines that the user has tapped the position F, the cursor 300 is moved in the arrow f direction. In this case, the determination unit 102 determines that the position of F has been tapped based on the volume difference due to the volume of the sound detected by the microphone 18R being large and the volume of the sound detected by the microphone 18L being small. For example, when the determination unit 102 determines that the user has tapped the position E, the cursor 300 is moved in the direction of the arrow e. In this case, the determination unit 102 determines that the position of E has been tapped based on the volume difference due to the volume of the sound detected by the microphone 18R being small and the volume of the sound detected by the microphone 18L being large. Further, for example, when the determination unit 102 determines that the user has tapped the position H, the cursor 300 is moved in the direction of the arrow h. In this case, although there is no volume difference between the sounds detected by the microphone 18R and the microphone 18L, the determination unit 102 determines that the position of H has been tapped because both the volumes are large. Further, for example, when the determination unit 102 determines that the user has tapped the position of G, the cursor 300 is moved in the arrow g direction. In this case, although there is no volume difference between the sounds detected by the microphone 18R and the microphone 18L, the determination unit 102 determines that the position of G has been tapped because both the volumes are small. Note that the cursor 300 can be moved stepwise in accordance with the number of detection sounds detected as a tapping sound, the generation interval, and the like.

<本実施形態における処理手順について>
本実施形態における処理手順について図7を参照して説明する。まず、音検出部101により予め検出された検出音とこの検出音に所定のコマンド対応させるようにして図4を用いて説明したテーブルを記録部103に記録しておく(ステップS1)。
<About the processing procedure in this embodiment>
A processing procedure in the present embodiment will be described with reference to FIG. First, the detection sound previously detected by the sound detection unit 101 and the table described with reference to FIG. 4 are recorded in the recording unit 103 so as to correspond to the detection sound with a predetermined command (step S1).

次に、音検出部101は、ユーザによって行われた情報端末1の筐体に対して行われた接触行為によって響く音を検出する(ステップS2)。   Next, the sound detection unit 101 detects a sound reverberated by a contact act performed on the casing of the information terminal 1 performed by the user (step S2).

判定部102は、音検出部101により検出された検出音が記録部103に記録された記録音と一致するか否かを判定する(ステップS3)。判定部102により検出音が記録音と一致すると判定された場合(ステップS3、YES)、コマンド実行部104は記録音に対応するコマンドを実行する(ステップS4)。他方、判定部102により検出音が記録音と不一致であると判定された場合(ステップS3、NO)、音検出部101による音検出処理に戻る(ステップS2)。   The determination unit 102 determines whether or not the detection sound detected by the sound detection unit 101 matches the recording sound recorded in the recording unit 103 (step S3). When the determination unit 102 determines that the detected sound matches the recording sound (step S3, YES), the command execution unit 104 executes a command corresponding to the recording sound (step S4). On the other hand, when the determination unit 102 determines that the detected sound does not match the recorded sound (step S3, NO), the process returns to the sound detection process by the sound detection unit 101 (step S2).

なお、上述する各実施の形態は、本発明の好適な実施の形態であり、本発明の要旨を逸脱しない範囲内において種々変更実施が可能である。例えば、上述した本実施形態の情報端末における各処理を、ハードウェア、又は、ソフトウェア、あるいは、両者の複合構成を用いて実行することも可能である。   Each of the above-described embodiments is a preferred embodiment of the present invention, and various modifications can be made without departing from the scope of the present invention. For example, each process in the information terminal of the present embodiment described above can be executed using hardware, software, or a combined configuration of both.

なお、ソフトウェアを用いて処理を実行する場合には、処理シーケンスを記録したプログラムを、専用のハードウェアに組み込まれているコンピュータ内のメモリにインストールして実行させることが可能である。あるいは、各種処理が実行可能な汎用コンピュータにプログラムをインストールして実行させることが可能である。   In the case of executing processing using software, it is possible to install and execute a program in which a processing sequence is recorded in a memory in a computer incorporated in dedicated hardware. Alternatively, the program can be installed and executed on a general-purpose computer capable of executing various processes.

1 情報端末
3 表示画面
5 ベゼル
7 側面
9 裏面
10a〜10c 波板形状
10d 凹凸形状
11 CPU
12 RAM
13 ROM
14 NW I/F
15 HDD
16 入力部
17 表示部
18 マイク
101 音検出部
102 判定部
103 記録部
104 コマンド実行部
200 右手
DESCRIPTION OF SYMBOLS 1 Information terminal 3 Display screen 5 Bezel 7 Side surface 9 Back surface 10a-10c Corrugated plate shape 10d Uneven shape 11 CPU
12 RAM
13 ROM
14 NW I / F
15 HDD
16 Input unit 17 Display unit 18 Microphone 101 Sound detection unit 102 Determination unit 103 Recording unit 104 Command execution unit 200 Right hand

Claims (16)

ユーザが筐体に対して行う接触行為によって響く音を検出する音検出手段と、
前記音検出手段により検出された音が予め所定のコマンドに対応づけて記録された記録音と一致するか否かを判定する判定手段と、
前記判定手段により、前記音検出手段により検出された音が前記記録音と一致すると判定された場合、一致すると判定された該記録音に対応する所定のコマンドを実行するコマンド実行手段と
を備えることを特徴とする情報端末。
Sound detection means for detecting sound echoed by a contact action performed by the user on the housing;
Determining means for determining whether or not the sound detected by the sound detecting means matches a recorded sound recorded in advance in association with a predetermined command;
And a command executing means for executing a predetermined command corresponding to the recording sound determined to match when the sound detected by the sound detecting means matches the recording sound by the determining means. An information terminal characterized by
前記筐体は該筐体の内部に中空構造を有し、
前記音検出手段は、ユーザが前記筐体を叩くことによって響く音を検出することを特徴とする請求項1記載の情報端末。
The housing has a hollow structure inside the housing,
The information terminal according to claim 1, wherein the sound detection unit detects a sound reverberating when a user taps the casing.
前記筐体は該筐体の表面に凹凸形状を有し、
前記音検出手段は、ユーザが前記筐体の凹凸形状部分を擦ることによって発生する音を検出することを特徴とする請求項1又は2記載の情報端末。
The housing has an uneven shape on the surface of the housing,
The information terminal according to claim 1, wherein the sound detection unit detects a sound generated by a user rubbing an uneven shape portion of the casing.
前記凹凸形状を前記筐体の側面、裏面、及び/又は前記筐体の表面の一部に有することを特徴とする請求項3記載の情報端末。   The information terminal according to claim 3, wherein the uneven shape is provided on a side surface, a back surface, and / or a part of the surface of the housing. 形状の異なる2種以上の凹凸形状を複数個所有することを特徴とする請求項3又は4記載の情報端末。   5. The information terminal according to claim 3 or 4, wherein the information terminal has a plurality of two or more types of uneven shapes having different shapes. 前記凹凸形状は波板形状であって、
ピッチを変えた異なる2以上の前記波板形状を有する
ことを特徴とする請求項5記載の情報端末。
The uneven shape is a corrugated plate shape,
6. The information terminal according to claim 5, having two or more different corrugated shapes having different pitches.
前記音検出手段により予め検出された音を前記記録音として記録する記録手段を備え、
前記記録手段は、前記音検出手段により予め検出された音の回数、発生間隔、及び/又は連続発生時間を前記記録音として、それぞれ異なるコマンドに対応づけて記録する
ことを特徴とする請求項1から6の何れか1項に記載の情報端末。
Recording means for recording the sound detected in advance by the sound detection means as the recording sound;
2. The recording unit according to claim 1, wherein the number of sounds detected by the sound detection unit, the generation interval, and / or the continuous generation time are recorded as the recording sound in association with different commands. The information terminal according to any one of 1 to 6.
少なくとも2つの前記音検出手段を前記筐体における対向する位置に備え、
前記判定手段は、2つの前記音検出手段によりそれぞれ検出された音の音量の差に基づいて、ユーザが筐体に対して行った接触行為の位置を判定する
ことを特徴とする請求項1から7の何れか1項に記載の情報端末。
At least two of the sound detection means are provided at opposing positions in the housing,
The determination unit determines a position of a contact act performed by a user on a housing based on a difference in sound volume detected by each of the two sound detection units. The information terminal according to any one of 7.
前記所定のコマンドは前記筐体が有する表示部に表示される画面上の文字及び/又は画を上下左右に動かしながら表示するスクロール操作である
ことを特徴とする請求項1から8の何れか1項に記載の情報端末。
9. The scrolling operation according to claim 1, wherein the predetermined command is a scroll operation in which characters and / or images on a screen displayed on a display unit included in the housing are displayed while moving up, down, left, and right. Information terminal according to item.
前記所定のコマンドは前記筐体が有する表示部に表示される画面上の文字及び/又は画を拡大又は縮小する拡大・縮小操作である
ことを特徴とする請求項1から9の何れか1項に記載の情報端末。
10. The enlargement / reduction operation for enlarging or reducing characters and / or images on a screen displayed on a display unit included in the housing. Information terminal described in 1.
物体の接触により音が響く音響部材と、該音発生部材が取り付けられる情報端末と、を含む情報システムであって、
前記音響部材は所定の厚み、及び/又は凹凸形状を有し、
前記情報端末は、
ユーザが筐体に取り付けられた前記音響部材に対して行う接触行為によって響く音を検出する音検出手段と、
前記音検出手段により検出された音が予め所定のコマンドに対応づけて記録された記録音と一致するか否かを判定する判定手段と、
前記判定手段により、前記音検出手段により検出された音が前記記録音と一致すると判定された場合、一致すると判定された該記録音に対応する所定のコマンドを実行するコマンド実行手段と
を備えることを特徴とする情報システム。
An information system including an acoustic member that sounds by contact with an object, and an information terminal to which the sound generating member is attached,
The acoustic member has a predetermined thickness and / or an uneven shape,
The information terminal
A sound detection means for detecting a sound reverberated by a contact action performed by the user on the acoustic member attached to the housing;
Determining means for determining whether or not the sound detected by the sound detecting means matches a recorded sound recorded in advance in association with a predetermined command;
And a command executing means for executing a predetermined command corresponding to the recording sound determined to match when the sound detected by the sound detecting means matches the recording sound by the determining means. An information system characterized by
形状の異なる2種以上の前記音響部材を有することを特徴とする請求項11記載の情報システム。   The information system according to claim 11, comprising two or more kinds of the acoustic members having different shapes. 前記凹凸形状は波板形状であって、
前記音響部材は、ピッチを変えた異なる2以上の前記波板形状を有する
ことを特徴とする請求項12記載の情報システム。
The uneven shape is a corrugated plate shape,
The information system according to claim 12, wherein the acoustic member has two or more different corrugated shapes with different pitches.
情報端末に脱着可能に取り付けられ、物体の接触により音が響く音響部材であって、
所定の厚み、及び/又は凹凸形状を有し、
前記情報端末が、音を検出する音検出手段と、前記音検出手段により検出された音が予め所定のコマンドに対応づけて記録された記録音と一致するか否かを判定する判定手段と、前記判定手段により、前記音検出手段により検出された音が前記記録音と一致すると判定された場合、一致すると判定された該記録音に対応する所定のコマンドを実行するコマンド実行手段と、を備え、
当該情報端末の筐体に取付られた状態で、ユーザによる接触行為を受けて、前記情報端末に対して響く音を発生させることを特徴とする音響部材。
An acoustic member that is detachably attached to an information terminal and resonates when touched by an object,
It has a predetermined thickness and / or uneven shape,
A sound detecting means for detecting sound; and a determining means for determining whether or not the sound detected by the sound detecting means matches a recorded sound previously recorded in association with a predetermined command; Command determining means for executing a predetermined command corresponding to the recording sound determined to match when the sound detected by the sound detecting means is determined to match the recording sound by the determining means; ,
An acoustic member, which is attached to a casing of the information terminal, receives a contact act by a user, and generates a sound reverberating with respect to the information terminal.
コンピュータが、ユーザが筐体に対して行う接触行為によって響く音を音検出手段に検出させるステップと、
コンピュータが、前記音検出手段により検出された音が予め所定のコマンドに対応づけて記録手段に記録された記録音と一致するか否かを判定するステップと、
コンピュータが、前記音検出手段により検出された音が前記記録手段に記録された記録音と一致すると判定した場合、一致すると判定した該記録音に対応する所定のコマンドを実行するステップと
を備えることを特徴とする情報処理方法。
A step of causing the sound detection means to detect a sound reverberated by a contact action performed by the user on the housing;
A computer determining whether or not the sound detected by the sound detection means matches a recording sound recorded in the recording means in advance in association with a predetermined command;
When the computer determines that the sound detected by the sound detecting means matches the recorded sound recorded in the recording means, the computer includes a step of executing a predetermined command corresponding to the recorded sound determined to match. An information processing method characterized by the above.
ユーザが筐体に対して行う接触行為によって響く音を音検出手段に検出させる処理と、
前記音検出手段により検出された音が予め所定のコマンドに対応づけて記録手段に記録された記録音と一致するか否かを判定する処理と、
前記音検出手段により検出された音が前記記録手段に記録された記録音と一致すると判定された場合、一致すると判定された該記録音に対応する所定のコマンドを実行する処理と
をコンピュータに実行させることを特徴とするプログラム。
A process for causing the sound detection means to detect a sound echoed by a contact act performed by the user on the housing;
A process of determining whether or not the sound detected by the sound detection means matches the recording sound recorded in the recording means in advance in association with a predetermined command;
When it is determined that the sound detected by the sound detection means matches the recording sound recorded in the recording means, a process of executing a predetermined command corresponding to the recording sound determined to match is executed on the computer A program characterized by letting
JP2016005463A 2016-01-14 2016-01-14 Information terminal, information system, acoustic member, information processing method, and program Pending JP2017126218A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016005463A JP2017126218A (en) 2016-01-14 2016-01-14 Information terminal, information system, acoustic member, information processing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016005463A JP2017126218A (en) 2016-01-14 2016-01-14 Information terminal, information system, acoustic member, information processing method, and program

Publications (1)

Publication Number Publication Date
JP2017126218A true JP2017126218A (en) 2017-07-20

Family

ID=59364518

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016005463A Pending JP2017126218A (en) 2016-01-14 2016-01-14 Information terminal, information system, acoustic member, information processing method, and program

Country Status (1)

Country Link
JP (1) JP2017126218A (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008109350A (en) * 2006-10-25 2008-05-08 Fujifilm Corp Imaging apparatus, imaging method, and program
US20110003550A1 (en) * 2009-07-03 2011-01-06 Sony Ericsson Mobile Communications Ab Tactile input for accessories
JP2015005136A (en) * 2013-06-20 2015-01-08 株式会社東芝 Electronic apparatus, program and processing execution method
JP2015153419A (en) * 2014-02-12 2015-08-24 楽天株式会社 Processing of page transition operation using acoustic signal input

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008109350A (en) * 2006-10-25 2008-05-08 Fujifilm Corp Imaging apparatus, imaging method, and program
US20110003550A1 (en) * 2009-07-03 2011-01-06 Sony Ericsson Mobile Communications Ab Tactile input for accessories
JP2015005136A (en) * 2013-06-20 2015-01-08 株式会社東芝 Electronic apparatus, program and processing execution method
JP2015153419A (en) * 2014-02-12 2015-08-24 楽天株式会社 Processing of page transition operation using acoustic signal input

Similar Documents

Publication Publication Date Title
US11735014B2 (en) Devices, methods, and graphical user interfaces for providing haptic feedback
JP6816858B2 (en) How to control the display of multiple objects by operation-related input to the mobile terminal and the mobile terminal
JP5730289B2 (en) Screen display management method for portable terminal and portable terminal
KR101224588B1 (en) Method for providing UI to detect a multi-point stroke and multimedia apparatus thereof
JP5639158B2 (en) Organizing content columns
US8214768B2 (en) Method, system, and graphical user interface for viewing multiple application windows
JP2009266220A (en) Method and device for operating graphic menu bar and recording medium using the same
US20090179867A1 (en) Method for providing user interface (ui) to display operating guide and multimedia apparatus using the same
US20070263014A1 (en) Multi-function key with scrolling in electronic devices
JP2012089115A (en) Method and device for selecting item on terminal
KR20120080202A (en) Electronic apparatus using touch panel and setting value modification method of same
TWI389015B (en) Method for operating software input panel
JP6102474B2 (en) Display device, input control method, and input control program
WO2012127792A1 (en) Information terminal, and method and program for switching display screen
KR20140134018A (en) Apparatus, method and computer readable recording medium for fulfilling functions rerated to the user input on the screen
JP2019023849A (en) Input control method, computer, and program
JP2006092321A (en) Electronic equipment and touchpad device
KR20110076283A (en) Method and apparatus for providing feedback according to user input patten
US20230343189A1 (en) Devices, Methods, and Graphical User Interfaces for Providing Haptic Feedback
JP2017126218A (en) Information terminal, information system, acoustic member, information processing method, and program
JP2012173765A (en) Touch panel device, processing determination method, program, and touch panel system
JP2012128562A (en) Electronic apparatus, display control method and program
JP2010093516A (en) Mobile information terminal and operation control method for the same, and program
KR102186819B1 (en) A mobile terminal supportting a note function and a method controlling the same
KR20120115620A (en) Method for controlling user interface of portable termianl using movement sensing device and apparatus therefof

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20170606