JP2020071548A - Pen input system, information display device, electronic pen, control method and program - Google Patents

Pen input system, information display device, electronic pen, control method and program Download PDF

Info

Publication number
JP2020071548A
JP2020071548A JP2018203317A JP2018203317A JP2020071548A JP 2020071548 A JP2020071548 A JP 2020071548A JP 2018203317 A JP2018203317 A JP 2018203317A JP 2018203317 A JP2018203317 A JP 2018203317A JP 2020071548 A JP2020071548 A JP 2020071548A
Authority
JP
Japan
Prior art keywords
display device
information display
electronic pen
pen
application
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018203317A
Other languages
Japanese (ja)
Other versions
JP7228366B2 (en
Inventor
英俊 八谷
Hidetoshi Hachiya
英俊 八谷
矢島　孝之
Takayuki Yajima
孝之 矢島
征 新谷
Tadashi Shintani
征 新谷
和田　淳
Atsushi Wada
淳 和田
克明 大西
Katsuaki Onishi
克明 大西
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Corp
Original Assignee
Kyocera Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Corp filed Critical Kyocera Corp
Priority to JP2018203317A priority Critical patent/JP7228366B2/en
Priority to US17/288,297 priority patent/US20210382684A1/en
Priority to PCT/JP2019/038499 priority patent/WO2020090317A1/en
Publication of JP2020071548A publication Critical patent/JP2020071548A/en
Application granted granted Critical
Publication of JP7228366B2 publication Critical patent/JP7228366B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

To provide a pen input system, an information display device, an electronic pen, a control method and a program which allow a pen input application to be quickly activated.SOLUTION: An information display device 100 with a touch panel which accepts handwriting input with an electronic pen 200 comprises: a receiving step of receiving data corresponding to a detection result of an acceleration applied to the electronic pen or a pen pressure, from the electronic pen; and a step S106 of activating an application for handwriting input with the electronic pen, on the basis of the data received in the receiving step.SELECTED DRAWING: Figure 5

Description

本発明は、ペン入力システム、情報表示装置、電子ペン、制御方法、及びプログラムに関する。   The present invention relates to a pen input system, an information display device, an electronic pen, a control method, and a program.

従来、電子ペンによる手書き入力を受け付けるタッチパネルを備える情報表示装置が普及している（例えば、特許文献１参照）。   2. Description of the Related Art Conventionally, an information display device including a touch panel that accepts handwriting input with an electronic pen has been widely used (for example, refer to Patent Document 1).

このような情報表示装置は、ペン入力アプリケーションを起動させた後、電子ペンによる手書き入力をタッチパネルが受け付けて、文字や図形を表す手書きの軌跡を表示する。   In such an information display device, after the pen input application is activated, the touch panel accepts a handwriting input by the electronic pen and displays a handwriting locus representing a character or a figure.

特開２０１７−１５２０１８号公報JP, 2017-152018, A

上述したようなペン入力アプリケーションを起動する際に、ユーザは、例えば、情報表示装置の画面ロック状態を個人認証により解除した後、ペン入力アプリケーションを表すアイコンを複数のアイコンの中から表示画面上で選択及びタップする。   When activating the pen input application as described above, for example, after unlocking the screen lock state of the information display device by personal authentication, the user selects an icon representing the pen input application from a plurality of icons on the display screen. Select and tap.

しかしながら、このようなペン入力アプリケーションの起動方法は操作が煩雑であって、ペン入力アプリケーションを速やかに起動することが難しい。   However, such a method of activating the pen input application is complicated in operation, and it is difficult to quickly activate the pen input application.

そこで、本発明は、ペン入力アプリケーションを速やかに起動可能とするペン入力システム、情報表示装置、電子ペン、制御方法、及びプログラムを提供することを目的とする。   Therefore, an object of the present invention is to provide a pen input system, an information display device, an electronic pen, a control method, and a program capable of promptly starting a pen input application.

第１の態様に係るペン入力システムは、電子ペンと、前記電子ペンによる手書き入力を受け付けるタッチパネルを有する情報表示装置とを備える。前記電子ペンは、加速度又は筆圧を検出するための第１センサと、前記第１センサの検出結果に応じたデータを前記情報表示装置に送信する送信部とを有する。前記情報表示装置は、前記電子ペンから前記データを受信する受信部と、前記受信部が受信する前記データに基づいて、前記電子ペンによる前記手書き入力を行うためのアプリケーションを起動するプロセッサとを有する。   A pen input system according to a first aspect includes an electronic pen and an information display device having a touch panel that accepts handwriting input by the electronic pen. The electronic pen includes a first sensor for detecting acceleration or writing pressure, and a transmission unit for transmitting data according to the detection result of the first sensor to the information display device. The information display device includes a receiving unit that receives the data from the electronic pen, and a processor that starts an application for performing the handwriting input by the electronic pen based on the data received by the receiving unit. ..

第２の態様に係る情報表示装置は、電子ペンによる手書き入力を受け付けるタッチパネルと、前記電子ペンから、前記電子ペンに加わる加速度、又は筆圧の検出結果に応じたデータを受信する受信部と、前記受信部が受信する前記データに基づいて、前記電子ペンによる前記手書き入力を行うためのアプリケーションを起動するプロセッサとを備える。   An information display device according to a second aspect, a touch panel that accepts handwriting input by an electronic pen, a receiving unit that receives data from the electronic pen according to a detection result of acceleration applied to the electronic pen or writing pressure, A processor for starting an application for performing the handwriting input by the electronic pen based on the data received by the receiving unit.

第３の態様に係る電子ペンは、情報表示装置が有するタッチパネルに対する手書き入力に用いられる。前記電子ペンは、前記電子ペンに加わる加速度、又は筆圧を検出するためのセンサと、前記センサの検出結果に応じたデータを前記情報表示装置に送信する送信部とを備える。前記データは、前記手書き入力を行うためのアプリケーションを前記情報表示装置に起動させるために用いられる。   The electronic pen according to the third aspect is used for handwriting input on the touch panel included in the information display device. The electronic pen includes a sensor for detecting acceleration or writing pressure applied to the electronic pen, and a transmission unit for transmitting data according to the detection result of the sensor to the information display device. The data is used to activate the application for performing the handwriting input on the information display device.

第４の態様に係る制御方法は、電子ペンによる手書き入力を受け付けるタッチパネルを有する情報表示装置の制御方法である。前記制御方法は、前記電子ペンから、前記電子ペンに加わる加速度、又は筆圧の検出結果に応じたデータを受信する受信ステップと、前記受信ステップで受信する前記データに基づいて、前記電子ペンによる前記手書き入力を行うためのアプリケーションを起動する起動ステップとを備える。   The control method according to the fourth aspect is a control method for an information display device having a touch panel that accepts handwriting input with an electronic pen. The control method includes a receiving step of receiving, from the electronic pen, data corresponding to a detection result of acceleration or writing pressure applied to the electronic pen, and the electronic pen based on the data received in the receiving step. A starting step for starting an application for performing the handwriting input.

第５の態様に係るプログラムは、電子ペンによる手書き入力を受け付けるタッチパネルを有する情報表示装置に、前記電子ペンから、前記電子ペンに加わる加速度、又は筆圧の検出結果に応じたデータを受信する受信ステップと、前記受信ステップで受信する前記データに基づいて、前記電子ペンによる前記手書き入力を行うためのアプリケーションを起動する起動ステップとを実行させる。   A program according to a fifth aspect, wherein an information display device having a touch panel that accepts handwriting input by an electronic pen receives data from the electronic pen according to a detection result of acceleration applied to the electronic pen or writing pressure. And a starting step of starting an application for performing the handwriting input by the electronic pen based on the data received in the receiving step.

本発明の一態様によれば、ペン入力アプリケーションを速やかに起動可能とするペン入力システム、情報表示装置、電子ペン、制御方法、及びプログラムを提供できる。   According to one aspect of the present invention, it is possible to provide a pen input system, an information display device, an electronic pen, a control method, and a program capable of promptly starting a pen input application.

一実施形態に係る情報表示装置の外観図である。It is an external view of an information display device according to an embodiment. 一実施形態に係る情報表示装置の機能構成を示すブロック図である。It is a block diagram which shows the functional structure of the information display apparatus which concerns on one Embodiment. 一実施形態に係る電子ペンの外観図である。It is an external view of the electronic pen which concerns on one Embodiment. 一実施形態に係る電子ペンの機能構成を示すブロック図である。It is a block diagram which shows the function structure of the electronic pen which concerns on one Embodiment. 一実施形態に係るペン入力システムの動作を示すフロー図である。It is a flow figure showing operation of a pen input system concerning one embodiment. 一実施形態に係る起動モーションの一例を示す図である。It is a figure which shows an example of the starting motion which concerns on one Embodiment. 一実施形態に係る起動モーションの一例を示す図である。It is a figure which shows an example of the starting motion which concerns on one Embodiment. 一実施形態に係る起動モーションの一例を示す図である。It is a figure which shows an example of the starting motion which concerns on one Embodiment.

図面を参照して実施形態について説明する。図面の記載において、同一又は類似の部分には同一又は類似の符号を付している。   Embodiments will be described with reference to the drawings. In the description of the drawings, the same or similar parts are denoted by the same or similar reference numerals.

（情報表示装置の構成）
一実施形態に係る情報表示装置は、例えばスマートフォン端末又はタブレット端末のような端末とすることができる。しかしながら、情報表示装置はそのような端末に限定されるものではなく、例えば、パーソナルコンピュータ、電子黒板、又は車載情報表示装置等であってもよい。 (Configuration of information display device)
The information display device according to one embodiment may be a terminal such as a smartphone terminal or a tablet terminal. However, the information display device is not limited to such a terminal, and may be, for example, a personal computer, an electronic blackboard, or an in-vehicle information display device.

図１は、一実施形態に係る情報表示装置１００の外観図である。   FIG. 1 is an external view of an information display device 100 according to an embodiment.

図１に示すように、情報表示装置１００は、タッチスクリーンディスプレイ１１０と、マイク１２０と、スピーカ１３０と、カメラ１４０とを有する。   As shown in FIG. 1, the information display device 100 includes a touch screen display 110, a microphone 120, a speaker 130, and a camera 140.

タッチスクリーンディスプレイ１１０は、その表示面が情報表示装置１００の筐体１０１から露出して設けられる。タッチスクリーンディスプレイ１１０は、タッチパネル１１１と、表示部（ディスプレイ）１１２とを有する。   The display surface of the touch screen display 110 is provided so as to be exposed from the housing 101 of the information display device 100. The touch screen display 110 has a touch panel 111 and a display unit (display) 112.

タッチパネル１１１は、情報表示装置１００への操作入力を受け付ける。タッチパネル１１１は、指示体としてのユーザの指又は電子ペン等の接触を検出する。接触を検出する方法としては、例えば抵抗膜方式や静電容量方式があるが、任意の方式でよい。   The touch panel 111 receives an operation input to the information display device 100. The touch panel 111 detects a touch of a user's finger as an indicator or an electronic pen. As a method for detecting contact, there are, for example, a resistance film method and a capacitance method, but any method may be used.

表示部１１２は、映像出力を行う。表示部１１２は、文字（記号を含む）、画像、図形等のオブジェクトを画面上に表示する。表示部１１２には、例えば液晶ディスプレイ、有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイが用いられる。   The display unit 112 outputs a video. The display unit 112 displays objects such as characters (including symbols), images and figures on the screen. For the display unit 112, for example, a liquid crystal display or an organic EL (Electro Luminescence) display is used.

一実施形態に係るタッチスクリーンディスプレイ１１０において、表示部１１２はタッチパネル１１１と重なるように設けられており、表示部１１２の表示領域はタッチパネル１１１と重複している。しかしながら、表示部１１２及びタッチパネル１１１が互いに重なるように設けられることに代えて、表示部１１２及びタッチパネル１１１を並べて配置されてもよいし、離して配置されてもよい。   In the touch screen display 110 according to the embodiment, the display unit 112 is provided so as to overlap the touch panel 111, and the display area of the display unit 112 overlaps with the touch panel 111. However, instead of providing the display unit 112 and the touch panel 111 so as to overlap each other, the display unit 112 and the touch panel 111 may be arranged side by side or may be arranged separately.

情報表示装置１００は、タッチスクリーンディスプレイ１１０により検出された接触の位置、接触が行われた時間、接触が行われた位置の経時変化に基づいて、ジェスチャの種類を判別する。ジェスチャは、タッチスクリーンディスプレイ１１０に対して行われる操作である。情報表示装置１００によって判別されるジェスチャには、タッチ、リリース、タップ等が含まれる。   The information display device 100 determines the type of gesture based on the position of the contact detected by the touch screen display 110, the time at which the contact is made, and the change over time in the position at which the contact is made. The gesture is an operation performed on the touch screen display 110. The gesture determined by the information display device 100 includes touch, release, tap, and the like.

タッチは、タッチスクリーンディスプレイ１１０に指が触れるジェスチャである。情報表示装置１００は、タッチスクリーンディスプレイ１１０に指が接触するジェスチャをタッチとして判別する。   Touch is a gesture in which a finger touches the touch screen display 110. The information display device 100 determines a gesture in which a finger touches the touch screen display 110 as a touch.

リリースは、指がタッチスクリーンディスプレイ１１０から離れるジェスチャである。情報表示装置１００は、指がタッチスクリーンディスプレイ１１０から離れるジェスチャをリリースとして判別する。   Release is a gesture in which a finger moves away from the touch screen display 110. The information display device 100 determines that the gesture in which the finger leaves the touch screen display 110 is a release.

タップは、タッチに続いてリリースをするジェスチャである。情報表示装置１００は、タッチに続いてリリースをするジェスチャをタップとして判別する。   A tap is a gesture in which a touch is followed by a release. The information display device 100 determines that the gesture of releasing after the touch is a tap.

マイク１２０は、情報表示装置１００への音声入力を受け付ける。マイク１２０は、周囲の音声を集音する。   The microphone 120 receives a voice input to the information display device 100. The microphone 120 collects ambient sound.

スピーカ１３０は、音声出力を行う。スピーカ１３０は、電話の音声や各種プログラムの情報等を音声で出力する。   The speaker 130 outputs a voice. The speaker 130 outputs the voice of the telephone, information of various programs, and the like by voice.

カメラ１４０は、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）又はＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）等のイメージセンサを用いて電子的に画像を撮像する。カメラ１４０は、タッチスクリーンディスプレイ１１０に面している物体を撮影するインカメラである。情報表示装置１００は、さらに、タッチスクリーンディスプレイ１１０の反対側の面に面している物体を撮影するアウトカメラを備えていてもよい。   The camera 140 electronically captures an image using an image sensor such as a CCD (Charge Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor). The camera 140 is an in-camera that captures an object facing the touch screen display 110. The information display device 100 may further include an out camera that captures an object facing the opposite surface of the touch screen display 110.

図２は、一実施形態に係る情報表示装置１００の機能構成を示すブロック図である。   FIG. 2 is a block diagram showing a functional configuration of the information display device 100 according to the embodiment.

図２に示すように、情報表示装置１００は、タッチパネル１１１と、表示部１１２と、音声入力部１２１と、音声出力部１３１と、カメラ１４０と、センサ１５０と、記憶部１６０と、通信インターフェイス１７０と、プロセッサ１８０とを有する。   As shown in FIG. 2, the information display device 100 includes a touch panel 111, a display unit 112, a voice input unit 121, a voice output unit 131, a camera 140, a sensor 150, a storage unit 160, and a communication interface 170. And a processor 180.

タッチパネル１１１は、検出された指示体での接触操作に対応する信号をプロセッサ１８０に入力する。また、タッチパネル１１１は、後述するペン入力アプリケーションの実行中において、電子ペンによる手書き入力を受け付ける。   The touch panel 111 inputs a signal corresponding to the detected touch operation with the pointer to the processor 180. In addition, the touch panel 111 receives handwriting input with an electronic pen during execution of a pen input application described below.

表示部１１２は、プロセッサ１８０から入力された信号に基づいて、文字、画像、図形等のオブジェクトを画面上に表示する。また、表示部１１２は、ペン入力アプリケーションの実行中において、タッチパネル１１１が入力を受け付けた手書きの軌跡（例えば、文字や図形）を表示する。   The display unit 112 displays objects such as characters, images, and figures on the screen based on the signal input from the processor 180. In addition, the display unit 112 displays a handwritten trajectory (for example, a character or a figure) that the touch panel 111 has received input while the pen input application is being executed.

音声入力部１２１は、入力を受け付けた音声に対応する信号をプロセッサ１８０に入力する。音声入力部１２１は、上記のマイク１２０を含む。また、音声入力部１２１は、外部のマイクを接続可能な入力インターフェイスであってもよい。外部のマイクは無線又は有線で接続される。入力インターフェイスに接続されるマイクは、例えば情報表示装置１００に接続可能なイヤホン等に備えられるマイクである。   The voice input unit 121 inputs a signal corresponding to the received voice to the processor 180. The voice input unit 121 includes the microphone 120 described above. Further, the voice input unit 121 may be an input interface to which an external microphone can be connected. The external microphone is connected wirelessly or by wire. The microphone connected to the input interface is, for example, a microphone included in an earphone or the like connectable to the information display device 100.

音声出力部１３１は、プロセッサ１８０から入力された信号に基づいて、音声を出力する。音声出力部１３１は、上記のスピーカ１３０を含む。また、音声出力部１３１は、外部のスピーカを接続可能な出力インターフェイスであってもよい。外部のスピーカは無線又は有線で接続される。出力インターフェイスに接続されるスピーカは、例えば情報表示装置に接続可能なイヤホン等に備えられるスピーカである。   The audio output unit 131 outputs audio based on the signal input from the processor 180. The audio output unit 131 includes the speaker 130 described above. Further, the audio output unit 131 may be an output interface to which an external speaker can be connected. The external speaker is connected wirelessly or by wire. The speaker connected to the output interface is, for example, a speaker included in an earphone or the like connectable to the information display device.

カメラ１４０は、撮像した画像を電子信号に変換してプロセッサ１８０に入力する。   The camera 140 converts the captured image into an electronic signal and inputs it into the processor 180.

センサ１５０は、情報表示装置１００に加わる加速度又は振動を検出し、検出結果に対応する検出信号をプロセッサ１７０に出力する。センサ１５０は、加速度センサを含む。加速度センサは、情報表示装置１００に加わる加速度の方向及び大きさを検出する。センサ１５０は、さらに振動センサを含んでいてもよい。振動センサは、情報表示装置１００に加わる振動を検出する。   The sensor 150 detects acceleration or vibration applied to the information display device 100, and outputs a detection signal corresponding to the detection result to the processor 170. The sensor 150 includes an acceleration sensor. The acceleration sensor detects the direction and magnitude of the acceleration applied to the information display device 100. The sensor 150 may further include a vibration sensor. The vibration sensor detects vibration applied to the information display device 100.

記憶部１６０は、プログラム及びデータを記憶する。記憶部１６０は、プロセッサ１８０の処理結果を一時的に記憶する作業領域としても利用される。記憶部１６０は、半導体記憶媒体、及び磁気記憶媒体等の任意の非一過的（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ）な記憶媒体を含んでよい。   The storage unit 160 stores programs and data. The storage unit 160 is also used as a work area for temporarily storing the processing result of the processor 180. The storage unit 160 may include a semiconductor storage medium and an arbitrary non-transitory storage medium such as a magnetic storage medium.

また、記憶部１６０は、複数の種類の記憶媒体を含んでよい。記憶部１６０は、メモリカード、光ディスク、又は光磁気ディスク等の可搬の記憶媒体と、記憶媒体の読み取り装置との組み合わせを含んでよい。記憶部１６０は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等の一時的な記憶領域として利用される記憶デバイスを含んでよい。   In addition, the storage unit 160 may include a plurality of types of storage media. The storage unit 160 may include a combination of a portable storage medium such as a memory card, an optical disc, or a magneto-optical disc, and a storage medium reading device. The storage unit 160 may include a storage device used as a temporary storage area such as a RAM (Random Access Memory).

記憶部１６０に記憶されるプログラムには、フォアグランド又はバックグランドで実行されるアプリケーションと、アプリケーションの動作を支援する制御プログラムとが含まれる。   The programs stored in the storage unit 160 include an application executed in the foreground or background and a control program that supports the operation of the application.

記憶部１６０に記憶されるプログラムには、ペン入力アプリケーションが含まれる。ペン入力アプリケーションは、電子ペンによる手書き入力をタッチパネル１１１が受け付けて、手書きの軌跡（例えば、文字や図形）を表示部１１２に表示させるアプリケーションである。   The programs stored in the storage unit 160 include a pen input application. The pen input application is an application in which the touch panel 111 accepts a handwriting input with an electronic pen and displays a handwriting locus (for example, a character or a figure) on the display unit 112.

通信インターフェイス１７０は、無線により通信する。通信インターフェイス１７０によってサポートされる無線通信規格には、例えば、２Ｇ、３Ｇ、４Ｇ等のセルラー通信規格や、近距離無線の通信規格等がある。近距離無線の通信規格としては、例えば、ＩＥＥＥ８０２．１１、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｏｃｉａｔｉｏｎ）、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）、ＷＰＡＮ（Ｗｉｒｅｌｅｓｓ Ｐｅｒｓｏｎａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）等がある。ＷＰＡＮの通信規格には、例えば、ＺｉｇＢｅｅ（登録商標）がある。   The communication interface 170 communicates wirelessly. The wireless communication standards supported by the communication interface 170 include, for example, the cellular communication standards such as 2G, 3G, and 4G, the short-range wireless communication standards, and the like. Examples of short-range wireless communication standards include IEEE 802.11, Bluetooth (registered trademark), IrDA (Infrared Data Association), NFC (Near Field Communication), and WPAN (Wireless Personal Area) Network. The WPAN communication standard includes, for example, ZigBee (registered trademark).

プロセッサ１８０は、演算処理装置である。演算処理装置は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＳｏＣ（Ｓｙｓｔｅｍ−ｏｎ−Ｃｈｉｐ）、ＭＣＵ（Ｍｉｃｒｏ Ｃｏｎｔｒｏｌ Ｕｎｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、及びコプロセッサを含むが、これらに限定されない。プロセッサ１８０は、情報表示装置１００の動作を統括的に制御して各種の機能を実現する。   The processor 180 is an arithmetic processing unit. The arithmetic processing device includes, for example, a CPU (Central Processing Unit), a SoC (System-on-Chip), an MCU (Micro Control Unit), an FPGA (Field-Programmable Gate Array), and a coprocessor, but is not limited thereto. .. The processor 180 centrally controls the operation of the information display device 100 to realize various functions.

プロセッサ１８０は、自機が外部機器と接続されているかを検出する。接続は有線で行われてもよいし、無線で行われてもよい。無線接続の通信規格は、例えばＢｌｕｅｔｏｏｔｈ（登録商標）である。プロセッサ１８０は、通信インターフェイス１７０を介して外部機器と通信する。接続される外部機器は、例えば上記のイヤホンや、ヘッドセット、マイク付きの車載スピーカ、電子ペンである。但し、無線接続の通信規格、外部機器はともにこれらに限定されない。以下において、接続される外部機器が電子ペンである一例について説明する。   The processor 180 detects whether its own device is connected to an external device. The connection may be made by wire or wirelessly. The communication standard for wireless connection is, for example, Bluetooth (registered trademark). The processor 180 communicates with an external device via the communication interface 170. The external device to be connected is, for example, the above-mentioned earphone, headset, in-vehicle speaker with a microphone, or electronic pen. However, the communication standard for wireless connection and the external device are not limited to these. Hereinafter, an example in which the external device to be connected is an electronic pen will be described.

プロセッサ１８０は、タッチパネル１１１が検出した接触操作等に応じて入力される信号に基づいて、各種制御を実行する。例えば、プロセッサ１８０は、入力された信号に応じた出力を音声出力部１３１や表示部１１２等によって行う。また、プロセッサ１８０は、情報表示装置１００の機能の実行や設定の変更を行う。   The processor 180 executes various controls based on a signal input according to a touch operation or the like detected by the touch panel 111. For example, the processor 180 causes the audio output unit 131, the display unit 112, or the like to perform output according to the input signal. Further, the processor 180 executes functions of the information display device 100 and changes settings.

（電子ペンの構成）
図３は、一実施形態に係る電子ペン２００の外観図である。 (Structure of electronic pen)
FIG. 3 is an external view of the electronic pen 200 according to the embodiment.

図３に示すように、電子ペン２００は、筐体２０１と、クリップ部２０２と、芯体２０３と、操作部２１０とを有する。   As shown in FIG. 3, the electronic pen 200 has a housing 201, a clip portion 202, a core body 203, and an operation portion 210.

筐体２０１は、筒状に構成されている。クリップ部２０２は、電子ペン２００（筐体２０１）の上端側に設けられている。芯体２０３及び操作部２１０は、電子ペン２００（筐体２０１）の下端側に設けられている。操作部２１０は、指により押下されるボタンである。   The housing 201 has a tubular shape. The clip portion 202 is provided on the upper end side of the electronic pen 200 (housing 201). The core body 203 and the operation unit 210 are provided on the lower end side of the electronic pen 200 (housing 201). The operation unit 210 is a button that is pressed by a finger.

図４は、一実施形態に係る電子ペン２００の機能構成を示すブロック図である。   FIG. 4 is a block diagram showing a functional configuration of the electronic pen 200 according to the embodiment.

図４に示すように、電子ペン２００は、操作部２１０と、マイク２２０と、スピーカ２３０と、センサ２４０と、記憶部２５０と、通信インターフェイス２６０と、プロセッサ２７０とを有する。   As shown in FIG. 4, the electronic pen 200 includes an operation unit 210, a microphone 220, a speaker 230, a sensor 240, a storage unit 250, a communication interface 260, and a processor 270.

操作部２１０は、検出された押下操作に対応する信号をプロセッサ２７０に入力する。   The operation unit 210 inputs a signal corresponding to the detected pressing operation to the processor 270.

マイク２２０は、周囲の音声を集音する。マイク２２０は、電子ペン２００への音声入力を受け付け、入力を受け付けた音声に対応する信号をプロセッサ２７０に入力する。   The microphone 220 collects ambient sound. The microphone 220 receives a voice input to the electronic pen 200 and inputs a signal corresponding to the received voice to the processor 270.

スピーカ２３０は、音声出力を行う。スピーカ２３０は、電話の音声や各種プログラムの情報等を音声で出力する。スピーカ２３０は、プロセッサ２７０から入力された信号に基づいて、音声を出力する。   The speaker 230 outputs a voice. The speaker 230 outputs the voice of the telephone, information of various programs, and the like by voice. The speaker 230 outputs sound based on the signal input from the processor 270.

センサ２４０は、電子ペン２００に加わる加速度、又は筆圧を検出し、検出結果に対応する検出信号をプロセッサ２７０に出力する。センサ２４０は、加速度センサを含む。加速度センサは、電子ペン２００に加わる加速度の方向及び大きさを検出する。センサ２４０は、さらに筆圧センサを含む。筆圧センサは、芯体２０３（すなわち、ペン先）に加わる圧力を検出し、検出結果に対応する信号をプロセッサ２７０に出力する。センサ２４０は、さらに、情報表示装置１００の角度及び角速度を検出するジャイロセンサを含んでいてもよい。   The sensor 240 detects acceleration applied to the electronic pen 200 or writing pressure, and outputs a detection signal corresponding to the detection result to the processor 270. The sensor 240 includes an acceleration sensor. The acceleration sensor detects the direction and magnitude of the acceleration applied to the electronic pen 200. The sensor 240 further includes a writing pressure sensor. The writing pressure sensor detects the pressure applied to the core body 203 (that is, the pen tip) and outputs a signal corresponding to the detection result to the processor 270. The sensor 240 may further include a gyro sensor that detects the angle and the angular velocity of the information display device 100.

記憶部２５０は、プログラム及びデータを記憶する。記憶部２５０は、プロセッサ２７０の処理結果を一時的に記憶する作業領域としても利用される。記憶部２５０は、半導体記憶媒体、及び磁気記憶媒体等の任意の非一過的な記憶媒体を含んでよい。   The storage unit 250 stores programs and data. The storage unit 250 is also used as a work area for temporarily storing the processing result of the processor 270. The storage unit 250 may include any non-transitory storage medium such as a semiconductor storage medium and a magnetic storage medium.

また、記憶部２５０は、複数の種類の記憶媒体を含んでよい。記憶部２５０は、メモリカード等の可搬の記憶媒体と、記憶媒体の読み取り装置との組み合わせを含んでよい。記憶部２５０は、ＲＡＭ等の一時的な記憶領域として利用される記憶デバイスを含んでよい。   In addition, the storage unit 250 may include a plurality of types of storage media. The storage unit 250 may include a combination of a portable storage medium such as a memory card and a storage medium reading device. The storage unit 250 may include a storage device used as a temporary storage area such as a RAM.

通信インターフェイス２６０は、無線により通信する。通信インターフェイス２６０によってサポートされる無線通信規格には、例えば、上記のセルラー通信規格や近距離無線の通信規格等がある。   The communication interface 260 communicates wirelessly. The wireless communication standard supported by the communication interface 260 includes, for example, the above-mentioned cellular communication standard and short-range wireless communication standard.

プロセッサ２７０は、演算処理装置である。演算処理装置は、例えば、ＣＰＵ、ＳｏＣ、ＭＣＵ、ＦＰＧＡ、及びコプロセッサを含むが、これらに限定されない。プロセッサ２７０は、電子ペン２００の動作を統括的に制御して各種の機能を実現する。   The processor 270 is an arithmetic processing unit. The arithmetic processing unit includes, for example, a CPU, SoC, MCU, FPGA, and coprocessor, but is not limited thereto. The processor 270 centrally controls the operation of the electronic pen 200 to realize various functions.

プロセッサ２７０は、自機が情報表示装置１００と接続されているかを検出する。接続は有線で行われてもよいし、無線で行われてもよい。無線接続の通信規格は、例えばＢｌｕｅｔｏｏｔｈ（登録商標）である。プロセッサ２７０は、通信インターフェイス２６０を介して情報表示装置１００と通信する。   The processor 270 detects whether the device itself is connected to the information display device 100. The connection may be made by wire or wirelessly. The communication standard for wireless connection is, for example, Bluetooth (registered trademark). The processor 270 communicates with the information display device 100 via the communication interface 260.

プロセッサ２７０は、操作部２１０が検出した押下操作等に応じて入力される信号に基づいて、各種制御を実行する。また、プロセッサ２７０は、自機が情報表示装置１００と接続されている場合において、センサ２４０の検出結果に応じたデータを情報表示装置１００と送受信する。   The processor 270 executes various controls based on a signal input according to a pressing operation or the like detected by the operation unit 210. Further, the processor 270 transmits and receives data according to the detection result of the sensor 240 to and from the information display device 100 when the device itself is connected to the information display device 100.

（ペン入力システムの動作）
一実施形態において、情報表示装置１００及び電子ペン２００はペン入力システムを構成する。図５は、一実施形態に係るペン入力システムの動作を示すフロー図である。まず、ペン入力アプリケーションを起動するための動作について説明する。 (Operation of pen input system)
In one embodiment, the information display device 100 and the electronic pen 200 form a pen input system. FIG. 5 is a flowchart showing the operation of the pen input system according to the embodiment. First, the operation for starting the pen input application will be described.

図５に示すように、情報表示装置１００及び電子ペン２００は、無線接続（例えば、近距離無線通信の無線接続）を設定している。   As shown in FIG. 5, the information display device 100 and the electronic pen 200 set a wireless connection (for example, a wireless connection for short-range wireless communication).

情報表示装置１００のプロセッサ１８０は、電子ペン２００との無線接続が設定されている場合に、加速度又は振動を検出するようにセンサ１５０を制御する。情報表示装置１００のプロセッサ１８０は、電子ペン２００との無線接続が設定されている場合に、指示体の接触を検出するようにタッチパネル１１１を制御してもよい。   The processor 180 of the information display device 100 controls the sensor 150 to detect acceleration or vibration when a wireless connection with the electronic pen 200 is set. The processor 180 of the information display device 100 may control the touch panel 111 to detect the contact of the pointer when the wireless connection with the electronic pen 200 is set.

電子ペン２００のプロセッサ２７０は、情報表示装置１００との無線接続が設定されている場合に、加速度又は筆圧を検出するようにセンサ２４０を制御する。   The processor 270 of the electronic pen 200 controls the sensor 240 to detect the acceleration or the writing pressure when the wireless connection with the information display device 100 is set.

また、情報表示装置１００は、画面ロック状態にある。画面ロック状態は、情報表示装置１００の画面（表示部１１２）が消灯した状態である。なお、画面ロック状態から復帰する際に、パスワード入力等の個人認証をを必要としてもよい。   Further, the information display device 100 is in a screen lock state. The screen lock state is a state in which the screen (display unit 112) of the information display device 100 is turned off. In addition, when returning from the screen locked state, personal authentication such as password input may be required.

ステップＳ１０１において、電子ペン２００のプロセッサ２７０は、センサ２４０の検出信号に基づいて、ペン入力アプリケーションを起動するための起動モーションを検出する。   In step S101, the processor 270 of the electronic pen 200 detects the activation motion for activating the pen input application based on the detection signal of the sensor 240.

起動モーションは、図６に示すように、電子ペン２００の上部を情報表示装置１００の上部に接触させるというモーションであってもよい。   As shown in FIG. 6, the activation motion may be a motion of bringing the upper part of the electronic pen 200 into contact with the upper part of the information display device 100.

起動モーションは、図７に示すように、電子ペン２００の上部を情報表示装置１００のタッチスクリーンディスプレイ１１０に接触させるというモーションであってもよい。   The activation motion may be a motion of bringing the upper part of the electronic pen 200 into contact with the touch screen display 110 of the information display device 100, as shown in FIG. 7.

起動モーションは、図８に示すように、電子ペン２００の芯体２０３を情報表示装置１００に接触させるというモーションであってもよい。   The activation motion may be a motion of bringing the core body 203 of the electronic pen 200 into contact with the information display device 100, as shown in FIG.

起動モーションは、１回の接触に限らず、電子ペン２００を情報表示装置１００に連続的に所定回数（例えば、２回）接触させるというモーションであってもよい。   The activation motion is not limited to one contact, but may be a motion in which the electronic pen 200 is continuously contacted with the information display device 100 a predetermined number of times (for example, twice).

電子ペン２００において、センサ２４０（加速度センサ）が水平方向及び／又は垂直方向の加速度を検出することにより、プロセッサ２７０が起動モーションを検出できる。或いは、センサ２４０（筆圧センサ）が筆圧を検出することにより、プロセッサ２７０が起動モーションを検出してもよい。   In the electronic pen 200, the sensor 240 (acceleration sensor) detects the horizontal and / or vertical acceleration, so that the processor 270 can detect the activation motion. Alternatively, the processor 270 may detect the activation motion by the sensor 240 (writing pressure sensor) detecting the writing pressure.

起動モーションは、電子ペン２００を情報表示装置１００に接触させるものであるため、情報表示装置１００に振動（衝撃）が生じ、ある一定の加速度が発生する。   Since the activation motion is to bring the electronic pen 200 into contact with the information display device 100, vibration (impact) is generated in the information display device 100 and a certain acceleration is generated.

ステップＳ１０２において、情報表示装置１００のプロセッサ１８０は、センサ１５０（加速度センサ、振動センサ）の検出信号に基づいて、情報表示装置１００に加速度又は振動が加えられたことを検出する。或いは、情報表示装置１００のプロセッサ１８０は、タッチパネル１１１の検出信号に基づいて、タッチパネル１１１に電子ペン２００が接触したことを検出してもよい。   In step S102, the processor 180 of the information display device 100 detects that acceleration or vibration is applied to the information display device 100 based on the detection signal of the sensor 150 (acceleration sensor, vibration sensor). Alternatively, the processor 180 of the information display device 100 may detect that the electronic pen 200 has touched the touch panel 111 based on the detection signal of the touch panel 111.

ステップＳ１０３において、電子ペン２００のプロセッサ２７０は、ステップＳ１０１で起動モーションを検出したことに応じて、ペン入力アプリケーションを起動させるペン入力アプリケーション起動コマンドを生成する。一実施形態において、電子ペン２００のプロセッサ２７０は、ペン入力アプリケーション起動コマンドを生成する起動コマンド生成部として機能する。   In step S103, the processor 270 of the electronic pen 200 generates a pen input application activation command for activating the pen input application in response to the detection of the activation motion in step S101. In one embodiment, the processor 270 of the electronic pen 200 functions as a start command generation unit that generates a pen input application start command.

ステップＳ１０４において、電子ペン２００のプロセッサ２７０は、ステップＳ１０３で生成されたペン入力アプリケーション起動コマンドを、通信インターフェイス２６０を介して情報表示装置１００に送信する。一実施形態において、電子ペン２００の通信インターフェイス２６０及びプロセッサ２７０は、ペン入力アプリケーション起動コマンドを送信する送信部として機能する。   In step S104, the processor 270 of the electronic pen 200 transmits the pen input application activation command generated in step S103 to the information display device 100 via the communication interface 260. In one embodiment, the communication interface 260 and the processor 270 of the electronic pen 200 function as a transmission unit that transmits a pen input application activation command.

情報表示装置１００のプロセッサ１８０は、通信インターフェイス１７０を介してペン入力アプリケーション起動コマンドを受信する。一実施形態において、情報表示装置１００の通信インターフェイス１７０及びプロセッサ１８０は、ペン入力アプリケーション起動コマンドを受信する受信部として機能する。   The processor 180 of the information display device 100 receives the pen input application activation command via the communication interface 170. In one embodiment, the communication interface 170 and the processor 180 of the information display device 100 function as a receiving unit that receives a pen input application activation command.

ステップＳ１０５において、情報表示装置１００のプロセッサ１８０は、ステップＳ１０４でペン入力アプリケーション起動コマンドを受信したことに応じて、電子ペン２００が情報表示装置１００に接触したか否かを判定する。本フローにおいては、情報表示装置１００のプロセッサ１８０は、起動モーションに対応する加速度、振動、又は接触をステップＳ１０２で検出しているため、電子ペン２００が情報表示装置１００に接触したと判定する。すなわち、情報表示装置１００のプロセッサ１８０は、ペン入力アプリケーション起動コマンド、および、センサ１５０の検出信号に基づいて検出された加速度又は振動の双方に基づいて、電子ペン２００が情報表示装置１００に接触したと判定することができる。   In step S105, the processor 180 of the information display device 100 determines whether or not the electronic pen 200 has contacted the information display device 100 in response to receiving the pen input application activation command in step S104. In the present flow, the processor 180 of the information display device 100 detects acceleration, vibration, or contact corresponding to the startup motion in step S102, and thus determines that the electronic pen 200 has contacted the information display device 100. That is, the processor 180 of the information display device 100 causes the electronic pen 200 to contact the information display device 100 based on both the pen input application activation command and the acceleration or vibration detected based on the detection signal of the sensor 150. Can be determined.

なお、情報表示装置１００のプロセッサ１８０は、ペン入力アプリケーション起動コマンドを受信する前の一定期間内において起動モーションに対応する加速度、振動、又は接触を検出していない場合、電子ペン２００から受信したペン入力アプリケーション起動コマンドを無効とみなして破棄又は無視する。   Note that the processor 180 of the information display apparatus 100 receives the pen received from the electronic pen 200 when the acceleration, vibration, or contact corresponding to the startup motion is not detected within a certain period before receiving the pen input application startup command. The input application start command is regarded as invalid and discarded or ignored.

電子ペン２００が情報表示装置１００に接触したと判定された場合、ステップＳ１０６において、情報表示装置１００のプロセッサ１８０は、画面ロック状態を解除するとともに、ペン入力アプリケーションを起動する。すなわち、情報表示装置のプロセッサ１００は、ペン入力アプリケーション起動コマンド、および、センサ１５０の検出信号に基づいて検出された加速度又は振動の双方に基づいて、ペン入力アプリケーションを起動することができる。   When it is determined that the electronic pen 200 has contacted the information display device 100, in step S106, the processor 180 of the information display device 100 releases the screen lock state and activates the pen input application. That is, the processor 100 of the information display device can activate the pen input application based on both the pen input application activation command and the acceleration or vibration detected based on the detection signal of the sensor 150.

情報表示装置１００のプロセッサ１８０は、ペン入力アプリケーションを実行することにより、電子ペン２００による手書き入力を受け付けるようにタッチパネル１１１を制御する。また、情報表示装置１００のプロセッサ１８０は、ペン入力アプリケーションを実行することにより、タッチパネル１１１が入力を受け付けた手書きの軌跡（例えば、文字や図形）を表示するように表示部１１２を制御する。   The processor 180 of the information display device 100 controls the touch panel 111 to receive a handwriting input by the electronic pen 200 by executing a pen input application. Further, the processor 180 of the information display device 100 controls the display unit 112 to display a handwritten locus (for example, a character or a figure) that the touch panel 111 receives an input by executing a pen input application.

次に、ペン入力アプリケーションを終了するための動作について説明する。   Next, the operation for ending the pen input application will be described.

ステップＳ１０７において、電子ペン２００のプロセッサ２７０は、センサ２４０の検出信号に基づいて、ペン入力アプリケーションを終了するための終了モーションを検出する。   In step S107, the processor 270 of the electronic pen 200 detects an end motion for ending the pen input application based on the detection signal of the sensor 240.

ペン入力アプリケーションの実行中は、図７や図８に示すようなモーションは手書き入力動作として認識される懸念がある。このため、終了モーションは、図６に示すように、電子ペン２００の上部を情報表示装置１００の上部に接触させるというモーションであってもよい。但し、終了モーションは、電子ペン２００を情報表示装置１００の上部に接触させるモーションに限らず、タッチスクリーンディスプレイ１１０の範囲外の任意の箇所に電子ペン２００を接触させるモーションであってもよい。また、終了モーションは、１回の接触に限らず、情報表示装置１００に電子ペン２００を連続的に所定回数（例えば、２回）接触させるというモーションであってもよい。   During execution of the pen input application, there is a concern that a motion as shown in FIG. 7 or 8 may be recognized as a handwriting input operation. Therefore, the end motion may be a motion of bringing the upper part of the electronic pen 200 into contact with the upper part of the information display device 100, as shown in FIG. However, the end motion is not limited to the motion of bringing the electronic pen 200 into contact with the upper portion of the information display device 100, and may be the motion of bringing the electronic pen 200 into contact with any place outside the range of the touch screen display 110. Further, the end motion is not limited to one touch, and may be a motion in which the electronic pen 200 is continuously brought into contact with the information display device 100 a predetermined number of times (for example, twice).

電子ペン２００において、センサ２４０（加速度センサ）が水平方向及び／又は垂直方向の加速度を検出することにより、プロセッサ２７０が終了モーションを検出できる。   In the electronic pen 200, the sensor 240 (acceleration sensor) detects the horizontal and / or vertical acceleration, so that the processor 270 can detect the end motion.

終了モーションは、電子ペン２００を情報表示装置１００に接触させるものであるため、情報表示装置１００に振動（衝撃）が生じ、ある一定の加速度が発生する。   Since the end motion is to bring the electronic pen 200 into contact with the information display device 100, vibration (impact) is generated in the information display device 100, and a certain acceleration is generated.

ステップＳ１０８において、情報表示装置１００のプロセッサ１８０は、センサ１５０（加速度センサ、振動センサ）の検出信号に基づいて、情報表示装置１００に加速度又は振動が加えられたことを検出する。   In step S108, the processor 180 of the information display device 100 detects that acceleration or vibration is applied to the information display device 100 based on the detection signal of the sensor 150 (acceleration sensor, vibration sensor).

ステップＳ１０９において、電子ペン２００のプロセッサ２７０は、ステップＳ１０７で終了モーションを検出したことに応じて、ペン入力アプリケーションを終了させるペン入力アプリケーション終了コマンドを生成する。一実施形態において、電子ペン２００のプロセッサ２７０は、ペン入力アプリケーション終了コマンドを生成する終了コマンド生成部として機能する。   In step S109, the processor 270 of the electronic pen 200 generates a pen input application end command for ending the pen input application in response to the detection of the end motion in step S107. In one embodiment, the processor 270 of the electronic pen 200 functions as an end command generation unit that generates a pen input application end command.

ステップＳ１１０において、電子ペン２００のプロセッサ２７０は、ステップＳ１０９で生成されたペン入力アプリケーション終了コマンドを、通信インターフェイス２６０を介して情報表示装置１００に送信する。情報表示装置１００のプロセッサ１８０は、通信インターフェイス１７０を介してペン入力アプリケーション終了コマンドを受信する。   In step S110, the processor 270 of the electronic pen 200 transmits the pen input application end command generated in step S109 to the information display device 100 via the communication interface 260. The processor 180 of the information display device 100 receives the pen input application end command via the communication interface 170.

ステップＳ１１１において、情報表示装置１００のプロセッサ１８０は、ステップＳ１１０でペン入力アプリケーション終了コマンドを受信したことに応じて、電子ペン２００が情報表示装置１００に接触したか否かを判定する。本フローにおいては、情報表示装置１００のプロセッサ１８０は、終了モーションに対応する加速度又は振動をステップＳ１０８で検出しているため、電子ペン２００が情報表示装置１００に接触したと判定する。すなわち、情報表示装置のプロセッサ１００は、ペン入力アプリケーション終了コマンド、および、センサ１５０の検出信号に基づいて検出された加速度又は振動の双方に基づいて、電子ペン２００が情報表示装置１００に接触したと判定することができる。   In step S111, the processor 180 of the information display device 100 determines whether or not the electronic pen 200 has contacted the information display device 100 in response to receiving the pen input application end command in step S110. In the present flow, the processor 180 of the information display device 100 detects acceleration or vibration corresponding to the end motion in step S108, and thus determines that the electronic pen 200 has contacted the information display device 100. That is, the processor 100 of the information display device determines that the electronic pen 200 has contacted the information display device 100 based on both the pen input application end command and the acceleration or vibration detected based on the detection signal of the sensor 150. Can be determined.

なお、情報表示装置１００のプロセッサ１８０は、ペン入力アプリケーション終了コマンドを受信する前の一定期間内において終了モーションに対応する加速度又は振動を検出していない場合、電子ペン２００から受信したペン入力アプリケーション終了コマンドを無効とみなして破棄又は無視する。   If the processor 180 of the information display device 100 does not detect the acceleration or the vibration corresponding to the end motion within a certain period before receiving the pen input application end command, the pen input application end received from the electronic pen 200 is ended. The command is considered invalid and is discarded or ignored.

電子ペン２００が情報表示装置１００に接触したと判定された場合、ステップＳ１１２において、情報表示装置１００のプロセッサ１８０は、ペン入力アプリケーションを終了する。すなわち、情報表示装置のプロセッサ１００は、ペン入力アプリケーション終了コマンド、および、センサ１５０の検出信号に基づいて検出された加速度又は振動の双方に基づいて、ペン入力アプリケーションを終了することができる。ここで、情報表示装置１００のプロセッサ１８０は、ペン入力アプリケーションの実行中に入力された手書きの軌跡（文字や図形）を自動的に記憶部１６０に保存させてもよい。また、情報表示装置１００のプロセッサ１８０は、ペン入力アプリケーションを終了するとともに、画面ロック状態に戻してもよい。   When it is determined that the electronic pen 200 has contacted the information display device 100, the processor 180 of the information display device 100 ends the pen input application in step S112. That is, the processor 100 of the information display device can end the pen input application based on both the pen input application end command and the acceleration or vibration detected based on the detection signal of the sensor 150. Here, the processor 180 of the information display device 100 may automatically store the handwritten locus (characters or figures) input during execution of the pen input application in the storage unit 160. Further, the processor 180 of the information display device 100 may return to the screen lock state at the same time as ending the pen input application.

以上説明したように、一実施形態に係るペン入力システムにおいて、電子ペン２００は、加速度又は筆圧を検出するためのセンサ２４０と、センサ２４０の検出結果に応じたデータを情報表示装置１００に送信する手段とを有する。情報表示装置１００は、電子ペン２００から、センサ２４０の検出結果に応じたデータを受信する手段と、受信されたデータに基づいてペン入力アプリケーションを起動するプロセッサ１８０とを有する。   As described above, in the pen input system according to the embodiment, the electronic pen 200 transmits the sensor 240 for detecting the acceleration or the writing pressure, and the data according to the detection result of the sensor 240 to the information display device 100. And means for doing so. The information display device 100 has a unit that receives data from the electronic pen 200 according to the detection result of the sensor 240, and a processor 180 that starts a pen input application based on the received data.

これにより、電子ペン２００に加わる加速度、又は筆圧に基づいて情報表示装置１００側でペン入力アプリケーションが起動されるため、複数のアイコンの中からペン入力アプリケーションのアイコンを選択してタップする操作を不要とし、電子ペン２００のモーションによってペン入力アプリケーションを起動できるため、ペン入力アプリケーションを速やかに起動できる。   As a result, the pen input application is activated on the information display device 100 side based on the acceleration applied to the electronic pen 200 or the writing pressure. Therefore, an operation of selecting and tapping the icon of the pen input application from among the plurality of icons can be performed. Since it is unnecessary and the pen input application can be started by the motion of the electronic pen 200, the pen input application can be started quickly.

一実施形態において、情報表示装置１００のプロセッサ１８０は、画面ロック状態を解除するとともに、ペン入力アプリケーションを起動する。これにより、画面ロック状態を解除するための入力操作（個人認証を含む）を不要とし、ペン入力アプリケーションをより速やかに起動できる。   In one embodiment, the processor 180 of the information display device 100 releases the screen lock state and activates the pen input application. This eliminates the need for an input operation (including personal authentication) for releasing the screen lock state, and allows the pen input application to be started more quickly.

一実施形態において、電子ペン２００は、センサ２４０の検出結果に基づいて、ペン入力アプリケーションを起動させる起動コマンドを生成し、生成された起動コマンドを情報表示装置１００に送信する。これにより、センサ２４０の検出結果をそのまま電子ペン２００から情報表示装置１００に提供する場合に比べて、効率的にペン入力アプリケーションを起動できる。   In one embodiment, the electronic pen 200 generates a start command for starting the pen input application based on the detection result of the sensor 240, and transmits the generated start command to the information display device 100. As a result, the pen input application can be activated more efficiently than when the detection result of the sensor 240 is directly provided from the electronic pen 200 to the information display device 100.

但し、電子ペン２００の処理能力が低い場合は、センサ２４０の検出結果（検出データ）をそのまま電子ペン２００から情報表示装置１００に提供し、ステップＳ１０１及びＳ１０７におけるモーションの検出を情報表示装置１００側で行ってもよい。   However, when the processing capacity of the electronic pen 200 is low, the detection result (detection data) of the sensor 240 is provided from the electronic pen 200 to the information display device 100 as it is, and the motion detection in steps S101 and S107 is performed by the information display device 100 side. You may go in.

一実施形態において、情報表示装置１００は、情報表示装置１００に加わる加速度又は振動を検出するためのセンサ１５０を有する。情報表示装置１００のプロセッサ１８０は、センサ１５０の検出結果に基づいて、電子ペン２００が情報表示装置１００に接触したと判定される場合に、ペン入力アプリケーションを起動する。或いは、情報表示装置１００のプロセッサ１８０は、タッチパネル１１１の検出結果に基づいて、電子ペン２００が情報表示装置１００に接触したと判定される場合に、ペン入力アプリケーションを起動してもよい。   In one embodiment, the information display device 100 includes a sensor 150 for detecting acceleration or vibration applied to the information display device 100. The processor 180 of the information display device 100 activates the pen input application when it is determined that the electronic pen 200 contacts the information display device 100 based on the detection result of the sensor 150. Alternatively, the processor 180 of the information display device 100 may activate the pen input application when it is determined that the electronic pen 200 has contacted the information display device 100 based on the detection result of the touch panel 111.

一実施形態において、情報表示装置１００のプロセッサ１８０は、ペン入力アプリケーションを起動した後、センサ１５０の検出結果に基づいて、電子ペン２００が情報表示装置１００におけるタッチスクリーンディスプレイ１１０（タッチパネル１１１）以外の箇所、例えば、情報表示装置１００の筐体１０１の縁部分に接触したと判定される場合に、ペン入力アプリケーションを終了する。   In one embodiment, the processor 180 of the information display device 100 activates the pen input application, and then, based on the detection result of the sensor 150, the electronic pen 200 causes the information display device 100 to display the information other than the touch screen display 110 (touch panel 111). When it is determined that a point, for example, the edge portion of the housing 101 of the information display device 100 is touched, the pen input application is ended.

電子ペン２００側のモーション検出のみに基づいてペン入力アプリケーションを起動又は終了することとすると、ユーザが意図しないタイミングでペン入力アプリケーションが起動又は終了する誤動作が生じうる。ユーザが電子ペン２００を情報表示装置１００に接触させるように動かしたことを条件としてペン入力アプリケーションを起動又は終了することにより、そのような誤動作の発生を抑制できる。   If the pen input application is activated or terminated based only on the motion detection on the electronic pen 200 side, a malfunction may occur in which the pen input application is activated or terminated at a timing not intended by the user. By starting or terminating the pen input application on condition that the user moves the electronic pen 200 so as to contact the information display device 100, it is possible to suppress the occurrence of such a malfunction.

（その他の実施形態）
上記の実施形態において、情報表示装置１００のセンサ１５０は、さらに照度センサを含んでいてもよい。照度センサは、受光素子を含み、受光素子に入射した光の量を検出する。情報表示装置１００のプロセッサ１８０は、電子ペン２００が情報表示装置１００に接触したか否かの判定（図５のステップＳ１０５）に加えて、照度センサが一定の明るさを検出しているか否かを判定してもよい。 (Other embodiments)
In the above embodiment, the sensor 150 of the information display device 100 may further include an illuminance sensor. The illuminance sensor includes a light receiving element and detects the amount of light incident on the light receiving element. The processor 180 of the information display device 100 determines whether the electronic pen 200 has contacted the information display device 100 (step S105 in FIG. 5), and whether the illuminance sensor detects a constant brightness. May be determined.

そして、情報表示装置１００のプロセッサ１８０は、電子ペン２００が情報表示装置１００に接触したと判定され、且つ照度センサが一定の明るさを検出している場合に、ペン入力アプリケーションを起動してもよい。これにより、情報表示装置１００が鞄の中やポケットの中にあるときにペン入力アプリケーションが誤って起動することを抑制できる。   Then, the processor 180 of the information display device 100 starts the pen input application when it is determined that the electronic pen 200 has come into contact with the information display device 100 and the illuminance sensor detects a certain brightness. Good. Accordingly, it is possible to prevent the pen input application from being accidentally activated when the information display device 100 is in the bag or the pocket.

上記の実施形態において、情報表示装置１００のプロセッサ１８０は、電子ペン２００が情報表示装置１００に接触したか否かの判定（図５のステップＳ１０５）に加えて、カメラ１４０の撮像による顔認識結果に基づいて、ユーザが表示部１１２（タッチスクリーンディスプレイ１１０）を注視しているかを判定してもよい。   In the above-described embodiment, the processor 180 of the information display device 100 determines whether or not the electronic pen 200 has contacted the information display device 100 (step S105 in FIG. 5), and additionally, the face recognition result obtained by the image pickup by the camera 140. Based on, it may be determined whether the user is gazing at the display unit 112 (touch screen display 110).

そして、情報表示装置１００のプロセッサ１８０は、電子ペン２００が情報表示装置１００に接触したと判定され、且つユーザが表示部１１２（タッチスクリーンディスプレイ１１０）を注視していると判定された場合に、ペン入力アプリケーションを起動してもよい。これにより、誤動作をさらに抑制できる。   Then, the processor 180 of the information display device 100 determines that the electronic pen 200 has contacted the information display device 100 and determines that the user is gazing at the display unit 112 (touch screen display 110). You may start the pen input application. Thereby, malfunction can be further suppressed.

上記の実施形態において、画面ロック状態において、起動モーションによりペン入力アプリケーションを起動する一例について説明した。しかしながら、画面ロック状態が解除された直後の状態（すなわち、ホーム画面）において、起動モーションによりペン入力アプリケーションを起動してもよい。   In the above embodiment, an example in which the pen input application is activated by the activation motion in the screen lock state has been described. However, the pen input application may be activated by the activation motion in the state immediately after the screen lock state is released (that is, the home screen).

上記の実施形態において、電子ペン２００が情報表示装置１００に収納可能である場合について特に触れなかったが、情報表示装置１００に電子ペン２００の収納部が設けられ、電子ペン２００が情報表示装置１００に収納可能であってもよい。   In the above embodiment, the case where the electronic pen 200 can be housed in the information display device 100 was not particularly mentioned, but the housing portion for the electronic pen 200 is provided in the information display device 100, and the electronic pen 200 is installed in the information display device 100. It may be able to be stored in.

情報表示装置１００が行う各処理をコンピュータに実行させるプログラムが提供されてもよい。プログラムは、コンピュータ読取り可能媒体に記録されていてもよい。コンピュータ読取り可能媒体を用いれば、コンピュータにプログラムをインストールすることが可能である。ここで、プログラムが記録されたコンピュータ読取り可能媒体は、非一過性の記録媒体であってもよい。非一過性の記録媒体は、特に限定されるものではないが、例えば、ＣＤ−ＲＯＭやＤＶＤ−ＲＯＭ等の記録媒体であってもよい。   A program that causes a computer to execute each process performed by the information display device 100 may be provided. The program may be recorded on a computer-readable medium. A computer readable medium can be used to install the program on a computer. Here, the computer-readable medium in which the program is recorded may be a non-transitory recording medium. The non-transitory recording medium is not particularly limited, but may be a recording medium such as a CD-ROM or a DVD-ROM.

以上、図面を参照して一実施形態について詳しく説明したが、具体的な構成は上述のものに限られることはなく、要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。   Although one embodiment has been described in detail above with reference to the drawings, the specific configuration is not limited to the above, and various design changes and the like can be made without departing from the scope of the invention. ..

１００ ：情報表示装置
１０１ ：筐体
１１０ ：タッチスクリーンディスプレイ
１１１ ：タッチパネル
１１２ ：表示部
１２０ ：マイク
１２１ ：音声入力部
１３０ ：スピーカ
１３１ ：音声出力部
１４０ ：カメラ
１５０ ：センサ
１６０ ：記憶部
１７０ ：通信インターフェイス
１８０ ：プロセッサ
２００ ：電子ペン
２０１ ：筐体
２０２ ：クリップ部
２０３ ：芯体
２１０ ：操作部
２２０ ：マイク
２３０ ：スピーカ
２４０ ：センサ
２５０ ：記憶部
２６０ ：通信インターフェイス
２７０ ：プロセッサ 100: information display device 101: housing 110: touch screen display 111: touch panel 112: display unit 120: microphone 121: voice input unit 130: speaker 131: voice output unit 140: camera 150: sensor 160: storage unit 170: communication Interface 180: Processor 200: Electronic pen 201: Housing 202: Clip part 203: Core 210: Operation part 220: Microphone 230: Speaker 240: Sensor 250: Storage part 260: Communication interface 270: Processor

Claims (13)

電子ペンと、
前記電子ペンによる手書き入力を受け付けるタッチパネルを有する情報表示装置と、を備え、
前記電子ペンは、
加速度又は筆圧を検出するための第１センサと、
前記第１センサの検出結果に応じたデータを前記情報表示装置に送信する送信部と、を有し、
前記情報表示装置は、
前記電子ペンから前記データを受信する受信部と、
前記受信部が受信する前記データに基づいて、前記電子ペンによる前記手書き入力を行うためのアプリケーションを起動するプロセッサと、を有する
ペン入力システム。 Electronic pen,
An information display device having a touch panel that receives handwriting input by the electronic pen,
The electronic pen is
A first sensor for detecting acceleration or writing pressure;
A transmission unit that transmits data according to the detection result of the first sensor to the information display device,
The information display device,
A receiver for receiving the data from the electronic pen,
A processor for activating an application for performing the handwriting input by the electronic pen based on the data received by the receiving unit. 前記情報表示装置が画面ロック状態にあるときに前記受信部が前記データを受信した場合、前記プロセッサは、前記受信部が受信する前記データに基づいて、前記画面ロック状態を解除するとともに、前記アプリケーションを起動する
請求項１に記載のペン入力システム。 When the receiving unit receives the data when the information display device is in the screen lock state, the processor releases the screen lock state based on the data received by the receiving unit and the application. The pen input system according to claim 1, which is activated. 前記電子ペンは、
前記第１センサの検出結果に基づいて、前記アプリケーションを起動させる起動コマンドを生成する起動コマンド生成部をさらに有し、
前記送信部は、前記起動コマンド生成部により生成された前記起動コマンドを前記データとして前記情報表示装置に送信する
請求項１又は２に記載のペン入力システム。 The electronic pen is
Further comprising a start command generation unit that generates a start command for starting the application based on a detection result of the first sensor,
The pen input system according to claim 1, wherein the transmission unit transmits the activation command generated by the activation command generation unit to the information display device as the data. 前記情報表示装置は、前記情報表示装置に加わる加速度又は振動を検出するための第２センサをさらに有し、
前記プロセッサは、前記受信部が受信する前記データと、前記第２センサの検出結果とに基づいて、前記電子ペンが前記情報表示装置に接触したと判定される場合に、前記アプリケーションを起動する
請求項１乃至３のいずれか１項に記載のペン入力システム。 The information display device further includes a second sensor for detecting acceleration or vibration applied to the information display device,
The processor starts the application when it is determined that the electronic pen has come into contact with the information display device based on the data received by the receiving unit and the detection result of the second sensor. The pen input system according to any one of items 1 to 3. 前記プロセッサは、前記受信部が受信する前記データと、前記タッチパネルの検出結果とに基づいて、前記電子ペンが前記情報表示装置に接触したと判定される場合に、前記アプリケーションを起動する
請求項１乃至３のいずれか１項に記載のペン入力システム。 The processor activates the application when it is determined that the electronic pen has contacted the information display device based on the data received by the receiving unit and the detection result of the touch panel. 4. The pen input system according to any one of items 1 to 3. 前記情報表示装置は、自機の周囲の明るさを検出するための照度センサをさらに有し、
前記プロセッサは、前記電子ペンが前記情報表示装置に接触したと判定され、且つ前記照度センサが一定の明るさを検出している場合に、前記アプリケーションを起動する
請求項４又は５に記載のペン入力システム。 The information display device further has an illuminance sensor for detecting the brightness around the device,
The pen according to claim 4, wherein the processor activates the application when it is determined that the electronic pen has come into contact with the information display device and the illuminance sensor detects a constant brightness. Input system. 前記アプリケーションを起動した後、前記プロセッサは、前記受信部が受信する前記データに基づいて、前記アプリケーションを終了する
請求項１に記載のペン入力システム。 The pen input system according to claim 1, wherein after starting the application, the processor ends the application based on the data received by the receiving unit. 前記電子ペンは、
前記第１センサの検出結果に基づいて、前記アプリケーションを終了させる終了コマンドを生成する終了コマンド生成部をさらに有し、
前記送信部は、前記終了コマンド生成部により生成された前記終了コマンドを前記データとして前記情報表示装置に送信する
請求項７に記載のペン入力システム。 The electronic pen is
Further comprising an end command generation unit that generates an end command for ending the application based on the detection result of the first sensor,
The pen input system according to claim 7, wherein the transmission unit transmits the end command generated by the end command generation unit to the information display device as the data. 前記情報表示装置は、前記情報表示装置に加わる加速度又は振動を検出するための第２センサをさらに有し、
前記アプリケーションを起動した後、前記プロセッサは、前記受信部が受信する前記データと、前記第２センサの検出結果とに基づいて、前記電子ペンが前記情報表示装置における前記タッチパネル以外の箇所に接触したと判定される場合に、前記アプリケーションを終了する
請求項７又は８に記載のペン入力システム。 The information display device further includes a second sensor for detecting acceleration or vibration applied to the information display device,
After activating the application, the processor causes the electronic pen to contact a location other than the touch panel in the information display device based on the data received by the receiving unit and the detection result of the second sensor. The pen input system according to claim 7 or 8, wherein the application is terminated when it is determined that the application is completed. 電子ペンによる手書き入力を受け付けるタッチパネルと、
前記電子ペンから、前記電子ペンに加わる加速度、又は筆圧の検出結果に応じたデータを受信する受信部と、
前記受信部が受信する前記データに基づいて、前記電子ペンによる前記手書き入力を行うためのアプリケーションを起動するプロセッサと、を備える
情報表示装置。 A touch panel that accepts handwriting input with an electronic pen,
From the electronic pen, a receiving unit that receives data according to the detection result of the acceleration applied to the electronic pen or the writing pressure,
An information display device, comprising: a processor that activates an application for performing the handwriting input by the electronic pen based on the data received by the receiving unit. 情報表示装置が有するタッチパネルに対する手書き入力に用いられる電子ペンであって、
前記電子ペンに加わる加速度、又は筆圧を検出するためのセンサと、
前記センサの検出結果に応じたデータを前記情報表示装置に送信する送信部と、を備え、
前記データは、前記手書き入力を行うためのアプリケーションを前記情報表示装置に起動させるために用いられる
電子ペン。 An electronic pen used for handwriting input to a touch panel of an information display device,
A sensor for detecting acceleration applied to the electronic pen, or writing pressure;
A transmission unit that transmits data according to the detection result of the sensor to the information display device,
The data is an electronic pen used for activating the application for performing the handwriting input on the information display device. 電子ペンによる手書き入力を受け付けるタッチパネルを有する情報表示装置の制御方法であって、
前記電子ペンから、前記電子ペンに加わる加速度、又は筆圧の検出結果に応じたデータを受信する受信ステップと、
前記受信ステップで受信する前記データに基づいて、前記電子ペンによる前記手書き入力を行うためのアプリケーションを起動する起動ステップと、を備える
制御方法。 A method for controlling an information display device having a touch panel that accepts handwriting input with an electronic pen,
From the electronic pen, a receiving step of receiving data according to the detection result of the acceleration applied to the electronic pen or the writing pressure,
A starting step of starting an application for performing the handwriting input by the electronic pen based on the data received in the receiving step. 電子ペンによる手書き入力を受け付けるタッチパネルを有する情報表示装置に、
前記電子ペンから、前記電子ペンに加わる加速度、又は筆圧の検出結果に応じたデータを受信する受信ステップと、
前記受信ステップで受信する前記データに基づいて、前記電子ペンによる前記手書き入力を行うためのアプリケーションを起動する起動ステップと、を実行させる
プログラム。 In an information display device having a touch panel that accepts handwriting input with an electronic pen,
From the electronic pen, a receiving step of receiving data according to the detection result of the acceleration applied to the electronic pen or the writing pressure,
And a starting step of starting an application for performing the handwriting input by the electronic pen based on the data received in the receiving step.
JP2018203317A 2018-10-29 2018-10-29 Pen input system, information display device, electronic pen, control method, and program Active JP7228366B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018203317A JP7228366B2 (en) 2018-10-29 2018-10-29 Pen input system, information display device, electronic pen, control method, and program
US17/288,297 US20210382684A1 (en) 2018-10-29 2019-09-30 Information display apparatus, electronic device, electronic pen, system, method and program
PCT/JP2019/038499 WO2020090317A1 (en) 2018-10-29 2019-09-30 Information display device, electronic instrument, electronic pen, system, method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018203317A JP7228366B2 (en) 2018-10-29 2018-10-29 Pen input system, information display device, electronic pen, control method, and program

Publications (2)

Publication Number Publication Date
JP2020071548A true JP2020071548A (en) 2020-05-07
JP7228366B2 JP7228366B2 (en) 2023-02-24

Family

ID=70547856

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018203317A Active JP7228366B2 (en) 2018-10-29 2018-10-29 Pen input system, information display device, electronic pen, control method, and program

Country Status (1)

Country Link
JP (1) JP7228366B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7478608B2 (en) 2020-07-01 2024-05-07 株式会社ワコム Position detection device and program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015225527A (en) * 2014-05-28 2015-12-14 株式会社東芝 Electronic apparatus, method and program
US20160301796A1 (en) * 2015-04-13 2016-10-13 Microsoft Technology Licensing, Llc Inputting data using a mobile apparatus
US20180232069A1 (en) * 2017-02-16 2018-08-16 Dell Products L. P. Enabling a user to enter notes without authenticating the user

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015225527A (en) * 2014-05-28 2015-12-14 株式会社東芝 Electronic apparatus, method and program
US20160301796A1 (en) * 2015-04-13 2016-10-13 Microsoft Technology Licensing, Llc Inputting data using a mobile apparatus
US20180232069A1 (en) * 2017-02-16 2018-08-16 Dell Products L. P. Enabling a user to enter notes without authenticating the user

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7478608B2 (en) 2020-07-01 2024-05-07 株式会社ワコム Position detection device and program
US12008172B2 (en) 2020-07-01 2024-06-11 Wacom Co., Ltd. Position detection device and program

Also Published As

Publication number Publication date
JP7228366B2 (en) 2023-02-24

Similar Documents

Publication Publication Date Title
KR102325418B1 (en) How notifications are handled and electronic devices
EP3211509B1 (en) Mobile device comprising stylus pen and operation method therefor
US8884874B1 (en) Digital device and control method thereof
EP2927790B1 (en) Photographing method and mobile terminal
KR102080183B1 (en) Electronic device and method for unlocking in the electronic device
EP3163404B1 (en) Method and device for preventing accidental touch of terminal with touch screen
US10222968B2 (en) Image display control apparatus, image display apparatus, non-transitory computer readable medium, and image display control method
EP3232299A2 (en) Physical key component, terminal, and touch response method and device
JP6196398B2 (en) Apparatus, method, terminal device, program, and recording medium for realizing touch button and fingerprint authentication
US20210382684A1 (en) Information display apparatus, electronic device, electronic pen, system, method and program
JP2017102952A (en) Electronic device
JP2017524222A (en) Full-screen one-hand operation method, apparatus, program, and recording medium
CN108174103B (en) Shooting prompting method and mobile terminal
RU2648627C1 (en) Operation processing method and device
JP2017507413A (en) Techniques for identifying rolling gestures on devices
JP6158260B2 (en) Electronic device, control program, and operation method of electronic device
JP2018148286A (en) Electronic apparatus and control method
US20180121162A1 (en) Electronic device, and method of control
US10159046B2 (en) Mobile terminal device
WO2014032504A1 (en) Method for terminal to customize hand gesture and terminal thereof
JP7228366B2 (en) Pen input system, information display device, electronic pen, control method, and program
US20170336962A1 (en) Gesture response method and device
WO2017032180A1 (en) Method and device for shifting angle of image captured by electronic terminal
EP3789849A1 (en) Contactless gesture control method, apparatus and storage medium
JP6062519B1 (en) Electronic device and method of operating electronic device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220322

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220523

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220920

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230213

R150 Certificate of patent or registration of utility model

Ref document number: 7228366

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150