CN113961061A - 显示装置、控制方法、存储介质以及信息处理装置 - Google Patents

显示装置、控制方法、存储介质以及信息处理装置 Download PDF

Info

Publication number
CN113961061A
CN113961061A CN202110793703.4A CN202110793703A CN113961061A CN 113961061 A CN113961061 A CN 113961061A CN 202110793703 A CN202110793703 A CN 202110793703A CN 113961061 A CN113961061 A CN 113961061A
Authority
CN
China
Prior art keywords
display device
control unit
recognition
display
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110793703.4A
Other languages
English (en)
Inventor
大岛仁敬
藤冈进
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Publication of CN113961061A publication Critical patent/CN113961061A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3215Monitoring of peripheral devices
    • G06F1/3218Monitoring of peripheral devices of display devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/263Arrangements for using multiple switchable power supplies, e.g. battery and AC
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3212Monitoring battery levels, e.g. power saving mode being initiated when battery voltage goes below a certain level
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • G06F1/325Power saving in peripheral device
    • G06F1/3265Power saving in display device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233Character input methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G06V10/443Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/142Image acquisition using hand-held instruments; Constructional details of the instruments
    • G06V30/1423Image acquisition using hand-held instruments; Constructional details of the instruments the instrument generating sequences of position coordinates corresponding to handwriting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • G06V30/333Preprocessing; Feature extraction
    • G06V30/347Sampling; Contour coding; Stroke extraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • G06V30/36Matching; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

本发明旨在提供能够按照电源状态控制识别处理执行的显示装置、控制方法、存储介质以及信息处理装置。显示装置具备用于接受由输入部输入的手写数据的受理部、用于执行所述手写数据的识别处理的识别部、以及用于按照所述显示装置的电源状态来控制所述识别处理的频率的控制部。

Description

显示装置、控制方法、存储介质以及信息处理装置
技术领域
本发明涉及显示装置、控制方法、存储介质以及信息处理装置。
背景技术
众所周知,显示装置可以利用手写识别技术,将手写数据转换成文字等字符,显示在显示器上。显示装置除了可用于会议等之外,还可用于数字标牌或广告牌等。显示装置可以通过电池动作,在室外的应用也值得期待。
目前有提出降低各种装置耗电量的技术方案,如参见专利文献1(JP特开2010-134876号公报)。专利文献1公开了一种信息处理装置,该装置自动测量并保存各作业功能的耗电量,当判断电池剩余电量不多时,使用存储的耗电量表来控制系统的动作。
但在现有技术中存在不管电源状态如何都要进行手写数据识别处理的问题。由于一直要进行识别处理,因此容易发生下述情况:
·需要大容量电池
·电池工作时间缩短
·电池一边充电一边使用会增加充电时间。
发明内容
本发明鉴于上述问题,旨在提供一种能够按照电源状态控制识别处理执行的显示装置。
为了解决上述问题,本发明提出一种显示装置,其特征在于,具备受理部,用于接受由输入部输入的手写数据;识别部,用于执行所述手写数据的识别处理;以及控制部,用于按照所述显示装置的电源状态,控制所述识别处理的频率。
本发明的效果在于提供按照电源状态控制识别处理执行的显示装置。
附图说明
图1是显示装置的一例电源状态示意图。
图2是显示装置按照电源状态控制的识别处理的频率的示意图。
图3是笔的斜视图。
图4是显示装置的一例整体结构示意图。
图5是显示装置的一例硬件结构示意图。
图6是图5中与电源有关的模块的硬件结构示意图。
图7是显示装置的一例功能结构模块图。
图8是一例操作指南和操作指南所显示的可选候补的示意图。
图9是显示装置显示字符串候补的一例处理时序图(之一)。
图10是显示装置显示字符串候补的一例处理时序图(之二)。
图11是显示装置显示字符串候补的一例处理时序图(之三)。
图12是显示装置显示字符串候补的一例处理时序图(之四)。
图13是显示装置显示字符串候补的一例处理时序图(之五)。
图14是显示装置显示字符串候补的一例处理时序图(之六)。
图15是手写识别控制部识别字符处理的示意图。
图16是一例频率控制表。
图17是识别一个字符中一部分时的处理示意图。
图18是显示装置按照电源状态控制识别处理频率的一例流程图。
图19是显示装置收到紧急信息时控制识别处理频率的一例流程图。
图20是电源状态得到改善时显示装置进行统一识别的一例处理流程图。
图21是手写输入保存部中保存的保存数据的示意图。
图22是显示装置的显示器上显示的一例电源状态的示意图。
图23是显示装置的其他构成示意图。
图24是显示装置的其他构成示意图。
图25是显示装置的其他构成示意图。
图26是显示装置的其他构成示意图。
具体实施方式
以下,参考附图举例说明显示装置和显示装置的控制方法。
<实施例1>
概述按照电源状态执行识别处理控制
首先说明执行手写数据的识别处理会加大电力消耗的理由。当显示装置执行识别手写数据的识别处理后,由于以下处理,CPU和RAM(SSD:Solid State Drive,HDD:HardDisk Drive)的耗电量增大。
CPU:字符的匹配处理、变换候补的检索处理
RAM(SSD、HDD):对匹配和变换候补的数据库的访问
另外,当显示屏采用电子纸时,电子纸的画面改写会消耗电力。电子纸如果不发生改写,耗电量就会减少。这与液晶显示器和有机EL显示器等有所不同。
电子纸:变换候补和菜单的显示,从手写数据到字符的显示改写
由于这些原因导致耗电量增大时,可能会发生以下问题。
·需要大容量电源/电池
·电池的驱动时间缩短
·电池的充电时间延长
如果不缺少交流电源,处于可以使用状态,则问题较少,但在室外等使用时,电池驱动时间越长越好。而且即便是在室内使用,通常也要求减少耗电量。例如,由于发生灾害等造成电力供给受到限制时,即使室内使用显示装置,耗电量越少越好。总之,需要电池工作时和充电时降低耗电量、延长驱动时间、缩短充电时间。
接着,参考图1、图2,说明按照电源状态控制识别处理频率。图1是显示装置的一例电源状态的示意图。显示装置例如具有电池动作状态A、电池充电状态B以及交流电源动作状态C三种电源状态。
·电池工作状态A:未连接电源线,仅靠电池工作的状态。
·电池充电状态B:虽然连接了电源线,但由于电池未充满电,因此交流电源被分配给显示装置的处理及充电的状态。
·交流电源动作状态C—与电源线连接,电池充满电或剩余电量为阈值以上(例如90%以上),因此电力不用于充电,交流电源全部用于显示装置的处理。
如图1所示,各电源状态在以下的转移条件下进行转移。
1."电池工作状态A"→"电池充电状态B"
连接电源线
2."电池充电状态B"→"交流电源工作状态C"
完成满充电
3."交流电源工作状态C"→"电池工作状态A"
电源线断开
4."交流电源工作状态C"→"电池充电状态B"
自然放电
5."电池充电状态B"→"电池工作状态A"
电源线断开
另外,也可以从"电池工作状态A"转移到"交流电源工作状态C"。在这种情况下,并不一定是根据电池状态自动对电池进行充电。
图2是显示装置根据电源状态控制的识别处理的频率的示意图。在本实施方式中,识别处理的频率由三个字符识别模式控制。因此,识别处理的频率分三阶段控制。
A.电池工作状态
显示装置将字符识别模式设定为统一模式。只要没有诸如按动图标时等的用户指示,显示装置就不执行识别处理。
B.电池充电状态
显示装置将字符识别模式设定为实时(低)模式。显示装置以低频率执行识别处理,比如每隔10个笔划数据等。
C.交流电源工作状态
显示装置将字符识别模式设定为实时(高)模式。显示装置以高频率进行识别处理,比如每隔一个笔划数据等。
通过根据电源状态控制(降低)执行识别处理的频率,可以降低耗电量,延长电池的驱动时间,缩短充电时间。
用语
输入装置只要是能够在触摸屏上指定坐标并可以手写的装置即可。如有笔、人的手指或手、棒状部件等。用户在显示器上按压输入装置后持续移动,然后从显示器上松开的一系列操作称为笔划。笔划数据是指基于由输入装置输入的坐标的轨迹在显示器上显示的信息。可以适当地对笔划数据进行插值。通过笔划手写的数据称为笔划数据。手写数据具有一个或多个笔划数据。基于笔划数据显示在显示器上的显示物称为对象。
字符识别是指将手写数据转换为字符代码。除了日语,还可以转换为英语等多种语言。另外,也可以变换为数字、记号(%、$、&等)、图形(线、圆、三角等)等。
电源状态是指供给显示装置的电力状态。本实施方式中例举了电池动作状态A、电池充电状态B及交流电源动作状态C的三种电源状态,但也会有除此之外的其他电源状态。例如,可以根据剩余电量将电池工作状态A进一步划分为多个电源状态,根据剩余电量将电池充电状态B进一步划分为多个电源状态。此时,显示装置2的剩余电量越少,识别处理的频率越小。
笔的外观
图3是一例笔2500的斜视图。图3显示一例多功能笔2500。内置电源且可以向显示装置2发送指令的笔2500被称为主动笔(非内置电源的笔称为被动笔)。图3的笔2500中,笔尖和笔尾各有一个物理开关,笔侧面有两个物理开关,笔尖用于记录,笔尾用于删除,笔侧面用于分配用户功能。本实施方式的笔2500具有非易失性存储器,存储与其它笔不重复的笔ID。
如果是带开关的笔,还可以减少用户对显示装置2的操作步骤。带开关的笔主要指的是主动笔,但在电磁感应方式中,即使是没有内置电源的被动笔也可以只通过LC电路产生电力,因此不仅主动笔,还包括电磁感应方式的被动笔。具有电磁感应方式以外的光学方式、红外线方式以及静电容量方式的开关的笔均为主动笔。
笔2500的硬件构成与具备通信功能和微控制器的一般控制方式相同。笔2500的坐标输入方式有电磁感应方式、有源静电结合方式等。另外,笔2500还可以具有笔压检测、倾斜检测、悬停功能(在落笔之前显示光标)等功能。
装置整体构成
以下用图4说明本实施方式涉及的显示装置2的整体结构。图4是显示装置2的整体构成示意图,其中(a)显示了被用作为显示装置2的悬挂在墙壁上的横长形电子黑板,作为一个显示装置2的示例。
如图4的(a)所示,在显示装置2的上部设有作为一个示例的显示器220。用户U可以用笔2500在显示器220上手写(也称为输入、描绘)文字等。
图4的(b)显示悬挂在墙壁上被作为纵长形电子黑板使用的显示装置2。显示装置2具有加速度传感器,能够从重力方向检测设置方向。这样,无论那个设置方向,均可进行文字识别。
图4的(c)显示平放在桌子230上的显示装置2。由于显示装置2的厚度为1cm左右,因此即使平放在普通桌子上也不需要调整桌子的高度。而且便于移动。
装置的硬件构成
接着用图5说明显示装置2的硬件构成。如图所示,显示装置2具有信息处理装置或计算机的构成。图5是显示装置2的一例硬件构成的示意图。如图5所示,显示装置2具备CPU(Central Processing Unit)201、ROM(Read Only Memory)202、RAM(Random AccessMemory)203、以及SSD(Solid State Drive)204。
其中,CPU201控制整个显示装置2的动作。ROM202中保存用于驱动CPU201、IPL(Initial Program Loader)等CPU201的程序。RAM203被用作CPU201的工作区。SSD204中保存显示装置2用的程序等各种数据。另外,显示装置2可以从程序发送服务器下载程序,也可以用存储介质安装程序。这个程序有时被称为应用软件。
显示装置2具备显示控制器213、触摸传感控制器215、触摸传感器216、显示器220、电源开关227、倾斜传感器217、串行接口218、扬声器219、麦克风221、无线通信装置222、红外线I/F223、电源控制电路224、电池控制电路228、AC适配器225、以及电池226。
显示控制器213为了将输出图像输出到显示器220等而进行画面显示的控制及管理。触摸传感器216检测笔2500或用户的手等(笔或用户的手作为输入装置)接触显示器220上。触摸传感器216接收笔ID。
触摸传感控制器215控制触摸传感器216的处理。触摸传感器216进行坐标的输入及坐标的检测。关于该坐标的输入及坐标的检测的方法,例如,在光学方式的情况下,设于显示器220的上侧两端的两个受光发光装置平行于显示器220,放射多条红外线,受到设置在显示器220周围的反射部件反射,受光元件接受通过与放射的光的光路相同的光路返回的光。触摸传感器216将受到物体遮挡的两个受光发光装置发射的红外线位置信息输出到触摸传感控制器215,触摸传感控制器215确定物体的接触位置,即坐标位置。触摸传感控制器215具有通信单元215a,能够与笔2500无线通信。例如,在用蓝牙(注册商标)等规格进行通信时,可以使用市售的笔。如果在通信单元215a中预先登记一个以上的笔2500,则用户即使不进行笔2500与显示装置2通信的连接设定也能够进行通信。
电源开关227是用于切换显示装置2的电源的ON/OFF的开关。倾斜传感器217是检测显示装置2的倾斜角度的传感器,主要用于检测显示装置2是否在图4的(a)至(c)中的任一设置状态,可根据设置状态自动变更文字等的粗细。
串行接口218是USB等外部通信接口。用于从外部输入信息等。扬声器219用于音频输出,麦克风221用于音频输入。无线通信装置222与用户所携带的终端进行通信,例如中继与互联网的连接。无线通信装置222利用Wi-Fi或蓝牙(注册商标)等进行通信,通信规格没有限制。无线通信装置222形成接入点,在用户携带的终端上设定用户获得的SSID(ServiceSet Identifier,服务集标识符)和密码后,即可连接到接入点。
无线通信装置222可以准备两个接入点。
a.接入点→互联网
b.接入点→公司内网→互联网
a的接入点供公司外部的用户使用,用户虽然不能访问公司内网,但是可以利用互联网。b的接入点供公司内部用户专用,用户可以利用公司内部网络及互联网。
红外线I/F223检测设置在临近的显示装置2。利用红外线的直线性,仅能检测到设于临近的显示装置2。优选红外线I/F223在各边各设置一个,能够检测到被设于显示装置2的任意一个方向上其他显示装置2。由此可以扩大画面,在相邻显示装置2上显示之前手写的手写信息(把一个显示器220的宽度作为1页,其他页的手写信息)等。
电源控制电路224将来自显示装置2的电源,即AC适配器225或电池226的电力,供给CPU等。电池控制电路228控制显示装置2的电源即电池226的充电。AC适配器225将商用电源所提供的交流转换为直流。详细内容参见图6说明。
在显示器220为所谓的电子纸的情况下,维持图像的显示几乎不消耗电力或完全不消耗电力,因此也可以由电池226驱动。这样,即使在室外等难以连接电源的场所,也可以在数字标牌等用途中使用显示装置2。
进而,显示装置2具备总线210。总线210是用于电连接图5所示的CPU201等各构成要素的地址总线和数据总线等。
触摸传感器216不限于光学方式,也可以使用通过检测静电容量的变化来确定接触位置的静电容量方式的触摸面板、通过对置的2个电阻膜的电压变化来确定接触位置的电阻膜方式的触摸面板、检测通过接触物体接触显示部而产生的电磁感应来确定接触位置的电磁感应方式的触摸面板等各种检测手段。触摸传感器216可以是不需要用于检测笔尖有无触摸的电子笔的方式。这种情况下,进行触摸操作可以使用指尖或笔型棒。笔2500不必是细长笔型。
电源的硬件
为了说明本实施例,图6是图5中与电源相关的硬件的结构模块图。图6中的实线表示电力流动,虚线表示信息的流动。
AC适配器225和电池226分别连接电源控制电路224和电池控制电路228。电源控制电路224向显示器220和CPU201提供来自AC适配器225的电力。图6所示的硬件结构仅仅是图5的硬件模块中具有代表性的硬件模块,其他硬件模块也获得供电。
电池控制电路228根据电池的SOC(State of Charge)向电池226供给来自AC适配器225的电力。电源控制电路224在未连接AC适配器225的情况下,向显示器220和CPU201提供来自电池226的电力。
CPU201从电源控制电路224及电池控制电路228接收以下信息。
电源控制电路224:正在使用的电源的种类(是AC适配器还是电池)
电池控制部33:电池信息(电池剩余电量、是否正在充电、充电电流等)
CPU201通过取得这些信息能够判断电源状态,能够根据电源状态控制手写数据识别处理频率。
装置的功能
接下来,参考图7说明显示装置2具有的功能。图7是显示装置2的一例功能结构模块图。显示装置2具备手写输入部21、显示部22、手写输入显示控制部23、候补显示计时器控制部24、手写输入保存部25、手写识别控制部26、手写识别字典部27、字符串变换控制部28、字符串变换字典部29、预测变换控制部30、预测变换字典部31、电池控制部33、电源控制部34、以及紧急信息接收部35。显示装置2所具有的各项功能通过图5所示的各构成要素中的任一个要素,根据从SSD204展开到RAM203上的程序,按照来自CPU201的指令执行动作而实现。
手写输入部21通过触摸传感器216等实现,接受用户的手写输入。手写输入部21将用户的笔输入变换成附带笔ID的笔操作数据(笔上升、笔下降、或笔坐标数据),发送到手写输入显示控制部23。笔坐标数据被作为离散值定期发送,离散值间的坐标插值计算。
显示部22通过显示器220等实现,显示手写的笔划数据、识别后的字符串、以及操作菜单等。显示部22将手写输入显示控制部23写入视频存储器的描绘数据转换成与显示器220的特性相应的数据,并送往显示器220。
手写输入显示控制部23对手写输入和显示进行整体控制。手写输入显示控制部23处理来自手写输入部21的笔操作数据,发送到显示部22进行显示。关于笔操作数据的处理及笔划数据的显示,详细内容将在以下的图9~图14进行说明。
候补显示计时器控制部24是可选择候补的显示控制计时器。开始或停止计时器计时,生成可选择候补的开始显示时刻和消去显示时刻。可选择候补是指在后述的操作指南中可选择地显示的手写识别字符串候补、语言字符串候补、变换字符串候补、字符串/预测变换的候补、以及操作指令的候补。候补显示计时器控制部24从手写输入显示控制部23接收计时器开始计时请求(也有计时器停止计时请求的情况),将到达时限事件发送到手写输入显示控制部23。
手写输入保存部25具有保存用户数据(手写数据/识别后的字符串)的存储功能。手写输入保存部25从手写输入显示控制部23接收用户数据,保存到手写输入保存部25中,从手写输入显示控制部23接收取得请求,发送保存在手写输入保存部25中的用户数据。
手写识别控制部26是进行在线手写识别(手写数据的识别处理)的识别引擎。与普通的OCR(Optical Character Reader)不同,在用户操作笔的同时还能识别文字(不仅日语,还有英语等多种语言)、数字、符号(%、$、&等)、图形(线、圆、三角等)等。关于识别方法,虽然设计了各种各样的算法,但是在本实施方式中可以利用公知的技术,所以省略了详细内容。
手写识别控制部26从手写输入显示控制部23接收笔操作数据,执行手写识别并保持手写识别字符串候补。手写识别控制部26还保存用手写识别字典部27从手写识别字符串候补经过变换的语言字符串候补。当另外从手写输入显示控制部23收到取得请求时,手写识别控制部26将保持的手写识别字符串候补以及语言字符串候补发送到手写输入显示控制部23。
手写识别字典部27是手写识别的语言变换用的字典数据。手写识别字典部27从手写识别控制部26接收手写识别字符串候补,变换成在语言上可靠的语言字符串候补后发送到手写识别控制部26。例如如果是日语,则将平假名转换为汉字或片假名。
字符串变换控制部28控制从变换字符串候补变换为字符串。变换字符串是包含手写识别字符串候补或语言字符串候补生成可能性高的字符串。字符串变换控制部28从手写识别控制部26接收手写识别字符串候补及语言字符串候补,而后用字符串变换字典部29变换成变换字符串候补后保存。在另外从手写输入显示控制部23收到取得请求时,将保持的变换字符串候补发送到手写输入显示控制部23。
字符串变换字典部29是字符串变换用的字典数据。字符串变换字典部29从字符串变换控制部28接收手写识别字符串候补和语言字符串候补,将变换字符串候补发送到字符串变换控制部28。
预测变换控制部30从手写识别控制部26接收手写识别字符串及语言字符串候补,从字符串变换控制部28接收变换字符串候补。预测变换控制部30用预测变换字典部31分别变换成预测字符串候补。预测字符串候补是指包含手写识别字符串候补、语言字符串候补或变换字符串候补生成可能性高的字符串。在另外从手写输入显示控制部23收到取得请求时,将预测字符串候补发送到手写输入显示控制部23。
预测变换字典部31是预测变换用的字典数据。预测变换字典部31从预测变换控制部30接收手写识别字符串候补、语言字符串候补以及变换字符串候补,将预测字符串候补发送到预测变换控制部30。
电池控制部33向电源控制部34发送电池信息(电池剩余电量、是否正在充电、充电电流等)。电源控制部34根据显示装置2消费的电源的种类(AC适配器或电池)和电池信息,判断电源状态,发送到手写输入显示控制部23。
·AC适配器225未连接…电池工作状态A
·连接AC适配器225+电池剩余电量为0~99%正在充电…电池充电状态B
·连接AC适配器225+电池剩余电量为100%未充电…交流电源动作状态C
手写输入显示控制部23根据从电源控制部34收到的电源状态,判断执行识别处理的频率(字符识别模式)。
紧急信息接收部35从例如经由网络通信的服务器接收紧急信息(要求削减灾害和停电等耗电量的信息)。收到时,紧急信息接收部35通知手写输入显示控制部23,表示要降低识别处理频率。例如,切换到统一模式,如果没有用户的指示,就不执行识别处理。
电源状态(字符识别模式)和动作的功能模块之间的关系
以下说明图7的功能模块与字符识别模式之间的对应关系。图7中用虚线包围的功能模块与字符识别模式无关,始终保持运作。
A.电池工作状态(统一模式)
手写输入部21、显示部22、手写输入显示控制部23、候补显示计时器控制部24、手写输入保存部25、电池控制部33、以及电源控制部34动作。由于手写识别控制部26、手写识别字典部27、字符串变换控制部28、字符串变换字典部29、预测变换控制部30、预测变换字典部31不动作,因此可延长驱动时间。
B.电池充电状态A
除了A的功能模块以外,其余的功能模块也动作。不过,动作频率低于交流电源工作状态C。这样,可以缩短充电时间。
C.交流电源动作状态
除了A的功能模块以外,其余的功能块也不受限制地高频率动作。这样,能够缩短识别处理的响应。
可选择候补的显示示例
接着,参考图8说明变换手写数据时显示的操作指南500。图8显示操作指南500和操作指南500显示的一例可选择候补530。用户手写手写数据504后,操作指南500便显示出来。操作指南500具有操作标题520、操作指令的候补510、手写识别字符串候补506、变换字符串候补507、字符串/预测变换的候补508、以及手写数据矩形区域显示503。可选择候补530是操作指令的候补510、手写识别字符串候补506、变换字符串候补507、字符串/预测变换的候补508。除去操作指令的候补510的可选择候补530被称为字符串候补539。
操作头520具有按钮501、509、502、505。按钮501接受预测变换和假名变换的切换操作。在图8的示例中,当用户按动"预测"按钮501后,显示部22将显示更改为"假名"按钮501。更改后,字符串候补539按照"假名变换"的概率降序排列。
按钮502是用于候补显示的页面操作的按钮。图8的例子中候补显示页有3页,现在显示第1页。按钮505接受操作指南500的消去。当用户按动按钮505后,显示部消去手写数据以外的显示。按钮509接受统一显示消去。当用户按动按钮509后,显示部22消去包括手写数据在内的图8所示的所有显示,使用户可以从最初开始重新手写。
手写数据504是用户手写的日语平假名"ぎ"字。显示包围手写数据504的手写数据矩形区域显示503。虽然图8中输入一个字符后显示操作指南500,但是操作指南500的显示时机是用户中断手写的时机。因此,手写数据504的字符个数是任意的。
在手写识别字符串候补506、变换字符串候补507、字符串/预测变换的候补508中,各自的字符串候补按照概率降序排列。手写识别字符串候补506的"ぎ"是识别结果的候补。本例中正确识别了"ぎ"。
变换字符串候补507是从"ぎ"的假名汉字变换结果(例如"技")变换而来的变换字符串候补(例如包含技的惯用句)。该例中的"技量試"是"技术量产試作"的简称。字符串/预测变换的候补508是从变换字符串候补507变换而来的预测字符串候补。本例中显示了"技量試を决裁"和"議事錄の送信先"。
操作指令的候补510是根据识别出来的字符显示的预先定义的操作指令(文件操作、字符编辑等指令)的候补。图8的例子中显示了行首文字的"》"511是操作指令的候补。图8中作为"ぎ"字符串候补的"議事錄"与操作指令的定义数据部分一致,因此被作为操作指令的候补510来显示。
用户选择"读取議事錄模板"后,执行由定义数据定义的操作指令。这样,由于是在找到包含变换后的字符串的操作指令定义数据的情况下显示操作指令的候补,所以并不一定总是被显示出来。
本实施方式中省略了操作指令的显示处理,但由于显示装置2具有操作指令用的字典,因此可以如图8所示进行显示。
识别处理的动作步骤
使用上述构成和图9~图14说明显示装置2识别手写数据的处理。图9~图14是显示装置2显示字符串候补的处理的一例时序图。图9的处理在显示装置2启动后(应用程序启动后)开始。图9~图14说明交流电源动作状态C的识别处理。图9~图14由于显示场所的关系,用符号表示图7的各项功能。
S1:首先,手写输入显示控制部23将手写数据开始发送到手写输入保存部25。手写输入保存部25确保手写数据区域(保存手写数据的存储器区域)。也可以在用户在手写输入部21上落笔后再确保手写数据区域。
S2:接下来,用户在手写输入部21上落笔。手写输入部21检测到落笔后发送到手写输入显示控制部23。
S3:手写输入显示控制部23向手写输入保存部25发送笔划开始,手写输入保存部25确保笔划区域。
S4:当用户以笔接触手写输入部21的状态实施移动,手写输入部21将笔坐标发送到手写输入显示控制部23。
S5:手写输入显示控制部23将笔坐标插值显示数据(对离散的笔坐标的数据进行插值)发送到显示部22。显示部22用笔坐标插值显示数据对笔坐标进行插值来显示线。
S6:手写输入显示控制部23将笔坐标及其接收时刻发送到手写输入保存部25。手写输入保存部25将笔坐标加入到笔划数据中。在用户移动笔的期间,手写输入部21定期地反复向手写输入显示控制部23发送笔坐标,因此反复进行步骤S4~S6的处理,直至笔被抬起。
S7:当用户将离开手写输入部21后,手写输入部21将抬笔发送到手写输入显示控制部23。
S8:手写输入显示控制部23向手写输入保存部25发送笔划结束,手写输入保存部25确定笔划数据的笔坐标。由于笔划数据的笔坐标的确定,以后不能在笔划数据中追加笔坐标。
S9:接着,手写输入显示控制部23基于已经手写的手写数据附近的矩形区域(外接矩形),将取得手写数据附近的矩形区域与笔划矩形区域的重叠状况发送到手写输入保存部25。手写输入保存部25计算重叠状况,将重叠状况发送到手写输入显示控制部23。
接着,在手写数据附近矩形区域和笔划矩形区域不重叠的情况下执行步骤S10~S15。
S10:如果手写数据附近矩形区域和笔划矩形区域不重叠,则由于确定一个手写数据,手写输入显示控制部23将清除保持数据发送到手写识别控制部26。
S11、S12:手写识别控制部26将清除保持数据分别发送到字符串变换控制部28、预测变换控制部30。清除与手写识别控制部26、字符串变换控制部28、预测变换控制部30到目前为止所保持的字符串候补和操作指令的候补相关的数据。另外,清除时最后手写的笔划数据没有追加到手写数据。
S13:手写输入显示控制部23将手写数据结束发送到手写输入保存部25。手写输入保存部25确定手写数据。手写数据的确定是指一个手写数据完成(不再追加笔划形成数据)。
S14:手写输入显示控制部23将手写数据开始发送到手写输入保存部25。为了准备下一手写数据的手写开始(落笔),手写输入保存部25确保新的手写数据区域。
S15:接着手写输入显示控制部23向手写输入保存部25发送关于在步骤S8结束的笔划数据的追加笔划。执行步骤S10~S15时,被追加的笔划数据是手写数据的最初的笔划数据,手写输入保存部25在已开始的手写数据中追加笔划数据。而没有执行步骤S10~S15时,被追加的笔划数据已经被追加到正在手写的手写数据中。
S16:接着手写输入显示控制部23将笔划追加发送到手写识别控制部26。手写识别控制部26在保存字符串候补的笔划数据保持区域(暂时保存笔划数据的区域)中追加笔划数据。
S17:接下来,手写识别控制部26对笔划数据执行手写识别。这样,在交流电源动作状态C中,每隔一个笔划数据就执行识别处理。
S18:手写识别控制部26将识别处理的执行结果之一的手写识别字符串候补发送到手写识别字典部27。手写识别字典部27将语言上基本准确的语言字符串候补发送到手写识别控制部26。
S19:手写识别控制部26将手写识别字符串候补以及收到的语言字符串候补发送到字符串变换控制部28。
S20:字符串变换控制部28将手写识别字符串候补及语言字符串候补发送到字符串变换字典部29。字符串变换字典部29将变换字符串候补发送到字符串变换控制部28。
S21:字符串变换控制部28将收到的变换字符串候补发送到预测变换控制部30。
S22:预测变换控制部30将收到的变换字符串候补发送到预测变换字典部31。预测变换字典部31将预测字符串候补发送到预测变换控制部30。
S23:手写识别控制部26将手写识别字符串候补及语言字符串候补发送到预测变换控制部30。
S24:预测变换控制部30将手写识别字符串候补以及收到的语言字符串候补发送到预测变换字典部31。预测变换字典部31将预测字符串候补发送到预测变换控制部30。
以上描述了如何从一个笔划数据制作预测字符串候补都。每当笔划数据增加时,显示装置2就会反复进行相同的处理。因此,存在耗电量增大的趋势。
手写识别控制部26、字符串变换控制部28、以及预测变换控制部30分别保持与手写识别字符串候补、语言字符串候补、变换字符串候补、及预测字符串候补有关的数据,以使手写输入显示控制部23能够在后段的步骤S29~S31中取得这些数据。
S16-2:手写输入显示控制部23在步骤S16将笔划追加发送到手写识别控制部26之后,立刻将可选择候补显示计时器开始计时发送到候补显示计时器控制部24。候补显示计时器控制部24开始该可选择候补显示计时器。
接着,在经过一定时间之前(计时器超时之前)发生落笔时执行步骤S25~S27。即,步骤S25~S27是在用户连续手写的情况下执行的。
S25:如果可选择候补显示计时器计时到时限之前用户在手写输入部21上落笔,手写输入部21将落笔(与步骤S2相同的事件)发送到手写输入显示控制部23。
S26:手写输入显示控制部23将笔划开始(与步骤S3相同)发送到手写输入保存部25。此后的顺序与步骤S3之后相同。
S27:进一步手写输入显示控制部23将可选择候补显示计时器停止计时发送到候补显示计时器控制部24。候补显示计时器控制部24让可选择候补显示计时器停止计数。因为检测到落笔,所以不再需要可选择候补显示计时器。
在经过一定时间之前(在可选择候补显示计时器计时达到时限之前)没有发生落笔时,执行步骤S28~S53。因此,显示图8所示的操作指南500。
S28:在可选择候补显示计时器开始计时过程中用户没有在手写输入部21上落笔的情况下,候补显示计时器控制部24向手写输入显示控制部23发送达到时限。
S29:手写输入显示控制部23将手写识别字符串候补和语言字符串候补的取得发送到手写识别控制部26。手写识别控制部26将保存的手写识别字符串候补和语言字符串候补发送到手写输入显示控制部23。
S30:手写输入显示控制部23将变换字符串候补的取得发送到字符串变换控制部28。字符串变换控制部28将当前保持的变换字符串候补发送到手写输入显示控制部23。
S31:手写输入显示控制部23将取得预测字符串候补发送到预测变换控制部30。预测变换控制部30将当前保持的预测字符串候补发送到手写输入显示控制部23。
S32:进而,手写输入显示控制部23将取得推定书写方向发送到手写输入保存部25。手写输入保存部25根据手写数据矩形区域的水平距离和垂直距离进行判断,将推定书写方向(纵向书写、横向书写)发送到手写输入显示控制部23。
S33:手写输入显示控制部23从这些手写识别字符串候补(图8中的"ぎ")、语言字符串候补(图8中没有显示,不过如"議"、"技")、变换字符串候补(图8中的"議事錄"、"技量試")、预测字符串候补(图8中的"技量试を决裁"、"議事錄の送信先")、操作指令候补(图8中的"读取議事錄摸板"、"保存到議事錄文件夹中")、各选择概率、以及推定书写方向,生成图8所示的可选择候补显示数据。手写输入显示控制部23通过将可选择候补显示数据发送到显示部22进行显示。
S34:手写输入显示控制部23通过向显示部22发送手写数据的矩形区域显示数据(矩形框)(图8中手写数据矩形区域显示503),使其显示。
S35:手写输入显示控制部23为了将可选择候补显示数据从显示起经过一定时间后消去,将可选择候补消去计时器开始计时发送到候补显示计时器控制部24。候补显示计时器控制部24开始该可选择候补消去计时器。
在可选择候补消除计时器计时过程中用户消去了显示部22上显示的可选择候补显示,或者手写数据发生变化的情况下(即手写数据的笔划数据发生追加、删除、移动、变形或分割时),或者计时到时间之前没有选择候补时执行步骤S36~S40。
进而,在候选显示被消去时,执行步骤S36至S37。
S36:手写输入部21将消去可选择候补发送到手写输入显示控制部23。
S37:手写输入显示控制部23发送可选择候补消去计时器停止计时。候补显示计时器控制部24停止可选择候补消去计时器计时。这是因为由于用户消去,所以不再需要可选择候补消去计时器。
S39:手写输入显示控制部23通过向显示部22发送消去可选择候补显示数据,显示被消去。
S40:手写输入显示控制部23通过向显示部22发送消去手写数据的矩形区域显示数据,从而显示被消去。因此,手写数据维持原来的显示。
S38:另一方面,在可选择候补消去计时器开始计时过程中,当没有发生可选择候补消去时(用户没有进行笔操作时),候补显示计时器控制部24向手写输入显示控制部23发送计时到时限。
可选择候补消去计时器计时到时限之后也同样,手写输入显示控制部23执行步骤S39和S40。这是因为可以在经过一定时间后可以消去可选择候补显示数据、手写数据的矩形区域显示数据。
在可选择候补消去计时器开始计时过程中用户选择了可选择候补的情况下,执行步骤S41~S53。
S41:在可选择候补消去计时器开始计时过程中用户选择了可选择候补的情况下,手写输入部21将字符串候补或操作指令的候补选择发送到手写输入显示控制部23。
S42:手写输入显示控制部23将可选择候补消去计时器停止计时发送到候补显示计时器控制部24。候补显示计时器控制部24停止该可选择候补消去计时器计时。
S43:接着手写输入显示控制部23将清除保持数据发送到手写识别控制部26。
S44:手写识别控制部26将清除保持数据发送到字符串变换控制部28。
S45:手写识别控制部26将清除保持数据发送到预测变换控制部30。
手写识别控制部26、字符串变换控制部28、以及预测变换控制部30清除此前保持的与字符串候补有关的数据。
S46:接着手写输入显示控制部23通过将消去可选择候补显示数据发送到显示部22,使得显示消去。
S47:手写输入显示控制部23通过将消去手写数据的矩形区域显示数据发送到显示部22,用以消去显示。
S48:手写输入显示控制部23通过将消去手写数据显示数据以及消去在步骤S5发送的笔坐标插值显示数据发送到显示部22,使显示消去。由于选择了字符串候补或操作指令的候补,所以不再需要手写数据等。
S49:手写输入显示控制部23将删除手写数据发送到手写输入保存部25。因为显示识别结果,所以不需要手写笔划数据。
S50:字符串候补受到选择时,手写输入显示控制部23将通过识别得到的(用户选择的)字符串的追加发送到手写输入保存部25。
S51:进而手写输入显示控制部23将取得字符串数据字体发送到手写输入保存部25。手写输入保存部25从手写数据的推定字符大小中选择已定义字体,发送到手写输入显示控制部23。
S52:接着手写输入显示控制部23使用从手写输入保存部25收到的已定义字体,将显示在与手写数据相同位置的字符串数据显示数据发送到显示部22,进行显示。
S53:为了下一个手写数据,手写输入显示控制部23将开始手写数据发送到手写输入保存部25。手写输入保存部25确保手写数据区域。此后,重复步骤S2~S53的处理。
关于识别处理
接着,参考图15概述识别处理。图15是手写识别控制部26识别文字处理的示意图。图15中说明如何识别"木"这个文字。
(1)用户手写"木"的第一笔划的笔划数据。笔划写识别控制部26将第一笔划的笔划数据与预先定义了形状的基本笔划进行模式匹配。模式匹配是指,在检索数据时特定模式是否出现或出现在何处的确定方法,或者根据信息特征,将手写文字、图形、声音等与预先登记的多个标准模式进行比较识别。也称为模式识别。
基本笔划是将包含平假名、片假名、汉字、数字、字母、图形的笔划数据一个一个地取出,经过某种程度上抽象化、通用化的笔划。换言之,所有的字符等均通过基本笔划合成而形成。基本笔划被识别为日语、英语、图形、或者数字中的某个基本笔划。
(2)手写识别控制部26对第一笔划的笔划数据和所有基本笔划数据进行模式匹配,求出用各自得基本笔划表示相似程度的准确度。越是形状相似的基本笔划,准确度越高。
(3)接着,手写识别控制部26用准确度高的上位N个基本笔划检索基本形状字典301~304。即,第一笔划完成,或者从基本形状字典301~304取得包含第一笔划的文字等。基本形状词典301~304分为日语用、英语用、图形用、数字用等,可以分别检索候补。例如,"一"(数字)、"-"(横线)等符合检索条件。
(4)手写识别控制部26对第二笔划也进行同样的处理。因此,求出第二笔划和各基本笔划的准确度。由于多个笔划数据相当于几个字符随着手写内容而不同,所以手写识别控制部26以空白划分一个字符来作识别,或者使用与多个字符对应的基本形状词典301~304。
(5)手写识别控制部26将第一笔划的上位N个基本笔划和第二笔划的上位N个基本笔划结合起来,生成N×N个字符。如果N为2,则生成2×2=4个字符。手写识别控制部26用这些字符检索基本形状字典301~304。即,以第一笔划和第二笔划完成的字符,还是从基本形状字典301~304取得包含第一笔划和第二笔划的字符等。例如,"十"、"ナ"等适于检索。
这样,手写识别控制部26能够对每一个笔划数据执行识别处理,当用户抬笔后可选择候补显示计时器到达时限(S28)时,能够立即显示字符串候补。
在各电源状态下识别处理的执行频率
如图9~图14的序列图所示,手写输入显示控制部23向手写识别控制部26追加笔划数据后,手写识别控制部26开始识别处理。因此,如果要控制识别处理的频率,只要控制手写输入显示控制部23向手写识别控制部26追加笔划数据的频率即可。为此,手写输入显示控制部23具有图16所示的频率控制表。
图16显示一例频率控制表。在频率控制表中,识别处理的频率与电源状态相对应。识别处理的频率用笔划数表示。例如,电池工作状态A与无限大的笔划数相对应。这表示如果没有如按动图标灯输入用户操作,识别处理就不会开始执行。另外,电池充电状态B对应"10条"笔划数。"1条"笔划数与"交流电源动作状态C"相对应。
手写输入显示控制部23对追加到手写输入保存部25的笔划数据的数量进行计数,同时参考频率控制表,将由频率控制表决定的规定数量(2以上)的笔划数据追加到手写输入保存部25中后,向手写识别控制部26请求识别处理。另外,"10条"只是一个例子,可以适当设定。用户也可以设定需要的笔划数。
手写识别控制部26例如对10条笔划数据进行识别处理。10条笔划数据对应多少个字符会根据手写内容而变化,但日语和英语的印刷体每一个字符就有空白,用以在每个字之间作区隔。如果是英文书写体,例如用单词来识别。
但是,手写识别控制部26即使没有到达10条笔划数据,也会根据可选择候补显示计时器计时的时限,进行笔划数据识别处理。这是因为当可选择候补显示计时器到达时限时,可以认为用户结束手写,希望显示字符串候补539。因此,在电池充电状态B下,当手写了"10条"的笔划数据时,或者可选择候补显示计时器计数到达时限时,手写输入显示控制部23请求手写识别控制部26执行识别处理。
手写识别控制部26对10条笔划数据中划分为1个字符的1个以上的笔划数据进行图15中说明的处理。在这种情况下,只要用1个字符的笔划数据组合生成的字符来检索基本形状字典301~304即可,而不需要对每个笔划数据进行基本形状字典301~304的检索。这意味着通过对10个笔划数据进行识别处理,能够降低耗电量。
在这种情况下,有时也会对一个字符中的一部分执行识别处理。例如,如图17所示,用户想要手写"語言の森",但在手写到"森"途中的状态下开始执行识别处理。此时,手写识别控制部26虽然识别为"語言の木",但由于用户继续手写,所以可选择候补显示计时器不会达到时限,因此不会显示"語言の木"。显示出来的是用户写完"語言の森"后,可选择候补显示计时器到达时限的情况。
按照电源状态控制识别处理的频率
图18是显示装置2按照电源状态控制识别处理频率的一例流程图。图18的处理在手写输入显示控制部23向手写输入保存部25通知笔划结束后(图10的S8)开始执行。
手写输入显示控制部23判断电源控制部34通知的电源状态是否为电池动作状态A(S101)。
当步骤S101的判断为"是"时,手写输入显示控制部23将字符识别模式设定为统一模式(S102)。因此,在有用户的指示之前,不把笔划数据通知给手写识别控制部26(不进行图11的S16)。
当步骤S101的判断为"否"时,手写输入显示控制部23判断是否是电池充电状态B(S103)。
当步骤S103的判断为"是"时,手写输入显示控制部23将字符识别模式设定为实时(低)模式(S104)。因此,手写输入显示控制部23对追加到手写输入保存部25中的笔划数据的数量进行计数,在达到频率控制表中对应实时(低)模式相的笔划数量之前,不把笔划数据通知给手写识别控制部26(不进行图11的S16)。
而当步骤S103的判断为"否"时,手写输入显示控制部23将字符识别模式设定为实时(高)模式(S105)。因此,手写输入显示控制部23对每个笔划数据向手写识别控制部26通知笔划数据(对每个笔划数据进行图11的S16)。
关于紧急时处理
接着,参见图19说明显示装置2收到紧急信息时的处理。图19是显示装置2收到紧急信息时控制识别处理频率的一例流程图。
紧急信息接收部35判断是否收到紧急信息(S201)。紧急信息是通知发生了应该降低显示装置2的电力消耗状况的信息。如果是室内,则是通知发生了与显示装置2相比应该优先其他装置供电的状况的信息。如果是在室外,则是通知出现了需要延长电池工作时间的情况的信息。
紧急信息是通知地震、停电、火灾、水灾等发生的信息。在紧急情况下有紧急电源提供的医院等容易出现这种情况。不仅是医院,不少设施都希望比显示装置2更优先向其他装置供电。
紧急信息可以由设有显示装置2的设施内的服务器发送,也可以从云上的服务器发送。另外还可以通过LAN、电话线路发送。
当步骤S201的判断为"是"时,手写输入显示控制部23将字符识别模式设定为统一模式(S102)。因此,在有用户的指示之前,不把笔划数据通知给手写识别控制部26(不进行图11的S16)。之后的处理可以与图18相同。
随着电源状态改善而进行统一变换
电源状态为电池工作状态A的显示装置2上有时会连接电池电缆。由于存在用户没有进行识别处理的笔划数据的可能性很高,因此如果自动进行统一识别,就能减少用户负担。
图20是电源状态得到改善时显示装置2进行统一识别处理的一例流程图。以下说明图20与图18的不同之处。
步骤S102中判断为统一模式或步骤S104中判断为实时(低)模式后,手写输入显示控制部23根据电源状态判断电源状态是否改善(S106)。即如果从电池动作状态A改为电池充电状态B(或者也可以改为交流电源动作状态C),或者从电池充电状态B改为交流电源动作状态C,则判断电源状态得到改善。
在步骤S106的判断为"是"的情况下,手写输入显示控制部23对保存在手写输入保存部25中未经文字识别的笔划数据进行统一识别(S107)。
图21是保存在手写输入保存部25中的保存数据的示意图。图21的一行表示一个笔划数据。一个存储数据具有DataId、Type、PenId、Color、Width、Pattern、Angle、AccountId、StartPoint、StartTime、EndPoint、EndTime、Point以及Pressure各个项目。
DataId是笔划数据的识别信息。Type是笔划数据的种类,有笔划(Stroke)及文本(Text)。手写输入保存数据801、802的种类为Stroke,手写输入保存数据804的种类为文本。PenId、Color、Width、Pattern、Angle、AccountId是笔2500的ID、颜色、粗细、线型、角度、账户ID。StartPoint是笔划数据的起点坐标,StartTime是笔划数据的起点时刻。EndPoint是笔划数据的终点坐标,EndTime是笔划数据的终点时刻。Point是从起点到终点的坐标点列,Pressure是从起点到终点的笔压。
因此,手写输入显示控制部23从手写输入保存部25取得Type=Stroke的保存数据,请求手写识别控制部26执行识别处理。
这样,当存在未执行识别处理的笔划数据时,通过根据电源状态的改善进行统一识别,可以减少用户负担。
根据电源状态控制检索范围大小
除了根据电源状态控制识别处理的频率之外,还可以通过控制笔划数据的模式匹配的范围以及变换候补的检索范围的大小,进一步抑制电力消耗。
首先说明模式匹配的范围。如图15所示,一个笔划数据与基本笔划进行模式匹配。由于各基本行程被识别为是从日语、英语、图形、或者数字中的哪一个中提取的,所以只要减少模式匹配对象的基本笔划,就能降低耗电量。例如,手写识别控制部26根据电源状态,如下所示,控制在识别处理中为比较对象的基本行程的检索范围大小。
·电池工作状态A(统一模式)…手写识别控制部26仅与日语的基本笔划进行模式匹配。另外,只检索日语用的基本形状词典。
·电池充电状态(实时(低)模式)…手写识别控制部26仅与日语、数字的基本笔划进行模式匹配。另外,只检索日语用和数字用的基本形状词典。
·交流电源动作状态C(实时(高)模式)…手写识别控制部26与所有的基本进行模式匹配。另外,检索所有的基本形状词典。
接下来说明变换候补的检索范围。如图7所示,显示装置2具有字符串变换字典部29和预测变换字典部31。由于字符串变换字典部29和预测变换字典部31也被分为日语、英语、图形以及数字,所以如果减少检索的字典种类,能够降低耗电量。
字符串变换控制部28可以通过字符串变换字典部29将"ぎ"变换为"技量試"、"議事录"等变换字符串候补507,但随着检索到的变换字符串候补507的字符数不同,耗电量也不同。也就是说,如果减少从词典中获得的字符串的字符数,就能降低耗电量。比如,通过将"技量試"、"議事录"这3个字符的转换字符串候补507限制为"技量"、"議事"的2个字符,可以缩短检索时间,降低耗电量。
同样,对于字符串/预测变换的候补508,例如将"議事錄の送信先"的字符串/预测变换的候补508缩限为"議事錄の"、"議事錄を"的字符数,可以缩短检索时间,降低耗电量。
综上所述,字符串变换控制部28和预测变换控制部30根据电源状态,例如如下所示控制变换候补的检索范围大小。
·电池工作状态A(统一模式)…仅检索日语词典。另外,将变换字符串候补507限制为1个字符,将字符串/预测变换的候补508限制为3个字符。
·电池充电状态(实时(低)模式)…仅将日语、数字词典作为检索范围。另外,将转换字符串候补507限制为2个字符,将字符串/预测转换的候补508限制为4个字符。
另外,流程图与图18相同,在步骤S102、S104、S105中手写识别控制部26控制模式匹配的范围,字符串变换控制部28和预测变换控制部30控制变换候补的检索范围。
这样,通过控制笔划数据的模式匹配范围以及变换候补的检索范围,可以进一步抑制耗电量。
电源状态的显示例
图22是显示装置的显示屏上显示的一例电源状态。图22的(a)是显示屏220的显示例。显示屏220上显示了表示电源状态的电池图标330(参见图22的(d))。
图22的(b)显示电池动作状态A的图标330。图22的(c)表示电池充电状态B的图标330。图22的(d)表示交流电源动作状态C的图标330。用户看到图标330后便能够掌握目前的电源状态。
进而,显示装置2也可以如图22的(a)所示,显示字符识别模式。在图22的(a)中,对应于电池动作状态A,显示"现在是统一模式"的信息310。用户可以掌握手写数据是如何转换的。在电池充电状态B时显示"现在是实时(低)模式",交流电源工作状态C时显示"现在是实时(高)模式"。另外,消息310和图标330既可以始终保持显示,也可以定期显示,还可以通过用户操作来显示。
主要效果
如上所述,本实施方式通过按照电源状态控制(降低)识别处理的执行频率,可以降低耗电量,延长电池的驱动时间,而且还能够缩短充电时间。
<实施例2>
以下的实施例说明显示装置2的其他构成示例。
显示装置的其他构成例1
本实施方式的显示装置2被说明为具有大型触摸面板,但显示装置2并不限于具有触摸面板。
图23是显示装置2的其他构成例的示意图。图23中,普通白板413的上方设置有投影仪411。该投影仪411相当于显示装置2。普通白板413并不是与触摸屏一体的平板显示器,而是用户直接用记号笔手写的白板。白板也可以是黑板,只要有可供投射影像大小的平面即可。
投影仪411具有超短焦点光学系统,能够以10cm左右的距离到白板413上投影失真少的影像。该影像可以以无线或从有线连接的PC400-1发送,也可以由投影仪411保存。
用户使用专用电子笔2501在白板413上手写。电子笔2501例如在前端部具有发光部,用户把电子笔2501按压在手写白板413上后,开关ON,发光部发光。光的波长为近红外线或红外线,因此用户看不到。投影仪411具有摄像头,拍摄发光部并分析图像,确定电子笔2501的方向。另外,电子笔2501在发光的同时发射声波,投影仪411根据声波的到达时间计算距离。根据方向和距离可以确定电子笔2501的位置。在电子笔2501的位置上便描绘(投影)了手写的数据。
投影仪411投影菜单430,因此当用户按动电子笔2501上的按钮后,投影仪411根据电子笔2501的位置和开关的ON信号确定按动的按钮。例如,当保存按钮431受到按动后,用户手写的手写数据(坐标点列)被保存在投影仪411中。投影仪411在预定的服务器412或USB存储器2600等中保存手写信息。手写信息以页面保存。由于不是以图像数据而是以坐标形式保存,因此用户可以重新编辑。但是,在本实施方式中由于可以用手写调出操作指令,所以菜单430也可以不显示。
<实施例3>
显示装置的其他构成例2
图24是显示装置2的另一构成例的示意图。在图24的示例中,显示装置2包括终端装置600、图像投影装置700A以及笔动作检测装置810。
终端装置600与图像投影装置700A以及笔动作检测装置810有线连接。图像投影装置700A将由终端装置600输入的图像数据投影到屏幕800上。
笔动作检测装置810与电子笔820通信,检测屏幕800附近的电子笔820的动作。具体而言,电子笔820在屏幕800上检测表示电子笔820所表示的点的坐标信息(检测方法与图23相同即可),并向终端装置600发送信息。
终端装置600基于从笔动作检测装置810收到的坐标信息,生成电子笔820输入的手写数据的图像数据,通过图像投影装置700A在屏幕800上描绘手写数据的图像。
终端装置600生成重叠图像数据,该重叠图像数据表示将投影到图像投影装置700A上的背景图像和由电子笔820输入的手写数据的图像合成起来的重叠图像。
<实施例4>
显示装置的其他构成例3
图25是显示装置2的一例构成的示意图。在图25的示例中,显示装置2包括终端装置600、显示器800A和笔动作检测装置810。
笔动作检测装置810设于显示器800A附近,在显示器800A上检测表示电子笔820A所表示的点的坐标信息(检测方法可以与图23相同),送往终端装置600。在图25的示例中电子笔820A还可以通过终端装置600经由USB连接器进行充电。
终端装置600基于从笔动作检测装置810收到的坐标信息,生成由电子笔820A输入的手写数据的图像的图像数据,并将其显示在显示器800A上。
<实施例5>
图26是显示装置2的一例构成的示意图。在图26的示例中,显示装置2包括终端装置600和图像投影装置700A。
终端装置600与电子笔820B无线通信(Bluetooth(注册商标)等),接收屏幕800上电子笔820B表示的点的坐标信息。坐标信息可以由电子笔820B读取形成在屏幕800上的微小位置信息,也可以从屏幕800接收坐标信息。
然后,终端装置600基于收到的坐标信息,生成由电子笔820B输入的手写数据的图像的图像数据,让图像投影装置700A投影手写数据的图像。
另外,终端装置600生成重叠图像数据,该重叠图像数据表示图像投影装置700A投影的背景图像和电子笔820输入的手写数据的图像合成起来的重叠图像。
如上所述,上述各实施方式可以应用于各种系统构成中。
其他应用示例以上用实施例说明了实施本发明的最佳方式,但本发明并不局限于这些实施例,可以在不脱离本发明要旨的范围内进行各种改变和置换。
将字符串作为字符代码,将手写数据作为坐标点数据保存在显示装置2中。也可以先保存在各种存储介质中,或保存在网络上的存储装置中,之后从显示装置2下载并再次使用。再次使用的显示装置2既可以是任何显示装置,也可以是一般的信息处理装置。因此,用户可以在不同的显示装置2上再现手写内容,继续会议等。
例如,虽然在本实施方式中以电子黑板为例进行了说明,但电子黑板也可以被称为电子白板、电子信息板、手写输入装置等。本实施例只要是具有触摸面板的信息处理装置就可以适用。作为搭载触摸面板的信息处理装置,例如可以是投影仪(Projector)、数字标牌等的输出装置、HUD(Head Up Display)装置、工业机器、摄像装置、集音装置、医疗器械、网络家电、笔记本电脑(Personal Computer)、移动电话、智能手机、平板终端、游戏机、PDA(Personal Digital Assistant)、数码相机、可穿戴PC或台式PC等。
虽然本实施方式通过触摸面板检测笔尖坐标的方法检测笔的坐标,但也可以用超声波检测笔尖坐标。笔在发光的同时发射超声波,显示装置2根据超声波的到达时间求出距离。可以根据方向和距离确定笔的位置。将笔的轨迹作为笔划数据,由投影机进行描绘(投影)。
为了便于理解显示装置2的处理,图7等的构成例按照主要功能来分割。本申请发明不受处理单位的分割方法和名称的限制。显示装置2的处理也可以按照处理内容分割成更多的处理单位。还可以分割成一个处理单位包含更多的处理。
一部分显示装置2进行的处理也可以由通过网络与显示装置2连接的服务器执行。
虽然本实施方式中作为比较对象例示了阈值,但阈值不限于例示的值。为此,在本实施方式中,关于所有的阈值,未满阈值和阈值以下的记载具有相同的意思,超过阈值和阈值以上的记载具有相同的意思。例如,将阈值设为11时的未满阈值的记载与阈值为10时的阈值以下具有相同的意思。另外,设阈值为10时的超过阈值的记载与阈值为11时的阈值以上具有相同的意思。
上述实施方式中的各项功能可以通过一个或多个处理电路来实现。本说明书中的"处理电路"是指包括像通过电子电路安装的类似处理器通过软件执行各功能而经过编程的处理器、或被设计为执行上述说明的各功能的ASIC(Application SpecificIntegrated Circuit)、DSP(数字信号处理器)、FPGA(现场可编程门阵列)或现有的电路模块等的设备。
手写输入部21是受理装置的一个示例,手写识别控制部26是识别装置的一个示例,手写输入显示控制部23是控制装置的一个示例,紧急信息接收部35是紧急信息接收装置的一个示例。
符号说明
2 显示装置

Claims (11)

1.一种显示装置,其特征在于,具备
受理部,用于接受由输入部输入的手写数据;
识别部,用于执行所述手写数据的识别处理;以及
控制部,用于按照所述显示装置的电源状态,控制所述识别处理的频率。
2.根据权利要求1所述的显示装置,其特征在于,
所述识别部利用模式识别进行所述识别处理,所述模式识别是将每一笔划的笔划数据的形状预先经过定义的基本笔画和所述手写数据进行比较,
所述控制部按照所述显示装置的电源状态,控制所述识别处理中被作为比较对象的所述基本笔画的检索范围大小。
3.根据权利要求1或2所述的显示装置,其特征在于,
所述显示装置利用字典检索在所述识别处理中得到的字符,显示符合检索的字符串,
所述控制部按照所述显示装置的电源状态,控制所要检索的所述字典的种类。
4.根据权利要求3所述的显示装置,其特征在于,所述控制部按照所述显示装置的电源状态,控制从所述字典取得的字符串的字符个数。
5.根据权利要求1至4中任意一项所述的显示装置,其特征在于,所述电源状态包括只有电池动作的电池动作状态、所述电池与电源线连接且被充电的电池充电状态、以及虽然所述电池与所述电源线连接但未被充电的交流电源动作状态。
6.根据权利要求5所述的显示装置,其特征在于,所述控制部在所述电池动作状态下,如果没有用户指示则不执行所述识别处理,在所述电池充电状态下,每隔两个以上规定个数的笔划数据,执行所述识别处理,在所述交流电源动作状态下,每隔一个笔划数据,执行所述识别处理。
7.根据权利要求6所述的显示装置,其特征在于,当所述显示装置的电源状态得到改善时,所述控制部对未经识别处理的所述手写数据执行所述识别处理。
8.根据权利要求1至7中任意一项所述的显示装置,其特征在于,
具有紧急信息接收部,用于从外部接收紧急信息,
当所述紧急信息接收部收到所述紧急信息时,所述控制部降低所述识别处理频率。
9.一种供显示装置执行的控制方法,其特征在于,包括以下步骤,
受理步骤,由受理部接受由输入部输入的手写数据;
识别步骤,由识别部执行所述手写数据的识别处理;以及
控制步骤,由控制部按照所述显示装置的电源状态,控制所述识别处理的频率。
10.一种计算机可读的存储介质,其特征在于,其中保存可供信息处理装置具备以下功能的程序,
受理部,用于接受由输入部输入的手写数据;
识别部,用于执行所述手写数据的识别处理;以及
控制部,用于按照所述显示装置的电源状态,控制所述识别处理的频率。
11.一种信息处理装置,其中具有存储装置和处理器,其特征在于,所述存储装置中保存程序,该程序通过所述处理器执行,可供所述信息处理装置具备以下功能,
受理部,用于接受由输入部输入的手写数据;
识别部,用于执行所述手写数据的识别处理;以及
控制部,用于按照所述显示装置的电源状态,控制所述识别处理的频率。
CN202110793703.4A 2020-07-17 2021-07-12 显示装置、控制方法、存储介质以及信息处理装置 Pending CN113961061A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-123252 2020-07-17
JP2020123252A JP2022019426A (ja) 2020-07-17 2020-07-17 表示装置、制御方法、プログラム

Publications (1)

Publication Number Publication Date
CN113961061A true CN113961061A (zh) 2022-01-21

Family

ID=76730277

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110793703.4A Pending CN113961061A (zh) 2020-07-17 2021-07-12 显示装置、控制方法、存储介质以及信息处理装置

Country Status (4)

Country Link
US (1) US11557138B2 (zh)
EP (1) EP3940506B1 (zh)
JP (1) JP2022019426A (zh)
CN (1) CN113961061A (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022143264A (ja) 2021-03-17 2022-10-03 株式会社リコー 表示装置、表示システム、表示制御方法およびプログラム
JP2022147675A (ja) 2021-03-23 2022-10-06 株式会社リコー 表示装置、表示方法、プログラム

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040141647A1 (en) * 2003-01-16 2004-07-22 Renesas Technology Corp. Information recognition device operating with low power consumption
CN1661517A (zh) * 2004-02-25 2005-08-31 联想(北京)有限公司 便携式电脑的节电方法
CN102750556A (zh) * 2012-06-01 2012-10-24 山东大学 一种脱机手写体汉字识别方法
CN103488415A (zh) * 2013-05-14 2014-01-01 高永杰 基于纸介质的手书文字和图形识别系统及识别方法
US8903458B1 (en) * 2010-11-02 2014-12-02 Google Inc. Dynamic data refresh for mobile device applications
CN106095263A (zh) * 2015-04-27 2016-11-09 三星电子株式会社 用于显示用户界面的方法及其电子设备
CN107430460A (zh) * 2015-04-09 2017-12-01 三星电子株式会社 数字笔、触摸系统及其提供信息的方法
CN108898046A (zh) * 2018-04-25 2018-11-27 努比亚技术有限公司 一种屏下指纹功耗控制方法、终端及计算机可读存储介质

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7302599B2 (en) * 2004-02-12 2007-11-27 Via Technologies, Inc. Instantaneous frequency-based microprocessor power management
CN102171743B (zh) * 2008-10-02 2014-08-20 日立汽车系统株式会社 与车辆行驶相关的信息处理装置
JP5294818B2 (ja) 2008-12-08 2013-09-18 キヤノン株式会社 情報処理装置及び情報処理方法
JP5875937B2 (ja) * 2011-05-25 2016-03-02 京セラ株式会社 携帯電子機器及び入力方法
KR101881019B1 (ko) * 2011-10-26 2018-07-24 삼성전자 주식회사 휴대 단말기의 전원절약 장치 및 방법
US9305227B1 (en) * 2013-12-23 2016-04-05 Amazon Technologies, Inc. Hybrid optical character recognition
CN109992126A (zh) * 2014-06-24 2019-07-09 苹果公司 计算设备上的字符识别
WO2016141505A1 (en) * 2015-03-06 2016-09-15 Empire Technology Development Llc Energy flow controller
KR20160143429A (ko) * 2015-06-05 2016-12-14 엘지전자 주식회사 이동단말기 및 그 제어방법
JP6566044B2 (ja) 2015-12-02 2019-08-28 株式会社リコー 位置検出装置、画像表示装置及び画像表示システム
JP2017111589A (ja) 2015-12-16 2017-06-22 株式会社リコー 座標検出装置、表示システム、投影システム及び座標検出方法
US10325018B2 (en) * 2016-10-17 2019-06-18 Google Llc Techniques for scheduling language models and character recognition models for handwriting inputs
KR102143943B1 (ko) * 2018-12-11 2020-08-12 삼성전자주식회사 전자 장치 및 그 제어 방법
US20210004265A1 (en) * 2020-09-18 2021-01-07 Francesc Guim Bernat Elastic power scaling

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040141647A1 (en) * 2003-01-16 2004-07-22 Renesas Technology Corp. Information recognition device operating with low power consumption
CN1661517A (zh) * 2004-02-25 2005-08-31 联想(北京)有限公司 便携式电脑的节电方法
US8903458B1 (en) * 2010-11-02 2014-12-02 Google Inc. Dynamic data refresh for mobile device applications
CN102750556A (zh) * 2012-06-01 2012-10-24 山东大学 一种脱机手写体汉字识别方法
CN103488415A (zh) * 2013-05-14 2014-01-01 高永杰 基于纸介质的手书文字和图形识别系统及识别方法
CN107430460A (zh) * 2015-04-09 2017-12-01 三星电子株式会社 数字笔、触摸系统及其提供信息的方法
CN106095263A (zh) * 2015-04-27 2016-11-09 三星电子株式会社 用于显示用户界面的方法及其电子设备
CN108898046A (zh) * 2018-04-25 2018-11-27 努比亚技术有限公司 一种屏下指纹功耗控制方法、终端及计算机可读存储介质

Also Published As

Publication number Publication date
EP3940506A1 (en) 2022-01-19
US11557138B2 (en) 2023-01-17
EP3940506B1 (en) 2023-12-20
US20220019782A1 (en) 2022-01-20
JP2022019426A (ja) 2022-01-27

Similar Documents

Publication Publication Date Title
US11250253B2 (en) Handwriting input display apparatus, handwriting input display method and recording medium storing program
RU2667047C2 (ru) Способ обеспечения тактильного эффекта в портативном терминале, машинно-считываемый носитель и портативный терминал
US20160132232A1 (en) Electronic device and method for processing handwritten document data
CN113961061A (zh) 显示装置、控制方法、存储介质以及信息处理装置
JP7452155B2 (ja) 手書き入力装置、手書き入力方法、プログラム
JP2020194542A (ja) 表示装置、プログラム、表示方法
JP2021197024A (ja) 表示装置、表示方法及びプログラム
EP4254158A1 (en) Display apparatus, display method, information sharing system, and carrier means
JP7268479B2 (ja) 表示装置、プログラム、表示方法
US20230070034A1 (en) Display apparatus, non-transitory recording medium, and display method
WO2022071448A1 (en) Display apparatus, display method, and program
US20220300147A1 (en) Display apparatus, display method, and non-transitory recording medium
EP4113267A1 (en) Display system, method for performing character recognition, and carrier medium
US20230289517A1 (en) Display apparatus, display method, and non-transitory recording medium
JP7392315B2 (ja) 表示装置、表示方法、プログラム
EP4246301A1 (en) Display apparatus, formatting method, carrier means, and information sharing system
JP2022013424A (ja) 表示装置、表示方法、プログラム
JP2022147384A (ja) 表示装置、表示方法、プログラム
JP2022119463A (ja) 表示装置、表示方法およびプログラム
JP2022020470A (ja) 表示装置、表示方法およびプログラム
JP2022141344A (ja) 表示装置、表示方法、プログラム
JP2022147337A (ja) 表示装置、表示方法、プログラム
WO2019243954A1 (en) Handwriting input display apparatus, handwriting input display method and recording medium storing program
JP2023133110A (ja) 表示装置、表示方法、プログラム
JP2021152884A (ja) 表示装置、表示方法、プログラム、情報処理装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination