CN112906358A - 信息处理装置、信息处理方法以及记录介质 - Google Patents
信息处理装置、信息处理方法以及记录介质 Download PDFInfo
- Publication number
- CN112906358A CN112906358A CN202010895533.6A CN202010895533A CN112906358A CN 112906358 A CN112906358 A CN 112906358A CN 202010895533 A CN202010895533 A CN 202010895533A CN 112906358 A CN112906358 A CN 112906358A
- Authority
- CN
- China
- Prior art keywords
- data
- conversion
- note
- unit
- item
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 116
- 238000003672 processing method Methods 0.000 title claims abstract description 11
- 238000006243 chemical reaction Methods 0.000 claims abstract description 248
- 238000000034 method Methods 0.000 claims description 115
- 230000008569 process Effects 0.000 claims description 103
- 238000012545 processing Methods 0.000 claims description 80
- 238000003860 storage Methods 0.000 claims description 71
- 230000009466 transformation Effects 0.000 claims description 28
- 238000012544 monitoring process Methods 0.000 claims description 27
- 238000004891 communication Methods 0.000 claims description 20
- 230000003068 static effect Effects 0.000 claims description 4
- 238000007726 management method Methods 0.000 description 35
- 230000006870 function Effects 0.000 description 23
- 238000010586 diagram Methods 0.000 description 14
- 230000008859 change Effects 0.000 description 11
- 238000013500 data storage Methods 0.000 description 10
- 230000000694 effects Effects 0.000 description 6
- 238000005259 measurement Methods 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- FFBHFFJDDLITSX-UHFFFAOYSA-N benzyl N-[2-hydroxy-4-(3-oxomorpholin-4-yl)phenyl]carbamate Chemical compound OC1=C(NC(=O)OCC2=CC=CC=C2)C=CC(=C1)N1CCOCC1=O FFBHFFJDDLITSX-UHFFFAOYSA-N 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000010485 coping Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000011179 visual inspection Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/166—Editing, e.g. inserting or deleting
- G06F40/169—Annotation, e.g. comment data or footnotes
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/30—Computing systems specially adapted for manufacturing
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
实施方式涉及信息处理装置、信息处理方法以及记录介质。提供能够一眼看出记录数据所添加的笔记的内容,在内容不被显示的情况下也能够推测原因的信息处理装置、信息处理方法以及记录介质。实施方式所涉及的信息处理装置具有获取部、变换部以及显示控制部。获取部获取与记录数据的项目关联起来的多媒体数据。变换部从多媒体数据变换为表示内容的第1显示数据。显示控制部将第1显示数据或者表示变换的进展状况的第2显示数据与记录数据的项目关联起来显示。
Description
本申请以日本专利申请2019-219591(申请日:12/4/2019)为基础,享有该申请的优先权。本申请通过参照本申请,而包含该申请的全部内容。
技术领域
本发明的实施方式涉及信息处理装置、信息处理方法以及程序。
背景技术
在制造现场、保养检查现场,由操作人员等记录各种信息。例如,使用了测定仪器的结果的测定值、通过目视检查的结果等经由表单/表制作工具(软件)等作为记录数据而被记录。这样的记录数据常常在操作人员彼此之间、操作人员与顾客之间共享。
在此,在许多表单/表制作工具中,预先决定应输入到各项目的内容。因而,为了输入除此以外的内容,需要在栏外作为笔记而输入、或者针对使用表单工具的功能指定的项目而添加文本笔记。
作为记录数据,不限于文本,还能够将多媒体数据作为笔记关联起来。例如,有将多媒体数据作为笔记而添加到表数据,显示表示添加有笔记的图标的手法。
但是,为了确认添加于记录数据的笔记的内容,操作人员需要停下操作的手,例如进行使添加的动态图像笔记再生等操作。另外,内容的确认需要时间,所以招致操作时间的浪费。进而,即使通过声音辨识处理将声音笔记变换为文本而添加到记录数据,通常这样的处理也花费一定的时间。在文本不被显示的情况下,操作人员无法理解为何不显示,依然不得不再生多媒体数据。
发明内容
本发明要解决的课题在于提供使得能够一眼看出添加于记录数据的笔记的内容,在笔记的内容不被显示的情况下也能够推测其原因的信息处理装置、信息处理方法以及程序。
根据实施方式,信息处理装置具有获取部、变换部以及显示控制部。获取部获取与具有多个项目的记录数据的项目关联起来的多媒体数据。变换部进行从上述多媒体数据向表示该多媒体数据的内容的第1显示数据的变换处理。显示控制部在上述变换处理完成的情况下将上述第1显示数据与上述记录数据的上述项目关联起来显示,在上述变换处理未完成的情况下将表示上述变换处理的进展状况的第2显示数据与上述记录数据的上述项目关联起来显示。
根据上述结构的信息处理装置,能够一眼看出添加于记录数据的笔记的内容,在笔记的内容不被显示的情况下也能够推测其原因。
附图说明
图1是示出第1实施方式的信息处理装置的功能结构的一个例子的图。
图2是示出第1实施方式的信息处理装置的硬件结构的一个例子的图。
图3是示出由第1实施方式的信息处理装置进行的处理的一个例子的流程图。
图4是示出图3所示的处理中的笔记追加处理的一个例子的流程图。
图5是示出图3所示的处理中的笔记变换处理的一个例子的流程图。
图6是示出第1实施方式的记录数据的一个例子的图。
图7是示出第1实施方式的笔记管理数据的一个例子的图。
图8是示出第1实施方式的笔记取入画面的一个例子的图。
图9是示出第1实施方式的笔记显示画面的第1例子的图。
图10A是示出第1实施方式的笔记显示画面的第2例子的图。
图10B是示出第1实施方式的笔记显示画面的第3例子的图。
图11是示出第2实施方式的信息处理装置的功能结构的一个例子的图。
图12是示出由第2实施方式的信息处理装置进行的处理的一个例子的流程图。
图13是示出图12所示的处理中的声音输入处理的一个例子的流程图。
图14是示出第2实施方式的输入次序列表的一个例子的图。
图15是示出第3实施方式的信息处理装置的功能结构的一个例子的图。
图16是示出由第3实施方式的信息处理装置进行的再次变换处理的第1例子的流程图。
图17是示出由第3实施方式的信息处理装置进行的再次变换处理的第2例子的流程图。
图18是示出第4实施方式的笔记管理数据的一个例子的图。
图19是示出第4实施方式的笔记优先级变更的一个例子的图。
附图标记说明
1:信息处理装置;2:输入设备;3:输出设备;11:输入输出接口;12:通信接口;20:控制部;21:多媒体数据获取部;22:变换控制部;221:声音辨识客户端;222:监视部;223:再次变换控制部;23:显示控制部;24:项目确定部;25:声音数据获取部;26:命令辨识部;30:存储部;31:记录数据存储部;32:笔记存储部;33:输入次序存储部;34:词典存储部;40:总线;100:服务器。
具体实施方式
以下,参照附图,说明本发明的实施方式。
[第1实施方式]
(1-1)结构
图1是示出本发明的第1实施方式的信息处理装置1的功能结构的一个例子的图。
信息处理装置1能够将多媒体数据作为笔记而添加到表单、表数据等具有多个项目的记录数据,并关联起来处置,例如为个人计算机(PC)、智能手机、平板终端等。信息处理装置1进而将多媒体数据变换为表示其内容的显示数据,将得到的显示数据或者表示变换处理的进展状况的显示数据与添加有多媒体数据的记录数据的项目关联起来显示。
信息处理装置1构成为能够经由网络NW而与服务器100进行通信。
网络NW例如包括因特网所代表的IP(Internet Protocol,互联网协议)网、以及用于针对该IP网进行访问的多个访问网。作为访问网,例如能使用无线LAN(Local AreaNetwork,局域网)、便携电话网、有线电话网、FTTH(Fiber To The Home,光纤到户)、CATV(Cable Television,有线电视)网。
服务器100例如由服务提供经营者运营管理,在线提供数据变换服务。信息处理装置1经由网络NW将多媒体数据发送到服务器100,从服务器100作为变换结果而接收表示上述多媒体数据的内容的显示数据。例如,服务器100提供将声音数据变换为文本数据的声音辨识服务(以下,称为“云型声音辨识服务”。)。
信息处理装置1也可以构成为能够与多个服务器100进行通信。多个服务器100既可以全部提供声音辨识服务,也可以提供声音辨识、字符辨识、图像辨识等分别不同的数据变换服务。
信息处理装置1具备输入输出接口11、通信接口12、控制部20以及存储部30。
通信接口12例如包括1个以上的有线或者无线的通信接口单元,能够在与服务器100之间进行信息的收发。作为有线接口,例如使用有线LAN,另外作为无线接口,例如使用无线LAN、蓝牙(Bluetooth(注册商标))等采用了小电力无线数据通信标准的接口。
附设于信息处理装置1的输入设备2以及输出设备3连接于输入输出接口11。输入设备2作为多媒体数据的输入设备而包括用于对用户发声的声音笔记进行录音的麦克风、用于对动画或者静态图像进行摄像的摄像机等。输入设备2另外作为受理用户的操作的输入设备,包括键盘、鼠标、按钮、开关等。输出设备3除了包括用于输出被再生的声音笔记的扬声器之外,还包括用于显示各种数据的液晶或者有机EL(Electro Luminescence,电致发光)等显示器。在如平板终端那样具备具有触摸输入以及显示功能的触摸屏的情况等下,输入设备2与输出设备3也可以为一体的。
输入输出接口11进行将用户经由输入设备2输入的声音数据、操作数据取入而交付给控制部20、并且将从控制部20输出的显示数据输出到输出设备3而显示的处理。此外,作为输入设备2以及输出设备3,既可以使用内置于装置1的设备,另外也可以使用能够经由网络NW进行通信的其它信息终端的输入设备以及输出设备。
存储部30具备记录数据存储部31和笔记存储部32。
记录数据存储部31存储作为笔记的添加目的地的、具有多个项目的记录数据。记录数据是指如表单、表那样针对每个项目而具有输入栏的数据。
笔记存储部32作为第1存储部或者第2存储部发挥功能,针对每个添加的笔记而存储保持向添加目的地项目的指针、向多媒体数据的指针、笔记的变换状况、变换结果以及失败内容的笔记管理数据。
控制部20具有中央处理单元(Central Processing Unit:CPU)等硬件处理器。控制部20作为实施方式的处理功能部而具备多媒体数据获取部21、变换控制部22以及显示控制部23。
多媒体数据获取部21作为第1获取部而进行经由输入输出接口11将多媒体数据取入的处理。多媒体数据与记录数据的项目关联起来。多媒体数据获取部21另外还进行获取识别多媒体数据的添加目的地项目的信息并写入到存储于笔记存储部32的笔记管理数据的处理。作为信息处理装置1能够进行处置的多媒体数据,包括声音数据、静态图像数据以及动态图像数据等各种数据。
变换控制部22作为变换部而进行将获取到的多媒体数据变换为表示该多媒体数据的内容的显示数据的处理。显示数据既可以为文本数据,也可以为图标、象形图等图像数据。变换控制部22另外生成表示向显示数据的变换处理的进展状况(还称为“变换状况”)的进展信息。作为进展状况,例如包括未变换、变换过程中、已变换或者变换失败等状况。变换控制部22另外还进行将变换结果、进展信息写入到存储于笔记存储部32的笔记管理数据的处理。
变换控制部22能够包括声音辨识客户端221。
声音辨识客户端221作为变换客户端部而进行利用云型声音辨识服务将声音数据变换为文本数据的处理。即,声音辨识客户端221经由通信接口12将声音数据发送到作为声辨识服务器或者变换服务器的服务器100,从服务器100作为变换结果而接收文本数据。
变换控制部22另外能够进行从声音数据以外的多媒体数据向表示其内容的显示数据的变换处理。例如,变换控制部22也可以使用图案辨识技术等从静态图像或者动态图像数据抽取字符信息。作为一个例子,变换控制部22能够从摄像得到的数字仪表或模拟仪表的指示值生成文本数据。即,变换控制部22能够进行从静态图像或者动态图像数据向表示字符辨识结果的文本数据的变换处理。或者变换控制部22也可以根据静态图像或者动态图像数据进行物体辨识、异常探测等,将其结果作为显示数据而输出。作为一个例子,变换控制部22能够将摄像得到的被检体中有无裂纹或龟裂、密度、断裂图案、颜色的变化等解析结果作为包含字符或者图像的显示数据而输出。即变换控制部22能够将静态图像或者动态图像数据变换为表示从该静态图像或者动态图像数据抽取的特征的文本数据或者图像数据。这样的变换处理也可以另外作为云型服务而实现,变换控制部22能够还具备用于将除了声音数据以外的数据变换为显示数据的客户端部。
但是,由变换控制部22进行的变换处理不限于仅是从多媒体数据向文本数据或者图像数据的变换处理,变换后数据可以为任意的数据形式。例如,变换控制部22也可以从多媒体数据变换为二进制数据,在显示控制部23等后续的功能部中进行从二进制数据向显示数据的变换。
显示控制部23根据存储于笔记存储部32的笔记管理数据,生成将添加于记录数据的项目的笔记的内容或者笔记的变换状况、变换结果与其添加目的地项目关联起来显示的显示数据,然后输出到显示器等输出设备3。
在此,更详细地说明图1所示的信息处理装置1的各结构。
以下,主要设为信息处理装置1是具备具有触摸输入以及显示功能的触摸屏和声音输入用的麦克风的平板终端而进行说明。另外,以下,主要设为多媒体数据是声音数据,声音辨识客户端221与服务器100进行通信,利用服务器100提供的云型的声音辨识服务进行从声音数据向文本数据的变换而进行说明。
信息处理装置(平板终端)1受理用户的操作,针对作为记录数据的表数据而添加声音笔记,然后进行变换并进行显示。具有这样的声音笔记的添加、变换以及显示功能(以下,总称为“声音笔记添加功能”。)的终端不限于平板终端,当然也可以使用智能手机,也可以使用具备鼠标的PC等,只要为具备输入部和输出部的终端,就可以使用任意的终端。另外,声音笔记添加功能既可以为与用于显示并输入表数据的程序(以下,“表输入程序”)不同的程序,也可以作为一个功能或者附加功能而嵌入同一程序中。
图6示出存储于记录数据存储部31的记录数据的一个例子。在记录数据50中,能够根据行编号(RW1~RW5)和列编号(CL1~CL7)来指定对象项目(输入栏)。在该例子中,记录数据50作为项目名而包括“试验编号”、“试验项目”、“测定值(R、S、T)”、“单位”以及“判定(好/坏)”。在该例子中,能够将值输入到记录数据50的行RW2~RW5列CL3~CL5(“测定值(R、S、T)”)以及CL7(“判定(好/坏)”),对RW2行(“试验编号1”、“最小有效电流试验1”)已经输入有假想的值(“3.91”、“4.05”、“4.12”、“好”)。
图7示出存储于笔记存储部32的笔记管理数据55的一个例子。在笔记管理数据55中,各行相当于1个笔记,作为项目名,包括“项目指针”55a、“声音数据文件”55b、“变换状况”55c、“变换结果”55d、“失败内容”55e。
项目指针55a表示添加有笔记的项目。例如,在添加目的地数据为表数据的情况下,能够以“(行(RW)编号,列(CL)编号)”的形式表示项目的位置。在图7的例子中,在表示特定的1个项目的情况下使用“(项目的行编号,项目的列编号)”这样的记载,在表示多个项目的情况下使用“(最初的项目的行编号,最初的项目的列编号)-(最后的项目的行编号,最后的项目的列编号)”这样的记载。例如,项目指针=(2,7)表示在图6中输入了“好”这样的值的行编号2(RW2)、列编号7(CL7)的项目。项目指针=(3,1)-(3,7)表示在图6中行编号3(RW3)的列编号1~7(CL1~CL7)的所有项目。
此外,项目指针的形式并不限定于该形式,例如只要在表单数据中对输入项目赋予ID,就可以将该ID用作项目指针。
声音数据文件55b表示向声音数据的指针。在图7中,向声音数据的指针表示为声音数据文件的文件名(或URL)。文件名在笔记添加时自动地生成。例如,将笔记添加时的日期时间作为文件名即可。也可以设为用户等能够任意地设定文件名。
变换状况55c表示变换控制部22中的笔记的变换状况。在该实施方式中,作为变换状况,包括“未变换”、“变换过程中”、“已变换”、“变换失败”这4个。此外,变换失败还能够包括变换结果为“空”的情况。关于这一点将在后面叙述。
变换结果55d表示变换控制部22中的笔记的变换处理成功(完成)的情况下的变换结果。在变换控制部22中的变换处理为声音辨识的情况下,变换结果表示来自被录音的声音数据的声音辨识结果的字符串(文本数据)。
失败内容55e表示变换控制部22中的笔记的变换处理失败的情况下的失败的内容。变换控制部22从声音辨识客户端221接收来自服务器100的响应消息、表示与服务器100之间的通信失败的消息,判定失败的内容。
在变换控制部22为能够利用云型声音辨识服务的客户端的情况下,作为失败内容,例如包括各种网络出错、声音辨识服务方出错。作为网络出错的例子,例如包括没能在网络上连到云型声音辨识服务的情况、本身就未与网络连接等网络出错。在该情况下,在从客户端向服务器方通信的阶段产生出错,客户端例如以程序上的例外这样的形式获取这一状态,能够判断出变换失败并且失败内容为网络出错。作为声音辨识服务方的出错,还包括声音辨识服务器为繁忙状态、在声音辨识服务器内部发生出错等问题。这些服务器方的出错能够作为来自服务器的响应(出错消息)而得到。客户端在来自服务器的响应为出错消息的情况下,能够判断出变换失败,失败内容为被写入到出错消息的内容。
在声音辨识服务中的声音辨识处理正常地进行动作之后,有时其辨识结果为空字符串,也就是说什么都未被辨识出。在实施方式中,当客户端收取到空的辨识结果时,将其作为变换失败来处置,处置成失败内容是“变换结果为空”。这是因为在后述关联建立显示时,将空的辨识结果作为出错而显示,从而在从用户观察时易于判别其是为空,还是因某种或某些理由尚未被辨识。
当声音辨识客户端221经由网络NW将声音数据发送到服务器100时,在服务器100中执行声音辨识处理,作为声音辨识结果的文本经由网络NW而由声音辨识客户端221接收。声音辨识客户端221根据该接收而送出辨识完成事件。另外,在产生网络出错的情况、在声音辨识服务中产生出错的情况、或者声音辨识作为结果的文本为空的情况下,声音辨识客户端221送出辨识失败事件。
信息处理装置1不仅可以如上所述处置声音数据,也可以处置图像数据、动态图像数据。变换控制部22只要将多媒体数据变换为其它数据即可,可以是任意的。例如,还考虑对所添加的声音数据进行解析,不通过文本,而通过“○(很好/通过)”和“×(不好/失败)”的二值返回噪音状况是否没有问题,对所添加的照片数据进行解析,返回强调在照片上呈现的部件的断裂部位的结果的图像数据、返回在照片上呈现的裂痕的在面积上的比例等。
图2示出图1所示的信息处理装置1的硬件结构的一个例子。
信息处理装置1具备输入输出接口(I/F)11、通信接口(I/F)12、控制部20以及存储部30,它们经由总线40连接。
存储部30例如作为存储介质而使用SSD(Solid State Drive,固态硬盘)等能够随时写入以及读出的非易失性存储器。此外,存储介质也可以除了使用上述SSD之外,而使用将HDD(Hard Disk Drive,硬盘驱动器)、ROM(Read Only Memory,只读存储器)以及RAM(Random Access Memory,随机存取存储器)进行组合而成的结构,或者不使用上述SSD,而使用将HDD(Hard Disk Drive,硬盘驱动器)、ROM(Read Only Memory,只读存储器)以及RAM(Random Access Memory,随机存取存储器)进行组合而成的结构。
在存储部30的存储区域设置有程序存储区域以及数据存储区域。在程序存储区域,除了储存OS(Operating System,操作系统)等中间件之外,还储存为了执行本发明的一个实施方式的控制处理而所需的应用程序及程序。在数据存储区域,作为在对实施方式进行实施方面所需的存储部,存储有记录数据存储部31和笔记存储部32。
控制部20为CPU等处理器。控制部20通过执行存储于存储部30的程序存储区域的程序,从而作为包括多媒体数据获取部21、变换控制部22、显示控制部23的处理功能部进行动作。控制部也可以以MPU(Micro Processing Unit,微型处理单元)、ASIC(ApplicationSpecific Integrated Circuit,专用集成电路)、FPGA(field-programmable gatearray,现场可编程门阵列)等其它各种形式来实现。
如上所述,在制造现场、保养检查现场,将各种信息输入到记录数据,在操作人员彼此之间、操作人员与顾客之间共享记录数据的情形较多。为了将笔记添加到这样的记录数据,在大多数情况下,需要以文本形式作为笔记而输入到栏外、或者添加文本笔记。但是,在操作过程中停下操作的手而输入文本笔记会花费时间。因而,例如考虑将朝向麦克风发出的声音、摄影的照片作为笔记而添加。但是,即使添加这样的笔记,为了确认其中内容,也必须明确地显示(如果为声音笔记,则再生)其内容。使用手使内容显示、需要花费时间来确认(如果声音笔记,则需要实际地听)内容将造成大的时间浪费。
在追加声音笔记的情况下,还能够显示对笔记的声音数据进行了声音辨识的结果的文本。但是,声音辨识花费时间,所以并不能够立即显示文本。另外声音辨识有时还失败,在该情况下也无法显示文本。在这样的情况下,操作人员无法理解为何未显示文本,只有依然使笔记显示(再生)来确认内容的方法。
实施方式的信息处理装置1将添加于表单、表(添加目的地数据)的多媒体笔记与添加目的地的信息、变换状况、变换结果一起显示,从而能够在将添加目的地数据的源头的内容与笔记的内容对应起来之后能一眼看出,另外能够在未显示笔记的内容的情况下研究其应对方法。
(1-2)动作
接下来,说明由如上那样构成的第1实施方式的信息处理装置1进行的信息处理动作。
图3是示出由第1实施方式的信息处理装置1进行的处理次序和处理内容的一个例子的流程图。在平板终端等信息处理装置1上,表输入程序被启动,显示有作为记录数据的表数据。
信息处理装置1通过步骤S11,监视有无用于开始处理的触发。在该状态下,用户经由麦克风输入发声声音,当例如“追加声音笔记”这样的声音命令被辨识出时,信息处理装置1在控制部20的控制之下,确定笔记添加目的地的项目,并启动声音笔记添加功能,执行以下的处理。此外,声音命令例如可以利用如专利文献2所记载那样的、在信息处理装置1上进行动作的轻型声音辨识来辨识。笔记添加目的地的项目例如可以通过由多媒体数据获取部21对表输入程序请求识别该项目的信息而确定。
在步骤S12中,信息处理装置1在显示控制部23的控制之下,例如根据预先存储于存储部30的显示数据、以及由多媒体数据获取部21获取到的项目识别信息,生成笔记取入画面并进行显示。
图8示出这样的笔记取入画面的一个例子。笔记取入画面包括记录数据显示区域60、笔记显示区域61以及录音窗口62。
记录数据显示区域60在表输入程序启动时被显示,示出表数据的内容。当声音笔记添加功能被启动时,记录数据显示区域60进而示出该笔记的添加目的地项目。在该例子中,作为笔记的添加目的地,反转显示项目(2,7)。
笔记显示区域61在声音笔记添加功能启动时被显示。笔记显示区域61可以以能够同时阅览的方式,与记录数据显示区域60并排地显示。笔记显示区域61显示表示笔记的内容或者变换的状况的显示数据,但在该时间点,笔记的取入尚未完成,所以用空栏显示。
录音窗口62也另外在声音笔记添加功能启动时被显示。在该例子中,录音窗口62包括显示成“声音笔记录音过程中”的标题部621、表示录音音量的显示条622、“OK”按钮623以及“取消”按钮624。例如,显示录音窗口62,并且开始声音笔记的录音,在OK按钮623或者取消按钮624被按压之前一直进行录音。
在步骤S13中,信息处理装置1判定哪个按钮被按压。在判定为取消按钮624被按压的情况(取消)下,结束声音笔记添加功能,关闭录音窗口62,返回到步骤S11。在判定为OK按钮623被按压的情况(OK)下,信息处理装置1在保持声音笔记添加功能启动的状态下,结束录音,关闭录音窗口62,转移到步骤S14。
在步骤S14中,信息处理装置1在多媒体数据获取部21的控制之下,获取被录音的声音数据,作为应添加的多媒体数据。
在步骤S15中,信息处理装置1在多媒体数据获取部21的控制之下,使用获取到的声音数据来开始笔记追加处理。
图4是示出笔记追加处理的详细内容的流程图。
首先,在步骤S151中,多媒体数据获取部21生成表示添加目的地项目的项目指针(P)。如上所述,在该实施方式中,项目指针以“(项目的行编号,项目的列编号)”或“(最初的项目的行编号,最初的项目的列编号)-(最后的项目的行编号,最后的项目的列编号)”这样的形式表示。
接着,在步骤S152中,多媒体数据获取部21保存声音数据,生成其文件名或者保存目的地URL(U)。此外,声音数据的保存目的地既可以为存储部30内的未图示的存储区域,也可以为外部的存储装置。
在步骤S153中,多媒体数据获取部21对存储于笔记存储部32的笔记管理数据追加新的笔记数据(记录(record)),在“项目指针”中输入上述“项目指针(P)”,在“声音数据文件”中输入上述“文件名或者保存目的地URL(U)”,在“变换状况”中输入“未变换”。“变换结果”以及“失败内容”设为空(空白:blank)。
接着,在图3的步骤S16中,信息处理装置1在变换控制部22的控制之下,执行笔记变换处理。
图5是示出笔记变换处理的详细内容的流程图。
首先,在步骤S161中,变换控制部22监视存储于笔记存储部32的笔记管理数据,判定是否有变换状况为“未变换”的笔记数据。在没有“未变换”的笔记的情况(否)下,笔记变换处理结束。在有“未变换”的笔记数据的情况(是)下,转移到步骤S162。
在步骤S162中,变换控制部22从笔记存储部32取出作为变换状况=“未变换”的笔记数据的笔记(mi)。
在步骤S163中,变换控制部22将笔记管理数据中的笔记mi的变换状况变更为“变换过程中”。
在步骤S164中,变换控制部22在声音辨识客户端221的控制之下,开始添加于笔记mi的声音数据的变换处理。在实施方式中,声音辨识客户端221根据笔记mi所记载的文件名或者URL来获取声音数据,将该声音数据发送到服务器100,等待变换结果从服务器100返回来。变换控制部22当探测到来自服务器100的变换结果的接收或者与服务器100的通信失败等预定的条件时,转移到步骤S165。
在步骤S165中,变换控制部22判定变换(声音辨识)是否成功。在变换成功的情况下、即得到了声音辨识结果的情况(是)下,转移到步骤S166。
在步骤S166中,变换控制部22使存储于笔记存储部32的笔记管理数据内的笔记mi的变换状况成为“已变换”。
在步骤S167中,变换控制部22将声音辨识结果的文本设置于笔记管理数据内的变换结果这栏。
另一方面,当在步骤S165中被判定为变换失败的情况(否)下,转移到步骤S168。
在步骤S168中,变换控制部22使存储于笔记存储部32的笔记管理数据内的笔记mi的变换状况成为“变换失败”。
在步骤S169中,变换控制部22将判定出的失败内容设置于笔记管理数据内的笔记mi的失败内容中。
当步骤S167或者S169结束时,处理再次返回到步骤S161。然后,如果尚有未变换的笔记,则变换控制部22取出该笔记,继续进行处理。当在步骤S161中有多个未变换的笔记的情况下,也可以从在时间上早的笔记起依次变换。当被判定为没有未变换的笔记时,结束笔记变换处理,返回到图3的步骤S17。
在上述笔记变换处理中,一次仅变换1个笔记,但在能够利用多个声音辨识服务的情况、声音辨识服务一次允许多个声音辨识的情况等下,也可以并行地进行多个笔记的变换。
在步骤S17中,信息处理装置1监视存储于笔记存储部32的笔记管理数据。然后,在笔记管理数据被变更的情况下,在显示控制部23的控制之下,为了更新显示而生成基于笔记管理数据的显示并进行输出,显示于输出设备3。
图9示出作为输出设备3的显示器所显示的笔记显示画面的一个例子。笔记显示画面包括记录数据显示区域60、笔记显示区域61以及再生用窗口63。在该例子中,对记录数据显示区域60所显示的记录数据添加有4个笔记,在笔记显示区域61,将所添加的笔记分别按行进行显示(61a~61d)。在笔记显示区域61针对每个笔记而包括表示根据声音数据的文件名生成的日期时间的文本611、表示项目指针的文本612、声音数据再生按钮613、以及声音数据的内容或者表示变换处理的进展状况的文本614。在该例子中,声音数据的内容或者表示变换处理的进展状况的文本614显示声音辨识结果,如果为变换过程中,则显示表示正在变换的图标(时钟标记)、或者失败内容。当声音数据再生按钮613被按压后,显示再生用窗口63。再生用窗口63包括识别再生对象的标题部631、拖动条632、再生按钮633以及停止按钮634。例如用户按压再生按钮633,从而再生声音数据。
此外,在该例子中,作为表示项目指针的文本612,使用了“(项目的行头)-(项目的列头)”的形式,但并不限于此,除此以外,也可以使用“(行编号,列编号)”等任意的形式。
例如行61a作为文本611而显示“08/21 10:30”,表示在“8月21日10:30”存在被录音的笔记。行61a另外作为文本612而显示“2-判定”,表示笔记被添加于行编号2(RW2)的“判定”栏(CL7)。行61a另外作为文本614而显示作为声音数据的变换结果的“在测定时有异常声音”。此外,也可以与这样的声音数据的变换结果一起,显示表示“变换完成”、“已变换”这样的变换状况的文本。
行61b作为文本614而显示“辨识失败(网络未连接)”,表示由于网络未连接的原因而声音数据的辨识(变换)失败了。行61c作为文本614而显示时钟标记以及“(辨识过程中)”的字符,表示声音数据为辨识(变换)处理过程中。行61d作为文本614而显示“(等待辨识)”,表示尚未实施辨识(变换)处理(未实施)。
根据实施方式,辨识结果和失败内容也可以以能够区分的方式显示。例如,也可以是辨识结果以通常的文本颜色(黑色等)显示,失败内容以出错用的文本颜色(红色等)显示。除此之外,也可以在辨识失败的情况下显示专用的图标。既可以使用表示辨识过程中(变换过程中)或者等待辨识(未变换)的图标,也可以如图所示以文本显示其意思。
除了如上所述将笔记添加目的地的项目与笔记通过文本显示关联起来之外,也可以采用将附加编号的图标显示于记录数据内的添加有笔记的项目,在笔记显示部分显示对应的编号的方法。
图10A示出这样的笔记显示画面的一个例子。在图10A中,在记录数据显示区域60显示有“※1”~“※4”的图标,分别表示笔记的添加目的地项目。在笔记显示区域61,不显示图9所示的表示项目指针的文本612,而显示与记录数据显示区域60的“※1”~“※4”对应的项目指针615。
另外,也可以以使添加有笔记的项目的背景颜色分别成为不同的颜色而使对应的笔记的显示栏也成为同样颜色这样的方式使用颜色来表示关联建立。
图10B示出这样的笔记显示画面的一个例子。示出了作为笔记的添加目的地的记录数据显示区域60内的项目和笔记显示区域61内的各行以相同的颜色显示来对应。
如上那样,在第1实施方式中,当辨识出预定的声音命令时,笔记添加功能被启动。另外在执行笔记添加功能的期间,笔记变换处理始终进行动作。通过笔记的取入、追加、变换等处理来更新笔记存储部32内的数据,每当数据被更新时,显示控制部更新显示。
此外,在上述实施方式中,作为变换结果而显示有声音辨识结果的文本,但变换控制部22在不是声音辨识的情况下、在不返回文本的情况下,将其以能够在画面上显示的形式进行显示即可。例如,作为表示多媒体数据的内容的显示数据,也可以生成图标、图像并显示。
(1-3)效果
如以上说明,本发明的第1实施方式的信息处理装置1将针对表单等记录数据作为笔记而添加的多媒体数据取入,变换为表示该多媒体数据的内容的显示数据,与添加目的地的项目关联起来,将变换后的显示数据或者表示变换处理的进展状况的信息与记录数据一起显示。在多媒体数据为声音数据的情况下,信息处理装置1将声音辨识的进展状况和声音辨识结果的文本与声音笔记的添加目的地项目关联起来显示,进而在声音辨识失败的情况下显示与其原因有关的信息。在多媒体数据为声音数据以外的情况下,信息处理装置1也同样地,将向表示其内容的显示数据的变换处理的进展状况或者变换结果与添加目的地项目关联起来显示。这样,信息处理装置1保持原样地显示记录数据,并一览性高地显示与添加目的地项目对应起来的笔记内容。作为显示的进展状况,包括是未变换、还是变换过程中、还是变换失败的信息。在变换失败的情况下,还能够显示其是起因于网络出错还是起因于服务器方出错的信息。由此,信息处理装置1的用户只要观看记录数据,就能够一眼看出笔记的内容,另外在未显示笔记内容的情况下,也能够一眼看出其原因而研究适当的应对。
另外,由此,例如在制造保养的现场,操作人员将操作结果向表单等表通过声音输入数据时,无需使手放开,就能够输入声音笔记。进而当在多个操作人员间共享已记录的数据时,也能够一眼看出笔记的内容来确认。
[第2实施方式]
第2实施方式的信息处理装置1对于向记录数据的项目的输入也使用声音辨识,包括笔记添加操作在内全部通过声音来进行。
更具体而言,第2实施方式的信息处理装置1使用输入次序列表来进行向表单等记录数据的声音输入。在声音输入处理中,信息处理装置1从输入次序列表依照次序编号按顺序每次取出一个输入次序。然后,使用与在取出的输入次序中设定的输入形式相应的命令词典,对发出的声音进行命令辨识。例如,如果输入形式为“数值”,则使用如能够辨识用于输入数值的命令和笔记添加用的命令这两方那样的命令词典。
以下,关于第2实施方式,以与第1实施方式的不同处为中心进行说明。
(2-1)结构
图11示出第2实施方式的信息处理装置1的功能结构。对与第1实施方式相同的结构附加相同的参照符号,省略详细的说明。此外,硬件结构能够采用与第1实施方式相同的结构。
第2实施方式的信息处理装置1与第1实施方式同样地,具备输入输出接口11、通信接口12、控制部20以及存储部30。
第2实施方式的信息处理装置1的存储部30除了具备记录数据存储部31以及笔记存储部32之外,还具备输入次序存储部33和词典存储部34。
输入次序存储部33存储指定向记录数据的项目的输入顺序的、预先定义的输入次序列表。控制部20依照该列表,针对输入对象项目,将声音辨识出的文本作为值而输入。当在值的输入过程中辨识出笔记添加用命令时,进行笔记添加。
词典存储部34存储为了辨识声音命令而使用的命令词典。
第2实施方式的信息处理装置1的控制部20除了具备多媒体数据获取部21、变换控制部22以及显示控制部23之外,还具备项目确定部24、声音数据获取部25以及命令辨识部26。
项目确定部24作为确定输入对象项目的确定部而进行根据存储于输入次序存储部33的输入次序列表来确定记录数据中的当前的输入次序的对象项目的处理。
声音数据获取部25作为第2获取部而进行获取经由麦克风等输入的声音数据的处理。声音数据获取部25也可以与多媒体数据获取部21为一体的。
命令辨识部26为轻型声音辨识功能部,作为终端上的声音辨识部进行动作。命令辨识部26能够从获取到的声音数据辨识出输入到记录数据的项目的内容(例如简单的数值、单词)、笔记添加用的命令(例如“对之前的项目追加声音笔记”、“追加声音笔记”、“追加照片笔记”)、声音笔记结束用的命令(例如“结束声音笔记”)等简单的命令。命令辨识部26辨识的内容按照存储于词典存储部34的命令词典被指定。命令词典将能够辨识的词汇及其组合作为列表而保持。作为命令辨识,例如既可以使用专利文献2所记载的技术,也可以使用其它技术。
(2-2)动作
接下来,说明由如上那样构成的第2实施方式的信息处理装置1进行的信息处理动作。
图12是示出由第2实施方式的信息处理装置1进行的处理次序和处理内容的一个例子的流程图。
在步骤S21中,信息处理装置1在声音数据获取部25的控制之下,监视声音输入的受理。当用户经由麦克风等进行发声时,信息处理装置1将该发声作为声音输入而受理,使声音数据获取部25作为声音数据而获取,并且转移到步骤S22。
在步骤S22中,信息处理装置1进行声音输入处理。
图13是示出声音输入处理的详细内容的流程图。
首先,在步骤S221中,信息处理装置1在项目确定部24的控制之下,读出存储于输入次序存储部33的输入次序列表,判定输入次序列表是否为空,即是否有接下来输入的对象项目。如果输入次序列表不为空(否),则转移到步骤S222,如果输入次序列表为空(是),则结束声音输入处理。
在步骤S222中,项目确定部24从输入次序列表取出接下来输入的对象项目的信息,交付给命令辨识部26。
在此,图14示出输入次序列表的一个例子。输入次序列表70将次序编号70a、对象项目70b以及输入形式70c的组作为列表而保持。对象项目70b将输入的对象项目作为指针(行编号,列编号)而显示。输入形式70c表示应输入到对象项目70b所示的项目的输入形式,例如指定数值或者单词(能够辨识的单词)。命令辨识部26能够辨识该输入形式、笔记添加用的命令以及笔记结束用的命令。第2实施方式的信息处理装置1依照通过这样的输入次序列表70预先指定的输入顺序而进行动作。
在步骤S223中,命令辨识部26根据输入次序列表所指定的信息,使用命令词典,进行来自由声音数据获取部25获取到的声音数据的命令辨识处理。
在步骤S224中,命令辨识部26判定是否从声音数据辨识出声音笔记添加用命令。声音笔记添加用命令为用于指示声音笔记的输入开始的命令,例如,能够作为向当前的项目的声音笔记添加用命令而包含“追加声音笔记”,作为向输入次序中的前1个项目的声音笔记添加用命令而包含“对之前的项目追加声音笔记”等。在用户发声的内容不是笔记添加用命令的情况、即无法从声音数据辨识出声音笔记添加用命令的情况(否)下,命令辨识部26判定为辨识出的内容指示向项目输入值,转移到步骤S225。
在步骤S225中,命令辨识部26输出用于将从声音数据辨识出的内容输入到记录数据的对象项目(在输入次序中设定的项目)的指示。向存储于记录数据存储部31的记录数据输入值的输入处理既可以由命令辨识部26执行,也可以由控制部20的未图示的其它功能部执行。
另一方面,当在步骤S224中,声音笔记添加用命令被辨识出的情况(是)下,转移到步骤S226。
在步骤S226中,命令辨识部26判定是否为向之前的项目的添加命令。该判定在依照如图14所示的输入次序列表70而进行声音输入的情况下,为了确定声音笔记的添加对象项目而进行。
例如,在图14中,首先执行次序编号1。在次序编号1中,命令辨识部26辨识作为由输入次序列表70的次序编号1指定的输入形式的“数值”、或者笔记添加用命令。此时,当用户发声为“3.91”时,命令辨识部26从该发声中话辨识数值“3.91”,将辨识出的值“3.91”输入到对象项目(2,3)(输入后的记录数据参照图8)。接着,项目确定部24自动地进入到接下来的输入项目,将在次序编号2中指定的项目(2,4)确定成当前的项目。当用户接下来发声为“4.05”时,命令辨识部26针对当前的项目(2,4)而输入辨识出的值“4.05”,同样地自动地进入到接下来的输入项目。同样地进入到次序编号3、4,在次序编号4中,命令辨识部26辨识单词[好]或[否]或者笔记添加用命令。在该次序编号4中,在用户发声为“对之前的项目追加声音笔记”的情况下,命令辨识部26命令辨识成是针对作为之前的次序的次序编号3的输入对象项目(2,5)的笔记的添加指示。另一方面,在用户只是发声为“追加声音笔记”的情况下,命令辨识部26辨识成是针对当前的输入对象项目(2,7)的笔记的添加指示。
此外,输入对象项目也可以通过声音命令来指定。例如,也可以是用户(操作人员)发声为“行编号2,列编号3”,对其进行命令辨识,从而将项目(2,3)确定成输入对象项目。在该情况下,以能够辨识“行编号”、“列编号”、数值的方式构建命令词典即可。输入对象项目的指定并不限于这些手法,也可以使用户通过触摸操作、鼠标操作来指定输入对象项目。
当在步骤S226中被判定为是向之前的项目的添加命令的情况(是)下,转移到步骤S227。在步骤S227中,命令辨识部26如上所述将在前1个输入次序中设定的对象项目作为添加目的地项目。当在步骤S226中被判定为不是向之前的项目的添加命令的情况(否)下,转移到步骤S228。在步骤S228中,命令辨识部26如上所述将在当前的输入次序中设定的对象项目作为添加目的地项目。
在步骤S229中,命令辨识部26对多媒体数据获取部21指示数据获取,开始声音笔记录音。此时,也可以如第1实施方式那样显示如图8所示的笔记取入画面。此外,与第1实施方式同样地,不限于声音笔记,也可以将静态图像、动态图像作为笔记而取入。在该情况下,命令辨识部26例如构成为能够辨识“追加图像笔记”这样的声音命令,当辨识出这样的声音命令时,对多媒体数据获取部21进行指示,使摄像机启动,开始摄影。
在由多媒体数据获取部21进行数据获取的期间,命令辨识部26接着在步骤S230中监视来自用户的笔记结束用命令的输入。例如当辨识出“结束声音笔记”等笔记结束用命令时(是),转移到步骤S231。或者也可以不通过笔记结束用命令,而当经过了一定时间就结束数据获取。
在步骤S231中,结束声音笔记录音,返回到步骤S223。
当假设在步骤S224中,从用户的发声声音未辨识出按照命令词典指定的命令的情况下,也可以对用户显示催促再次的发声的消息。
接着,信息处理装置1返回到图12的步骤S23,在步骤S23中进行笔记追加处理,在步骤S24中进行笔记变换处理,在步骤S25中进行显示的生成及输出处理。步骤S23~S25的处理能够使用与对于第1实施方式参照图4以及图5进行说明的处理同样的处理。
如上那样,第2实施方式的信息处理装置1使用由命令辨识部26进行的辨识处理和由变换控制部22进行的辨识处理这两个种类的辨识处理。由命令辨识部26进行的辨识处理被用于向项目自身的输入并高速地进行动作,但辨识对象是限定性的(例如,触发字词检测、列表型的声音命令辨识等)。由变换控制部22进行的辨识处理被用于根据多媒体数据生成显示数据,花费时间,但不是限定性的(例如,自由发声的声音辨识、来自动态图像的动作辨识等)。
另外,在第2实施方式的信息处理装置1中,项目确定部24确定输入对象项目。通过使用如上所述的输入次序列表,项目确定部24能够针对每个次序确定对象项目。也可以不使用输入次序列表,而使得能够用命令辨识部26辨识项目名。或者,也可以在笔记被取入后,对用户进行询问输入对象项目。
(2-3)效果
如以上说明,本发明的第2实施方式的信息处理装置1除了起到第1实施方式的效果之外,还能够在利用声音进行向项目的值输入的中途通过声音来受理笔记添加指示。因此,用户在向记录数据利用声音进行记录过程中不使用手,因而无需停下操作的手,就能够进行笔记的添加。预先制作适当的命令词典并进行存储,从而能够高速地且不被网络状况影响地在信息处理装置1内进行用于值的输入以及笔记添加的命令辨识。
[第3实施方式]
第3实施方式的信息处理装置1在有变换失败的笔记的情况下,在显示数据时、成为能够消除出错的状态时,提示有变换失败的笔记,并且进行数据的再次变换。以下,关于第3实施方式,以与第1实施方式的不同处为中心而进行说明。
(3-1)结构
图15示出第3实施方式的信息处理装置1的功能结构。依然对与第1实施方式同样的结构附加相同的参照符号,省略详细的说明。此外,硬件结构能够采用与第1实施方式相同的结构。
第3实施方式的信息处理装置1与第1实施方式同样地,具备输入输出接口11、通信接口12、控制部20以及存储部30。
第3实施方式的信息处理装置1的控制部20与第1实施方式同样地,具备多媒体数据获取部21、变换控制部22以及显示控制部23。变换控制部22除了具备声音辨识客户端221之外,还具备监视部222和再次变换控制部223。
监视部222作为第1监视部而监视存储于笔记存储部32的笔记管理数据内有无变换失败数据。监视部222另外作为第2监视部而监视声音辨识客户端221与服务器100之间的通信的状况。
再次变换控制部223接受由监视部222进行的监视的结果,对声音辨识客户端221指示数据的再次变换。
(3-2)动作
第3实施方式的信息处理装置1与第1实施方式同样地,能够进行笔记的取入、追加、变换以及显示处理。
第3实施方式的信息处理装置1进而在任意的定时执行以下的再次变换处理。
(3-2-1)笔记再次变换处理1
第3实施方式的信息处理装置1作为第1实施例而进行笔记再次变换处理1。在通过再次尝试进行变换失败的笔记的数据的变换而有可能使此前变换失败的笔记能够成为已变换的定时进行笔记再次变换处理1。例如,考虑曾关闭表单数据并再次打开的定时、网络连接状况发生变化的定时。
图16示出笔记再次变换处理1的处理的一个例子。在该例子中,说明在打开表单数据的定时进行的再次变换处理。
首先,在步骤S61中,信息处理装置1在打开了表单数据的定时,在监视部222的控制之下,判定是否有存储于笔记存储部32的数据中的、变换状况为“变换失败”且失败内容为“变换结果为空”以外的笔记。这是因为在声音辨识结果为空的情况下,在原来的数据中存在某个或某些问题(需要重新输入声音),所以再次变换处理没有意义。如果没有与步骤S61的条件对应的笔记(否),则处理结束。
在有对应的笔记的情况(是)下,在步骤S62中,在再次变换控制部223的控制之下,从笔记存储部32取出对应的笔记(笔记数据)(mi),交付给声音辨识客户端221。
以后的处理能够采用与在第1实施方式中参照图5说明的处理同样的处理(步骤S163~S169)。即,在步骤S63中,将笔记管理数据中的笔记mi的变换状况变更为“变换过程中”。在步骤S64中,变换控制部22在声音辨识客户端221的控制之下,开始添加于笔记mi的声音数据的变换处理。步骤S65中,变换控制部22判定变换(声音辨识)是否成功。在变换成功的情况(是)下,转移到步骤S66。在步骤S66中,变换控制部22使存储于笔记存储部32的笔记管理数据内的笔记mi的变换状况成为“已变换”。接着,在步骤S67中,变换控制部22将声音辨识结果的文本设置于笔记管理数据内的变换结果。另一方面,当在步骤S65中变换失败的情况(否)下,转移到步骤S68。在步骤S68中,变换控制部22使存储于笔记存储部32的笔记管理数据内的笔记mi的变换状况成为“变换失败”。在步骤S69中,变换控制部22将判定出的失败内容设置于笔记管理数据内的笔记mi的失败内容。
当步骤S67或者S69结束时,处理再次返回到步骤S61。当在步骤S61中有多个对应的笔记的情况下,也可以从在时间上早的笔记起依次作为再次变换的对象。另外,再次变换曾失败的笔记也可以被设定成在表单数据临时结束并再次启动之前、或者满足某个或某些预定的条件之前、或者经过预定的时间之前,不作为再次变换的对象。
(3-2-2)笔记再次变换处理2
第3实施方式的信息处理装置1作为第2实施例还能够进行笔记再次变换处理2。在网络连接状况发生变化的定时进行笔记再次变换处理2。
图17示出笔记再次变换处理2的处理的一个例子。在该例子中,说明由监视部222进行的监视的结果是在探测到辨识客户端221与服务器100之间的网络连接状况发生了变化的定时进行的再次变换处理。
在步骤S71中,再次变换控制部223判定从笔记存储部32是否有变换状况为“变换失败”且失败内容为网络关系出错的笔记。如果没有与步骤S71的条件对应的笔记(否),则处理结束。
在有对应的笔记的情况(是)下,在步骤S72中,在再次变换控制部223的控制之下,从笔记存储部32取出对应的笔记(笔记数据)(mi),交付给声音辨识客户端221。
以后的处理能够采用与在第1实施例(笔记再次变换处理1)中说明的处理同样的处理。即,在步骤S73中,将笔记管理数据中的笔记mi的变换状况变更为“变换过程中”。在步骤S74中,变换控制部22在声音辨识客户端221的控制之下,开始添加于笔记mi的声音数据的变换处理。在步骤S75中,变换控制部22判定变换(声音辨识)是否成功。在变换成功的情况(是)下,转移到步骤S76。在步骤S76中,变换控制部22使存储于笔记存储部32的笔记管理数据内的笔记mi的变换状况成为“已变换”。接着,在步骤S77中,变换控制部22将声音辨识结果的文本设置于笔记管理数据内的变换结果。另一方面,当在步骤S75中变换失败的情况(否)下,转移到步骤S78。在步骤S78中,变换控制部22使存储于笔记存储部32的笔记管理数据内的笔记mi的变换状况成为“变换失败”。在步骤S79中,变换控制部22将判定出的失败内容设置于笔记管理数据内的笔记mi的失败内容。
当步骤S77或者S79结束时,处理再次返回到步骤S71。当在步骤S71中有多个对应的笔记的情况下,也可以从在时间上早的笔记起依次作为再次变换的对象。另外,再次变换曾失败的笔记也可以被设定成直至在满足某个或某些预定的条件之前、或者经过预定的时间之前,不作为再次变换的对象。
(3-3)效果
如以上说明,本发明的第3实施方式的信息处理装置1除了起到第1实施方式的效果之外,通过笔记再次变换处理1或者笔记再次变换处理2,即使是变换失败的笔记,针对满足预定的条件的笔记也自动地尝试执行再次变换。由此,无需劳烦用户动手,即使是曾变换失败的笔记也有可能会能够自动地得到变换结果,能够提高可用性。
进而,根据第3实施方式,在持有作为信息处理装置1的平板终端地在所在地移动等时在与无线网络连接的定时等,声音笔记自动地再次变换,使得能够阅览其内容。此外,再次变换处理既可以自动地进行,也可以对操作人员确认一次是否进行再次变换。
[第4实施方式]
第4实施方式的信息处理装置1构成为与第1实施方式同样地具有声音笔记添加功能,进而针对每个笔记而具有变换优先级,从优先级高的笔记起进行变换。以下,关于第4实施方式,以与第1实施方式的不同处为中心而进行说明。
(4-1)结构
第4实施方式的信息处理装置1具有如图1以及图2所示的、与第1实施方式相同的功能结构以及硬件结构。
在第4实施方式中,笔记存储部32除了包含关于第1实施方式说明的笔记管理数据55之外,还包含指定笔记的变换优先级的信息。
图18示出第4实施方式的笔记管理数据80的一个例子。另外,在笔记管理数据80中,也是各行相当于1个笔记,作为项目名,包括“项目指针”80a、“声音数据文件”80b、“优先级”80c、“变换状况”80d、“变换结果”80e、“失败内容”80f。
与笔记管理数据55同样地,项目指针80a表示添加有笔记的项目,声音数据文件80b表示向多媒体数据的指针,变换状况80d表示笔记的变换状况,变换结果80e表示笔记的变换成功的情况下的结果,失败内容80f表示笔记的变换失败的情况下的失败的内容。
另一方面,在笔记管理数据80中,优先级80c表示由变换控制部22进行的变换的优先级的高低。优先级80c的值在变换状况为“已变换”或者“变换过程中”以外的笔记中保持,初始值为0。
(4-2)动作
第4实施方式的信息处理装置1进行与关于第1实施方式参照图3~5说明的动作同样的动作。但是,在图5所示的流程的步骤S162中,在从笔记存储部32取出1个笔记时,以取出变换状况为未变换、进而其中变换优先级的值最高的笔记的方式进行动作。在有多个具有相同的优先级的值的笔记的情况下,也可以从在时间上早的笔记起依次变换。
优先级80c的值在添加有笔记的时间点作为初始值0而保存。并且,通过添加笔记的用户或者阅览了记录数据的用户的操作,优先级的值被任意地变更。例如,在有多个未变换的笔记的情况下,用户进行点击显示于触摸屏的笔记显示区域61等选择笔记的操作,从而能够使选择出的笔记的变换优先级变高。
图19示出这样的笔记优先级变更的一个例子。与第1实施方式同样地,作为笔记显示画面,显示有记录数据显示区域60和笔记显示区域61。笔记显示区域61例如将显示成“等待辨识”的未变换的笔记以能够点击的方式进行显示。也可以当由用户US点击这些笔记时,在存储于笔记存储部32的管理数据80中,对应的笔记的优先级+1。当用户US点击多次相同的笔记时,优先级增加点击的次数。并不限于此,也可以通过包括声音命令在内的其它方法来变更优先级。
(4-3)效果
如以上说明,本发明的第4实施方式的信息处理装置1除了起到第1实施方式的效果之外,还针对每个笔记设定优先级,从优先级高的笔记起依次进行变换。由此,例如用户能够在有想要立即确认内容的笔记的情况下,通过简易的操作来提高变换的优先级。用户无需等待直到其它笔记的辨识结束为止,就能够提前确认想要知晓的笔记的内容。
根据以上叙述的至少一个实施方式的信息处理装置以及信息处理方法,能够使得能够一眼看出添加于记录数据的笔记的内容,在笔记的内容不被显示的情况下也能够推测其原因。
[其它实施方式]
此外,本发明并不限定于上述实施方式。例如,由变换控制部22进行的数据变换处理未必需要经由在线服务器进行,也可以在变换控制部22内实施所有的变换处理。另外,关于笔记的变换顺序,无需从在时间上早的笔记起进行,也可以根据作为笔记而添加的多媒体数据的种类、大小来进行。另外,关于变换优先级,也可以使得不论用户US的操作如何,系统都自动地设定。
信息处理装置1所具备的各功能部也可以分散配置于多个装置,这些装置相互进行协作,从而进行处理。另外各功能部也可以通过使用电路来实现。电路既可以为实现特定的功能的专用电路,也可以为如处理器那样的通用电路。同样地,存储部30的一部分也可以与信息处理装置1分体的。例如,也可以将记录数据存储部31设置于能够经由网络而与信息处理装置1进行通信的其它装置。
进而,以上说明的各处理的流程并不限定于说明的次序,既可以调换几个步骤的顺序,也可以同时并行地实施几个步骤。另外,以上说明的一连串的处理无需在时间上连续地执行,也可以在任意的定时执行各步骤。例如,图3所示的流程图仅仅是为了说明信息处理装置1中的处理的概要而示出的流程图,未必需要在时间上连续地执行各步骤。
以上记载的手法作为能够使计算机(计算机)执行的程序(软件单元),例如还能够储存于磁盘(软盘(注册商标)、硬盘等)、光盘(CD-ROM、DVD、MO等)、半导体存储器(ROM、RAM、闪存存储器等)等记录介质(存储介质),另外利用通信介质进行传送而分发。此外,作为储存于介质方的程序,还包括在计算机内构成使计算机执行的软件单元(不仅包括执行程序,还包括表格、数据构造)的设定程序。实现上述装置的计算机读入记录于记录介质的程序,另外,根据情况,利用设定程序来构建软件单元,由该软件单元控制动作,从而执行上述处理。此外,在本说明书中所称的记录介质不限于分发用,包括设置于计算机内部或者经由网络连接的仪器的磁盘、半导体存储器等存储介质。
说明了本发明的几个实施方式,但这些实施方式是作为例子而提出的,未意图限定发明的范围。这些新的实施方式能够以其它各种方式被实施,能够在不脱离发明的要旨的范围进行各种省略、置换、变更。这些实施方式及其变形包含于发明的范围中、要旨中,并且包含于权利要求书所记载的发明及与其等同的范围。
此外,能够将上述实施方式总结成以下的技术方案。
技术方案1
一种信息处理装置,具备:
第1获取部,获取与具有多个项目的记录数据的项目关联起来的多媒体数据;
变换部,进行从所述多媒体数据向表示该多媒体数据的内容的第1显示数据的变换处理;以及
显示控制部,在所述变换处理完成的情况下将所述第1显示数据与所述记录数据的所述项目关联起来显示,在所述变换处理未完成的情况下将表示所述变换处理的进展状况的第2显示数据与所述记录数据的所述项目关联起来显示。
技术方案2
根据上述技术方案1,其中,
所述显示控制部作为所述第2显示数据而显示表示所述变换处理为未实施、所述变换处理为处理过程中或者所述变换处理失败的数据。
技术方案3
根据上述技术方案1,其中,
所述多媒体数据为声音数据、静态图像数据或动态图像数据中的任意数据或者它们的组合。
技术方案4
根据上述技术方案1,其中,
所述变换部在所述变换处理失败的情况下,输出与该失败的原因有关的信息,所述显示控制部进一步将与所述失败的原因有关的信息和所述第2显示数据一起显示。
技术方案5
根据上述技术方案1,还具备:
确定部,确定所述记录数据的所述多个项目中的输入对象项目;
第2获取部,获取与所述输入对象项目关联起来的声音数据;以及
命令辨识部,从所述声音数据辨识与所述多媒体数据的获取相关的声音命令或者与应输入到所述输入对象项目的值相关的字符信息,
所述命令辨识部在从所述声音数据辨识出所述声音命令的情况下,针对所述第1获取部指示开始所述多媒体数据的获取,在从所述声音数据辨识出所述字符信息的情况下,将所述字符信息作为针对所述输入对象项目的输入值而输出。
技术方案6
根据上述技术方案1,还具备:
第1存储部,该第1存储部与关联有所述多媒体数据的项目的识别信息相关联地存储表示由所述变换部进行的变换处理的结果的信息,
所述变换部还具备:
第1监视部,监视存储于所述第1存储部的信息;以及
再次变换指示部,在所述监视的结果是表示所述变换处理的结果的信息满足预定的条件的情况下,指示使用对应的多媒体数据再次尝试执行所述变换处理。
技术方案7
根据上述技术方案6,其中,
所述变换部还具备:
变换客户端部,使经由网络连接的变换服务器执行所述变换处理的一部分;以及
第2监视部,监视所述变换客户端部与所述变换服务器之间的通信的状况,
所述再次变换指示部在由所述第1监视部进行的监视的结果是所述信息表示由于通信出错引起的所述变换处理的失败的情况下,在由所述第2监视部进行的监视的结果是所述通信的状况发生了变化时,指示使用所述对应的多媒体数据来再次尝试执行所述变换处理。
技术方案8
根据上述技术方案1,还具备:
第2存储部,该第2存储部存储识别所述多媒体数据的信息和表示该多媒体数据的变换处理的优先级的高低的优先信息,
所述变换部在存在多个作为变换处理的对象的多媒体数据时,读出存储于所述第2存储部的所述优先信息,从而从优先级高的多媒体数据起依次进行变换处理,
存储于所述第2存储部的优先信息根据针对所述第2显示数据的显示的用户输入而被更新。
技术方案9
根据上述技术方案1,其中,
所述变换部进行从所述多媒体数据向表示来自所述多媒体数据所包含的声音数据的声音辨识结果的文本数据、表示来自所述多媒体数据所包含的图像数据的字符辨识结果的文本数据、表示从所述多媒体数据所包含的图像数据抽取的特征的文本数据或者表示从所述多媒体数据所包含的动态图像数据抽取的特征的文本数据的变换处理。
技术方案10
一种信息处理方法,由信息处理装置执行,其中,所述信息处理方法具备如下步骤:
获取与具有多个项目的记录数据的项目关联起来的多媒体数据;
进行从所述多媒体数据向表示该多媒体数据的内容的第1显示数据的变换处理;以及
在所述变换处理完成的情况下将所述第1显示数据与所述记录数据的所述项目关联起来显示,在所述变换处理未完成的情况下将表示所述变换处理的进展状况的第2显示数据与所述记录数据的所述项目关联起来显示。
技术方案11
一种记录介质,记录有使计算机执行由上述技术方案1至9中的任意一项所记载的装置的各功能部进行的处理的程序。
Claims (11)
1.一种信息处理装置,具备:
第1获取部,获取与具有多个项目的记录数据的项目关联起来的多媒体数据;
变换部,进行从所述多媒体数据向表示该多媒体数据的内容的第1显示数据的变换处理;以及
显示控制部,在所述变换处理完成的情况下将所述第1显示数据与所述记录数据的所述项目关联起来显示,在所述变换处理未完成的情况下将表示所述变换处理的进展状况的第2显示数据与所述记录数据的所述项目关联起来显示。
2.根据权利要求1所述的信息处理装置,其中,
所述显示控制部作为所述第2显示数据而显示表示所述变换处理为未实施、所述变换处理为处理过程中或者所述变换处理失败的数据。
3.根据权利要求1所述的信息处理装置,其中,
所述多媒体数据为声音数据、静态图像数据或动态图像数据中的任意数据或者它们的组合。
4.根据权利要求1所述的信息处理装置,其中,
所述变换部在所述变换处理失败的情况下,输出与该失败的原因有关的信息,
所述显示控制部进一步将与所述失败的原因有关的信息和所述第2显示数据一起显示。
5.根据权利要求1所述的信息处理装置,还具备:
确定部,确定所述记录数据的所述多个项目中的输入对象项目;
第2获取部,获取与所述输入对象项目关联起来的声音数据;以及
命令辨识部,从所述声音数据辨识与所述多媒体数据的获取相关的声音命令或者与应输入到所述输入对象项目的值相关的字符信息,
所述命令辨识部在从所述声音数据辨识出所述声音命令的情况下,针对所述第1获取部指示开始所述多媒体数据的获取,在从所述声音数据辨识出所述字符信息的情况下,将所述字符信息作为针对所述输入对象项目的输入值而输出。
6.根据权利要求1所述的信息处理装置,还具备:
第1存储部,该第1存储部与关联有所述多媒体数据的项目的识别信息相关联地存储表示由所述变换部进行的变换处理的结果的信息,
所述变换部还具备:
第1监视部,监视存储于所述第1存储部的信息;以及
再次变换指示部,在所述监视的结果是表示所述变换处理的结果的信息满足预定的条件的情况下,指示使用对应的多媒体数据再次尝试执行所述变换处理。
7.根据权利要求6所述的信息处理装置,其中,
所述变换部还具备:
变换客户端部,使经由网络连接的变换服务器执行所述变换处理的一部分;以及
第2监视部,监视所述变换客户端部与所述变换服务器之间的通信的状况,
所述再次变换指示部在由所述第1监视部进行的监视的结果是所述信息表示由于通信出错引起的所述变换处理的失败的情况下,在由所述第2监视部进行的监视的结果是所述通信的状况发生了变化时,指示使用所述对应的多媒体数据来再次尝试执行所述变换处理。
8.根据权利要求1所述的信息处理装置,还具备:
第2存储部,该第2存储部存储识别所述多媒体数据的信息和表示该多媒体数据的变换处理的优先级的高低的优先信息,
所述变换部在存在多个作为变换处理的对象的多媒体数据时,读出存储于所述第2存储部的所述优先信息,从而从优先级高的多媒体数据起依次进行变换处理,
存储于所述第2存储部的优先信息根据针对所述第2显示数据的显示的用户输入而被更新。
9.根据权利要求1所述的信息处理装置,其中,
所述变换部进行从所述多媒体数据向表示来自所述多媒体数据所包含的声音数据的声音辨识结果的文本数据、表示来自所述多媒体数据所包含的图像数据的字符辨识结果的文本数据、表示从所述多媒体数据所包含的图像数据抽取的特征的文本数据或者表示从所述多媒体数据所包含的动态图像数据抽取的特征的文本数据的变换处理。
10.一种信息处理方法,由信息处理装置执行,所述信息处理方法具备如下步骤:
获取与具有多个项目的记录数据的项目关联起来的多媒体数据;
进行从所述多媒体数据向表示该多媒体数据的内容的第1显示数据的变换处理;以及
在所述变换处理完成的情况下将所述第1显示数据与所述记录数据的所述项目关联起来显示,在所述变换处理未完成的情况下将表示所述变换处理的进展状况的第2显示数据与所述记录数据的所述项目关联起来显示。
11.一种记录介质,记录有用于使计算机作为如下单元发挥功能的程序:
第1获取单元,获取与具有多个项目的记录数据的项目关联起来的多媒体数据;
变换单元,进行从所述多媒体数据向表示该多媒体数据的内容的第1显示数据的变换处理;以及
显示控制单元,在所述变换处理完成的情况下将所述第1显示数据与所述记录数据的所述项目关联起来显示,在所述变换处理未完成的情况下将表示所述变换处理的进展状况的第2显示数据与所述记录数据的所述项目关联起来显示。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019219591A JP7225082B2 (ja) | 2019-12-04 | 2019-12-04 | 情報処理装置、情報処理方法およびプログラム |
JP2019-219591 | 2019-12-04 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112906358A true CN112906358A (zh) | 2021-06-04 |
Family
ID=76111275
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010895533.6A Pending CN112906358A (zh) | 2019-12-04 | 2020-08-31 | 信息处理装置、信息处理方法以及记录介质 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11538475B2 (zh) |
JP (1) | JP7225082B2 (zh) |
CN (1) | CN112906358A (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7482459B2 (ja) * | 2022-09-05 | 2024-05-14 | ダイキン工業株式会社 | システム、支援方法、サーバ装置及び通信プログラム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5894306A (en) * | 1996-08-02 | 1999-04-13 | Fuji Xerox Co., Ltd. | Data display device and data record/playback device displaying consecutive data and user input in association with each other |
JP2015184487A (ja) * | 2014-03-24 | 2015-10-22 | 株式会社東芝 | 音声処理装置および音声処理方法 |
JP2016058112A (ja) * | 2014-09-05 | 2016-04-21 | 静岡県 | データ管理プログラムおよびデータ管理装置 |
CN106486113A (zh) * | 2015-08-26 | 2017-03-08 | 重庆西线科技有限公司 | 一种会议记录方法 |
CN106653077A (zh) * | 2016-12-30 | 2017-05-10 | 网易(杭州)网络有限公司 | 用于记录语音笔记的方法和装置及可读存储介质 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000132561A (ja) | 1998-10-23 | 2000-05-12 | Toshiba Corp | 情報処理装置及びこれを用いた情報処理システム |
JP2000259387A (ja) | 1999-03-10 | 2000-09-22 | Olympus Optical Co Ltd | 音声認識装置、音声認識処理プログラムを記録した記録媒体、及び音声認識処理方法 |
JP5393905B1 (ja) | 2012-12-10 | 2014-01-22 | 株式会社Pacsplus | 診療記録管理システム、診療記録受信装置、診療記録送信装置、及び診療記録管理プログラム |
JP6461660B2 (ja) | 2015-03-19 | 2019-01-30 | 株式会社東芝 | 検出装置、検出方法およびプログラム |
JP6596373B6 (ja) | 2016-03-24 | 2019-12-11 | 株式会社アドバンスト・メディア | 表示処理装置及び表示処理プログラム |
CN107665710B (zh) | 2016-07-27 | 2021-02-09 | 上海博泰悦臻网络技术服务有限公司 | 移动终端语音数据处理方法及装置 |
JP7215118B2 (ja) * | 2018-11-30 | 2023-01-31 | 株式会社リコー | 情報処理装置、情報処理システム、プログラムおよび方法 |
-
2019
- 2019-12-04 JP JP2019219591A patent/JP7225082B2/ja active Active
-
2020
- 2020-08-31 CN CN202010895533.6A patent/CN112906358A/zh active Pending
- 2020-08-31 US US17/007,413 patent/US11538475B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5894306A (en) * | 1996-08-02 | 1999-04-13 | Fuji Xerox Co., Ltd. | Data display device and data record/playback device displaying consecutive data and user input in association with each other |
JP2015184487A (ja) * | 2014-03-24 | 2015-10-22 | 株式会社東芝 | 音声処理装置および音声処理方法 |
JP2016058112A (ja) * | 2014-09-05 | 2016-04-21 | 静岡県 | データ管理プログラムおよびデータ管理装置 |
CN106486113A (zh) * | 2015-08-26 | 2017-03-08 | 重庆西线科技有限公司 | 一种会议记录方法 |
CN106653077A (zh) * | 2016-12-30 | 2017-05-10 | 网易(杭州)网络有限公司 | 用于记录语音笔记的方法和装置及可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
US11538475B2 (en) | 2022-12-27 |
JP7225082B2 (ja) | 2023-02-20 |
JP2021089576A (ja) | 2021-06-10 |
US20210174799A1 (en) | 2021-06-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11822919B2 (en) | Auto-generation of API documentation via implementation-neutral analysis of API traffic | |
US11527233B2 (en) | Method, apparatus, device and computer storage medium for generating speech packet | |
CN101681621B (zh) | 语音识别宏运行时环境 | |
CN1821956B (zh) | 用现有内容生成用于执行任务的活动内容向导可执行文件 | |
CN111886579A (zh) | 用于在集成开发环境内提供即时通信信道的系统和方法 | |
CN113285868B (zh) | 任务生成方法、设备以及计算机可读介质 | |
CN104081784A (zh) | 信息处理装置、信息处理方法和程序 | |
US10572122B2 (en) | Intelligent embedded experience gadget selection | |
US20170075797A1 (en) | Application test automation transmitting data via phone/voice calls | |
US20230291772A1 (en) | Filtering video content items | |
CN116450202A (zh) | 页面配置方法、装置、计算机设备及计算机可读存储介质 | |
US9183117B2 (en) | Method for developing and testing a connectivity driver for an instrument | |
CN112906358A (zh) | 信息处理装置、信息处理方法以及记录介质 | |
WO2022148239A1 (zh) | 信息输出方法、装置和电子设备 | |
JP2019159690A (ja) | 情報処理プログラム、情報処理方法及び情報処理装置 | |
CN103984691A (zh) | 信息处理设备,信息处理方法以及程序 | |
US20210026885A1 (en) | Filtering video content items | |
JP6828287B2 (ja) | 情報処理装置及び情報処理プログラム | |
KR102266147B1 (ko) | 전자 문서를 조작하기 위한 컴퓨터 구현 시스템 및 방법 | |
CN113542706B (zh) | 跑步机的投屏方法、装置、设备及存储介质 | |
CN107632851B (zh) | 操控记录方法及自动执行操控方法 | |
US20240303289A1 (en) | Collaborative comment analysis and modification to content | |
CN109271311B (zh) | 一种需求场景化方法及需求场景化装置 | |
JP6906942B2 (ja) | 情報処理装置、情報処理方法および情報処理プログラム | |
CN114090844A (zh) | 一种目标页面生成方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |