CN115033404A - 一种集成ai能力的智慧交互平板以及交互方法 - Google Patents

一种集成ai能力的智慧交互平板以及交互方法 Download PDF

Info

Publication number
CN115033404A
CN115033404A CN202210758568.4A CN202210758568A CN115033404A CN 115033404 A CN115033404 A CN 115033404A CN 202210758568 A CN202210758568 A CN 202210758568A CN 115033404 A CN115033404 A CN 115033404A
Authority
CN
China
Prior art keywords
service
external
transmission interface
scheduling
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210758568.4A
Other languages
English (en)
Inventor
马会广
张阳阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN202210758568.4A priority Critical patent/CN115033404A/zh
Publication of CN115033404A publication Critical patent/CN115033404A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/547Remote procedure calls [RPC]; Web services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/40Processing or translation of natural language
    • G06F40/58Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/19Recognition using electronic means
    • G06V30/191Design or setup of recognition systems or techniques; Extraction of features in feature space; Clustering techniques; Blind source separation
    • G06V30/19173Classification techniques
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02WCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO WASTEWATER TREATMENT OR WASTE MANAGEMENT
    • Y02W90/00Enabling technologies or technologies with a potential or indirect contribution to greenhouse gas [GHG] emissions mitigation

Abstract

本发明实施例公开一种集成AI能力的智慧交互平板以及交互方法。其中一实施例的一种集成AI能力的智慧交互平板,包括AI调度模块以及至少一个应用软件,应用软件响应于所述智慧交互平板所接收的调度指令生成第一调用请求以及输出根据调度指令得到的第一调度数据;AI调度模块包括具有AI能力的AI服务单元以及连接应用软件和AI服务单元的第一传输接口,其中,AI服务单元通过第一传输接口接收第一调用请求和第一调度数据并请求执行对应的AI服务,第一传输接口还将AI服务单元执行AI服务所生成的第一数据信息输出至应用软件。本发明实施例调用或集成AI能力时智慧交互平板无需再单独开发或单独接入,可以节省大量资源。

Description

一种集成AI能力的智慧交互平板以及交互方法
技术领域
本发明涉及显示技术领域。更具体地,涉及一种集成AI能力的智慧交互平板以及交互方法。
背景技术
智慧交互平板,又称交互智能平板、智能会议平板等,是通过触控技术在显示平板上进行手写,以及对内容进行操控等的人机交互操作的一体化设备。
目前,智慧交互平板以集成大量的智能(AI)算法能力为设计趋势,比如手写笔记的识别、语音识别、翻译、光学字符识别OCR等AI服务能力,但是这些AI能力一般只能在智慧交互平板的某一个软件内部集成或者调用,例如,软件A内集成有语音识别能力或可以调用具有语音识别能力的外部服务,若软件B也要使用语音识别能力,那么软件B需要再次集成该语音识别能力或者再次调用所要应用的外部服务能力,这会浪费大量的资源,增加研发人员的工作量,各个应用的统一管理难以实现。
发明内容
本发明的目的在于提供一种集成AI能力的智慧交互平板以及交互方法,以解决现有技术存在的问题中的至少一个。
为达到上述目的,本发明采用下述技术方案:
本发明第一方面提供了一种集成AI能力的智慧交互平板,包括AI调度模块以及至少一个应用软件,
所述应用软件,用于响应于所述智慧交互平板所接收的调度指令生成所述第一调用请求以及输出根据所述调度指令得到的第一调度数据;
所述AI调度模块包括具有AI能力的AI服务单元以及连接所述应用软件和所述AI服务单元的第一传输接口,其中,
所述AI服务单元用于通过所述第一传输接口接收所述第一调用请求和所述第一调度数据,并请求执行对应的AI服务,
所述第一传输接口还用于将所述AI服务单元执行AI服务所生成的第一数据信息输出至所述应用软件。
进一步的,所述AI调度模块还包括第二传输接口,连接执行AI服务的外部服务和所述AI调度模块;
所述AI服务单元还包括外部调用单元;
所述应用软件还用于响应于所述智慧交互平板所接收的调度指令生成第二调用请求以及输出根据所述调度指令得到的第二调度数据,
所述第一传输接口还用于将所述第二调用请求和所述第二调度数据传输至所述外部调用单元,
所述外部调用单元用于将所述第二调用请求和所述第二调度数据通过所述第二传输接口发送至对应的外部服务,
所述第二传输接口用于将所述外部服务根据所述第二调用请求和所述第二调度数据执行AI服务时生成的第二数据信息传输至所述外部调用单元,
所述外部调用单元还用于将所述第二数据信息所述第一传输接口发送至所述应用软件。
进一步的,所述AI服务单元还包括本地调用单元,用于根据所述第一传输接口传输的所述第二调用请求和所述第二调度数据执行第一子AI服务,并生成第三数据信息;
所述第二传输接口还用于接收所述外部服务根据所述第二调用请求和所述第三数据信息执行第二子AI服务时生成的第四数据信息,将所述第四数据信息通过所述第一传输接口发送至所述应用软件;
其中,所述AI服务单元执行的第一子AI服务和所述外部服务执行的第二子AI服务共同构成对应于所述第二调用请求的AI服务。
进一步的,所述本地调用单元为多个,多个本地调用单元共同执行AI服务以输出对应于所述第一子服务的数据信息,并将所述第一子服务的数据信息通过所述第二传输接口输出至所述外部服务,以使得所述外部服务根据所述第一子服务的数据信息执行所述第二子服务并生成所述第二子服务的数据信息;
其中,两个所述本地调用单元连接时,上一本地调用单元生成的数据信息传输至下一本地调用单元,使得所述下一本地调用单元根据所述上一本地调用单元的数据信息执行AI服务,并生成所述下一AI服务单元的数据信息。
进一步的,所述第二调度数据为图像数据,
所述第二调用请求对应的AI服务为对图像中的文字进行翻译;
所述第一子服务为光学识别服务,从所述图像数据中识别文字信息;
所述第二子服务为文字翻译服务,根据所述文字信息进行翻译。
进一步的,所述外部调用单元还用于响应于所述智慧交互平板所接收的调度指令生成第三调用请求以及根据所述调度指令获取第三调度数据,并通过所述第二传输接口将所述第三调用请求和所述第三调度数据输出至所述外部服务;
所述第二传输接口将所述外部服务根据所述第三调用请求和所述第三调度数据执行AI服务时生成的第五数据信息传输至所述外部调用单元。
进一步的,所述本地调用单元还用于根据所述第四调用请求和所述第四调度数据执行第三子AI服务生成第六数据信息,并将所述第四调用请求和所述第六数据信息发送至所述外部调用单元;
所述外部调用单元还用于将所述第四调用请求和所述第六数据信息通过所述第二传输接口发送至所述外部服务;
所述第二传输接口还用于接收所述外部服务根据所述第四调用请求和所述第六数据信息执行第四子AI服务时生成的第七数据信息,将所述第七数据信息传输至所述本地调度单元;
其中,所述第四调用请求的AI服务包括所述本地调用单元执行的第三子AI服务和所述外部服务执行的第四子AI服务。
进一步的,所述AI调度模块集成在所述智慧交互平板的一个应用软件中,与其他的应用软件通过所述第一传输接口连接;
或者
所述AI调度模块集成在所述智慧交互平板的一个应用软件中,通过所述第二传输接口与外部服务连接。
本发明第二方面提供一种集成AI能力的智慧交互平板,包括AI调度模块,
所述AI调度模块包括:
具有AI能力的AI服务单元;以及
传输接口,用于接收至少一个应用软件生成的调用请求,并将所述调用请求发送至所述AI服务单元;以及将所述AI服务单元根据所述调用请求执行AI服务生成的数据信息发送至所述应用软件。
本发明第三方面提供一种应用于本发明第一方面的集成AI能力的智慧交互平板的交互方法,所述方法包括:
所述应用软件接收调度指令并生成调用请求和调度数据,所述调用请求包括第一调用请求,所述调度数据包括第一调度数据;
所述第一传输接口将所述第二调用请求和所述第二调度数据传输至所述外部调用单元,
所述外部调用单元将所述第二调用请求和所述第二调度数据通过所述第二传输接口发送至对应的外部服务,
所述第二传输接口将所述外部服务根据所述第二调用请求和所述第二调度数据执行AI服务时生成的第二数据信息传输至所述外部调用单元,
所述外部调用单元将所述第二数据信息所述第一传输接口发送至所述应用软件。
进一步的,所述AI调度模块还包括第二传输接口,连接执行AI服务的外部服务和所述AI调度模块;所述AI服务单元还包括外部调用单元,所述方法还包括:
所述应用软件响应于所述智慧交互平板所接收的调度指令生成第二调用请求以及输出根据所述调度指令得到的第二调度数据,
所述第一传输接口将所述第二调用请求和所述第二调度数据传输至所述外部调用单元;
所述外部调用单元将所述第二调用请求和所述第二调度数据通过所述第二传输接口发送至对应的外部服务;
所述第二传输接口将所述外部服务根据所述第二调用请求和所述第二调度数据执行AI服务时生成的第二数据信息传输至所述外部调用单元,
所述外部调用单元将所述第二数据信息所述第一传输接口发送至所述应用软件。
进一步的,所述AI调度模块还包括第二传输接口,连接执行AI服务的外部服务和所述AI调度模块;所述AI服务单元还包括外部调用单元,所述方法还包括:
所述应用软件响应于所述智慧交互平板所接收的调度指令生成第二调用请求以及输出根据所述调度指令得到的第二调度数据;
所述第一传输接口将所述第二调用请求和所述第二调度数据传输至所述外部调用单元;
所述外部调用单元将所述第二调用请求和所述第二调度数据通过所述第二传输接口发送至对应的外部服务;
所述第二传输接口将所述外部服务根据所述第二调用请求和所述第二调度数据执行AI服务时生成的第二数据信息传输至所述外部调用单元;
所述外部调用单元将所述第二数据信息所述第一传输接口发送至所述应用软件。
进一步的,所述方法还包括:
所述外部调用单元响应于所述智慧交互平板所接收的调度指令生成第三调用请求以及根据所述调度指令获取第三调度数据,并通过所述第二传输接口将所述第三调用请求和所述第三调度数据输出至所述外部服务;
所述第二传输接口将所述外部服务根据所述第三调用请求和所述第三调度数据执行AI服务时生成的第五数据信息传输至所述外部调用单元。
本发明的有益效果如下:
本发明所述技术方案,将智慧交互平板内的AI服务单元和传输接口集成在AI调度模块中,以该传输接口作为智慧交互平板内唯一的与外部服务交互或者唯一的与智慧交互平板内其他应用的接口,通过该设置,调用或集成AI能力时智慧交互平板无需再单独开发或单独接入,可以节省大量资源,并且可以保持会议一体机AI应用的效果一致性,提高用户体验,具有广泛的应用前景。
附图说明
下面结合附图对本发明的具体实施方式作进一步详细的说明。
图1示出相关技术中各个应用软件与外部服务的一个实施例的交互示意图;
图2示出相关技术中各个应用软件与外部服务的一个实施例的交互示意图;
图3示出相关技术中各个应用软件与外部服务的一个实施例的交互示意图;
图4示出本发明的一个实施例的智慧交互平板的框架示意图;
图5示出本发明实施例的AI调度模块与应用软件的框架示意图;
图6~图8示出调用不同外部服务时AI调度模块和与应用软件之间的交互示意图;
图9示出AI调度模块内部执行多个AI服务时和与应用软件之间的交互示意图;
图10示出本发明实施例的AI调度模块、外部服务和应用软件之间的交互示意图;
图11~图13示出不同实施例的AI调度模块、外部服务和应用软件之间的交互示意图;
图14示出本发明实施例的AI调度模块内部执行部分AI服务时,应用软件和外部服务之间的交互示意图;
图15示出图14的本发明一个示例的AI调度模块内部执行部分AI服务时,应用软件和外部服务之间的交互示意图;
图16示出本发明实施例的AI调度模块内部的外部调用单元生成调用请求时,与外部服务的之间的交互示意图;
图17示出本发明实施例的AI调度模块内部的本地调用单元生成调用请求且执行部分AI服务时,与外部服务的之间的交互示意图;
图18示出图17的一个示例的AI调度模块内部执行部分AI服务时,应用软件和外部服务之间的交互示意图。
具体实施方式
为了更清楚地说明本发明,下面结合实施例和附图对本发明做进一步的说明。附图中相似的部件以相同的附图标记进行表示。本领域技术人员应当理解,下面所具体描述的内容是说明性的而非限制性的,不应以此限制本发明的保护范围。
如图1所示,智慧交互平板内以手写软件为核心应用,手写软件应用自身能够集成智能(AI)算法能力,比如手写笔记的识别以及手写文字的翻译等AI能力,但是这些AI能力只能在手写软件内部应用,即手写软件仅支持自身的AI能力调用或者向外部服务调用实现AI能力。
如图1所示,如果智慧交互平板的应用软件A想要应用翻译功能,那么软件A还需要单独集成或者单独调用,形成另一调用渠道以进行调用;同样的,如果应用软件B也要使用笔迹的翻译功能,那么软件B同样也要单独形成另一调用渠道接入该翻译功能。因此,这会极大占用智慧交互面板的内部资源。
在另一个示例中,如图2所示,如果手写软件、软件A以及软件B均通过调用外部服务的方式,但是,上述软件由于所设置的调用服务不同,例如,对于同一类型的笔迹翻译服务,手写软件默认选择服务1进行调用,而软件A默认选择服务2进行调用,软件B默认选择服务3进行调用,但是由于不同的服务可能存在差异,即对于同一待翻译的笔迹,可能有不同的结果,也就是说,上述三个服务效果不一致时,可能会存在3中不同的翻译结果,从而造成外部服务的效果不一致。
在另一个示例性中,如图3所示,不同软件对于不同服务存在不同的权限,例如,服务4对于手写软件是免费的,但是对于应用软件A却是不免费的,对于应用软件B存在部分免费的功能,因此,这会使得用户产生不必要的成本消费。
在另一个具体示例中,如果各个软件中,存在所调用的服务出现状态变更的情况,例如,手写软件原服务为服务1,想要变更为服务2,软件A的原服务需要变更服务,等等的情况,这需要对每个软件和对应的服务进行改变,极大降低了处理效率。
有鉴于上述问题,如图4所示,本发明一个实施例的集成AI能力的智慧交互平板,包括AI调度模块,
所述AI调度模块包括:
具有AI能力的AI服务单元;以及
传输接口,用于接收至少一个应用软件生成的调用请求,并将所述调用请求发送至所述AI服务单元;以及将所述AI服务单元根据所述调用请求执行AI服务生成的数据信息发送至所述应用软件。
本实施例中,通过将智慧交互平板内的AI服务单元和传输接口集成在AI调度模块中,以该传输接口作为智慧交互平板内唯一的与外部服务交互或者唯一的与智慧交互平板内其他应用的接口,通过该设置,调用或集成AI能力时智慧交互平板无需再单独开发或单独接入,可以节省大量资源,并且可以保持会议一体机AI应用的效果一致性。
在一个具体示例中,本实施例的应用软件不仅仅设置在智慧交互平板同一载体,还可设置在与智慧交互平板交互的不同载体,例如投屏设备,从而实现智慧交互平板和投屏设备之间通过传输接口进行AI服务的调用,实现智慧交互平板、投屏设备以及与外部云服务之间通过传输接口进行AI服务的调用。
现对应用软件集成在智慧交互平板内部为实施例进行说明。如图5所示,本发明一个实施例智慧交互平板,包括AI调度模块以及至少一个应用软件,
所述应用软件,用于响应于所述智慧交互平板所接收的调度指令生成所述第一调用请求以及输出根据所述调度指令得到的第一调度数据;
所述AI调度模块包括具有AI能力的AI服务单元以及连接所述应用软件和所述AI服务单元的第一传输接口,其中,
所述AI服务单元用于通过所述第一传输接口接收所述第一调用请求和所述第一调度数据,并请求执行对应的AI服务,
所述第一传输接口还用于将所述AI服务单元执行AI服务所生成的第一数据信息输出至所述应用软件。
本实施例中,所述AI调度模块集成在所述智慧交互平板的一个应用软件中,与其他的应用软件通过所述第一传输接口连接。
在一个示例中,所述AI调度模块集成在所述智慧交互平板的手写软件中。相关技术中,智慧交互平板的核心应用为手写软件,而本实施例将AI调度模块集成在手写软件中,能够优化手写软件自身的应用能力,并且将手写软件的AI能力实现与其他应用软件的AI能力交互,提高智慧交互平板自身的应用性能。
值得说明的是,本实施例的AI调度模块还可集成在其他的应用软件中,例如音频软件、输入法软件、翻译软件中等等,进一步的,本实施例的AI调度模块还可集成在控制系统中,本领域技术人员对此不作限制。
示例性的,调度指令为响应于用户的交互操作生成的,例如截屏操作生成图片数据,例如在应用软件的界面生成的点击操作。
本实施例中,通过第一传输接口实现智慧交互平板内的其他软件和智慧交互平板内的AI调度模块的交互,也即,通过第一传输接口,本实施例的其他应用软件想要接入一个AI服务,且该AI服务是AI调度模块自身所集成的能力,则通过第一传输接口能够实现其他软件直接调用AI调度模块中的AI服务单元,实现其他应用软件和AI调度模块之间的AI调用。
在一个可选的实施例中,所述调用请求包括但不限于语音识别、手写识别、翻译或光学字符识别等AI服务。
现以图6~图8所示的调用不同外部服务时,AI调度模块和应用软件之间的框架结构示意图;
如图6所示,以音频识别为例,智慧交互平板中包括语音软件,所述AI服务单元为语音识别单元,该语音软件所要接入的AI能力为:将语音转换为文字。
示例性的,本实施例的用于语音识别的调用数据为音频数据,该音频数据可以为手写软件利用自身功能录制的音频,也可为选择智慧交互平板的文件系统的音频,也可为网络获取的音频还可以为应用软件自身采集到的音频等等。
本实施例中,语音软件所调用的AI能力其自身并不具有,例如该应用软件为录音机app,其能够实现录音功能,因此,需要进一步接入AI能力以对采集到的音频进行转换。
本示例中,第一调度指令为用户通过显示界面输入的点击、按键以及选择等指令输出的,语音软件响应于该调度指令生成接入AI能力的第一调用请求,并将第一调用请求和用于执行AI服务的调用数据通过第一传输接口发送至AI服务单元。本实施例通过第一传输接口实现应用软件和AI调度模块的AI服务单元的交互。
示例性的,语音转换应用软件所传输的音频数据可以为音频流,也可为音频存储地址,包括本机地址和网络地址,通过第一传输接口,例如语音数据传输接口将AI调度模块所具有的AI能力接入到不具有AI能力的其他应用软件中,语音识别单元将采集到的音频进行语音转换,语音识别单元在AI调度模块内执行AI服务,然后将语音识别结果通过另一第一传输接口,例如语音识别结果传输接口,将识别结果输出到显示界面供用户使用,通过上述设置能够实现AI能力对于智慧交互平板的应用软件的内部调用,有益效果降低成本,减少开发量,提高管理效率,以及提高效果一致性。
在另一个示例中,如图7所示,以笔迹识别为例,智慧交互平板中包括笔迹采集软件,所述AI服务单元为笔迹识别单元,该笔迹识别软件所要接入的AI能力为:将采集的笔迹数据识别为特定字体的文字。
示例性的,本实施例的用于笔迹识别的调用数据为笔迹数据,该笔迹数据可以为笔迹采集软件所采集的笔迹数据,可以为手写软件利用自身功能生成的笔迹数据,也可为选择智慧交互平板的文件系统的笔迹文件,也可为网络获取的笔迹文件,还可为由应用软件获取的笔迹数据等等。
本实施例中,笔迹采集软件能够实现笔迹采集功能,但是其自身并不具有对笔迹数据进行识别的AI能力,因此,需要进一步接入AI能力以对采集到的笔迹进行转换识别。
笔迹采集软件响应于该调度指令生成接入AI能力的第一调用请求,并将第一调用请求和用于执行AI服务的调用数据通过第一传输接口发送至AI服务单元。本实施例通过第一传输接口实现应用软件和AI调度模块的AI服务单元的交互。
示例性的,笔迹数据可通过手写或触控笔等工具,在智慧交互平板的触控屏幕书写,留下的笔迹数据,笔迹数据包括但不限于轨迹点的位置信息、时间信息、压力感应信息以及笔迹点之间的逻辑关系信息等,通过笔迹信息可以还原为手指操作的轨迹等。
笔迹采集软件通过第一传输接口,例如笔迹数据传输接口,将笔迹数据传输到AI调度模块中的AI服务单元,示例性的,应用软件所传输的笔迹数据可以为文件流,也可为笔迹文件存储地址,包括本机地址和网络地址。
AI调度模块中的AI服务单元执行AI服务,并生成笔迹识别结果作为第一数据信息,然后将笔迹识别结果通过另一第一传输接口,例如笔迹识别结果传输接口,将转换结果输出到显示界面供用户使用,通过上述设置能够实现AI能力对于智慧交互平板的应用软件的内部调用。
本实施例中,用于实现从笔迹采集软件到AI服务单元的数据传输的笔迹数据传输接口为第一传输接口,用于实现AI服务单元的识别结果到笔迹采集软件的数据传输的笔迹识别结果传输接口也为第一传输接口。
在另一个示例中,如图8所示,以光学字符识别(OCR识别)为例,智慧交互平板中包括光学字符采集软件,所述AI服务单元为光学字符识别单元,该光学字采集别软件所要接入的AI能力为:将图片中的文字进行识别。
示例性的,本实施的第一调用数据为执行OCR识别所使用的图片数据,可以为光学字符采集软件利用自身功能拍摄的照片或截图,也可为选择智慧交互平板的文件系统的图片,也可为网络获取的图片等等。
本示例中,光学字符采集软件响应于该调度指令生成接入AI能力的第一调用请求,本实施例中,光学字符采集软件具有获取图片数据的功能,但是其自身并不具有对获取的图片数据进行识别的AI能力,因此,需要进一步接入AI能力以对采集到的图片数据进行转换识别。
光学字符采集软件通过第一传输接口,例如图片数据传输接口,将图片数据和第一调用请求传输到AI调度模块中的AI服务单元,如光学字符识别单元,示例性的,光学字符采集软件所传输的图片数据可以为文件流,也可为图片文件存储地址,包括本机地址和网络地址。
AI调度模块中的AI服务单元执行AI服务,然后将图片识别结果作为数据信息通过另一第一传输接口,例如图片识别结果传输接口,将识别结果输出至应用软件,完成该次AI服务,通过上述设置能够实现AI能力对于智慧交互平板的应用软件的内部调用。本实施例中,图片数据传输接口和图片识别结果传输接口也为第一传输接口。
基于上述实施例可知,本实施例的第一传输接口包括不同类型和不同功能,但是均设置在AI调度模块内部,并以第一传输接口作为唯一的与各类应用软件交互的接口。
基于上述不同的实施例,以图11~图14所示,通过本发明实施例以统一的传输接口进行数据传输的设置,本实施各种类型的应用软件需要调用AI能力时,多个应用软件能够通过统一的第一传输接口实现AI服务的集成或调用,AI服务单元所执行的AI服务效果完全一致,方便管理应用软件需要接入AI能力时的协议,减少开发工作量,极大地降低资源占用,提高用户体验。
在一个可选的实施例中,如图9所示,所述AI服务单元为多个,其中,两个所述AI服务单元连接时,上一AI服务单元生成的数据信息传输至下一AI服务单元,使得所述下一AI服务单元根据所述上一AI服务单元数据信息执行AI服务,并生成所述下一AI服务单元的数据信息。本实施例中,AI调度模块内部的各个服务单元能够进行交互,从而实现多种AI能力的多项应用。
在另一个示例中,如图9所示,智慧交互平板中应用软件所请求调用的AI能力为:将图片中与文字内容相关的文字翻译为特定语言。所述AI服务单元为翻译单元以及光学识别单元,也就是说,本实施例的AI服务单元能够执行多种AI服务。
应用软件根据调用指令输出将图片中与文字内容相关的文字翻译为特定语言的第一调用请求,并采集相关的图片数据,通过第一传输接口将第一调用请求和图片数据转发至光学字符识别单元,示例性的,第一传输接口包括图片数据传输接口。
光学字符识别单元接收从第一传输接口转发的图片数据和第一调用请求并执行将图片数据进行OCR识别的功能,并将OCR识别结果输出至AI调度模块内的另一AI服务单元,即翻译服务单元。
翻译服务单元根据识别OCR识别结果中的文字内容进行翻译生成数据信息,例如翻译结果,并通过第一传输接口将翻译结果输出至该应用软件。
本实施例中,翻译服务单元执行智能翻译转换后,将翻译结果通过翻译结果传输接口输出至文字翻译软件,也就是说,本实施例实现交互的是不同的AI服务单元,从而实现多种AI功能的接入。
在一个可选的实施例中,如图9所示,第一传输接口将上一AI服务单元生成的数据信息传输至下一AI服务单元,例如图9所示的图片识别结果传输接口,将光学字符识别单元的生成的OCR识别结果输出到翻译服务单元,从而利用第一传输接口实现AI服务单元之间的数据交互。
通过本实施例的设置,本实施例的AI调度模块内部执行逻辑连接的AI服务时,两AI服务单元之间同样只通过第一传输接口实现AI服务的集成或调用,方便管理AI调度模块执行AI服务单元时的协议,减少开发工作量,极大地降低资源占用。通过本实施例的设置,多个AI服务单元能够通过统一的第一传输接口实现调用,AI服务单元所执行的AI服务效果完全一致,提高用户体验。
在一个可选的实施例中,如图10所示,所述AI调度模块还包括第二传输接口,连接执行AI服务的外部服务和所述AI调度模块;
所述AI服务单元还包括外部调用单元,
所述AI调度模块还包括第二传输接口,连接执行AI服务的外部服务和所述AI调度模块;
所述AI服务单元还包括外部调用单元,
所述应用软件还用于响应于所述智慧交互平板所接收的调度指令生成第二调用请求以及输出根据所述调度指令得到的第二调度数据,
所述第一传输接口还用于将所述第二调用请求和所述第二调度数据传输至所述外部调用单元,
所述外部调用单元用于将所述第二调用请求和所述第二调度数据通过所述第二传输接口发送至对应的外部服务,
所述第二传输接口用于将所述外部服务根据所述第二调用请求和所述第二调度数据执行AI服务时生成的第二数据信息传输至所述外部调用单元,
所述外部调用单元还用于将所述第二数据信息所述第一传输接口发送至所述应用软件。
本实施例中,不同于前述图5~图9所示实施例的AI调用模块内部的AI服务单元的交互、AI服务单元和应用软件的交互,本实施例通过AI调度模块作为应用软件和外部服务应用的传输媒介,以AI调度模块的第一传输接口和第二传输接口作为两者交互的统一传输接口,从而确保不同应用软件所调用外部服务的一致性,提高接入效率,无需将每一应用软件和每一外部服务之间实现单独的对接,极大地降低资源占用率。
现以图11~图13所示,应用软件通过AI调度模块调用不同外部服务时框架结构示意图为例,对本实施例的交互流程进行细化说明;
在一个可选的实施例中,如图11所示,所述应用软件为音频软件,例如语音采集软件,所述外部服务应用为语音识别云服务,例如语音识别云(公有云或私有云)或语音识别sdk。
示例性的,如图11所示,以音频识别为例,智慧交互平板中包括语音采集软件,例如录音机,但是其不具有语音识别的AI能力,同样的,AI调度模块中的AI服务单元也不具备语音识别的AI能力,因此,智慧交互平板需要通过调用外部服务的方式,实现应用软件接入AI能力执行语音识别的功能。
示例性的,本实施例的语音识别所输出的音频数据可以为手写软件利用自身功能录制的音频,也可为选择智慧交互平板的文件系统的音频,也可为网络获取的音频还可以为应用软件自身采集到的音频等等。
在一个具体示例中,语音采集软件响应于该调度指令采集语音数据,并生成调用语音识别的AI服务的第二调用请求,示例性的,本实施例的第二调用请求为语音识别请求,该第二调用请求以及用于执行AI服务的语音数据通过第一传输接口输出至AI调度模块的外部调用单元,例如第一传输接口中的第一语音数据传输接口。
外部调用单元通过第二传输接口(第二语音数据传输接口)将该语音识别请求和传输的语音数据输出至外部服务,例如语音识别云服务。
云服务在云端利用算法将根据语音数据生成语音识别结果,以该语音识别结果作为第二数据信息,再通过第二传输接口(第二语音识别结果传输接口)反馈至AI调度模块的外部调用单元。
外部调用单元再通过第一传输接口,例如第一语音识别结果传输接口,将识别结果输出到该应用软件。
本实施例中,第一传输接口具有多种类型,用于实现不同类型的数据传输,但是第一传输接口均实现AI调度模块和应用软件的传输,以第一传输接口作为应用软件和AI调度模块之间的唯一的数据传输接口。同样的,第二传输接口具有多种类型,用于实现不同类型的数据传输,但是第二传输接口均实现AI调度模块和应用软件的传输,以第二传输接口作为外部应用和AI调度模块之间的唯一的数据传输接口,从而实现以AI调度模块作为统一接口,实现应用软件和外部AI服务之间的调用。
在一个可选的实施例中,如图12所示,所述应用软件为笔迹采集软件,所述外部服务应用为笔迹识别云服务,例如笔迹识别云(公有云或私有云)或笔迹识别sdk。
示例性的,本实施例的笔迹识别所采集的笔迹数据可以为手写软件利用自身功能生成的笔迹数据,也可为选择智慧交互平板的文件系统的笔迹文件,也可为网络获取的笔迹文件,还可为由应用软件获取的笔迹数据等等。
示例性的,笔迹数据可通过手写或触控笔等工具,在智慧交互平板的触控屏幕书写,留下的笔迹数据,笔迹数据包括但不限于轨迹点的位置信息、时间信息、压力感应信息以及笔迹点之间的逻辑关系信息等,通过笔迹信息可以还原为手指操作的轨迹等。
在一个可选的实施例中,所述应用软件所获取笔迹数据的格式与手写软件的AI服务单元的笔迹数据的格式一致,以确保笔迹识别准确性。
示例性的,如图12所示,以笔迹识别为例,智慧交互平板中包括笔迹采集软件,例如输入法APP,但是其不具有语音识别的AI能力,同样的,AI调度模块中的AI服务单元也不具备笔迹识别的AI能力,因此,智慧交互平板也需要通过调用外部服务的方式,实现应用软件接入AI能力执行笔迹识别的功能。
本示例中,笔迹采集软件响应于该调度指令采集笔迹数据,并生成调用笔迹识别的AI服务的第二调用请求,示例性的,本实施例的第二调用请求为笔迹识别请求,该第二调用请求以及用于执行AI服务的笔迹数据通过第一传输接口输出至AI调度模块的外部调用单元,例如第一笔迹数据传输接口。示例性的,应用软件所传输的笔迹数据可以为文件流,也可为笔迹文件存储地址,包括本机地址和网络地址。
外部调用单元通过第二传输接口(第二笔迹数据传输接口)将该笔迹识别请求和传输的笔迹数据输出至外部服务应用,例如笔迹识别云服务。
以该语音识别结果作为第二数据信息,再通过第二传输接口(第二语音识别结果传输接口)反馈至AI调度模块的外部调用单元。
云服务在云端利用算法将根据笔迹数据生成的笔迹识别结果,以该笔迹识别结果作为第二数据信息,再通过第二传输接口(第二笔迹识别结果传输接口)反馈至AI调度模块的外部调用单元。
外部调用单元再通过第一传输接口(第二笔迹识别结果传输接口)将识别结果输出到该应用软件。
本实施例中,第一传输接口具有多种类型,用于实现不同类型的数据传输,但是第一传输接口均实现AI调度模块和应用软件的传输,以第一传输接口作为应用软件和AI调度模块之间的唯一的数据传输接口。同样的,第二传输接口具有多种类型,用于实现不同类型的数据传输,但是第二传输接口均实现AI调度模块和应用软件的传输,以第二传输接口作为外部应用和AI调度模块之间的唯一的数据传输接口。
在一个可选的实施例中,如图13所示,所述应用软件为光学字符采集软件,所述外部服务应用为光学字符识别云服务,例如OCR识别云(公有云或私有云)或OCR识别sdk。
示例性的,本实施例的OCR识别所需要的图片数据可以为手写软件利用自身功能拍摄的照片或截图,也可为选择智慧交互平板的文件系统的图片,也可为网络获取的图片等等。
示例性的,本实施例的第二调用请求为光学字符识别请求,该第二调用请求以及用于执行AI服务的光学字符数据通过第一传输接口输出至AI调度模块的外部调用单元,例如第一光学字符数据传输接口。
外部调用单元通过第二传输接口(第二光学字符数据传输接口)将该光学字符识别请求和传输的光学字符数据输出至外部服务应用,例如OCR识别云服务。
云服务在云端利用算法将根据光学字符数据生成的光学字符识别结果,以该光学字符识别结果作为第二数据信息,再通过第二传输接口(第二光学字符识别结果传输接口)反馈至AI调度模块的外部调用单元。
外部调用单元再通过第一传输接口(第一光学字符识别结果传输接口)将识别结果输出到该应用软件。
基于上述不同的实施例,本实施各种类型的应用软件需要调用外部服务的AI能力时,只通过第一传输接口和第二传输接口实现AI服务的集成或调用,方便管理应用软件需要接入AI能力时的协议,应用软件和外部服务之间无需单独集成,减少开发工作量,极大地降低资源占用。
通过本实施例的设置,多个应用软件能够通过统一的第一传输接口,利用AI调度模块通过第二传输接口实现调用与外部服务,即使是不同的应用软件,当通过AI调度模块内部统一的第一传输接口和第二传输接口进行调用时,被调用的外部服务所执行的AI服务效果完全一致,提高用户体验。
进一步,通过本实施例的设置,可避免不同的应用软件与同一外部服务之间的协议差异性,例如,消费协议、服务协议或者权限协议,而是均以第一传输接口和第二传输接口进行对接,对于AI调度模块、智慧交互平板的其他应用软件来说,所调用的外部服务的协议是相同的,因此会降低用户的消费成本,提高服务效果。
从上述示例可知,对于不同的AI能力的AI服务单元,本实施例的第二传输接口为不同的接口,即,对于笔迹识别云服务,其与本实施例的AI调度模块所连接的为笔迹数据识别接口以及笔迹数据传输接口;对于音频识别云服务,与本实施例的AI调度模块所连接的为音频数据识别接口以及音频数据传输接口;对于翻译云服务,其与本实施例的AI调度模块所连接的为翻译数据识别接口以及翻译结果传输接口;对于OCR识别软件,与本实施例的AI调度模块所连接的为OCR识别接口。
也就是说,虽然第二传输接口的种类和数据转发的功能并不相同,但是均以第二传输接口实现不同服务和AI调度模块之间的调用,以确保AI调度模块与外部服务之间的协议、传输是唯一的。
在一个可选的实施例中,如图14所示,所述AI服务单元还包括本地调用单元,用于根据所述第一传输接口传输的所述第二调用请求和所述第二调度数据执行第一子AI服务,并生成第三数据信息;
所述第二传输接口还用于接收所述外部服务根据所述第二调用请求和所述第三数据信息执行第二子AI服务时生成的第四数据信息,将所述第四数据信息通过所述第一传输接口发送至所述应用软件;
其中,所述AI服务单元执行的第一子AI服务和所述外部服务执行的第二子AI服务共同构成对应于所述第二调用请求的AI服务。本实施例中,用于执行AI服务的本地调用单元均能够与第一传输接口和第二传输接口连接实现数据信息、调用数据以及调用请求的连接。
在一个可选的实施例中,所述本地调用单元为多个,多个本地调用单元共同执行AI服务以输出对应于所述第一子服务的数据信息,并将所述第一子服务的数据信息通过所述第二传输接口输出至所述外部服务,以使得所述外部服务根据所述第一子服务的数据信息执行所述第二子服务并生成所述第二子服务的数据信息;其中,两个所述本地调用单元连接时,上一本地调用单元生成的数据信息传输至下一本地调用单元,使得所述下一本地调用单元根据所述上一本地调用单元的数据信息执行AI服务,并生成所述下一AI服务单元的数据信息。
不同于前述图10~图13所示的AI调度模块以及应用软件均不具备所要应用的AI能力的实施例,也不同于图6~图9所示的AI模块仅执行内部的AI能力与应用软件交互、而不具备调用外部服务的AI能力的实施例,本实施例中,本实施例可实现AI调度模块内部的AI服务和外部服务应用的结合使用,从而实现多种AI能力的集成。
当AI调度模块本身具有对应于请求的部分AI能力,即本地调用单元能够执行部分AI能力,该结构下,可先在本地调用单元中执行对应的AI能力,然后调用外部服务应用执行另一部分的AI服务,在AI调度模块作为应用软件和外部服务之间的统一传输接口的基础上,进一步实现AI调度模块本地集成AI功能,从而最大化利用资源效率。
在一个可选的实施例中,如图15所示,
所述第二调度数据为图像数据,
所述第二调用请求对应的AI服务为对图像中的文字进行翻译;
所述第一子服务为光学识别服务,从所述图像数据中识别文字信息;
所述第二子服务为文字翻译服务,根据所述文字信息进行翻译。
本实施例中,本实施例将所述第二调用请求对应的AI服务进行拆分,将该AI服务拆分为多个子服务,上一子服务执行AI服务所生成的数据信息为下一子服务的输入,下一子服务进一步根据接收的数据进行执行AI服务,全部的AI子服务完成后,最后一个子服务所生成的数据信息即为第二调用请求所需要的。
以具体示例对第一子服务和第二子服务进行说明,如图15所示,应用软件所要接入的AI能力为将图片中的文字翻译成特定语言。
但是本实施例的AI调度模块只具有将图片中的文字信息进行提取的功能,也即,将图片中的文字信息进行提取为第一子服务,而将整个AI服务拆分后,第二子服务即为将文字信息翻译成特定语言。
具体流程如下:
应用软件根据调用指令输出将图片中与文字内容相关的文字翻译为特定语言的第二调用请求,并采集相关的图像数据,通过第一传输接口将第一调用请求和图像数据转发至AI调度模块内部的本地调用单元,本地调用单元根据第二调用请求执行第一子服务,即执行光学字符识别服务并生成文字信息。
外部调用单元通过第二传输接口将接收的文字信息以及第二调用请求输出至外部服务,由外部服务根据第二调用请求以及文字信息执行第二子服务,即将文字信息翻译成特定语言,翻译结果即为第四数据信息。
第二传输接口获取该第四数据信息并转发给外部调用单元,由外部调用单元将翻译结果通过第一传输接口传输给发出第二调用请求的应用软件,实现该次AI服务。
在一个具体示例中,外部调用单元还可将翻译结果发送至本地调用单元,由本地调用单元通过第一传输接口将翻译结果传输至应用软件。也就是说,不论是外部服务调用单元将翻译结果输出,还是本地调用单元将翻译结果输出,均是通过第一传输接口实现与应用软件的调用。
通过本实施例的设置,本实施例的将AI服务可拆分为具有逻辑关系的子AI服务,能够实现本地AI服务的执行,进一步降低调用外部服务的资源消耗。
在一个可选的实施例中,如图16所示,所述外部调用单元还用于响应于所述智慧交互平板所接收的调度指令生成第三调用请求以及根据所述调度指令获取第三调度数据,并通过所述第二传输接口将所述第三调用请求和所述第三调度数据输出至所述外部服务;
所述第二传输接口将所述外部服务根据所述第三调用请求和所述第三调度数据执行AI服务时生成的第五数据信息传输至所述外部调用单元。
如图16所示,所述外部服务应用为翻译云服务。AI调度模块集成于不具有调用请求输出能力的应用软件,例如,输入法APP,其只能够输入文字数据,因此,为实现将文字数据翻译成特定语音的功能,需要通过外部调用单元接入翻译云服务。
此情况下,外部调用单元根据用户对APP的点击、选择或输入等操作,使得外部调用单元生成第三调用请求以及获取第三调度数据,例如需要进行智能翻译的文本信息。
第二传输接口例如翻译数据传输接口,将接收的第三调用请求以及第三调度数据发送至与其连接的翻译云服务。
翻译云服务在云端利用算法将根据翻译数据生成翻译结果,以该翻译结果作为第五数据信息,再通过第二传输接口(翻译结果传输接口)反馈至AI调度模块的外部调用单元。外部调用单元接收翻译结果,以文字的方式显示在交互界面供用户使用。
本实施例中,不同于图6~图15所示的应用软件作为调用请求的输出,本实施例中,AI调度模块本身具有调用请求输出的能力,当AI调度模块集成于不具有调用请求输出能力的应用软件中时,本实施例的设置可弥补应用软件的缺陷,从而实现AI能力的调用。
在一个可选的实施例中,如图17所示,所述本地调用单元还用于根据所述调度指令生成第四调用请求和所述第四调度数据执行第三子AI服务生成第六数据信息,并将所述第四调用请求和所述第六数据信息通过所述第二传输接口发送至所述外部调用单元;
所述外部调用单元还用于将所述第四调用请求和所述第六数据信息通过所述第二传输接口发送至所述外部服务;
所述第二传输接口还用于接收所述外部服务根据所述第四调用请求和所述第六数据信息执行第四子AI服务时生成的第七数据信息,将所述第七数据信息传输至所述本地调度单元;
其中,所述第四调用请求的AI服务包括所述本地调用单元执行的第三子AI服务和所述外部服务执行的第四子AI服务。
本实施例中,不同于图6~图15所示的前述实施例的应用软件输出调用请求,本实施例中,AI调度模块本身具有调用请求输出的能力,且AI调度模块本身还具有执行AI服务的能力。当AI调度模块集成于不具有调用请求输出能力的应用软件中时,本实施例的设置可弥补应用软件的缺陷,
在AI调度模块能够执行自身的AI能力的基础上,还能够通过接入外部AI服务实现更多的AI能力的集成。并且,本实施例通过第一传输接口实现另一部分的AI服务的集成或调用,方便管理AI调度模块内部不同的本地调用单元和外部服务需要接入AI能力时的协议,减少开发工作量,极大地降低资源占用。
现以图18所示AI调度模块输出调用请求、能够执行部分AI能力以及调用另一部分外部服务时,AI调度模块和外部服务之间的交互示意图;
本实施例中,本实施例将该调度指令对应的AI服务进行拆分,将该AI服务拆分为多个子服务,一部分的子服务能够在AI调度模块内部执行AI功能,并且,另一部分的子服务在外部服务中执行AI功能。
以具体示例对第三子服务和第四子服务进行说明,如图18所示,第四调用请求所要接入的AI能力为将图片中的文字翻译成特定语言。
但是本实施例AI调度模块的本地调度单元只具有将图片中的文字信息进行提取的功能,也即,将图片中的文字信息进行提取为第三子服务,而将整个AI服务拆分后,第四子服务即为将文字信息翻译成特定语言,因此,外部服务为翻译云服务。AI调度模块和外部服务的交互的具体流程如下:
本地调用单元根据调用指令输出将图片中与文字内容相关的文字翻译为特定语言的第四调用请求,并获取相关的图片数据,在其内部执行第三子AI服务,例如,执行光学字符识别服务并生成文字信息。OCR识别单元在执行AI服务的过程中生成OCR数据,OCR数据即为第六数据信息,并通过第二传输接口将OCR数据以及第四调用请求输出至外部服务,由外部服务执行另一部分AI服务能力,即执行第四子服务,例如将文字信息翻译成特定语言,翻译结果即为第七数据信息。
第二传输接口获取该第七数据信息并转发给本地调用单元,由本地调用单元将翻译结果通过第一传输接口传输给发出第二调用请求的应用软件,实现该次AI服务。
本实施例中,AI调度模块内部的各个本地调用单元之间,可实现相互的内部AI能力的调用。
在一个可选的实施例中,所述本地调用单元为多个,其中,两个所述本地调用单元连接时,上一本地调用单元生成的数据信息传输至下一本地调用单元,使得所述下一本地调用单元根据所述上一本地调用单元的数据信息执行AI服务,并生成所述下一AI服务单元的数据信息。
该设置可参考前述实施例的流程,相关原理和流程类似,在此不再赘述。
通过本实施例的设置,本实施例的将AI服务可拆分为具有逻辑关系的子AI服务,能够实现本地AI服务的执行,进一步降低调用外部服务的资源消耗。
在一个可选的实施例中,当所述应用软件和所述AI调度模块之间的第一预设协议发生变化时,通过更改所述第一传输接口的配置信息以适应于所述第一预设协议的变化。同样的,当所述AI调度模块和所述外部服务应用之间的第二预设协议发生变化时,通过更改所述第二传输接口的配置信息以适应于所述第二预设协议的变化。
本实施例中,不同于前述图1~图3所示的应用软件和外部服务单独集成时的多个单独的协议规定,本实施例的协议规定只存在AI调度模块中的第一传输接口中,例如软件A和AI调度模块之间的服务协议需要更改,只需在AI调度模块中进行修改,无需针对性进行修改,同样的,当外部服务1、外部服务2和调度模块之间的服务均发生变化,因此只需要在AI调度模块中修改即可。
更进一步的,当软件A和服务1之间的服务以及软件B和服务1之间服务均发生变化,也无需对软件A和服务1以及对服务以及软件B单独进行修改,而是对第一传输接口和第二传输接口进行修改,这提高了处理效率以及降低了复杂性。
本发明的另一个实施例提出一种应用于图4~图9的集成AI能力的智慧交互平板的交互方法,包括:
所述传输接口获取调用请求;
所述AI服务单元根据所述调用请求执行AI服务并生成数据信息;
所述传输接口输出执行所述数据信息。
本实施例中,通过将智慧交互平板内的AI服务单元和传输接口集成在AI调度模块中,以该传输接口作为智慧交互平板内唯一的与外部服务交互或者唯一的与智慧交互平板内其他应用的接口,通过该设置,调用或集成AI能力时智慧交互平板无需再单独开发或单独接入,可以节省大量资源,并且可以保持会议一体机AI应用的效果一致性。
如图10~图13所示,所述AI调度模块还包括第二传输接口,连接执行AI服务的外部服务和所述AI调度模块;所述AI服务单元还包括外部调用单元,
在一个可选的实施例中,该方法还包括:
所述应用软件响应于所述智慧交互平板所接收的调度指令生成第二调用请求以及输出根据所述调度指令得到的第二调度数据,
所述第一传输接口将所述第二调用请求和所述第二调度数据传输至所述外部调用单元;
所述外部调用单元将所述第二调用请求和所述第二调度数据通过所述第二传输接口发送至对应的外部服务;
所述第二传输接口将所述外部服务根据所述第二调用请求和所述第二调度数据执行AI服务时生成的第二数据信息传输至所述外部调用单元,
所述外部调用单元将所述第二数据信息所述第一传输接口发送至所述应用软件。
通过本实施例的设置,多个应用软件能够通过统一的第二传输接口实现调用,智慧交互平板所调用的外部服务的效果完全一致,以图11~13所示,当以该统一的第二传输接口进行调用时,不同的应用软件所要接入的AI能力被统一为相同的外部服务,使得通过外部服务接入AI能力的服务效果实现一致,提高用户体验。
如图14和图15所示,所述AI服务单元还包括本地调用单元,在一个可选的实施例中,该方法还包括:
本地调用单元根据所述第一传输接口传输的所述第二调用请求和所述第二调度数据执行第一子AI服务,并生成第三数据信息;
所述第二传输接口接收所述外部服务根据所述第二调用请求和所述第三数据信息执行第二子AI服务时生成的第四数据信息,将所述第四数据信息通过所述第一传输接口发送至所述应用软件;其中,所述AI服务单元执行的第一子AI服务和所述外部服务执行的第二子AI服务共同构成对应于所述第二调用请求的AI服务。
通过上述设置,实现AI调度模块内部的AI能力的调用以及实现利用外部服务执行另一AI服务的调用。
如图17~图18所示,在一个可选的实施例中,所述方法还包括:
所述本地调用单元响应于所述智慧交互平板所接收的调度指令生成第三调用请求以及根据所述调度指令获取第三调度数据,并通过所述第二传输接口将所述第三调用请求和所述第三调度数据输出至所述外部服务;
所述第二传输接口将所述外部服务根据所述第三调用请求和所述第三调度数据执行AI服务时生成的第五数据信息传输至所述本地调用单元。
AI调度模块本身具有调用请求输出的能力,当AI调度模块集成于不具有调用请求输出能力的应用软件中时,本实施例的设置可弥补应用软件的缺陷,从而实现AI能力的调用。
通过本实施例的设置,可避免不同的应用软件与同一外部服务之间的协议差异性,例如,消费协议、服务协议或者权限协议,而是均以第一传输接口和第二传输接口进行对接,对于AI调度模块、智慧交互平板的其他应用软件来说,所调用的外部服务的协议是相同的,因此会降低用户的消费成本,提高服务效果。
需要说明的是,本实施例提供的交互方法的原理及制作原理与上述的AI调度模块的交互原理相似,相关之处可以参照上述说明,在此不再赘述。
还需要说明的是,在本发明的描述中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
显然,本发明的上述实施例仅仅是为清楚地说明本发明所作的举例,而并非是对本发明的实施方式的限定,对于本领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动,这里无法对所有的实施方式予以穷举,凡是属于本发明的技术方案所引伸出的显而易见的变化或变动仍处于本发明的保护范围之列。

Claims (13)

1.一种集成AI能力的智慧交互平板,其特征在于,包括AI调度模块以及至少一个应用软件,
所述应用软件,用于响应于所述智慧交互平板所接收的调度指令生成所述第一调用请求以及输出根据所述调度指令得到的第一调度数据;
所述AI调度模块包括具有AI能力的AI服务单元以及连接所述应用软件和所述AI服务单元的第一传输接口,其中,
所述AI服务单元用于通过所述第一传输接口接收所述第一调用请求和所述第一调度数据,并请求执行对应的AI服务,
所述第一传输接口还用于将所述AI服务单元执行AI服务所生成的第一数据信息输出至所述应用软件。
2.根据权利要求1所述的智慧交互平板,其特征在于,
所述AI调度模块还包括第二传输接口,连接执行AI服务的外部服务和所述AI调度模块;
所述AI服务单元还包括外部调用单元;
所述应用软件还用于响应于所述智慧交互平板所接收的调度指令生成第二调用请求以及输出根据所述调度指令得到的第二调度数据,
所述第一传输接口还用于将所述第二调用请求和所述第二调度数据传输至所述外部调用单元,
所述外部调用单元用于将所述第二调用请求和所述第二调度数据通过所述第二传输接口发送至对应的外部服务,
所述第二传输接口用于将所述外部服务根据所述第二调用请求和所述第二调度数据执行AI服务时生成的第二数据信息传输至所述外部调用单元,
所述外部调用单元还用于将所述第二数据信息所述第一传输接口发送至所述应用软件。
3.根据权利要求2所述的智慧交互平板,其特征在于,
所述AI服务单元还包括本地调用单元,用于根据所述第一传输接口传输的所述第二调用请求和所述第二调度数据执行第一子AI服务,并生成第三数据信息;
所述第二传输接口还用于接收所述外部服务根据所述第二调用请求和所述第三数据信息执行第二子AI服务时生成的第四数据信息,将所述第四数据信息通过所述第一传输接口发送至所述应用软件;
其中,所述AI服务单元执行的第一子AI服务和所述外部服务执行的第二子AI服务共同构成对应于所述第二调用请求的AI服务。
4.根据权利要求3所述的智慧交互平板,其特征在于,所述本地调用单元为多个,多个本地调用单元共同执行AI服务以输出对应于所述第一子服务的数据信息,并将所述第一子服务的数据信息通过所述第二传输接口输出至所述外部服务,以使得所述外部服务根据所述第一子服务的数据信息执行所述第二子服务并生成所述第二子服务的数据信息;
其中,两个所述本地调用单元连接时,上一本地调用单元生成的数据信息传输至下一本地调用单元,使得所述下一本地调用单元根据所述上一本地调用单元的数据信息执行AI服务,并生成所述下一AI服务单元的数据信息。
5.根据权利要求3所述的智慧交互平板,其特征在于,
所述第二调度数据为图像数据,
所述第二调用请求对应的AI服务为对图像中的文字进行翻译;
所述第一子服务为光学识别服务,从所述图像数据中识别文字信息;
所述第二子服务为文字翻译服务,根据所述文字信息进行翻译。
6.根据权利要求2所述的智慧交互平板,其特征在于,
所述外部调用单元还用于响应于所述智慧交互平板所接收的调度指令生成第三调用请求以及根据所述调度指令获取第三调度数据,并通过所述第二传输接口将所述第三调用请求和所述第三调度数据输出至所述外部服务;
所述第二传输接口将所述外部服务根据所述第三调用请求和所述第三调度数据执行AI服务时生成的第五数据信息传输至所述外部调用单元。
7.根据权利要求3所述的智慧交互平板,其特征在于,
所述本地调用单元还用于根据所述第四调用请求和所述第四调度数据执行第三子AI服务生成第六数据信息,并将所述第四调用请求和所述第六数据信息发送至所述外部调用单元;
所述外部调用单元还用于将所述第四调用请求和所述第六数据信息通过所述第二传输接口发送至所述外部服务;
所述第二传输接口还用于接收所述外部服务根据所述第四调用请求和所述第六数据信息执行第四子AI服务时生成的第七数据信息,将所述第七数据信息传输至所述本地调度单元;
其中,所述第四调用请求的AI服务包括所述本地调用单元执行的第三子AI服务和所述外部服务执行的第四子AI服务。
8.根据权利要求2~6任一项所述的智慧交互平板,其特征在于,
所述AI调度模块集成在所述智慧交互平板的一个应用软件中,与其他的应用软件通过所述第一传输接口连接;
或者
所述AI调度模块集成在所述智慧交互平板的一个应用软件中,通过所述第二传输接口与所述外部服务连接。
9.一种集成AI能力的智慧交互平板,其特征在于,包括AI调度模块,
所述AI调度模块包括:
具有AI能力的AI服务单元;以及
传输接口,用于接收至少一个应用软件生成的调用请求,并将所述调用请求发送至所述AI服务单元,以及将所述AI服务单元根据所述调用请求执行AI服务生成的数据信息发送至所述应用软件。
10.一种应用于权利要求1或9中任一项的集成AI能力的智慧交互平板的交互方法,其特征在于,所述方法包括:
所述应用软件接收调度指令并生成调用请求和调度数据,所述调用请求包括第一调用请求,所述调度数据包括第一调度数据;
所述第一传输接口将所述第二调用请求和所述第二调度数据传输至所述外部调用单元,
所述外部调用单元将所述第二调用请求和所述第二调度数据通过所述第二传输接口发送至对应的外部服务,
所述第二传输接口将所述外部服务根据所述第二调用请求和所述第二调度数据执行AI服务时生成的第二数据信息传输至所述外部调用单元,
所述外部调用单元将所述第二数据信息所述第一传输接口发送至所述应用软件。
11.根据权利要求10所述的方法,其特征在于,所述AI调度模块还包括第二传输接口,连接执行AI服务的外部服务和所述AI调度模块;所述AI服务单元还包括外部调用单元,所述方法还包括:
所述应用软件响应于所述智慧交互平板所接收的调度指令生成第二调用请求以及输出根据所述调度指令得到的第二调度数据,
所述第一传输接口将所述第二调用请求和所述第二调度数据传输至所述外部调用单元;
所述外部调用单元将所述第二调用请求和所述第二调度数据通过所述第二传输接口发送至对应的外部服务;
所述第二传输接口将所述外部服务根据所述第二调用请求和所述第二调度数据执行AI服务时生成的第二数据信息传输至所述外部调用单元,
所述外部调用单元将所述第二数据信息所述第一传输接口发送至所述应用软件。
12.根据权利要求11所述的方法,其特征在于,所述AI调度模块还包括第二传输接口,连接执行AI服务的外部服务和所述AI调度模块;所述AI服务单元还包括外部调用单元,所述方法还包括:
所述应用软件响应于所述智慧交互平板所接收的调度指令生成第二调用请求以及输出根据所述调度指令得到的第二调度数据;
所述第一传输接口将所述第二调用请求和所述第二调度数据传输至所述外部调用单元;
所述外部调用单元将所述第二调用请求和所述第二调度数据通过所述第二传输接口发送至对应的外部服务;
所述第二传输接口将所述外部服务根据所述第二调用请求和所述第二调度数据执行AI服务时生成的第二数据信息传输至所述外部调用单元;
所述外部调用单元将所述第二数据信息所述第一传输接口发送至所述应用软件。
13.根据权利要求11所述的方法,其特征在于,所述方法还包括:
所述外部调用单元响应于所述智慧交互平板所接收的调度指令生成第三调用请求以及根据所述调度指令获取第三调度数据,并通过所述第二传输接口将所述第三调用请求和所述第三调度数据输出至所述外部服务;
所述第二传输接口将所述外部服务根据所述第三调用请求和所述第三调度数据执行AI服务时生成的第五数据信息传输至所述外部调用单元。
CN202210758568.4A 2022-06-30 2022-06-30 一种集成ai能力的智慧交互平板以及交互方法 Pending CN115033404A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210758568.4A CN115033404A (zh) 2022-06-30 2022-06-30 一种集成ai能力的智慧交互平板以及交互方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210758568.4A CN115033404A (zh) 2022-06-30 2022-06-30 一种集成ai能力的智慧交互平板以及交互方法

Publications (1)

Publication Number Publication Date
CN115033404A true CN115033404A (zh) 2022-09-09

Family

ID=83127081

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210758568.4A Pending CN115033404A (zh) 2022-06-30 2022-06-30 一种集成ai能力的智慧交互平板以及交互方法

Country Status (1)

Country Link
CN (1) CN115033404A (zh)

Similar Documents

Publication Publication Date Title
CN1174324C (zh) 用于计算机网络的终端机及操作历史记录方法
US7453585B2 (en) Error notification handling
US5734905A (en) User interface in object oriented computer system for performing intuitive object transformations
US20060176901A1 (en) Method and apparatus for data processing, and computer product
JP2009506465A (ja) コマンディングのために方法及びコンピュータ可読媒体
US6928462B2 (en) System and method for distributed processing of non-processable elements of a document to be rendered on a client
CN103312814B (zh) 云管理平台和虚拟机终端用户间vnc隐通道的建立方法
CN102637127A (zh) 一种控制鼠标模块的方法及电子设备
WO2023124141A9 (zh) 一种输入法调用方法及相关设备
CN112231017A (zh) 在Linux上兼容运行Android操作系统的虚拟键鼠方法与装置
CN115794437A (zh) 微服务的调用方法、装置、计算机设备及存储介质
CN112015374B (zh) 一种基于自然语言的跨编程语言微服务集成系统
CN103002047A (zh) 一种rpc式web服务架构方法
CN106302125B (zh) 一种对请求信息进行响应的方法、装置及系统
WO2023221644A1 (zh) 一种基于云边协同系统的AIoT设备复用建模化方法
CN115033404A (zh) 一种集成ai能力的智慧交互平板以及交互方法
CN102779076B (zh) 一种浏览器中进程间通信的方法和装置
CN117057318A (zh) 领域模型生成方法、装置、设备以及存储介质
Heinrichs et al. Letras: An architecture and framework for ubiquitous pen-and-paper interaction
WO2022252600A1 (zh) 一种数据处理方法和装置
WO2021179956A1 (zh) 翻译方法、相关装置、设备及计算机可读存储介质
CN114007128A (zh) 一种显示设备及配网方法
CN111596883A (zh) 一种支持语音识别和体感操作遥控的数据可视化系统
CN103559039A (zh) 一种仪器交互界面的消息路由方法
KR20060081781A (ko) 의사 코드를 이용하여 홈 네트워크 기기를 제어하기 위한스크립트 코드를 생성하는 장치 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination