CN112686332A - 一种基于ai图像识别的文创智读方法及系统 - Google Patents

Abstract

本发明公开了一种基于AI图像识别的文创智读方法，包括以下步骤：S1、进入终端页面启动拍照模式并启动自动扫描功能；S2、采用图像处理技术对拍摄的照片图像进行预处理；S3、使用图像分类技术和目标物体检测技术在照片中智能定位，找出识别内容的位置信息标识或识别内容的分类信息标识；S4、识别出识别内容对应的富媒体信息；S5、接收位置信息标识或分类信息标识，并对标识进行检索，将对应标识的后台富媒体内容信息动态推送至终端页面。本发明还提供了一种基于AI图像识别的文创智读系统，系统包括启动单元、图像采集单元、内容识别后台管理单元、富媒体呈现后台管理单元和服务器单元。

Description

一种基于AI图像识别的文创智读方法及系统

技术领域

本发明涉及图像识别技术领域，具体来说，涉及一种基于AI图像识别的文创智读方法及系统。

背景技术

在我国，国粹艺术、文化领域和文创领域往往过于专业化、学术化。在作品展示的过程中，非专业人士的观展者参观的时候，普遍存在对艺术创作者不熟悉、对国粹艺术、文创艺术和文创领域难以理解的现象。过去通常通过陈列易拉宝、派发展刊等实体物料的方式，进行艺术品知识详解，但这些方式陈旧、制作成本高、传播效率低且占用展馆空间。后来衍生出二维码的方式进行线上呈现，但二维码仍存在维护二维码和打印二维码的方式呈现，因此文创、文化领域需要寻找一种更具体验感和趣味性的交互方式解读艺术品、展品的知识，拉近艺术品、文创产品与观展者之间的距离，更好的传递国粹艺术和文创文化。

发明内容

为解决现有技术中存在的问题，本发明提供一种基于AI图像识别的文创智读方法及系统，能够使用AI图像识别技术智能的读取文创、文化相关领域产品、艺术品以及场景的相关内容信息。

为实现上述目的，本发明采用的技术方案是：一种基于AI图像识别的文创智读方法，包括以下步骤：

S1、进入终端页面启动拍照模式并启动自动扫描功能；

S2、采用图像处理技术对拍摄的照片图像进行预处理；

S3、使用图像分类技术和目标物体检测技术在照片中智能定位，找出识别内容的位置信息标识或识别内容的分类信息标识；

S4、识别出识别内容对应的富媒体信息；

S5、接收位置信息标识或分类信息标识，并对标识进行检索，将对应标识的后台富媒体内容信息动态推送至终端页面。

在本技术方案中，当观展者进入展览现场，关注智读软件识别码，消费者使用移动终端上的智读软件扫现场作品或文物，软件进入对应相关作品或文物的富媒体内容呈现页面。在智读软件界面启动自动扫描功能，对准现场作品进行扫描。自动扫描到作品后，自动拍照上传图片，通过AI图像识别的图像分类技术，获取对应图片标识信息，其中图像分类技术将识别对应作品的富媒体内容标识，内容将自动跳转至对应的内容信息页面。当观光者在景区入口或雕塑说明牌上关注智读软件识别码，参观者使用移动终端上的AI智读软件扫描现场景区风景或雕塑，自动扫描到作品后，自动拍照上传图片，通过AI图像识别的图像分类技术或物体目标检测技术，获取对应图片标识信息，其中图像分类技术将识别对应作品的富媒体内容标识，内容将自动跳转至对应的内容信息页面；物体目标检测技术将获取对应景区中多个需要识别读取的雕塑位置，并将通过热点方式定位图片中的雕塑信息。参观者通过点击对应定位热点，获取对应雕塑的内容信息。

在进一步的技术方案中，步骤S1包括：

对设置的相关文化文创产品或作品进行自动化检测拍照。

在本技术方案中，在自动化识别中，并没有特定针对文化文创产品或作品，还包括任何拍照环境或场景，进入终端页面启动自动扫描功能，对预设置的产品、艺术品或场景进行扫描；所述借助移动终端可通过判断用户是否处于扫描状态，自动进行现场实物扫描。

在进一步的技术方案中,自动化检测拍照包括：

使用移动设备的方向传感器、加速传感器、陀螺仪传感器和方向传感器监听数据。

在本技术方案中，自动化监测拍照功能主要依托于手机传感器监听数据，通过程序算法判断用户当前是否处于扫画状态，而做出自动拍照上传图像到后台进行识别。主要效果为：用户行走时，程序停止扫描拍照上传功能，当用户处于静止时，扫描作品时，程序自动判断进行拍照上传识图。

在进一步的技术方案中,步骤S2中的预处理包括：

使用图像分割处理方式、噪点干扰处理方式和滤镜处理方式对图片进行分割处理、噪点干扰处理、滤镜处理、形状大小处理和边框加载处理。

在本技术方案中，采用图像处理技术，通过对图片进行分割处理、噪点干扰处理、滤镜处理、形状大小处理和边框加载处理，对拍摄的照片图像进行预处理。

在进一步的技术方案中，步骤S3包括：

基于预训练识别当前场景中需要识别的作品。

在本技术方案中，利用AI图像识别技术中的图像分类技术和目标物体检测技术，在照片中智能定位，找到识别内容信息位置或识别内容的分类标识，预训练为将图像预先通过一种AI图像标注方法，预先将需要识别的图像中的相应物体标注出来，通过一种图像识别训练后台进行预训练。

在进一步的技术方案中，步骤S4中的富媒体信息包括视频信息、音频信息、图文信息、3D互动信息、动画效果信息和h5页面信息。

在本技术方案中，利用AI图像智能识别技术识别出对应内容的标识，通过请求后台管理系统请求查询对应标识的内容信息。

在进一步的技术方案中，步骤S5包括：

根据后台动态信息配置方法，结合AI语音识别技术和3D框架技术动态推送不同类型的富媒体信息。

在本技术方案中，由内容管理后台根据读取分类信息标识或目标检测识别的所在位置物体信息标识，通过后台管理系统动态配置功能，将定制化推送不同类型的富媒体内容信息至终端页面。

在进一步的技术方案中，AI语音识别技术包括：

自动识别富媒体文本信息内容，并提供男声、女声和童声语调进行语音导览。

在本技术方案中，由内容管理后台输出的富媒体内容形式，包含一种基于AI语音识别技术和3D框架技术的富媒体呈现和互动方式。

在进一步的技术方案中，3D框架技术包括：

使用3D定制化建模方式呈现物品，并提供360°网页查看方式。

在本技术方案中，3D框架富媒体技术是一种基于3D框架技术，通过3D定制化建模方式，将物品立体化呈现，并提供360°网页查看方式。

本发明还提供了一种基于AI图像识别的文创智读系统，包括启动单元、图像采集单元、内容识别后台管理单元、富媒体呈现后台管理单元和服务器单元，其中：

启动单元，用于进入终端页面启动拍照模式并进入自动扫描功能；

图像采集单元，用于采用图像处理技术对拍摄的照片图像进行预处理；

内容识别后台管理单元，用于使用图像分类技术和目标物体检测技术在照片中智能定位，找出识别内容的位置信息标识或识别内容的分类信息标识；

富媒体呈现后台管理单元，用于识别出识别内容对应的富媒体信息；

服务器单元，用于接收位置信息标识或分类信息标识，并对标识进行检索，将对应标识的后台富媒体内容信息动态推送至终端页面。

在本技术方案中，服务器接收图像采集终端发送的作品或场景图像；所述服务器根据所述作品或场景图像提取通过AI模型训练，对其进行作品和场景归类或目标物体检测，将每种类别信息对应相应后台富媒体内容所述的ID码中，将识别作品或场景与对应输出的富媒体信息内容进行关联绑定，以形成对应作品、艺术品或场景的分类内容数据信息。其中富媒体内容包括一种基于AI语音识别技术的语音导览功能。用户通过终端系统实时扫描艺术品或场景图片，通过终端图片上传，借助AI模型识别，将对应输出展示作品信息的完整体验，并通过输出的富媒体信息形式，让用户可通过视频、语音导览、3D模型、H5等多种互动观看体验，有效且生动有趣地传递文化、文创领域产品、以及场景的观看体验。

本发明的有益效果是：

1、通过智能图像识别文化、艺术、文创相关的产品、艺术品或场景，减少了其线下信息内容材料制作成本；

2、以一种更具体验感和趣味性的交互方式解读艺术品、展品和场景的知识、信息和内容；

3、增加用户互动体验，增强多样化和多种形式获取内容和信息体验。

附图说明

图1是本发明所述的一种基于AI图像识别的文创智读方法的流程图；

图2是本发明所述的一种基于AI图像识别的文创智读系统的结构示意图。

附图标记说明：

10、启动单元；11、图像采集单元；12、内容识别后台管理单元；13、富媒体呈现后台管理单元；14、服务器单元。

具体实施方式

下面结合附图对本发明的实施例进行详细说明。

实施例：

如图1所示，本发明提供了一种基于AI图像识别的文创智读方法，包括以下步骤：

S1、进入终端页面启动拍照模式并启动自动扫描功能；

S2、采用图像处理技术对拍摄的照片图像进行预处理；

S3、使用图像分类技术和目标物体检测技术在照片中智能定位，找出识别内容的位置信息标识或识别内容的分类信息标识；

S4、识别出识别内容对应的富媒体信息；

S5、接收位置信息标识或分类信息标识，并对标识进行检索，将对应标识的后台富媒体内容信息动态推送至终端页面。

在本实施例中，当观展者进入展览现场，关注智读软件识别码，消费者使用移动终端上的智读软件扫现场作品或文物，软件进入对应相关作品或文物的富媒体内容呈现页面。在智读软件界面启动自动扫描功能，对准现场作品进行扫描。自动扫描到作品后，自动拍照上传图片，通过AI图像识别的图像分类技术，获取对应图片标识信息，其中图像分类技术将识别对应作品的富媒体内容标识，内容将自动跳转至对应的内容信息页面。当观光者在景区入口或雕塑说明牌上关注智读软件识别码，参观者使用移动终端上的AI智读软件扫描现场景区风景或雕塑，自动扫描到作品后，自动拍照上传图片，通过AI图像识别的图像分类技术或物体目标检测技术，获取对应图片标识信息，其中图像分类技术将识别对应作品的富媒体内容标识，内容将自动跳转至对应的内容信息页面；物体目标检测技术将获取对应景区中多个需要识别读取的雕塑位置，并将通过热点方式定位图片中的雕塑信息。参观者通过点击对应定位热点，获取对应雕塑的内容信息。

在另一个实施例中，步骤S1包括：

对设置的相关文化文创产品或作品进行自动化检测拍照。

在本实施例中，在自动化识别中，并没有特定针对文化文创产品或作品，还包括任何拍照环境或场景，进入终端页面启动自动扫描功能，对预设置的产品、艺术品或场景进行扫描；所述借助移动终端可通过判断用户是否处于扫描状态，自动进行现场实物扫描。

在另一个实施例中,自动化检测拍照包括：

使用移动设备的方向传感器、加速传感器、陀螺仪传感器和方向传感器监听数据。

在本实施例中，自动化监测拍照功能主要依托于手机传感器监听数据，通过程序算法判断用户当前是否处于扫画状态，而做出自动拍照上传图像到后台进行识别。主要效果为：用户行走时，程序停止扫描拍照上传功能，当用户处于静止时，扫描作品时，程序自动判断进行拍照上传识图。

在另一个实施例中,步骤S2中的预处理包括：

使用图像分割处理方式、噪点干扰处理方式和滤镜处理方式对图片进行分割处理、噪点干扰处理、滤镜处理、形状大小处理和边框加载处理。

在本实施例中，采用图像处理技术，通过对图片进行分割处理、噪点干扰处理、滤镜处理、形状大小处理和边框加载处理，对拍摄的照片图像进行预处理。

在另一个实施例中，步骤S3包括：

基于预训练识别当前场景中需要识别的作品。

在本实施例中，利用AI图像识别技术中的图像分类技术和目标物体检测技术，在照片中智能定位，找到识别内容信息位置或识别内容的分类标识，预训练为将图像预先通过一种AI图像标注方法，预先将需要识别的图像中的相应物体标注出来，通过一种图像识别训练后台进行预训练。

在另一个实施例中，步骤S4中的富媒体信息包括视频信息、音频信息、图文信息、3D互动信息、动画效果信息和h5页面信息。

在本实施例中，利用AI图像智能识别技术识别出对应内容的标识，通过请求后台管理系统请求查询对应标识的内容信息。

在另一个实施例中，步骤S5包括：

根据后台动态信息配置方法，结合AI语音识别技术和3D框架技术动态推送不同类型的富媒体信息。

在本实施例中，由内容管理后台根据读取分类信息标识或目标检测识别的所在位置物体信息标识，通过后台管理系统动态配置功能，将定制化推送不同类型的富媒体内容信息至终端页面。

在另一个实施例中，AI语音识别技术包括：

自动识别富媒体文本信息内容，并提供男声、女声和童声语调进行语音导览。

在本实施例中，由内容管理后台输出的富媒体内容形式，包含一种基于AI语音识别技术和3D框架技术的富媒体呈现和互动方式。

在另一个实施例中，3D框架技术包括：

使用3D定制化建模方式呈现物品，并提供360°网页查看方式。

在本实施例中，3D框架富媒体技术是一种基于3D框架技术，通过3D定制化建模方式，将物品立体化呈现，并提供360°网页查看方式。

在另一个实施例中，如图2所示，本发明还提供了一种基于AI图像识别的文创智读系统，包括启动单元、图像采集单元、内容识别后台管理单元、富媒体呈现后台管理单元和服务器单元，其中：

启动单元，用于进入终端页面启动拍照模式并进入自动扫描功能；

图像采集单元，用于采用图像处理技术对拍摄的照片图像进行预处理；

内容识别后台管理单元，用于使用图像分类技术和目标物体检测技术在照片中智能定位，找出识别内容的位置信息标识或识别内容的分类信息标识；

富媒体呈现后台管理单元，用于识别出识别内容对应的富媒体信息；

服务器单元，用于接收位置信息标识或分类信息标识，并对标识进行检索，将对应标识的后台富媒体内容信息动态推送至终端页面。

在本实施例中，服务器接收图像采集终端发送的作品或场景图像；所述服务器根据所述作品或场景图像提取通过AI模型训练，对其进行作品和场景归类或目标物体检测，将每种类别信息对应相应后台富媒体内容所述的ID码中，将识别作品或场景与对应输出的富媒体信息内容进行关联绑定，以形成对应作品、艺术品或场景的分类内容数据信息。其中富媒体内容包括一种基于AI语音识别技术的语音导览功能。用户通过终端系统实时扫描艺术品或场景图片，通过终端图片上传，借助AI模型识别，将对应输出展示作品信息的完整体验，并通过输出的富媒体信息形式，让用户可通过视频、语音导览、3D模型、H5等多种互动观看体验，有效且生动有趣地传递文化、文创领域产品、以及场景的观看体验。

以上所述实施例仅表达了本发明的具体实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。

Claims (10)

1.一种基于AI图像识别的文创智读方法，其特征在于，包括以下步骤：

S1、进入终端页面启动拍照模式并启动自动扫描功能；

S2、采用图像处理技术对拍摄的照片图像进行预处理；

S3、使用图像分类技术和目标物体检测技术在照片中智能定位，找出识别内容的位置信息标识或识别内容的分类信息标识；

S4、识别出识别内容对应的富媒体信息；

S5、接收位置信息标识或分类信息标识，并对标识进行检索，将对应标识的后台富媒体内容信息动态推送至终端页面。

2.根据权利要求1所述的一种基于AI图像识别的文创智读方法，其特征在于，所述步骤S1包括：

对设置的相关文化文创产品或作品进行自动化检测拍照。

3.根据权利要求2所述的一种基于AI图像识别的文创智读方法，其特征在于，所述自动化检测拍照包括：

使用移动设备的方向传感器、加速传感器、陀螺仪传感器和方向传感器监听数据。

4.根据权利要求1所述的一种基于AI图像识别的文创智读方法，其特征在于，所述步骤S2中的预处理包括：

使用图像分割处理方式、噪点干扰处理方式和滤镜处理方式对图片进行分割处理、噪点干扰处理、滤镜处理、形状大小处理和边框加载处理。

5.根据权利要求1所述的一种基于AI图像识别的文创智读方法，其特征在于，所述步骤S3包括：

基于预训练识别当前场景中需要识别的作品。

6.根据权利要求1所述的一种基于AI图像识别的文创智读方法，其特征在于，所述步骤S4中的富媒体信息包括视频信息、音频信息、图文信息、3D互动信息、动画效果信息和h5页面信息。

7.根据权利要求1所述的一种基于AI图像识别的文创智读方法，其特征在于，所述步骤S5包括：

根据后台动态信息配置方法，结合AI语音识别技术和3D框架技术动态推送不同类型的富媒体信息。

8.根据权利要求7所述的一种基于AI图像识别的文创智读方法，其特征在于，AI语音识别技术包括：

自动识别富媒体文本信息内容，并提供男声、女声和童声语调进行语音导览。

9.根据权利要求7所述的一种基于AI图像识别的文创智读方法，其特征在于，3D框架技术包括：

使用3D定制化建模方式呈现物品，并提供360°网页查看方式。

10.一种基于AI图像识别的文创智读系统，其特征在于，所述系统包括启动单元、图像采集单元、内容识别后台管理单元、富媒体呈现后台管理单元和服务器单元，其中：

启动单元，用于进入终端页面启动拍照模式并进入自动扫描功能；

图像采集单元，用于采用图像处理技术对拍摄的照片图像进行预处理；

内容识别后台管理单元，用于使用图像分类技术和目标物体检测技术在照片中智能定位，找出识别内容的位置信息标识或识别内容的分类信息标识；

富媒体呈现后台管理单元，用于识别出识别内容对应的富媒体信息；

服务器单元，用于接收位置信息标识或分类信息标识，并对标识进行检索，将对应标识的后台富媒体内容信息动态推送至终端页面。

Images