CN110781861A - 一种通用物体识别的电子设备及方法 - Google Patents

一种通用物体识别的电子设备及方法 Download PDF

Info

Publication number
CN110781861A
CN110781861A CN201911075917.7A CN201911075917A CN110781861A CN 110781861 A CN110781861 A CN 110781861A CN 201911075917 A CN201911075917 A CN 201911075917A CN 110781861 A CN110781861 A CN 110781861A
Authority
CN
China
Prior art keywords
treater
audio link
picture
camera
button
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911075917.7A
Other languages
English (en)
Inventor
艾潘
李汉超
段秋阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kunshan Timo Intelligent Technology Co.,Ltd.
Original Assignee
Shanghai Dixian Industrial Design Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Dixian Industrial Design Co Ltd filed Critical Shanghai Dixian Industrial Design Co Ltd
Priority to CN201911075917.7A priority Critical patent/CN110781861A/zh
Publication of CN110781861A publication Critical patent/CN110781861A/zh
Priority to PCT/CN2020/138696 priority patent/WO2021089059A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40—Document-oriented image-based pattern recognition
    • G06V30/41—Analysis of document content
    • G06V30/413—Classification of content, e.g. text, photographs or tables
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/683—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/685—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using automatically derived transcript of audio data, e.g. lyrics
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • G10L13/02—Methods for producing synthetic speech; Speech synthesisers

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Library & Information Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Toys (AREA)

Abstract

本发明公开了一种通用物体识别的电子设备，包括：摄像头、处理器，拍照按钮，扬声器和LED指示灯，所述处理器用过wifi蓝牙模块与手机连接，摄像头和拍照按钮与处理器的输入端连接，处理器输出端与扬声器和LED指示灯相连。同时还公开了一种通用物体识别方法，通过摄像头采集图片；上传图片到服务器；服务器返回描述图片中主要物体的第一音频链接和第二音频链接。本发明通用物体识别的电子设备配合手机app使用，能够帮助儿童快速准确认识物体。

Description

一种通用物体识别的电子设备及方法
技术领域
本发明属于数据处理技术领域，具体涉及一种通用物体识别的电子设备及方法。
背景技术
现有技术中，儿童教育设备在儿童认识物体方面有二种，一种是将物体印刷在图书上，儿童通过阅读文字或者他人指导下认识物体。第二种是一些电子设备将物体的图片、动画、视频显示在显示器上，设备播放音频帮助儿童认识物体。
儿童通过以上二种方法认识物体后，当儿童在实际环境中去观察物体时，由于物体种类繁多家长不能全部准确识别。而本设备可以通过摄像头识别物体，并通过扬声器播放出物体的名称及相关内容。
发明内容
针对现有技术中的不足之处，本发明提供一种通用物体识别的电子设备及方法。将通用物体识别技术应用于儿童认知物体教育。
为了达到上述目的，本发明技术方案如下：
一种通用物体识别的电子设备，包括：摄像头、处理器，拍照按钮，扬声器和LED指示灯，所述处理器用wifi蓝牙模块与手机连接，摄像头和拍照按钮与处理器的输入端连接，处理器输出端与扬声器和LED指示灯相连。
本发明还提供一种通用物体识别的方法，包括以下步骤：
1）按下拍照按钮后按照预设采集频率，通过摄像头采集物体图片，采集频率，曝光时间可由手机app配置；
2）对图片进行预处理，包括压缩图片、图像二值化、灰度图处理、SIFT特征提取和交点特征提取；
3）通过wifi上传图片至服务器；
4）服务器首先识别出图片内容并输出图片中主要物体名称的文本，然后将文本内容合成语音内容，此语音内容链接为第一音频链接。紧接着对物体与服务器的教育资源库匹配最优语音内容，如果匹配成功。此语音内容链接为第二音频链接；
5）设备接收识别结果、第一音频链接和第二音频链接；
6）设备依次播放第一音频链接和第二音频链接。
有益效果：本发明通用物体识别的电子设备配合手机app使用，能够帮助儿童快速准确认识物体。
附图说明
图1为本发明的电子设备结构框图；
图2为本发明的通用物体识别的方法流程框图。
具体实施方式
以下参照具体的实施例来说明本发明。本领域技术人员能够理解，这些实施例仅用于说明本发明，其不以任何方式限制本发明的范围。
实施例1
一种通用物体识别的电子设备，如图1所示，包括：摄像头、处理器，拍照按钮，扬声器和LED指示灯，所述处理器用wifi蓝牙模块与手机连接，摄像头和拍照按钮与处理器的输入端连接，处理器输出端与扬声器和LED指示灯相连。
实施例2
一种通用物体识别的方法，如图2所示，包括以下步骤：
1）按下拍照按钮后按照预设采集频率，通过摄像头采集物体图片，采集频率，曝光时间可由手机app配置；
2）对图片进行预处理，包括压缩图片、图像二值化、灰度图处理、SIFT特征提取和交点特征提取；
3）通过wifi上传图片至服务器；
4）服务器首先识别出图片内容并输出图片中主要物体名称的文本，然后将文本内容合成语音内容，此语音内容链接为第一音频链接。紧接着对物体与服务器的教育资源库匹配最优语音内容，如果匹配成功。此语音内容链接为第二音频链接；
5）设备接收识别结果、第一音频链接和第二音频链接；
6）设备依次播放第一音频链接和第二音频链接。

Claims (2)

1.一种通用物体识别的电子设备，其特征在于：包括：摄像头、处理器，拍照按钮，扬声器和LED指示灯，所述处理器用wifi蓝牙模块与手机连接，摄像头和拍照按钮与处理器的输入端连接，处理器输出端与扬声器和LED指示灯相连。
2.一种通用物体识别的方法，其特征在于：包括以下步骤：
1）按下拍照按钮后按照预设采集频率，通过摄像头采集物体图片，采集频率，曝光时间可由手机app配置；
2）对图片进行预处理，包括压缩图片、图像二值化、灰度图处理、SIFT特征提取和交点特征提取；
3）通过wifi上传图片至服务器；
4）服务器首先识别出图片内容并输出物体名称文本，然后将文本内容合成语音内容，此语音内容链接为第一音频链接；紧接着对物体与服务器的教育资源库匹配最优语音内容，如果匹配成功；此语音内容链接为第二音频链接；
5）设备接收识别结果、第一音频链接和第二音频链接；
6）设备依次播放第一音频链接和第二音频链接。
CN201911075917.7A 2019-11-06 2019-11-06 一种通用物体识别的电子设备及方法 Pending CN110781861A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201911075917.7A CN110781861A (zh) 2019-11-06 2019-11-06 一种通用物体识别的电子设备及方法
PCT/CN2020/138696 WO2021089059A1 (zh) 2019-11-06 2020-12-23 智能识物方法及装置、识物设备、终端设备、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911075917.7A CN110781861A (zh) 2019-11-06 2019-11-06 一种通用物体识别的电子设备及方法

Publications (1)

Publication Number Publication Date
CN110781861A true CN110781861A (zh) 2020-02-11

Family

ID=69389468

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911075917.7A Pending CN110781861A (zh) 2019-11-06 2019-11-06 一种通用物体识别的电子设备及方法

Country Status (2)

Country Link
CN (1) CN110781861A (zh)
WO (1) WO2021089059A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112699743A (zh) * 2020-12-15 2021-04-23 黄冈格罗夫氢能汽车有限公司 一种一键识别氢能燃料电池车辆指示灯和按钮开关的系统
WO2021089059A1 (zh) * 2019-11-06 2021-05-14 昆山提莫智能科技有限公司 智能识物方法及装置、识物设备、终端设备、存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103646571A (zh) * 2013-12-11 2014-03-19 步步高教育电子有限公司 一种物体信息识别展示的方法和设备
CN106097793A (zh) * 2016-07-21 2016-11-09 北京光年无限科技有限公司 一种面向智能机器人的儿童教学方法和装置
CN108986566A (zh) * 2018-08-06 2018-12-11 南京南奕亭文化传媒有限公司 一种智能幼儿教育系统及其操作方法
CN109766914A (zh) * 2018-12-14 2019-05-17 深圳壹账通智能科技有限公司 基于图像识别的物品识别方法、装置、设备及存储介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7563099B1 (en) * 1999-05-21 2009-07-21 Elizabeth Iftikhar Multi-media method and apparatus for teaching language
CN109559576B (zh) * 2018-11-16 2020-07-28 中南大学 一种儿童伴学机器人及其早教系统自学习方法
CN110781861A (zh) * 2019-11-06 2020-02-11 上海谛闲工业设计有限公司 一种通用物体识别的电子设备及方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103646571A (zh) * 2013-12-11 2014-03-19 步步高教育电子有限公司 一种物体信息识别展示的方法和设备
CN106097793A (zh) * 2016-07-21 2016-11-09 北京光年无限科技有限公司 一种面向智能机器人的儿童教学方法和装置
CN108986566A (zh) * 2018-08-06 2018-12-11 南京南奕亭文化传媒有限公司 一种智能幼儿教育系统及其操作方法
CN109766914A (zh) * 2018-12-14 2019-05-17 深圳壹账通智能科技有限公司 基于图像识别的物品识别方法、装置、设备及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021089059A1 (zh) * 2019-11-06 2021-05-14 昆山提莫智能科技有限公司 智能识物方法及装置、识物设备、终端设备、存储介质
CN112699743A (zh) * 2020-12-15 2021-04-23 黄冈格罗夫氢能汽车有限公司 一种一键识别氢能燃料电池车辆指示灯和按钮开关的系统

Also Published As

Publication number Publication date
WO2021089059A1 (zh) 2021-05-14

Similar Documents

Publication Publication Date Title
US11270099B2 (en) Method and apparatus for generating facial feature
CN110246512B (zh) 声音分离方法、装置及计算机可读存储介质
CN109919244B (zh) 用于生成场景识别模型的方法和装置
CN107977390B (zh) 绘本识别方法、装置、系统及电子设备
KR102002024B1 (ko) 객체 라벨링 처리 방법 및 객체 관리 서버
CN112148922A (zh) 会议记录方法、装置、数据处理设备及可读存储介质
CN111709414A (zh) Ar设备及其文字识别方法、装置和计算机可读存储介质
CN115699082A (zh) 缺陷检测方法及装置、存储介质及电子设备
KR102292775B1 (ko) 학습 서비스 시스템 및 방법
CN104077597A (zh) 图像分类方法及装置
CN109993075B (zh) 聊天应用会话内容存储方法、系统及装置
CN110781861A (zh) 一种通用物体识别的电子设备及方法
CN106295514A (zh) 一种图像识别题目显示答案的方法及装置
CN107910006A (zh) 语音识别方法、装置和多信源语音区分识别系统
CN111126159A (zh) 用于实时跟踪行人的方法、装置、电子设备和介质
CN207718803U (zh) 多信源语音区分识别系统
CN111339809A (zh) 一种课堂行为分析方法及装置、电子设备
CN111680179A (zh) 目标数据的获取方法及装置、电子设备和存储介质
CN110335237B (zh) 用于生成模型的方法、装置和用于识别图像的方法、装置
CN110765304A (zh) 图像处理方法、装置、电子设备及计算机可读介质
CN112309389A (zh) 信息交互方法和装置
CN116629236A (zh) 一种待办事项提取方法、装置、设备及存储介质
CN105303904A (zh) 一种移动学习方法及系统
CN114612909A (zh) 字符识别方法、装置、可读介质及电子设备
CN113450627A (zh) 实验项目运行方法及装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20210107

Address after: No. 150-3, Xiangshan Avenue, Duodao District, Jingmen City, Hubei Province

Applicant after: Duan Qiuyang

Address before: Room 57593, building 3, No. 1800, Panyuan Road, Changxing Town, Chongming District, Shanghai 202150 (Shanghai Taihe Economic Development Zone)

Applicant before: Shanghai Dixian Industrial Design Co.,Ltd.

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20210202

Address after: No. 150-3, Xiangshan Avenue, Duodao District, Jingmen City, Hubei Province

Applicant after: Duan Qiuyang

Applicant after: Kunshan Timo Intelligent Technology Co.,Ltd.

Address before: No. 150-3, Xiangshan Avenue, Duodao District, Jingmen City, Hubei Province

Applicant before: Duan Qiuyang

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200211