CN107832803A - 一种机械视觉和机械嗅觉以时间相互映射的设计方法 - Google Patents

一种机械视觉和机械嗅觉以时间相互映射的设计方法 Download PDF

Info

Publication number
CN107832803A
CN107832803A CN201711200468.5A CN201711200468A CN107832803A CN 107832803 A CN107832803 A CN 107832803A CN 201711200468 A CN201711200468 A CN 201711200468A CN 107832803 A CN107832803 A CN 107832803A
Authority
CN
China
Prior art keywords
smell
time
data
gas
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711200468.5A
Other languages
English (en)
Inventor
胡明建
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201711200468.5A priority Critical patent/CN107832803A/zh
Publication of CN107832803A publication Critical patent/CN107832803A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/751Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Manipulator (AREA)

Abstract

一种机械视觉和机械嗅觉以时间相互映射的设计方法的技术领域,是属于,机器人、人工智能、计算机、图像处理、嗅觉传感器技术、数学等技术领域,主要技术是通过摄像头采集的图片和嗅觉传感器采集的数据,同时记录下来,然后通过计算处理,让图片里的气味产生物的图像和闻到的气味对应起来,并且通过运算要保存时,同时保存起来,把这个时间也同时保存起来,并且以这个时间为映射,这样当接收到已保存的气味,可以在数据库里找到,并通过记录的时间,同时找到对应的图像,当看见那副图像,也通过时间映射找到对应的气味。

Description

一种机械视觉和机械嗅觉以时间相互映射的设计方法
技术领域
一种机械视觉和机械嗅觉以时间相互映射的设计方法的技术领域,是属于,机器人、人工智能、计算机、图像处理、嗅觉传感器技术、数学等技术领域,主要技术是通过摄像头采集的图片和嗅觉传感器采集的数据,同时记录下来,然后通过计算处理,让图片里的气味产生物的图像和闻到的气味对应起来,并且通过运算要保存时,同时保存起来,把这个时间也同时保存起来,并且以这个时间为映射,这样当接收到已保存的气味,可以在数据库里找到,并通过记录的时间,同时找到对应的图像,当看见那副图像,也通过时间映射找到对应的气味。
背景技术
智能型机器人是最复杂的机器人,也是人类最渴望能够早日制造出来的机器朋友。然而要制造出一台智能机器人并不容易,仅仅是让机器模拟人类的行走动作,科学家们就要付出了数十甚至上百年的努力。1920年 捷克斯洛伐克作家卡雷尔·恰佩克在他的科幻小说中,根据Robota(捷克文,原意为“劳役、苦工”)和Robotnik(波兰文,原意为“工人”),创造出“机器人”这个词。1939年 美国纽约世博会上展出了西屋电气公司制造的家用机器人Elektro。它由电缆控制,可以行走,会说77个字,甚至可以抽烟,不过离真正干家务活还差得远。但它让人们对家用机器人的憧憬变得更加具体。1942年 美国科幻巨匠阿西莫夫提出“机器人三定律”。虽然这只是科幻小说里的创造,但后来成为学术界默认的研发原则。1948年 诺伯特·维纳出版《控制论——关于在动物和机中控制和通讯的科学》,阐述了机器中的通信和控制机能与人的神经、感觉机能的共同规律,率先提出以计算机为核心的自动化工厂。1954年 在达特茅斯会议上,马文·明斯基提出了他对智能机器的看法:智能机器“能够创建周围环境的抽象模型,如果遇到问题,能够从抽象模型中寻找解决方法”。这个定义影响到以后30年智能机器人的研究方向。1956年 美国人乔治·德沃尔制造出世界上第一台可编程的机器人,并注册了专利。这种机械手能按照不同的程序从事不同的工作,因此具有通用性和灵活性。1959年 德沃尔与美国发明家约瑟夫·英格伯格联手制造出第一台工业机器人。随后,成立了世界上第一家机器人制造工厂——Unimation公司。由于英格伯格对工业机器人的研发和宣传,他也被称为“工业机器人之父”。1962年 美国AMF公司生产出“VERSTRAN”(意思是万能搬运),与Unimation公司生产的Unimate一样成为真正商业化的工业机器人,并出口到世界各国,掀起了全世界对机器人和机器人研究的热潮。 传感器的应用提高了机器人的可操作性。人们试着在机器人上安装各种各样的传感器,包括1961年恩斯特采用的触觉传感器,托莫维奇和博尼1962年在世界上最早的“灵巧手”上用到了压力传感器,而麦卡锡1963年则开始在机器人中加入视觉传感系统,并在1964年,帮助MIT推出了世界上第一个带有视觉传感器,能识别并定位积木的机器人系统。1965年 约翰·霍普金斯大学应用物理实验室研制出Beast机器人。Beast已经能通过声呐系统、光电管等装置,根据环境校正自己的位置。20世纪60年代中期开始,美国麻省理工学院、斯坦福大学、英国爱丁堡大学等陆续成立了机器人实验室。美国兴起研究第二代带传感器、“有感觉”的机器人,并向人工智能进发。1968年 美国斯坦福研究所公布他们研发成功的机器人Shakey。它带有视觉传感器,能根据人的指令发现并抓取积木,不过控制它的计算机有一个房间那么大。Shakey可以算是世界第一台智能机器人,拉开了第三代机器人研发的序幕。 日本早稻田大学加藤一郎实验室研发出第一台以双脚走路的机器人。加藤一郎长期致力于研究仿人机器人,被誉为“仿人机器人之父”。日本专家一向以研发仿人机器人和娱乐机器人的技术见长,后来更进一步,催生出本田公司的ASIMO和索尼公司的QRIO。 世界上第一次机器人和小型计算机携手合作,就诞生了美国Cincinnati Milacron公司的机器人T3。 美国Unimation公司推出通用工业机器人PUMA,这标志着工业机器人技术已经完全成熟。PUMA至今仍然工作在工厂第一线。 英格伯格再推机器人Helpmate,这种机器人能在医院里为病人送饭、送药、送邮件。同年,他还预言:“我要让机器人擦地板,做饭,出去帮我洗车,检查安全”。 中国著名学者周海中教授在《论机器人》一文中预言:到二十一世纪中叶,纳米机器人将彻底改变人类的劳动和生活方式。 丹麦乐高公司推出机器人(Mind-storms)套件,让机器人制造变得跟搭积木一样,相对简单又能任意拼装,使机器人开始走入个人世界。1999年日本索尼公司推出犬型机器人爱宝(AIBO),当即销售一空,从此娱乐机器人成为机器人迈进普通家庭的途径之一。2002年 美国iRobot公司推出了吸尘器机器人Roomba,它能避开障碍,自动设计行进路线,还能在电量不足时,自动驶向充电座。Roomba是目前世界上销量最大、最商业化的家用机器人。iRobot公司北京区授权代理商:北京微网智宏科技有限公司。2006年 6月,微软公司推出Microsoft Robotics Studio,机器人模块化、平台统一化的趋势越来越明显,比尔·盖茨预言,家用机器人很快将席卷全球。因此对于智能机器人重要的输入信息就是视觉和嗅觉,现在的技术没有把视觉和嗅觉很好的对应起来,因此有了本发明。
发明内容
由于人工智能和机器人的快速发展,在现有的技术上,人类利用摄像头能很好的识别一些事物,同时人类利用电子鼻能很好的区分各种气味,在单方面的技术都超过了人类的识别的能力,在人类的行为中,当人类看见鲜花,就会想起它的气味,闻到鲜花的气味,就会想起鲜花,现在的计算机技术还没有办法实现这种联想的作用,因此本发明正好是解决这种技术,实现这种相互映射的功能,本发明的重中之重是通过时间把它们联系起来,通过时间映射来实现。一种机械视觉和机械嗅觉以时间相互映射的设计方法,其特征是,机械视觉和机械嗅觉以时间相互映射的设计方法,由4部分构成,1是机械视觉处理部分,2是机械嗅觉处理部分,3是建立对应关系,4是以时间作为映射进行存储的方法,机械视觉处理部分主要是使用摄像机把图片拍摄下来,通过各种算法把图片进行处理,然后把图片提取的特征和储存的数据进行比较或通过深度学习方法进行识别,嗅觉处理的方法就是用电子鼻对空气中的气体进行识别,把这些信息转换成数据,然后让这些数据存储起来,要建立对应关系,就是建立图像和气味的对应关系,如果有气味发出,那么它必定有气源,通过机械鼻的朝向,闻到气味的浓度差,确定气味是哪个方向传过来,同时把摄像头转到气味传来的方向,根据气味的浓度梯度,移动机器靠近气源,确定气源的位置,摄像头也在不停的拍摄,不停运算辅助寻找气源,确定气源后,同时储存下这个图像和这个气味的数据,以时间作为映射进行存储方式,这是重中之重,让机械想起这是什么时候发生的事,以时间记忆作为2者的关联,具备唯一性和实时性,因此采用如下设计,当气味传感器收到信号,起先和存储的数据库里的数据进行匹配,如果匹配上了就知道是什么东西发出气味,如果匹配不上,通过气味的浓度梯度进行定位,通过定位,也是根据浓度梯度,移动机械视觉去拍摄,这时启动图片处理技术,通过运算,是否要存储这种现象,如果需要存储这种现象,就去调来时间计时器的时间,同时把图片处理后的气源和气味处理后的数据分别存储起来,储存在为它们各自设立的空间里,通过时间把它们对应起来,这样以后如果机械鼻子闻到了气味,就把这气味和数据库里存储的数据进行比较,如果找到这样的数据,就调出当初记忆的时间,然后根据这个时间去寻找对应的图片,同理如果机械视觉看见事物,就会和储存的数据匹配,如果匹配上了,就会调出当初记忆的时间,通过记忆的时间,对时间进行搜索找到对应的气味,这样可以相互对应,并且可以知道这是什么时候发生的。
附图说明
图1是一种机械视觉和机械嗅觉以时间相互映射的设计方法的原理图,a-1代表的是气味数据库,a-2代表的是以时间相互对应的算法,a-3代表的是图像数据库,b-1代表的是气味数据库的数据部分, b-2代表的是气味数据库的时间部分,c-1代表的是图像数据库的时间部分,c-2代表的是图像数据库的数据部分,下面的圆圈代表很多很多的意思。
实施方案
当一个机器人启动以后,系统进入工作状态,它的机械嗅觉和机械视觉也进入正常状态,这时机器人的嗅觉系统会不停的接收外部的气味传入,机械视觉和机械嗅觉以时间相互映射的设计方法,由4部分构成,1是机械视觉处理部分,2是机械嗅觉处理部分,3是建立对应关系,4是以时间作为映射进行存储的方法,机械视觉处理部分主要是使用摄像机把图片拍摄下来,通过各种算法把图片进行处理,然后把图片提取的特征和储存的数据进行比较或通过深度学习方法进行识别,嗅觉处理的方法就是用电子鼻对空气中的气体进行识别,把这些信息转换成数据,然后让这些数据存储起来,要建立对应关系,就是建立图像和气味的对应关系,如果有气味发出,那么它必定有气源,通过机械鼻的朝向,闻到气味的浓度差,确定气味是哪个方向传过来,同时把摄像头转到气味传来的方向,根据气味的浓度梯度,移动机器靠近气源,确定气源的位置,摄像头也在不停的拍摄,不停运算辅助寻找气源,确定气源后,同时储存下这个图像和这个气味的数据,以时间作为映射进行存储方式,这是重中之重,让机械想起这是什么时候发生的事,以时间记忆作为2者的关联,具备唯一性和实时性,因此采用如下设计,当气味传感器收到信号,起先和存储的数据库里的数据进行匹配,如果匹配上了就知道是什么东西发出气味,如果匹配不上,通过气味的浓度梯度进行定位,通过定位,也是根据浓度梯度,移动机械视觉去拍摄,这时启动图片处理技术,通过运算,是否要存储这种现象,如果需要存储这种现象,就去调来时间计时器的时间,同时把图片处理后的气源和气味处理后的数据分别存储起来,储存在为它们各自设立的空间里,通过时间把它们对应起来,这样以后如果机械鼻子闻到了气味,就把这气味和数据库里存储的数据进行比较,如果找到这样的数据,就调出当初记忆的时间,然后根据这个时间去寻找对应的图片,同理如果机械视觉看见事物,就会和储存的数据匹配,如果匹配上了,就会调出当初记忆的时间,通过记忆的时间,对时间进行搜索找到对应的气味,这样可以相互对应,并且可以知道这是什么时候发生的。如附图所示,当需要存储时,根据时间,同时存储起来,例如在2013年01月01号,12点12分,闻到鲜花的气味,根据气味梯度找到鲜花,拍下鲜花,那么就把2013年01月01号,12点12分和鲜花的气味数据一起存储在一起,同时把2013年01月01号,12点12分和鲜花的图像特征存储在一起,然后建立算法,如果传过来的鲜花气味和数据库的数据匹配上,就显示这个气味,同时通过2013年01月01号,12点12分去搜索图像特征的存储空间的时间部分,这样找到匹配的时间,然后就把鲜花显示出来,同样的道理,如果看见鲜花,就可以到图像数据库查找鲜花的图像特征,把鲜花的图像特征显示出来,同时用时间2013年01月01号,12点12分到气味数据库进行搜寻,找到气味的数据,然后显示出来,这样就可以实现按照时间对应映射关系的实现,并且知道是什么时候发生的。

Claims (1)

1.一种机械视觉和机械嗅觉以时间相互映射的设计方法,其特征是,机械视觉和机械嗅觉以时间相互映射的设计方法,由4部分构成,1是机械视觉处理部分,2是机械嗅觉处理部分,3是建立对应关系,4是以时间作为映射进行存储的方法,机械视觉处理部分主要是使用摄像机把图片拍摄下来,通过各种算法把图片进行处理,然后把图片提取的特征和储存的数据进行比较或通过深度学习方法进行识别,嗅觉处理的方法就是用电子鼻对空气中的气体进行识别,把这些信息转换成数据,然后让这些数据存储起来,要建立对应关系,就是建立图像和气味的对应关系,如果有气味发出,那么它必定有气源,通过机械鼻的朝向,闻到气味的浓度差,确定气味是哪个方向传过来,同时把摄像头转到气味传来的方向,根据气味的浓度梯度,移动机器靠近气源,确定气源的位置,摄像头也在不停的拍摄,不停运算辅助寻找气源,确定气源后,同时储存下这个图像和这个气味的数据,以时间作为映射进行存储方式,这是重中之重,让机械想起这是什么时候发生的事,以时间记忆作为2者的关联,具备唯一性和实时性,因此采用如下设计,当气味传感器收到信号,起先和存储的数据库里的数据进行匹配,如果匹配上了就知道是什么东西发出气味,如果匹配不上,通过气味的浓度梯度进行定位,通过定位,也是根据浓度梯度,移动机械视觉去拍摄,这时启动图片处理技术,通过运算,是否要存储这种现象,如果需要存储这种现象,就去调来时间计时器的时间,同时把图片处理后的气源和气味处理后的数据分别存储起来,储存在为它们各自设立的空间里,通过时间把它们对应起来,这样以后如果机械鼻子闻到了气味,就把这气味和数据库里存储的数据进行比较,如果找到这样的数据,就调出当初记忆的时间,然后根据这个时间去寻找对应的图片,同理如果机械视觉看见事物,就会和储存的数据匹配,如果匹配上了,就会调出当初记忆的时间,通过记忆的时间,对时间进行搜索找到对应的气味,这样可以相互对应,并且可以知道这是什么时候发生的。
CN201711200468.5A 2017-11-27 2017-11-27 一种机械视觉和机械嗅觉以时间相互映射的设计方法 Pending CN107832803A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711200468.5A CN107832803A (zh) 2017-11-27 2017-11-27 一种机械视觉和机械嗅觉以时间相互映射的设计方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711200468.5A CN107832803A (zh) 2017-11-27 2017-11-27 一种机械视觉和机械嗅觉以时间相互映射的设计方法

Publications (1)

Publication Number Publication Date
CN107832803A true CN107832803A (zh) 2018-03-23

Family

ID=61645715

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711200468.5A Pending CN107832803A (zh) 2017-11-27 2017-11-27 一种机械视觉和机械嗅觉以时间相互映射的设计方法

Country Status (1)

Country Link
CN (1) CN107832803A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008000205A (ja) * 2006-06-20 2008-01-10 Nippon Telegr & Teleph Corp <Ntt> 知覚情報提示装置
CN102176119A (zh) * 2011-02-18 2011-09-07 杭州电子科技大学 一种基于信息融合机制的多机器人危险气味源定位方法
CN102499638A (zh) * 2011-09-28 2012-06-20 北京航空航天大学 一种基于视听嗅触的活体探测系统
CN102770820A (zh) * 2009-12-22 2012-11-07 Atonarp株式会社 机器人
CN103608749A (zh) * 2011-04-26 2014-02-26 加利福尼亚大学董事会 用于记录和重现感觉的系统和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008000205A (ja) * 2006-06-20 2008-01-10 Nippon Telegr & Teleph Corp <Ntt> 知覚情報提示装置
CN102770820A (zh) * 2009-12-22 2012-11-07 Atonarp株式会社 机器人
CN102176119A (zh) * 2011-02-18 2011-09-07 杭州电子科技大学 一种基于信息融合机制的多机器人危险气味源定位方法
CN103608749A (zh) * 2011-04-26 2014-02-26 加利福尼亚大学董事会 用于记录和重现感觉的系统和装置
CN102499638A (zh) * 2011-09-28 2012-06-20 北京航空航天大学 一种基于视听嗅触的活体探测系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
朱菲菲: "嗅视觉信息融合及移动机器人在气体泄漏源搜寻中的应用", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Similar Documents

Publication Publication Date Title
US20200265260A1 (en) Generating a model for an object encountered by a robot
CN110026987B (zh) 一种机械臂抓取轨迹的生成方法、装置、设备及存储介质
Pyo et al. Service robot system with an informationally structured environment
JP6439817B2 (ja) 認識的アフォーダンスに基づくロボットから人間への物体ハンドオーバの適合
CN107972069A (zh) 一种机械视觉和机械触觉以时间相互映射的设计方法
CN109483534B (zh) 一种物体抓取方法、装置和系统
JP6027554B2 (ja) 情報処理装置、情報処理システム、ブロックシステム、および情報処理方法
CN105955230A (zh) 基于Unity 3D的智能制造车间的实时监控方法
Bajracharya et al. A mobile manipulation system for one-shot teaching of complex tasks in homes
Zeng Learning visual affordances for robotic manipulation
CN105328701A (zh) 一种串联机械手臂的示教编程方法
JP6193135B2 (ja) 情報処理装置、情報処理システム、および情報処理方法
Eaton An approach to the synthesis of humanoid robot dance using non-interactive evolutionary techniques
CN107832803A (zh) 一种机械视觉和机械嗅觉以时间相互映射的设计方法
CN108108437A (zh) 一种机械视觉听觉嗅觉以时间相互映射的设计方法
CN108032302A (zh) 一种机械视觉触觉嗅觉以时间相互映射的设计方法
Kumar et al. Design and development of an automated robotic pick & stow system for an e-commerce warehouse
CN107891448A (zh) 一种机械视觉听觉触觉以时间相互映射的设计方法
CN108520074A (zh) 一种机器人视觉味觉听觉以时间联想的设计方法
CN107871016A (zh) 一种机械视觉和机械味觉以时间相互映射的设计方法
US20220101477A1 (en) Visual Interface And Communications Techniques For Use With Robots
CN108115729A (zh) 一种机械视觉听觉触觉嗅觉以时间相互映射的设计方法
CN107967307A (zh) 一种机械视觉和机械听觉以时间相互映射的设计方法
JP2015136450A (ja) 情報処理装置および情報処理方法
Pattar et al. Automatic data collection for object detection and grasp-position estimation with mobile robots and invisible markers

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180323

RJ01 Rejection of invention patent application after publication