CN107871016A - 一种机械视觉和机械味觉以时间相互映射的设计方法 - Google Patents

一种机械视觉和机械味觉以时间相互映射的设计方法 Download PDF

Info

Publication number
CN107871016A
CN107871016A CN201711202238.2A CN201711202238A CN107871016A CN 107871016 A CN107871016 A CN 107871016A CN 201711202238 A CN201711202238 A CN 201711202238A CN 107871016 A CN107871016 A CN 107871016A
Authority
CN
China
Prior art keywords
taste
time
picture
sense
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711202238.2A
Other languages
English (en)
Inventor
胡明建
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201711202238.2A priority Critical patent/CN107871016A/zh
Publication of CN107871016A publication Critical patent/CN107871016A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content

Landscapes

  • Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Manipulator (AREA)

Abstract

一种机械视觉和机械味觉以时间相互映射的设计方法的技术领域,是属于,机器人、人工智能、计算机、图像处理、味觉传感器技术、数学等技术领域,主要技术是通过摄像头采集的图片和味觉传感器采集的数据,同时记录下来,然后通过计算处理,让图片里的味觉产生物的图像和电子舌产生的味觉数据对应起来,并且通过运算要保存时,同时保存起来,把时间也同时保存起来,并且以这个时间为映射,这样当测到这个物质的味道,可以在数据库里找到,并通过记录的时间,同时找到对应的图像,当看见那副图像,也通过时间映射找到对应的味觉。

Description

一种机械视觉和机械味觉以时间相互映射的设计方法
技术领域
一种机械视觉和机械味觉以时间相互映射的设计方法的技术领域,是属于,机器人、人工智能、计算机、图像处理、味觉传感器技术、数学等技术领域,主要技术是通过摄像头采集的图片和味觉传感器采集的数据,同时记录下来,然后通过计算处理,让图片里的味觉产生物的图像和电子舌产生的味觉数据对应起来,并且通过运算要保存时,同时保存起来,把时间也同时保存起来,并且以这个时间为映射,这样当测到这个物质的味道,可以在数据库里找到,并通过记录的时间,同时找到对应的图像,当看见那副图像,也通过时间映射找到对应的味觉。
背景技术
智能型机器人是最复杂的机器人,也是人类最渴望能够早日制造出来的机器朋友。然而要制造出一台智能机器人并不容易,仅仅是让机器模拟人类的行走动作,科学家们就要付出了数十甚至上百年的努力。1920年 捷克斯洛伐克作家卡雷尔·恰佩克在他的科幻小说中,根据Robota(捷克文,原意为“劳役、苦工”)和Robotnik(波兰文,原意为“工人”),创造出“机器人”这个词。1939年 美国纽约世博会上展出了西屋电气公司制造的家用机器人Elektro。它由电缆控制,可以行走,会说77个字,甚至可以抽烟,不过离真正干家务活还差得远。但它让人们对家用机器人的憧憬变得更加具体。1942年 美国科幻巨匠阿西莫夫提出“机器人三定律”。虽然这只是科幻小说里的创造,但后来成为学术界默认的研发原则。1948年 诺伯特·维纳出版《控制论——关于在动物和机中控制和通讯的科学》,阐述了机器中的通信和控制机能与人的神经、感觉机能的共同规律,率先提出以计算机为核心的自动化工厂。1954年 在达特茅斯会议上,马文·明斯基提出了他对智能机器的看法:智能机器“能够创建周围环境的抽象模型,如果遇到问题,能够从抽象模型中寻找解决方法”。这个定义影响到以后30年智能机器人的研究方向。1956年 美国人乔治·德沃尔制造出世界上第一台可编程的机器人,并注册了专利。这种机械手能按照不同的程序从事不同的工作,因此具有通用性和灵活性。1959年 德沃尔与美国发明家约瑟夫·英格伯格联手制造出第一台工业机器人。随后,成立了世界上第一家机器人制造工厂——Unimation公司。由于英格伯格对工业机器人的研发和宣传,他也被称为“工业机器人之父”。1962年 美国AMF公司生产出“VERSTRAN”(意思是万能搬运),与Unimation公司生产的Unimate一样成为真正商业化的工业机器人,并出口到世界各国,掀起了全世界对机器人和机器人研究的热潮。 传感器的应用提高了机器人的可操作性。人们试着在机器人上安装各种各样的传感器,包括1961年恩斯特采用的触觉传感器,托莫维奇和博尼1962年在世界上最早的“灵巧手”上用到了压力传感器,而麦卡锡1963年则开始在机器人中加入视觉传感系统,并在1964年,帮助MIT推出了世界上第一个带有视觉传感器,能识别并定位积木的机器人系统。1965年 约翰·霍普金斯大学应用物理实验室研制出Beast机器人。Beast已经能通过声呐系统、光电管等装置,根据环境校正自己的位置。20世纪60年代中期开始,美国麻省理工学院、斯坦福大学、英国爱丁堡大学等陆续成立了机器人实验室。美国兴起研究第二代带传感器、“有感觉”的机器人,并向人工智能进发。1968年 美国斯坦福研究所公布他们研发成功的机器人Shakey。它带有视觉传感器,能根据人的指令发现并抓取积木,不过控制它的计算机有一个房间那么大。Shakey可以算是世界第一台智能机器人,拉开了第三代机器人研发的序幕。 日本早稻田大学加藤一郎实验室研发出第一台以双脚走路的机器人。加藤一郎长期致力于研究仿人机器人,被誉为“仿人机器人之父”。日本专家一向以研发仿人机器人和娱乐机器人的技术见长,后来更进一步,催生出本田公司的ASIMO和索尼公司的QRIO。 世界上第一次机器人和小型计算机携手合作,就诞生了美国Cincinnati Milacron公司的机器人T3。 美国Unimation公司推出通用工业机器人PUMA,这标志着工业机器人技术已经完全成熟。PUMA至今仍然工作在工厂第一线。 英格伯格再推机器人Helpmate,这种机器人能在医院里为病人送饭、送药、送邮件。同年,他还预言:“我要让机器人擦地板,做饭,出去帮我洗车,检查安全”。 中国著名学者周海中教授在《论机器人》一文中预言:到二十一世纪中叶,纳米机器人将彻底改变人类的劳动和生活方式。 丹麦乐高公司推出机器人(Mind-storms)套件,让机器人制造变得跟搭积木一样,相对简单又能任意拼装,使机器人开始走入个人世界。1999年日本索尼公司推出犬型机器人爱宝(AIBO),当即销售一空,从此娱乐机器人成为机器人迈进普通家庭的途径之一。2002年 美国iRobot公司推出了吸尘器机器人Roomba,它能避开障碍,自动设计行进路线,还能在电量不足时,自动驶向充电座。Roomba是目前世界上销量最大、最商业化的家用机器人。iRobot公司北京区授权代理商:北京微网智宏科技有限公司。2006年 6月,微软公司推出Microsoft Robotics Studio,机器人模块化、平台统一化的趋势越来越明显,比尔·盖茨预言,家用机器人很快将席卷全球。因此对于智能机器人重要的输入信息就是视觉和味觉,现在的技术没有把视觉和嗅觉很好的对应起来,因此有了本发明。
发明内容
由于人工智能和机器人的快速发展,在现有的技术上,人类利用摄像头能很好的识别一些事物,同时人类利用电子舌能很好的区分各种味道,在单方面的技术都超过了人类的识别的能力,在人类的行为中,当人类看见盐,就会想起它是咸的,尝到咸的味道,就会想起它是盐,现在的计算机技术还没有办法实现这种联想的作用,因此本发明正好是解决这种技术,实现这种相互映射的功能,本发明的重中之重是通过时间把它们联系起来,通过时间映射来实现。一种机械视觉和机械味觉以时间相互映射的设计方法,其特征是,机械视觉和机械味觉以时间相互映射的设计方法,由4部分构成,1是机械视觉处理部分,2是机械味觉处理部分,3是建立对应关系,4是以时间作为映射进行存储的方法,机械视觉处理部分主要是使用摄像机把图片拍摄下来,通过各种算法把图片进行处理,然后把图片提取的特征和储存的数据进行比较或通过深度学习方法进行识别,味觉处理的方法就是用电子舌对物质进行识别,把这些信息转换成数据,然后让这些数据存储起来,要建立对应关系,就是建立图像和味觉的对应关系,通过机械视觉拍到的图片,对其中的物质需要感受它的味道,就用机械臂把物质抓过来放在电子舌上或伸出电子舌去添物质,或先让电子舌去添物质,然后把这个物质用摄像头拍摄下来,并先后储存下这个图像和这个味道的数据,以时间作为映射进行存储方式,这是重中之重,让机械想起这是什么时候发生的事,以时间记忆作为2者的关联,具备唯一性和实时性,因此采用如下设计,当摄像头拍到图片需要知道它的味道,就把这个物质通过数据库里的图像搜索,如果匹配上了,就可以找到它的味道,如果匹配不上,通过运算,是否要存储这种现象,如果需要存储这种现象,就去调来时间计时器的时间,同时把图片处理后的物体和味觉处理后的数据分别存储起来,储存在为它们各自设立的空间里,通过时间把它们对应起来,这样以后如果电子舌尝到物体的味道,就把这味道和数据库里存储的数据进行匹配,如果找到这样的数据,就调出当初记忆的时间,然后根据这个时间去寻找对应的图片,同理如果机械视觉看见这个物质,就会和储存的数据匹配,如果匹配上了,就会调出当初记忆的时间,通过记忆的时间,对时间进行搜索找到对应的味道,这样可以相互对应,并且可以知道这是什么时候发生的。
附图说明
图1是一种机械视觉和机械味觉以时间相互映射的设计方法的原理图,a-1代表的是味觉数据库,a-2代表的是以时间相互对应的算法,a-3代表的是图像数据库,b-1代表的是味觉数据库的数据部分, b-2代表的是味觉数据库的时间部分,c-1代表的是图像数据库的时间部分,c-2代表的是图像数据库的数据部分,下面的圆圈代表很多很多的意思。
实施方案
当一个机器人启动以后,系统进入工作状态,它的机械味觉和机械视觉也进入正常状态,这时机器人摄像头不停的寻找物质,如果发现需要尝一下这个物质的味道时,就用机械臂去抓过来这个物质,尝一下,或者把电子舌直接伸到物质上,机械视觉和机械味觉以时间相互映射的设计方法,由4部分构成,1是机械视觉处理部分,2是机械味觉处理部分,3是建立对应关系,4是以时间作为映射进行存储的方法,机械视觉处理部分主要是使用摄像机把图片拍摄下来,通过各种算法把图片进行处理,然后把图片提取的特征和储存的数据进行比较或通过深度学习方法进行识别,味觉处理的方法就是用电子舌对物质进行识别,把这些信息转换成数据,然后让这些数据存储起来,要建立对应关系,就是建立图像和味觉的对应关系,通过机械视觉拍到的图片,对其中的物质需要感受它的味道,就用机械臂把物质抓过来放在电子舌上或伸出电子舌去添物质,或先让电子舌去添物质,然后把这个物质用摄像头拍摄下来,并先后储存下这个图像和这个味道的数据,以时间作为映射进行存储方式,这是重中之重,让机械想起这是什么时候发生的事,以时间记忆作为2者的关联,具备唯一性和实时性,因此采用如下设计,当摄像头拍到图片需要知道它的味道,就把这个物质通过数据库里的图像搜索,如果匹配上了,就可以找到它的味道,如果匹配不上,通过运算,是否要存储这种现象,如果需要存储这种现象,就去调来时间计时器的时间,同时把图片处理后的物体和味觉处理后的数据分别存储起来,储存在为它们各自设立的空间里,通过时间把它们对应起来,这样以后如果电子舌尝到物体的味道,就把这味道和数据库里存储的数据进行匹配,如果找到这样的数据,就调出当初记忆的时间,然后根据这个时间去寻找对应的图片,同理如果机械视觉看见这个物质,就会和储存的数据匹配,如果匹配上了,就会调出当初记忆的时间,通过记忆的时间,对时间进行搜索找到对应的味道,这样可以相互对应,并且可以知道这是什么时候发生的。如附图所示,当需要存储时,根据时间,同时存储起来,例如在2013年01月01号,12点12分,摄像头拍到食盐,那么就把2013年01月01号,12点12分和这个食盐存储在一起,同时把2013年01月01号,12点12分和咸味的数据也存在一起,虽然这有先后,选先一个数据的时间,然后建立算法,如果尝到是咸味,就把这个咸味的数据去数据库匹配,如果匹配上,就显示这个味道,同时通过2013年01月01号,12点12分去搜索图像特征的存储空间的时间部分,这样找到匹配的时间,然后就把食盐显示出来,同样的道理,如果看见食盐,就可以到图像数据库查找食盐的图像特征,找到了就把图像特征显示出来,同时用时间2013年01月01号,12点12分到咸味数据库进行搜寻,找到咸味的数据,然后显示出来,这样就可以实现按照时间对应映射关系的实现,并且知道是什么时候发生的。

Claims (1)

1.一种机械视觉和机械味觉以时间相互映射的设计方法,其特征是,机械视觉和机械味觉以时间相互映射的设计方法,由4部分构成,1是机械视觉处理部分,2是机械味觉处理部分,3是建立对应关系,4是以时间作为映射进行存储的方法,机械视觉处理部分主要是使用摄像机把图片拍摄下来,通过各种算法把图片进行处理,然后把图片提取的特征和储存的数据进行比较或通过深度学习方法进行识别,味觉处理的方法就是用电子舌对物质进行识别,把这些信息转换成数据,然后让这些数据存储起来,要建立对应关系,就是建立图像和味觉的对应关系,通过机械视觉拍到的图片,对其中的物质需要感受它的味道,就用机械臂把物质抓过来放在电子舌上或伸出电子舌去添物质,或先让电子舌去添物质,然后把这个物质用摄像头拍摄下来,并先后储存下这个图像和这个味道的数据,以时间作为映射进行存储方式,这是重中之重,让机械想起这是什么时候发生的事,以时间记忆作为2者的关联,具备唯一性和实时性,因此采用如下设计,当摄像头拍到图片需要知道它的味道,就把这个物质通过数据库里的图像搜索,如果匹配上了,就可以找到它的味道,如果匹配不上,通过运算,是否要存储这种现象,如果需要存储这种现象,就去调来时间计时器的时间,同时把图片处理后的物体和味觉处理后的数据分别存储起来,储存在为它们各自设立的空间里,通过时间把它们对应起来,这样以后如果电子舌尝到物体的味道,就把这味道和数据库里存储的数据进行匹配,如果找到这样的数据,就调出当初记忆的时间,然后根据这个时间去寻找对应的图片,同理如果机械视觉看见这个物质,就会和储存的数据匹配,如果匹配上了,就会调出当初记忆的时间,通过记忆的时间,对时间进行搜索找到对应的味道,这样可以相互对应,并且可以知道这是什么时候发生的。
CN201711202238.2A 2017-11-27 2017-11-27 一种机械视觉和机械味觉以时间相互映射的设计方法 Pending CN107871016A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711202238.2A CN107871016A (zh) 2017-11-27 2017-11-27 一种机械视觉和机械味觉以时间相互映射的设计方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711202238.2A CN107871016A (zh) 2017-11-27 2017-11-27 一种机械视觉和机械味觉以时间相互映射的设计方法

Publications (1)

Publication Number Publication Date
CN107871016A true CN107871016A (zh) 2018-04-03

Family

ID=61754636

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711202238.2A Pending CN107871016A (zh) 2017-11-27 2017-11-27 一种机械视觉和机械味觉以时间相互映射的设计方法

Country Status (1)

Country Link
CN (1) CN107871016A (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101510951A (zh) * 2008-02-13 2009-08-19 华晶科技股份有限公司 具有记录气味的拍照装置及其方法
CN101692053A (zh) * 2009-10-09 2010-04-07 江苏大学 基于多传感信息融合的名优茶品质仪器智能化审评方法
CN102222164A (zh) * 2011-05-30 2011-10-19 中国标准化研究院 一种食品感官质量评价方法及系统
CN103472197A (zh) * 2013-09-10 2013-12-25 江苏大学 一种食品智能化仿生评价中的跨感知信息交互感应融合方法
CN104568090A (zh) * 2014-12-31 2015-04-29 广州安必平医药科技股份有限公司 基于物联网的试剂监测系统及方法
CN106030427A (zh) * 2014-02-20 2016-10-12 M·奥利尼克 用于在机器人烹饪厨房中制备食物的方法和系统
CN106997388A (zh) * 2017-03-30 2017-08-01 宁波亿拍客网络科技有限公司 一种图像及非图像标记方法、设备及应用方法
US20170319607A1 (en) * 2014-03-21 2017-11-09 Bodybio Inc. Methods and compositions for treating symptoms of diseases related to imbalance of essential fatty acids

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101510951A (zh) * 2008-02-13 2009-08-19 华晶科技股份有限公司 具有记录气味的拍照装置及其方法
CN101692053A (zh) * 2009-10-09 2010-04-07 江苏大学 基于多传感信息融合的名优茶品质仪器智能化审评方法
CN102222164A (zh) * 2011-05-30 2011-10-19 中国标准化研究院 一种食品感官质量评价方法及系统
CN103472197A (zh) * 2013-09-10 2013-12-25 江苏大学 一种食品智能化仿生评价中的跨感知信息交互感应融合方法
CN106030427A (zh) * 2014-02-20 2016-10-12 M·奥利尼克 用于在机器人烹饪厨房中制备食物的方法和系统
US20170319607A1 (en) * 2014-03-21 2017-11-09 Bodybio Inc. Methods and compositions for treating symptoms of diseases related to imbalance of essential fatty acids
CN104568090A (zh) * 2014-12-31 2015-04-29 广州安必平医药科技股份有限公司 基于物联网的试剂监测系统及方法
CN106997388A (zh) * 2017-03-30 2017-08-01 宁波亿拍客网络科技有限公司 一种图像及非图像标记方法、设备及应用方法

Similar Documents

Publication Publication Date Title
US11195041B2 (en) Generating a model for an object encountered by a robot
Li et al. A mobile robot hand-arm teleoperation system by vision and imu
Pyo et al. Service robot system with an informationally structured environment
CN110026987A (zh) 一种机械臂抓取轨迹的生成方法、装置、设备及存储介质
CN107972069A (zh) 一种机械视觉和机械触觉以时间相互映射的设计方法
CN109483534B (zh) 一种物体抓取方法、装置和系统
Funabashi et al. Multi-fingered in-hand manipulation with various object properties using graph convolutional networks and distributed tactile sensors
JP2015138345A (ja) 情報処理装置、情報処理システム、ブロックシステム、および情報処理方法
CN109064486A (zh) 一种人形机器人与人体姿态相似度评价方法
Valarezo Anazco et al. Natural object manipulation using anthropomorphic robotic hand through deep reinforcement learning and deep grasping probability network
Nguyen et al. Reaching development through visuo-proprioceptive-tactile integration on a humanoid robot-a deep learning approach
CN107871016A (zh) 一种机械视觉和机械味觉以时间相互映射的设计方法
CN108032302A (zh) 一种机械视觉触觉嗅觉以时间相互映射的设计方法
Luo Intelligent Textiles for Physical Human-Environment Interactions
CN108108437A (zh) 一种机械视觉听觉嗅觉以时间相互映射的设计方法
CN107891448A (zh) 一种机械视觉听觉触觉以时间相互映射的设计方法
Tzelepis et al. Semantic state estimation in cloth manipulation tasks
Kent et al. Construction of an object manipulation database from grasp demonstrations
CN107832803A (zh) 一种机械视觉和机械嗅觉以时间相互映射的设计方法
de La Bourdonnaye et al. Stage-wise learning of reaching using little prior knowledge
CN108520074A (zh) 一种机器人视觉味觉听觉以时间联想的设计方法
CN108115729A (zh) 一种机械视觉听觉触觉嗅觉以时间相互映射的设计方法
CN107967307A (zh) 一种机械视觉和机械听觉以时间相互映射的设计方法
US20210090201A1 (en) Visual interface and communications techniques for use with robots
Tang et al. A reinforcement learning method for rearranging scattered irregular objects inside a crate

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180403

RJ01 Rejection of invention patent application after publication