CN108647192A - 一种用自然语言处理技术生成虚拟现实工作脚本的方法 - Google Patents
一种用自然语言处理技术生成虚拟现实工作脚本的方法 Download PDFInfo
- Publication number
- CN108647192A CN108647192A CN201810260105.9A CN201810260105A CN108647192A CN 108647192 A CN108647192 A CN 108647192A CN 201810260105 A CN201810260105 A CN 201810260105A CN 108647192 A CN108647192 A CN 108647192A
- Authority
- CN
- China
- Prior art keywords
- virtual reality
- natural language
- script
- processing technique
- participle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
- G06F40/58—Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/12—Use of codes for handling textual entities
- G06F40/126—Character encoding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/205—Parsing
- G06F40/211—Syntactic parsing, e.g. based on context-free grammar [CFG] or unification grammars
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/279—Recognition of textual entities
- G06F40/289—Phrasal analysis, e.g. finite state techniques or chunking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/30—Semantic analysis
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Machine Translation (AREA)
Abstract
本发明公开了一种用自然语言处理技术生成虚拟现实工作脚本的方法,具体工作步骤包括:1)对技术出版物、说明书、工艺手册和工卡文本进行编码处理,统一为标准字符;2)采用标点符号拆分方法对技术出版物、说明书、工艺手册和工卡文本进行分句;3)采用分词与词性标注工具对步骤2)分句后的技术出版物、说明书、工艺手册和工卡文本进行分词与词性标注;4)基于步骤3)分词与词性标注构建语义神经网络各概念元素之间的关系,并建立知识图谱;5)将步骤4)整理好概念关系的自然语言翻译成特定虚拟现实仿真程序的特定工作编程脚本语言。通过上述方式,该方法可以降低了脚本编写的难度,提高了脚本编写效率。
Description
技术领域
本发明涉及一种生成工作脚本的方法,尤其是涉及一种用自然语言处理技术生成虚拟现实工作脚本的方法。
背景技术
虚拟装配生产线是虚拟制造技术的基础和核心,通过虚拟仿真建模机制,实现从结构、外观、布局、功能和控制等方面对生产线的正确反应,通过进行相关人机交互和排队理论和调度规划实践,解决生产线的策略仿真和功能行为表达,虚拟生产线如何运作,能否严格按照工艺标准、生产手册、工卡要求运转,需要编辑建立工作脚本。
现如今,行业通用的虚拟装配生产线建立工作脚本的方法是手工写脚本,把模型运动轨迹和工作内容,通过脚本编辑器转换为虚拟引擎识别的脚本。
发明内容
本发明主要解决的技术问题是提供一种用自然语言处理技术生成虚拟现实工作脚本的方法,能够对生产制造施工过程进行准确仿真。
为解决上述技术问题,本发明采用的一个技术方案是:一种用自然语言处理技术生成虚拟现实工作脚本的方法,具体工作步骤包括:
1)对技术出版物、说明书、工艺手册和工卡文本进行编码处理,统一为标准字符;
2)采用标点符号拆分方法对技术出版物、说明书、工艺手册和工卡文本进行分句;
3)采用分词与词性标注工具对步骤2)分句后的技术出版物、说明书、工艺手册和工卡文本进行分词与词性标注;
4)基于步骤3)分词与词性标注构建语义神经网络各概念元素之间的关系,并通过机器深度学习后建立知识图谱;
5)将步骤4)整理好概念关系的自然语言翻译成特定虚拟现实仿真程序的特定工作编程脚本语言。
在本发明一个较佳实施例中,所述步骤1)中统一标准字符的标准号为GB2312—1980以及Unicode UTF8,UTF16字符编码标准。
在本发明一个较佳实施例中,所述步骤2)中标点符号拆分方法遵循国家标准(GB/T 15834-2011)《标点符号用法》。
在本发明一个较佳实施例中,所述步骤3)中分词与词性标注工具为中科院自动化研究所模式识别国家重点实验室的Urheen中文分词与词性标注系统。
在本发明一个较佳实施例中,所述步骤3)中分词标注标准采用美国宾州中文树库标记集合及解释。
在本发明一个较佳实施例中,所述步骤4)中语义神经网络通过由概念和语义关系组成的有向图来表达知识、描述语义。
在本发明一个较佳实施例中,所述步骤4)中语义神经网络各概念元素之间的关系主要包括属性关系、动作单元与脚本关系、计划与次序和位置与程度。
本发明的有益效果是:本发明一种用自然语言处理技术生成虚拟现实工作脚本的方法,该方法可以降低了脚本编写的难度,提高了脚本编写效率,使得虚拟现实运作可以符合现实技术文档的要求。
具体实施方式
下面对本发明的较佳实施例进行详细阐述,以使本发明的优点和特征能更易于被本领域技术人员理解,从而对本发明的保护范围做出更为清楚明确的界定。
一种用自然语言处理技术生成虚拟现实工作脚本的方法,具体工作步骤包括:
1)对技术出版物、说明书、工艺手册和工卡文本进行编码处理,统一为标准字符,统一标准字符的标准号为GB 2312—1980以及Unicode UTF8,UTF16字符编码标准。
2)采用标点符号拆分方法对技术出版物、说明书、工艺手册和工卡文本进行分句,标点符号拆分方法遵循国家标准(GB/T 15834-2011)《标点符号用法》。
3)采用分词与词性标注工具对步骤2)分句后的技术出版物、说明书、工艺手册和工卡文本进行分词与词性标注,分词与词性标注工具为中科院自动化研究所模式识别国家重点实验室的Urheen中文分词与词性标注系统,分词标注标准采用美国宾州中文树库标记集合及解释,如表1所示。
表1美国宾州中文树库标记集合及解释
4)基于步骤3)分词与词性标注构建语义神经网络各概念元素之间的关系,并通过机器深度学习后建立知识图谱,语义神经网络通过由概念和语义关系组成的有向图来表达知识、描述语义。
语义神经网络各概念元素之间的关系主要包括:
1.属性关系
●IS:一个结点是另一个结点的属性
●IS-A:表示“具体-抽象”关系
●HAVE:表示“占有、具有”关系
●PART-OF:表示“整体-构件”关系
2.动作单元与脚本关系
动作单元:规定了一组动作基元,其他动作是由这些动作基元组合而成的。
动作+对象,动词+名词/代词
脚本关系:用来描写遇到一些常见场景或场合时所采取的一些固定的成套的动作。
●施动者+动作+对象
●施动者+动作+内容
●动作+受动者+内容
●动作+受动者+对象
3.计划与次序
计划:计划中的每一步都是一个脚本。
BEFORE/AFTER/AT:表示事物间的次序关系。
4.位置与程度。
LOCATED-ON/UNDER/AT:表示事物之间的位置关系,坐标,路线、相对位置,方向,表面或内部关系。
程度:包括温度、速度、高度、亮度、频率、体积、重量、质量、时间等等定量的概念内容。
5)将步骤4)整理好概念关系的自然语言翻译成特定虚拟现实仿真程序的特定工作编程脚本语言。
具体步骤包括:
1、选择特定虚拟现实仿真程序;
2、选择上一步仿真程序所支持的特定工作编程脚本语言;
3、将整理好概念关系的自然语言按照特定工作编程脚本语言的语法翻译;
4、执行虚拟现实仿真程序的工作编程脚本。
实施例1
技术操作手册:
第一步,将方块沿自身坐标系Y方向旋转1度。
第二步,将方块沿自身坐标系Y方向移动0.1m。
通过自然语言处理技术解释成为可执行脚本文件
1)对技术操作手册进行编码处理,统一为标准字符。
2)采用标点符号拆分方法对技术操作手册进行分句。
第一步,将方块沿自身坐标系Y方向旋转1度。
第二步,将方块沿自身坐标系Y方向移动0.1m。
3)采用分词与词性标注工具对步骤2)分句后的技术操作手册进行分词与词性标注。
第一/OD步/NN,/PU将/BA方块/NN沿/P自身/PN坐标系/NN Y/NN方向/NN旋转/JJ1/CD度/M。/PU
第二/OD步/NN,/PU将/BA方块/NN沿/P自身/PN坐标系/NN Y/NN方向/NN移动/VV0.1m/CD。/PU
4)基于步骤3)分词与词性标注构建语义神经网络各概念元素之间的关系,并通过机器深度学习后建立知识图谱。
动作单元:
沿(动作)——自身坐标系(位置)—Y方向(位置)
旋转(动作)——1度(程度)
沿(动作)——自身坐标系(位置)—Y方向(位置)
移动(动作)——0.1m(程度)
脚本:
方块(对象)
沿(动作)——自身坐标系(位置)—Y方向(位置)
旋转(动作)——1度(程度)
方块(对象)
沿(动作)——自身坐标系(位置)—Y方向(位置)
移动(动作)——0.1m(程度)
计划:
第一步(计划与次序)
方块(对象)
沿(动作)——自身坐标系(位置)—Y方向(位置)
旋转(动作)——1度(程度)
第二步(计划与次序)
方块(对象)
沿(动作)——自身坐标系(位置)—Y方向(位置)
移动(动作)——0.1m(程度)
5)将步骤4)整理好概念关系的自然语言翻译成特定虚拟现实仿真程序的特定工作编程脚本语言。
本实施例采用的虚拟现实仿真程序以业界流行的Unity3d为软件环境,用C#语言为工作编程脚本语言。
具体步骤包括:
1、选择特定虚拟现实仿真程序Unity3d。
2、选择工作编程脚本语言为C#语言。
3、将整理好概念关系的自然语言按照特定工作编程脚本语言的语法翻译。
第一步
将方块沿自身坐标系Y方向1度。
第二步
将方块沿自身坐标系Y方向移动0.1m。
与现有技术相比,本发明一种用自然语言处理技术生成虚拟现实工作脚本的方法,该方法通过自然语言处理技术NLP把技术出版物、说明书、工艺手册、工卡的操作语言描述转换为语义神经网络节点,再转化为虚拟引擎可识别的工作脚本语言,来指导组织虚拟装配生产线的运转,降低了脚本编写的难度,提高了脚本编写效率,使得虚拟现实运作可以符合现实技术文档的要求,可以完整准确的反映系统和过程的本质规律,对生产制造施工过程进行准确仿真,仿真结果以直观贴近真实世界的方式展现,使用户产生真实沉浸感,能够解决实际工作中实际问题。
以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (7)
1.一种用自然语言处理技术生成虚拟现实工作脚本的方法,其特征在于:具体工作步骤包括:
1)对技术出版物、说明书、工艺手册和工卡文本进行编码处理,统一为标准字符;
2)采用标点符号拆分方法对技术出版物、说明书、工艺手册和工卡文本进行分句;
3)采用分词与词性标注工具对步骤2)分句后的技术出版物、说明书、工艺手册和工卡文本进行分词与词性标注;
4)基于步骤3)分词与词性标注构建语义神经网络各概念元素之间的关系,并通过机器深度学习后建立知识图谱;
5)将步骤4)整理好概念关系的自然语言翻译成特定虚拟现实仿真程序的特定工作编程脚本语言。
2.根据权利要求1所述的一种用自然语言处理技术生成虚拟现实工作脚本的方法,其特征在于,所述步骤1)中统一标准字符的标准号为GB 2312—1980以及Unicode UTF8,UTF16字符编码标准。
3.根据权利要求1所述的一种用自然语言处理技术生成虚拟现实工作脚本的方法,其特征在于,所述步骤2)中标点符号拆分方法遵循国家标准(GB/T 15834-2011)《标点符号用法》。
4.根据权利要求1所述的一种用自然语言处理技术生成虚拟现实工作脚本的方法,其特征在于,所述步骤3)中分词与词性标注工具为中科院自动化研究所模式识别国家重点实验室的Urheen中文分词与词性标注系统。
5.根据权利要求1所述的一种用自然语言处理技术生成虚拟现实工作脚本的方法,其特征在于,所述步骤3)中分词标注标准采用美国宾州中文树库标记集合及解释。
6.根据权利要求1所述的一种用自然语言处理技术生成虚拟现实工作脚本的方法,其特征在于,所述步骤4)中语义神经网络通过由概念和语义关系组成的有向图来表达知识、描述语义。
7.根据权利要求1所述的一种用自然语言处理技术生成虚拟现实工作脚本的方法,其特征在于,所述步骤4)中语义神经网络各概念元素之间的关系主要包括属性关系、动作单元与脚本关系、计划与次序和位置与程度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810260105.9A CN108647192B (zh) | 2018-03-27 | 2018-03-27 | 一种用自然语言处理技术生成虚拟现实工作脚本的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810260105.9A CN108647192B (zh) | 2018-03-27 | 2018-03-27 | 一种用自然语言处理技术生成虚拟现实工作脚本的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108647192A true CN108647192A (zh) | 2018-10-12 |
CN108647192B CN108647192B (zh) | 2022-04-12 |
Family
ID=63744845
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810260105.9A Active CN108647192B (zh) | 2018-03-27 | 2018-03-27 | 一种用自然语言处理技术生成虚拟现实工作脚本的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108647192B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114579111A (zh) * | 2022-05-09 | 2022-06-03 | 中国联合重型燃气轮机技术有限公司 | 燃气轮机保护系统的代码生成方法、装置及电子设备 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1567383A (zh) * | 2003-06-18 | 2005-01-19 | 财团法人工业技术研究院 | 利用文字脚本制作三维动画的方法 |
CN101763342A (zh) * | 2009-12-31 | 2010-06-30 | 中兴通讯股份有限公司 | 生成计算机代码的方法及自然语言解释中心和应用控制端 |
CN103218290A (zh) * | 2013-03-29 | 2013-07-24 | 北京控制工程研究所 | 一种航天星载软件可执行脚本自动转化方法 |
CN106126219A (zh) * | 2016-06-20 | 2016-11-16 | 扬州大学 | 一种基于目标装配关系自然语言描述的机械手装配任务自主编程方法 |
CN106294186A (zh) * | 2016-08-30 | 2017-01-04 | 深圳市悲画软件自动化技术有限公司 | 智能软件自动化测试方法 |
CN106815293A (zh) * | 2016-12-08 | 2017-06-09 | 中国电子科技集团公司第三十二研究所 | 一种面向情报分析的构建知识图谱的系统及方法 |
CN106970802A (zh) * | 2017-04-25 | 2017-07-21 | 北京航天飞行控制中心 | 在领域特定语言中集成编程脚本语言的方法及装置 |
-
2018
- 2018-03-27 CN CN201810260105.9A patent/CN108647192B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1567383A (zh) * | 2003-06-18 | 2005-01-19 | 财团法人工业技术研究院 | 利用文字脚本制作三维动画的方法 |
CN101763342A (zh) * | 2009-12-31 | 2010-06-30 | 中兴通讯股份有限公司 | 生成计算机代码的方法及自然语言解释中心和应用控制端 |
CN103218290A (zh) * | 2013-03-29 | 2013-07-24 | 北京控制工程研究所 | 一种航天星载软件可执行脚本自动转化方法 |
CN106126219A (zh) * | 2016-06-20 | 2016-11-16 | 扬州大学 | 一种基于目标装配关系自然语言描述的机械手装配任务自主编程方法 |
CN106294186A (zh) * | 2016-08-30 | 2017-01-04 | 深圳市悲画软件自动化技术有限公司 | 智能软件自动化测试方法 |
CN106815293A (zh) * | 2016-12-08 | 2017-06-09 | 中国电子科技集团公司第三十二研究所 | 一种面向情报分析的构建知识图谱的系统及方法 |
CN106970802A (zh) * | 2017-04-25 | 2017-07-21 | 北京航天飞行控制中心 | 在领域特定语言中集成编程脚本语言的方法及装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114579111A (zh) * | 2022-05-09 | 2022-06-03 | 中国联合重型燃气轮机技术有限公司 | 燃气轮机保护系统的代码生成方法、装置及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN108647192B (zh) | 2022-04-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11842172B2 (en) | Graphical user interface to an artificial intelligence engine utilized to generate one or more trained artificial intelligence models | |
US6826500B2 (en) | Method and system for automated maintenance and training instruction generation and validation | |
Fu et al. | Putting AI in entertainment: An AI authoring tool for simulation and games | |
Bonial et al. | Abstract meaning representation for human-robot dialogue | |
CN112416788A (zh) | 一种分层规范的Web应用UI自动化测试方法 | |
CN108647192A (zh) | 一种用自然语言处理技术生成虚拟现实工作脚本的方法 | |
Jacob | Executable specifications for a human-computer interface | |
Swinehart | Copilot: a multiple-process approach to interactive programming systems. | |
Wang et al. | Enhancing user experience in large language models through human-centered design: Integrating theoretical insights with an experimental study to meet diverse software learning needs with a single document knowledge base | |
Pidd | Simulation worldviews-so what? | |
CN109710221B (zh) | 通用仿真实训系统 | |
Dukkardt et al. | Informational system to support the design process of complex equipment based on the mechanism of manipulation and management for three-dimensional objects models | |
Rothwell et al. | Human-computer interface concepts for verifiable mission specification, planning, and management | |
Kamran | Issues pertaining to the design of a user interface management system | |
Myers | Special Feature Computer Graphics: The Human Interface | |
Cho | A demonstration-based approach for designing domain-specific modeling languages | |
Foit | Introduction to solving task-level programming problems in logic programming language | |
David et al. | Interaction Templates: A Data-Driven Approach for Authoring Robot Programs | |
van Trijp | Towards Bidirectional Processing Models of Sign Language: A Constructional Approach in Fluid Construction Grammar. | |
Dionne et al. | A model for human readable instruction generation using level-based discourse planning and dynamic inference of attributes | |
Ilčík et al. | Collaborative modeling with symbolic shape grammars | |
Sevilla et al. | Tools for the Use of SignWriting as a Language Resource | |
Lexén et al. | Programming Arcade Games using Natural Language-Utilizing inherent language skills as a gentler introduction to Computational Thinking | |
Wahab et al. | Interactive Visualization to Enhance Learning Experienced on Machining Process of EDM Wire Cut Through Augmented Reality (AR) | |
Paultre et al. | CAL/CGI—An application of graphics for matrix structural analysis education |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |