RU2017136560A - Система и способ интерактивной помощи когнитивными средствами при решении задач - Google Patents

Система и способ интерактивной помощи когнитивными средствами при решении задач Download PDF

Info

Publication number
RU2017136560A
RU2017136560A RU2017136560A RU2017136560A RU2017136560A RU 2017136560 A RU2017136560 A RU 2017136560A RU 2017136560 A RU2017136560 A RU 2017136560A RU 2017136560 A RU2017136560 A RU 2017136560A RU 2017136560 A RU2017136560 A RU 2017136560A
Authority
RU
Russia
Prior art keywords
data
task
stage
sensor data
real time
Prior art date
Application number
RU2017136560A
Other languages
English (en)
Other versions
RU2767145C2 (ru
RU2017136560A3 (ru
Inventor
Уильям Дж. ВУД
Марк Х. БОЙД
Мелани К. ЛОРАН
Дэвид Х. КУСУДА
Original Assignee
Зе Боинг Компани
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Зе Боинг Компани filed Critical Зе Боинг Компани
Publication of RU2017136560A publication Critical patent/RU2017136560A/ru
Publication of RU2017136560A3 publication Critical patent/RU2017136560A3/ru
Application granted granted Critical
Publication of RU2767145C2 publication Critical patent/RU2767145C2/ru

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/5038—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the execution order of a plurality of tasks, e.g. taking priority or time dependency constraints into consideration
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/02—Electrically-operated educational appliances with visual presentation of the material to be studied, e.g. using film strip
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • G05B19/042—Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
    • G05B19/0423—Input/output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/453—Help systems
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/20—Administration of product repair or maintenance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/24—Use of tools
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/20—Pc systems
    • G05B2219/24—Pc safety
    • G05B2219/24019—Computer assisted maintenance
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/32—Operator till task planning
    • G05B2219/32014—Augmented reality assists operator in maintenance, repair, programming, assembly, use of head mounted display with 2-D 3-D display and voice feedback, voice and gesture command
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/32—Operator till task planning
    • G05B2219/32226—Computer assisted repair, maintenance of system components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/242—Query formulation
    • G06F16/243—Natural language query formulation
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Human Resources & Organizations (AREA)
  • General Engineering & Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Quality & Reliability (AREA)
  • Educational Administration (AREA)
  • Human Computer Interaction (AREA)
  • Operations Research (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Automation & Control Theory (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Educational Technology (AREA)
  • Development Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Manufacturing & Machinery (AREA)
  • Data Mining & Analysis (AREA)
  • User Interface Of Digital Computer (AREA)
  • Testing And Monitoring For Control Systems (AREA)
  • Manipulator (AREA)
  • Testing Or Calibration Of Command Recording Devices (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Debugging And Monitoring (AREA)

Claims (49)

1. Способ выдачи указаний при выполнении задачи, имеющей по меньшей мере один этап, выполняемый на станции (102) на физической конструкции (106), согласно которому:
(a) принимают в блоке (104) обработки указаний команду, вызывающую выполнение задачи, от структуры (104), выполняющей работы;
(b) определяют в блоке (104) обработки указаний по меньшей мере один этап на основании принятой команды;
(c) передают из блока (104) обработки указаний в структуру (104), выполняющую работы, данные с инструкциями, иллюстрирующие выполнение указанного по меньшей мере одного этапа;
(d) принимают в блоке (104) обработки указаний данные датчика (112) в реальном времени, вырабатываемые датчиком (112), расположенным возле физической конструкции (106) и измеряющим выполнение этапа; и
(e) вычисляют показатель выполнения этапа согласно данным датчика (112) в реальном времени.
2. Способ по п. 1, согласно которому вычисление показателя выполнения этапа включает:
сравнение данных датчика (112) в реальном времени с пороговым значением;
вычисление показателя выполнения согласно произведенному сравнению и подтверждение правильности выполнения этапа согласно показателю выполнения.
3. Способ по п. 2, также включающий:
выработку данных обратной связи согласно произведенному сравнению и передачу данных обратной связи из блока (104) обработки указаний для представления на станции (102).
4. Способ по п. 2, согласно которому вычисление показателя выполнения этапа согласно данным датчика (112) в реальном времени включает:
выработку данных обратной связи с использованием данных датчика (112) в реальном времени и
представление данных обратной связи на станции (102).
5. Способ по п. 4, согласно которому:
данные обратной связи представляют одновременно с выполнением этапа; а способ также включает:
повтор этапов (с) и (d) до тех пор, пока этап не будет завершен.
6. Способ по любому предыдущему пункту, также включающий:
вычисление посредством блока (104) обработки указаний показателя выполнения в отношении выполнения указанного этапа на основании данных датчика (112) в реальном времени и
сохранение показателя выполнения.
7. Способ по п. 6, согласно которому:
показателем выполнения является время, затрачиваемое на выполнение этапа, которое вычисляют на основании порогового значения и данных датчика (112) в реальном времени.
8. Способ по любому из пп. 1-5, также включающий:
сохранение посредством блока (104) обработки указаний данных датчика (112) в реальном времени и
сравнение данных датчика (112) в реальном времени с данными другого датчика (112) в реальном времени, измеряющего выполнение другого этапа на другой физической конструкции (106).
9. Способ по любому из пп. 1-5, также включающий:
определение задачи на основании принятой команды и
определение указанного по меньшей мере одного этапа на основании определенной задачи.
10. Способ по п. 9, согласно которому:
определение задачи на основании принятой команды включает:
выработку запроса к базе данных на основании принятой команды с использованием интерпретатора естественного языка;
обращение с запросом к базе данных согласно запросу к базе данных для определения задачи; а
определение указанного по меньшей мере одного этапа на основании определенной задачи включает:
определение указанного по меньшей мере одного этапа на основании определенной задачи.
11. Способ по п. 10, согласно которому:
задача является одной из множества задач, выполняемых на физической конструкции (106);
запрос к базе данных также определяют согласно текущим контекстным данным, включающим:
информацию о других задачах из указанного множества задач, выполняемых на физической конструкции (106) и
ограничения на задачу, налагаемые по меньшей мере физической конструкцией (106) и/или средой, окружающей используемую станцию (102).
12. Способ по любому из пп. 1-5, согласно которому данные с инструкциями, иллюстрирующие выполнение указанного по меньшей мере одного этапа, содержат визуальное представление указанного этапа для представления в дополненной реальности посредством гарнитуры (114В) дополненной реальности, причем
данные датчика (112) в реальном времени при необходимости описывают состояние физической конструкции (106), и
данные датчика (112) в реальном времени при необходимости описывают состояние приспособления (110), используемого для выполнения указанного этапа.
13. Способ по п. 12, согласно которому датчик (112) является оптическим датчиком, следящим за выполнением этапа, а данные датчика (112) в реальном времени содержат видеоданные, причем
датчик (112) при необходимости размещен на приспособлении (110), используемом для выполнения указанного этапа.
14. Способ по любому из пп. 1-5, согласно которому данные датчика (112) в реальном времени описывают состояние устройств, совместно работающих над выполнением задачи, причем
данные при необходимости описывают состояние окружающей среды, в которой выполняют задачу, а
команда при необходимости является командой, подаваемой пользователем без помощи рук.
15. Система для выдачи указаний при выполнении задачи, имеющей по меньшей мере один этап, выполняемый на станции (102) на физической конструкции (106), содержащая:
блок (104) обработки указаний, содержащий процессор (604), соединенный с возможностью обмена данными с памятью (606), хранящей инструкции, содержащие инструкции для выполнения способа по любому из пп. 1-14.
RU2017136560A 2016-12-09 2017-10-17 Система и способ интерактивной помощи когнитивными средствами при решении задач RU2767145C2 (ru)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201662432495P 2016-12-09 2016-12-09
US62/432,495 2016-12-09
US15/649,382 US11348475B2 (en) 2016-12-09 2017-07-13 System and method for interactive cognitive task assistance
US15/649,382 2017-07-13

Publications (3)

Publication Number Publication Date
RU2017136560A true RU2017136560A (ru) 2019-04-17
RU2017136560A3 RU2017136560A3 (ru) 2021-02-10
RU2767145C2 RU2767145C2 (ru) 2022-03-16

Family

ID=60262671

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2017136560A RU2767145C2 (ru) 2016-12-09 2017-10-17 Система и способ интерактивной помощи когнитивными средствами при решении задач

Country Status (8)

Country Link
US (1) US11348475B2 (ru)
EP (1) EP3333654B1 (ru)
JP (1) JP7184511B2 (ru)
KR (1) KR102494817B1 (ru)
CN (1) CN108228345B (ru)
BR (1) BR102017025093A8 (ru)
CA (1) CA2982575A1 (ru)
RU (1) RU2767145C2 (ru)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017218234A1 (en) * 2016-06-15 2017-12-21 Irobot Corporation Systems and methods to control an autonomous mobile robot
TWI659659B (zh) * 2017-09-06 2019-05-11 國立臺灣大學 車輛資訊及環境監測複合式車載系統及其資料處理及傳輸方法
CN108363556A (zh) * 2018-01-30 2018-08-03 百度在线网络技术（北京）有限公司 一种基于语音与增强现实环境交互的方法和系统
US10862971B2 (en) * 2018-04-27 2020-12-08 EMC IP Holding Company LLC Internet of things gateway service for a cloud foundry platform
US11406896B1 (en) 2018-06-08 2022-08-09 Meta Platforms, Inc. Augmented reality storytelling: audience-side
CN112368659B (zh) * 2018-06-26 2024-06-18 发纳科美国公司 具有增强现实的自动动态诊断指导
US20200005165A1 (en) * 2018-06-28 2020-01-02 International Business Machines Corporation Dynamically determining a region of effectiveness of athletes during game play based on predictive factors
US11200811B2 (en) * 2018-08-03 2021-12-14 International Business Machines Corporation Intelligent recommendation of guidance instructions
DE102018213208A1 (de) * 2018-08-07 2020-02-13 MTU Aero Engines AG Verfahren zum Durchführen von Wartungsarbeiten an einer komplexen Montagebaugruppe
CN110858158B (zh) * 2018-08-23 2024-04-05 京东科技控股股份有限公司 分布式任务调度方法、装置、电子设备、存储介质
GB201817061D0 (en) * 2018-10-19 2018-12-05 Sintef Tto As Manufacturing assistance system
JP7096544B2 (ja) * 2018-10-22 2022-07-06 株式会社Subaru ねじ締付装置及びねじ締付方法
US10896492B2 (en) 2018-11-09 2021-01-19 Qwake Technologies, Llc Cognitive load reducing platform having image edge enhancement
US11890494B2 (en) 2018-11-09 2024-02-06 Qwake Technologies, Inc. Retrofittable mask mount system for cognitive load reducing platform
US10417497B1 (en) 2018-11-09 2019-09-17 Qwake Technologies Cognitive load reducing platform for first responders
US10854007B2 (en) 2018-12-03 2020-12-01 Microsoft Technology Licensing, Llc Space models for mixed reality
US20200302331A1 (en) * 2019-03-20 2020-09-24 International Business Machines Corporation Intelligent problem solving using visual input
CN110011848B (zh) * 2019-04-03 2020-07-31 南方电网数字电网研究院有限公司 一种移动运维审计系统
JP7392281B2 (ja) * 2019-04-22 2023-12-06 株式会社ジェイテクト 作業支援システム
KR102104326B1 (ko) * 2019-06-28 2020-04-27 한화시스템 주식회사 증강현실 기반 정비 교육 시스템 및 방법
US11915376B2 (en) 2019-08-28 2024-02-27 Qwake Technologies, Inc. Wearable assisted perception module for navigation and communication in hazardous environments
US11958183B2 (en) * 2019-09-19 2024-04-16 The Research Foundation For The State University Of New York Negotiation-based human-robot collaboration via augmented reality
JP2021072001A (ja) * 2019-10-31 2021-05-06 キヤノン株式会社 プログラム、情報処理装置、情報処理方法、及び情報処理システム
US11894130B2 (en) 2019-12-26 2024-02-06 Augmenticon Gmbh Pharmaceutical manufacturing process control, support and analysis
TWI738214B (zh) * 2020-02-13 2021-09-01 國立虎尾科技大學 物聯網廣播設備名稱多對多狀態識別系統
US20210107152A1 (en) * 2020-12-22 2021-04-15 Intel Corporation Autonomous machine collaboration
JP2023045089A (ja) * 2021-09-21 2023-04-03 株式会社東芝 分析装置、分析システム、分析方法、プログラム、及び記憶媒体
CN116483192A (zh) * 2022-01-14 2023-07-25 台达电子工业股份有限公司 具有拆装检核功能的虚拟现实系统及其拆装检核方法

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002538543A (ja) 1999-03-02 2002-11-12 シーメンス アクチエンゲゼルシヤフト 強調現実感技術により対話を状況に応じて支援するためのシステム及び方法
US6633846B1 (en) 1999-11-12 2003-10-14 Phoenix Solutions, Inc. Distributed realtime speech recognition system
US6996261B2 (en) * 2001-01-30 2006-02-07 Decharms R Christopher Methods for physiological monitoring, training, exercise and regulation
JP4093145B2 (ja) 2003-08-26 2008-06-04 松下電工株式会社 締付け工具
US7620894B1 (en) * 2003-10-08 2009-11-17 Apple Inc. Automatic, dynamic user interface configuration
WO2009079036A1 (en) * 2007-08-09 2009-06-25 Vialogy Llc Network centric sensor policy manager for ipv4/ipv6 capable wired and wireless networks
CN101159697B (zh) * 2007-11-23 2010-12-08 南京大学 无线传感器网络中时延限制下实现最小能耗路由的方法
JP5304630B2 (ja) 2009-12-24 2013-10-02 トヨタ自動車株式会社 締結部材の締め付けトルク検査方法及び締め付けトルク検査システム
US9183560B2 (en) * 2010-05-28 2015-11-10 Daniel H. Abelow Reality alternate
US9658614B2 (en) * 2011-02-11 2017-05-23 Ops Solutions Llc Light guided assembly system and method
WO2012142250A1 (en) 2011-04-12 2012-10-18 Radiation Monitoring Devices, Inc. Augumented reality system
WO2012167123A1 (en) * 2011-06-03 2012-12-06 Massachusetts Institute Of Technology Method and apparatus accounting for independent cognitive capacities in the right vs. left half of vision
JP2013031900A (ja) 2011-08-02 2013-02-14 Mitsubishi Electric Corp ねじ締め装置およびねじ締め方法
JP5959875B2 (ja) 2012-02-15 2016-08-02 本田技研工業株式会社 締付方法及び締付機の制御装置
US9504414B2 (en) * 2012-04-13 2016-11-29 Adidas Ag Wearable athletic activity monitoring methods and systems
US9406170B1 (en) * 2012-07-16 2016-08-02 Amazon Technologies, Inc. Augmented reality system with activity templates
US10573037B2 (en) 2012-12-20 2020-02-25 Sri International Method and apparatus for mentoring via an augmented reality assistant
US9058053B2 (en) 2012-10-26 2015-06-16 The Boeing Company Virtual reality display system
US20140201629A1 (en) * 2013-01-17 2014-07-17 Microsoft Corporation Collaborative learning through user generated knowledge
US20150088547A1 (en) * 2013-09-22 2015-03-26 Ricoh Company, Ltd. Mobile Information Gateway for Home Healthcare
US9911351B2 (en) 2014-02-27 2018-03-06 Microsoft Technology Licensing, Llc Tracking objects during processes
US10810529B2 (en) * 2014-11-03 2020-10-20 Hand Held Products, Inc. Directing an inspector through an inspection
US20160306172A1 (en) * 2015-04-20 2016-10-20 NSF International Computer-implemented techniques for remotely interacting with performance of food quality, food safety, and workplace safety tasks
US9610476B1 (en) * 2016-05-02 2017-04-04 Bao Tran Smart sport device
US10022614B1 (en) * 2016-05-02 2018-07-17 Bao Tran Smart device
US10042604B2 (en) * 2016-07-01 2018-08-07 Metrik LLC Multi-dimensional reference element for mixed reality environments
KR20180043627A (ko) * 2016-10-20 2018-04-30 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치를 제어하는 방법
US10822108B2 (en) * 2017-03-06 2020-11-03 Textron Innovations Inc. Augmented reality system for pilot and passengers
US10692287B2 (en) * 2017-04-17 2020-06-23 Microsoft Technology Licensing, Llc Multi-step placement of virtual objects
US10127227B1 (en) * 2017-05-15 2018-11-13 Google Llc Providing access to user-controlled resources by automated assistants
US11397558B2 (en) * 2017-05-18 2022-07-26 Peloton Interactive, Inc. Optimizing display engagement in action automation
US11056105B2 (en) * 2017-05-18 2021-07-06 Aiqudo, Inc Talk back from actions in applications

Also Published As

Publication number Publication date
RU2767145C2 (ru) 2022-03-16
EP3333654A1 (en) 2018-06-13
KR20180066823A (ko) 2018-06-19
KR102494817B1 (ko) 2023-02-02
JP2018160232A (ja) 2018-10-11
EP3333654B1 (en) 2022-03-09
US11348475B2 (en) 2022-05-31
BR102017025093A8 (pt) 2023-04-25
RU2017136560A3 (ru) 2021-02-10
US20180165978A1 (en) 2018-06-14
CN108228345A (zh) 2018-06-29
JP7184511B2 (ja) 2022-12-06
CA2982575A1 (en) 2018-06-09
BR102017025093A2 (pt) 2018-06-26
CN108228345B (zh) 2023-06-02

Similar Documents

Publication Publication Date Title
RU2017136560A (ru) Система и способ интерактивной помощи когнитивными средствами при решении задач
CN104731441B (zh) 信息处理的方法、以及电子设备
Zhu et al. AR-mentor: Augmented reality based mentoring system
US20130010071A1 (en) Methods and systems for mapping pointing device on depth map
US11275810B2 (en) Artificial intelligence-based triple checking method and apparatus, device and storage medium
KR20230054725A (ko) 측위 및 추적 방법 및 플랫폼, 헤드 마운트 디스플레이 시스템 및 컴퓨터 판독가능 저장 매체
US10977076B2 (en) Method and apparatus for processing a heterogeneous cluster-oriented task
JP2022088529A (ja) 視線追跡方法及び装置、モデル訓練方法及び装置、端末デバイス、コンピュータ可読記憶媒体、およびコンピュータプログラム
CN108882025B (zh) 视频帧处理方法和装置
US11361676B2 (en) Augmented reality techniques for simultaneously learning multiple languages
US20180144557A1 (en) Method and user terminal for providing hologram image-based message service, and hologram image display device
CN108510084B (zh) 用于生成信息的方法和装置
CN111260774A (zh) 生成3d关节点回归模型的方法和装置
WO2020124995A1 (zh) 手掌法向量确定方法、装置、设备及存储介质
US20240169989A1 (en) Multimodal responses
CN112306447A (zh) 一种界面导航方法、装置、终端和存储介质
CN114625923A (zh) 视频检索模型的训练方法、视频检索方法、装置以及设备
EP4222598A1 (en) Optimizing job runtimes via prediction-based token allocation
Chong et al. Challenges in virtual reality system: A review
CN115774774A (zh) 使用自然语言处理从游戏日志中提取事件信息
CN108595095B (zh) 基于手势控制模拟目标体运动轨迹的方法和装置
JP2023035870A (ja) ヒューマン・マシン・インターフェースのアプリケーションにおけるコンテンツ識別のためのマルチモーダル・センサ・フュージョン
Ashraf et al. Usability issues of smart phone applications: for visually challenged people
US10838363B2 (en) Interactive coordination between physical and holographic objects involving displaying hologram of missing shape of object
CN109787819A (zh) 一种网络状况可视化方法、系统、设备及介质