BR102020017345A2 - Método implementado por computador, veículo de trabalho automotriz, e, sistema compreendendo uma rede de servidor - Google Patents

Método implementado por computador, veículo de trabalho automotriz, e, sistema compreendendo uma rede de servidor Download PDF

Info

Publication number
BR102020017345A2
BR102020017345A2 BR102020017345-6A BR102020017345A BR102020017345A2 BR 102020017345 A2 BR102020017345 A2 BR 102020017345A2 BR 102020017345 A BR102020017345 A BR 102020017345A BR 102020017345 A2 BR102020017345 A2 BR 102020017345A2
Authority
BR
Brazil
Prior art keywords
obstacle
work
data
vehicle
sets
Prior art date
Application number
BR102020017345-6A
Other languages
English (en)
Inventor
Stewart J. Moorehead
Mark J. Cherney
Original Assignee
Deere & Company
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Deere & Company filed Critical Deere & Company
Publication of BR102020017345A2 publication Critical patent/BR102020017345A2/pt

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K31/00Vehicle fittings, acting on a single sub-unit only, for automatically controlling vehicle speed, i.e. preventing speed from exceeding an arbitrarily established velocity or maintaining speed at a particular velocity, as selected by the vehicle operator
    • B60K31/0008Vehicle fittings, acting on a single sub-unit only, for automatically controlling vehicle speed, i.e. preventing speed from exceeding an arbitrarily established velocity or maintaining speed at a particular velocity, as selected by the vehicle operator including means for detecting potential obstacles in vehicle path
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0238Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors
    • G05D1/024Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors in combination with a laser
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095Predicting travel path or likelihood of collision
    • B60W30/0956Predicting travel path or likelihood of collision the prediction being responsive to traffic or environmental parameters
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • E02F9/261Surveying the work-site to be treated
    • E02F9/262Surveying the work-site to be treated with follow-up actions to control the work tool, e.g. controller
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • E02F9/264Sensors and their calibration for indicating the position of the work tool
    • E02F9/265Sensors and their calibration for indicating the position of the work tool with follow-up actions (e.g. control signals sent to actuate the work tool)
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0214Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory in accordance with safety or protection criteria, e.g. avoiding hazardous areas
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0221Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory involving a learning process
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0223Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory involving speed control of the vehicle
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0238Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0255Control of position or course in two dimensions specially adapted to land vehicles using acoustic signals, e.g. ultra-sonic singals
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
    • G05D1/0278Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle using satellite positioning signals, e.g. GPS
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2415Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K31/00Vehicle fittings, acting on a single sub-unit only, for automatically controlling vehicle speed, i.e. preventing speed from exceeding an arbitrarily established velocity or maintaining speed at a particular velocity, as selected by the vehicle operator
    • B60K31/0008Vehicle fittings, acting on a single sub-unit only, for automatically controlling vehicle speed, i.e. preventing speed from exceeding an arbitrarily established velocity or maintaining speed at a particular velocity, as selected by the vehicle operator including means for detecting potential obstacles in vehicle path
    • B60K2031/0016Identification of obstacles; Selection of a target vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2300/00Indexing codes relating to the type of vehicle
    • B60W2300/17Construction vehicles, e.g. graders, excavators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12Classification; Matching

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Automation & Control Theory (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Electromagnetism (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Data Mining & Analysis (AREA)
  • Optics & Photonics (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Structural Engineering (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Mining & Mineral Resources (AREA)
  • Civil Engineering (AREA)
  • Evolutionary Biology (AREA)
  • Probability & Statistics with Applications (AREA)
  • Software Systems (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

método implementado por computador, veículo de trabalho automotriz, e, sistema compreendendo uma rede de servidor. sistemas e métodos descritos aqui proveem suporte de decisão probabilística relativa a obstáculos detectados em uma área de trabalho. conjuntos de dados em tempo real são coletados de sensores de obstáculo associados com pelo menos um veículo de trabalho autopropulsor, correspondente à presença/ausência detectada de obstáculos em dadas localizações na área de trabalho. os conjuntos de dados em tempo real recebidos são integrados em armazenamento de dados compreendendo conjuntos de dados a priori correspondentes à área de trabalho, para gerar um ou mais novos conjuntos de dados a priori. probabilidades são determinadas para a presença ou ausência detectada do obstáculo, e para cada uma dentre uma ou mais categorias de obstáculo, com base no conjunto de dados em tempo real recebidos e pelo menos um conjunto de dados a priori correspondentes à localização do veículo de trabalho. uma saída correspondente a pelo menos uma mais provável das probabilidades determinadas é gerada como realimentação a uma interface de usuário, e/ou unidades de controle de máquina relevantes.

Description

MÉTODO IMPLEMENTADO POR COMPUTADOR, VEÍCULO DE TRABALHO AUTOMOTRIZ, E, SISTEMA COMPREENDENDO UMA REDE DE SERVIDOR CAMPO DA DESCRIÇÃO
[001] A presente descrição se refere a veículos autopropulsores tais como máquinas de trabalho tendo sistemas de detecção de obstáculo internos e, mais particularmente, a sistemas e métodos para suplementar detecção de obstáculo convencional com suporte de decisão probabilística baseado no desenvolvimento de conhecimento a priori e estimativa.
FUNDAMENTOS
[002] Máquinas de trabalho discutidas aqui podem, por exemplo, incluir máquinas escavadoras, carregadeiras, e outro equipamento que modifica o terreno ou ambiente de trabalho equivalente de alguma maneira. Essas máquinas podem ter unidades de engate no chão com esteiras ou rodas que apoiam a subestrutura na superfície do chão, e podem adicionalmente incluir um ou mais implementos de trabalho que são usados para modificar o terreno em coordenação com o movimento da máquina. Várias situações surgem com tais máquinas onde o operador humano precisa controlar os movimentos da posição da máquina e/ou as posições relativas dos implementos de trabalho com base em obstáculos detectados na área de trabalho, que podem ou não estar visíveis ao operador.
[003] Sistemas de detecção de obstáculo são convencionalmente conhecidos para prover realimentação ao operador relativa a obstáculos detectados na área de trabalho. Durante a criação de um sistema de detecção de obstáculo, é vantajoso ter um sistema que possa distinguir diferentes tipos de objetos (por exemplo, obstáculos móveis ou transientes tais como pessoas ou veículos, ou obstáculos fixos tais como estruturas ou material), uma vez que o sistema pode querer reagir diferentemente a diferentes tipos de objetos no ambiente. Dessa forma, é também desejável detectar precisamente essas diferentes classes de objeto, de maneira tal que o sistema não detecte um objeto que de fato não esteja presente, ou deixe de detectar o objeto presente, ou ainda adicionalmente atribuir uma classificação incorreta a um objeto que resulta em uma resposta inadequada pelo operador humano ou sistema de controle de máquina automático.
SUMÁRIO DA DESCRIÇÃO
[004] A presente descrição provê melhorias na coleta e implementação de dados correspondentes a ações de máquina de trabalho com o tempo para melhorar a detecção de obstáculo e resultados de classificação.
[005] Em uma modalidade, o método de suporte de decisão probabilística relativo a obstáculos detectados em uma área de trabalho compreende: prover armazenamento de dados compreendendo um ou mais conjuntos de dados a priori correspondentes à área de trabalho; receber conjuntos de dados em tempo real de um ou mais sensores de obstáculo associados com pelo menos um veículo de trabalho autopropulsor, os conjuntos de dados em tempo real correspondendo a uma presença ou ausência detectada de um obstáculo em uma dada localização na área de trabalho; determinar probabilidades para a presença ou ausência detectada do obstáculo, e, para cada um dentre uma ou mais categorias de obstáculo, com base no conjunto de dados em tempo real recebido e um conjunto de dados a priori correspondente à dada localização como um subconjunto de um ou mais conjuntos de dados a priori correspondentes à área de trabalho, e gerar uma saída correspondente a pelo menos à mais provável das probabilidades determinadas.
[006] Uma outra modalidade do método pode compreender adicionalmente integrar os conjuntos de dados em tempo real recebidos em armazenamento de dados compreendendo conjuntos de dados a priori correspondentes à área de trabalho, para gerar um ou mais novos conjuntos de dados a priori.
[007] Uma outra modalidade do método pode compreender adicionalmente monitorar movimentos de um ou mais componentes de veículo de trabalho móveis compreendendo pelo menos um dos implementos de trabalho, e atualizar um ou mais dentre um ou mais conjuntos de dados a priori com dados que categorizam um obstáculo na localização na área de trabalho com base na sequência predeterminada de movimento para um ou mais componentes de veículo de trabalho.
[008] Em uma outra modalidade exemplificativa do método, para atualizar um ou mais dentre um ou mais conjuntos de dados a priori, um primeiro obstáculo é categorizado com base em uma primeiro sequência predeterminada de movimento, um segundo obstáculo é categorizado com base na segunda sequência predeterminada de movimento, e a rota de veículo de trabalho é adicionalmente categorizada entre os primeiro e segundo obstáculos. Com base em uma tarefa de trabalho especificada, um ou mais dentre o primeiro obstáculo e o segundo obstáculo pode ser categorizado tanto como um obstáculo transiente quanto um obstáculo permanente.
[009] Uma outra modalidade do método pode compreender adicionalmente predizer a rota de veículo de trabalho com base em movimento de veículo monitorado. Uma área de detecção de obstáculo pode adicionalmente ser definida como um subconjunto da área de trabalho correspondente à rota de veículo de trabalho predita. Recuperação e processamento de dados a priori podem ser dinamicamente limitados com relação ao subconjunto do armazenamento de dados com base na área de detecção de obstáculo definida.
[0010] Uma outra modalidade do método pode compreender adicionalmente, para rotas de veículo de trabalho preditas e previamente percorridas que faltam a categorização de obstáculo permanente, restringir determinação subsequente de probabilidades da presença ou ausência detectada do obstáculo apenas a obstáculos transientes.
[0011] Em uma modalidade, a saída pode ser provida a uma interface de usuário localizada em ou sobre o veículo de trabalho; e/ou um dispositivo de computação de usuário. Um ou mais obstáculos preditos e categorias associadas na interface de usuário podem em algumas modalidades ser salientados com base na saída. Uma ou mais ferramentas de suporte de usuário ou controles manipuláveis pelo usuário podem em algumas modalidades ser salientadas com base na saída, para alertar ou facilitar a regulagem manual de componentes de veículo de trabalho como, por exemplo, pode compreender ou de outra forma ser integradas com um sistema de desvio ou transposição de colisão de obstáculo.
[0012] Em uma modalidade, a saída pode incluir pelo menos um sinal de controle provido à unidade de controle de direção de veículo, um veículo unidade de controle de posicionamento de implemento e/ou uma unidade de controle de acionamento de veículo, para regulagem automática de componentes de veículo de trabalho associados como, por exemplo, pode compreender ou senão ser integrado com um sistema de desvio ou transposição de colisão de obstáculo.
[0013] Controle de máquina de trabalho manual e automático com base em obstáculos detectados como aqui discutido é conhecido na técnica, e estrutura e metodologia de controle convencional pode ser implementada, mas não é necessariamente descrita adicionalmente no contexto da presente invenção. Os sistema e método descritos aqui suplementam, complementam ou senão proveem realimentação adicional e valiosa como parte de um sistema de detecção de obstáculo, quer para suporte de decisão de operador quer para transposição automático de obstáculo, ou, em outras palavras, independentemente da resposta de controle, a menos que de outra forma declarado. A geração e implementação de dados a priori permite que um sistema de detecção de obstáculo determinar mais seguramente probabilidades correspondentes, por exemplo, se um obstáculo está realmente presente e/ou qual tipo de obstáculo mais provavelmente estará presente onde aplicável, de maneira tal que a resposta pode ser adequada corretamente e não totalmente sujeita como na técnica anterior às incertezas inerentes ao aparelho de sensoreamento de obstáculo e condições operacionais particulares.
[0014] Em uma modalidade, qualquer um dos métodos supramencionados pode ser realizado por meio de um veículo de trabalho autopropulsor tendo um ou mais implementos de trabalho para trabalhar em um terreno, um ou mais sensores de obstáculo, armazenamento de dados compreendendo um ou mais conjuntos de dados a priori correspondentes à área de trabalho, e um controlador comunicativamente ligado a um ou mais implementos de trabalho, a um ou mais sensores de obstáculo, e ao armazenamento de dados.
[0015] Em uma modalidade, qualquer dos métodos supramencionados pode ser realizado por meio de um sistema compreendendo a rede de servidor comunicativamente ligada a uma pluralidade de veículos autopropulsores, cada um dos veículos autopropulsores compreendendo pelo menos um implemento de trabalho para trabalhar em um terreno e um ou mais sensores de obstáculo, e armazenamento de dados compreendendo um ou mais conjuntos de dados a priori correspondentes a uma área de trabalho, em que, por exemplo, o respectivo método é executado com relação a cada um dos veículos autopropulsores localizados na área de trabalho.
[0016] Inúmeros objetos, recursos e vantagens das modalidades apresentadas aqui ficarão facilmente aparentes aos versados na técnica mediante leitura da descrição seguinte quando considerada em combinação com os desenhos anexos.
BREVE DESCRIÇÃO DOS DESENHOS
[0017] A Fig. 1 é uma vista em elevação lateral do escavador de esteira como uma máquina de trabalho incorporando uma modalidade de um sistema como descrito aqui.
[0018] A Fig. 2 é um diagrama de blocos representando um sistema de controle exemplificativo para a máquina de trabalho da Fig. 1.
[0019] A Fig. 3 é uma vista esquemática de topo de uma área de trabalho exemplificativa incluindo obstáculos e uma máquina de trabalho.
[0020] A Fig. 4 é um diagrama gráfico representando uma modalidade de um sistema distribuído como descrito aqui.
[0021] A Fig. 5 é um fluxograma representando uma modalidade exemplificativa de um método como descrito aqui.
DESCRIÇÃO DETALHADA
[0022] Referindo-se agora aos desenhos, e particularmente à Fig. 1, um veículo de trabalho representativo é mostrado e designado no geral pelo número 100. A Fig. 1 mostra a máquina escavadeira de esteira 100. Os sistemas descritos aqui são aplicáveis a veículos, máquinas escavadoras, carregadeiras similares ou senão equivalente, e outras máquinas de trabalho do tipo que tem um ou mais implementos de trabalho 102 para modificar o terreno próximo. Em certas modalidades, sistemas e métodos descritos aqui podem também ser aplicáveis a veículos que não têm implementos de trabalho explícitos. Veículos de trabalho como os discutidos aqui podem tipicamente ter unidades de engate no chão com esteiras ou rodas que suportam a subestrutura na superfície do chão.
[0023] A máquina de trabalho ilustrada e exemplificativa 100 inclui uma subestrutura 122 incluindo um ou mais unidades de engate no chão com esteira ou rodas 124 e pelo menos um motor de deslocamento para acionar as respectivas unidades de engate no chão. A armação principal 132 é suportada pela subestrutura 122 por meio de um mancal oscilante 134 de maneira tal que a armação principal 132 é pivotável em torno de um eixo geométrico pivô 136 em relação à subestrutura. O eixo geométrico pivô 136 é substancialmente vertical quando a superfície do chão 138 engatada pelas unidades de engate no chão 124 é substancialmente horizontal. Um motor oscilante é configurado para pivotar a armação principal 132 no mancal oscilante 134 em torno do eixo geométrico pivô 136 em relação à subestrutura 122.
[0024] Uma máquina de trabalho descrita aqui tipicamente inclui um ou mais implementos de trabalho 102 que, como ilustrado, por exemplo, na Figura 1, podem coletivamente definir um conjunto de lança incluindo uma lança 144, um braço 146 conectado a pivô à lança 144, e uma ferramenta de trabalho 148. A lança 144 no presente exemplo é afixada a pivô à armação principal 132 para pivotar em torno de um eixo geométrico no geral horizontal em relação à armação principal 132. A ferramenta de trabalho nessa modalidade é uma pá ou caçamba escavadora frontal 148 que é conectada a pivô ao braço 146. O conjunto de lança 102 se estende da armação principal 132 ao longo de uma direção de trabalho do conjunto de lança. A direção de trabalho pode também ser descrita como a direção de trabalho da lança.
[0025] Uma cabina de operador pode ser localizada na armação principal 132. A cabina de operador e um ou mais implementos de trabalho 102 podem ambos ser montados na armação principal de maneira que a cabina de operador fique voltada na direção de trabalho dos implementos de trabalho. Uma estação de controle incluindo uma interface de usuário 114 pode ser localizada na cabina de operador.
[0026] Como ilustrado esquematicamente na Fig. 2, a máquina de trabalho 100 inclui um sistema de controle incluindo um controlador 112. O controlador pode ser parte do sistema de controle de máquina da máquina de trabalho, ou pode ser um módulo de controle separado. O controlador pode incluir a interface de usuário 114 e opcionalmente ser montado na cabina do operador em um painel de controle.
[0027] O controlador 112 é configurado para receber sinais de entrada de alguns ou todos os vários sensores que definem coletivamente um sistema de sensor 104. Certos desses sensores podem ser providos para detectar condições operacionais ou posicionamento da máquina, incluindo, por exemplo, um sensor de orientação, sensores de sistema de posicionamento global (GPS), sensores de velocidade de veículo, sensores de posicionamento de implemento de veículo, e similares, e ao passo que um ou mais desses sensores podem ser de natureza discreta e o sistema de sensor pode referir adicionalmente a sinais providos pelo sistema de controle de máquina.
[0028] Outros sensores no sistema de sensor 104 mais particularmente se referem a um grupo de sensores referidos aqui como sensores de obstáculo 104. Vários exemplos de sensores de obstáculo são convencionalmente conhecidos e podem incluir escâneres laser, sensores térmicos, dispositivos de formação de imagem, sensores de luz estruturados, sensores ultrassônicos, e outros sensores ópticos. Os tipos e combinações de sensores de obstáculo podem variar de acordo com o tipo de máquina de trabalho, área de trabalho e/ou aplicação, mas no geral são providos e configurados para otimizar o reconhecimento de obstáculos em um trajeto de trabalho do veículo.
[0029] O controlador 112 pode tipicamente produzir uma saída relativa à detecção e classificação de obstáculo, como descrito adicionalmente a seguir, para a interface de usuário 114 para exibição ao operador humano. O controlador pode adicionalmente ou alternativamente gerar sinais de controle para controlar a operação dos respectivos acionadores, ou sinais para controle indireto por meio de unidades de controle intermediárias, associados com um sistema de controle de direção de máquina 126, um sistema de controle de implemento de máquina 128 e um sistema de controle de acionamento de máquina 130.
[0030] O controlador 112 inclui ou pode ser associado com um processador 150, uma mídia legível por computador 152, uma unidade de comunicação 154, armazenamento de dados 156 tal como, por exemplo, uma rede de base de dados, e a interface de usuário supramencionada 114 ou painel de controle 114 tendo um monitor 118. Um dispositivo de entrada/saída 116, tais como um teclado, manete de jogos ou outra ferramenta de interface de usuário, é provido de forma que o operador humano possa entrar com instruções no controlador. Deve-se entender que o controlador descrito aqui pode ser um único controlador tendo toda a funcionalidade descrita, ou pode incluir múltiplos controladores em que a funcionalidade descrita é distribuída dentre os múltiplos controladores.
[0031] Várias operações, etapas ou algoritmos descritos relativos ao controlador 112 podem ser concebidos diretamente em hardware, em um produto programa de computador tal como um módulo de software executado pelo processador 150, ou em uma combinação dos dois. O produto programa de computador pode residir em memória RAM, memória flash, memória ROM, memória EPROM, memória EEPROM, registros, disco rígido, um disco removível, ou qualquer outra forma de mídia legível por computador 152 conhecida na técnica. Uma mídia legível por computador exemplificativa pode ser acoplada ao processador de maneira tal que o processador possa ler informação, e gravar informação na memória/mídia de armazenamento. Na alternativa, a mídia pode ser integral com o processador. O processador e a mídia podem residir em um circuito integrado específico da aplicação (ASIC). O ASIC pode residir em um terminal de usuário. Na alternativa, o processador e a mídia podem residir como componentes discretos em um terminal de usuário.
[0032] O termo “processador” na forma aqui usada pode se referir a pelo menos dispositivos de processamento e/ou lógica de uso geral ou uso específico como pode ser entendido por versados na técnica, incluindo, mas não se limitando a um microprocessador, um microcontrolador, uma máquina de estado, e similares. Um processador pode também ser implementado como uma combinação de dispositivos de computação, por exemplo, uma combinação de um DSP e um microprocessador, uma pluralidade de microprocessadores, um ou mais microprocessadores em combinação com um núcleo de DSP, ou qualquer outra tal configuração.
[0033] A unidade de comunicação 154 pode suportar ou prover comunicações entre o controlador e sistemas ou dispositivos externos, e/ou suportar ou prover interface de comunicação com relação a componentes internos da máquina de trabalho. A unidade de comunicações pode incluir componentes de sistema de comunicação sem fio (por exemplo, por meio de modem celular, WiFi, Bluetooth ou similares) e/ou pode incluir um ou mais terminais de comunicações sem fio tais como portas de barramento serial universal.
[0034] O armazenamento de dados 156 adicionalmente descrito a seguir pode ser configurado para pelo menos receber e armazenar conjuntos de dados em tempo real 158 e conjuntos de dados a prior 160 em forma seletivamente recuperável. O armazenamento de dados como discutido aqui pode, a menos que de outra forma declarado, no geral englobar hardware tais como dispositivos de armazenamento voláteis ou não voláteis, unidades, memória, ou outras mídias de armazenamento, bem como uma ou mais bases de dados residentes no mesmo.
[0035] Referindo-se no geral às Figs. 1 a 4, modos de operação exemplificativos podem ser adicionalmente descritos com relação à máquina de trabalho supramencionada. Como previamente notado, sensores, algoritmos e controles detecção de obstáculo são convencionalmente conhecidos, mas pode frequentemente ser difícil distinguir confiavelmente um sinal de detecção de obstáculo apropriado do ruído característicos de operações de trabalho típicas. Um sistema de detecção de obstáculo ideal não apenas seria capaz de detectar precisamente a presença ou ausência de um objeto no trajeto de trabalho (real ou projetado) da máquina, mas também distinguir diferentes tipos de objetos (por exemplo, pessoas, veículos, estruturas) e prover realimentação apropriada.
[0036] Modalidades de um sistema e método de suporte de decisão como descrito aqui podem detectar mais precisamente a presença de um objeto e atribuir ao mesmo precisamente uma categoria ou classificação pelo uso desenvolvimento de conhecimento de “anterior” ou a priori. Um conjunto de dados a priori nesse contexto pode se referir no geral a informação que o sistema coletou, gerou e/ou derivou, antes de realizar a classificação, com relação à probabilidade de que um objeto de uma certa classe esteja presente em uma certa localização. Pode-se perceber que a melhoria da precisão desses anteriores com o tempo pode também melhorar significativamente o desempenho da classificação.
[0037] Conjuntos de dados a priori podem adicionalmente ser gerados como correspondentes a uma área de trabalho, ou ambiente operacional, para as máquinas de trabalho. A área de trabalho em um exemplo pode ser predeterminada, tal como, por exemplo, por meio de contornos, configurações e similares definidos. Alternativamente, a área de trabalho pode ser definida no geral com relação a uma localização de máquina de trabalho específica, tal como um área circundante e dentro de uma certa distância da máquina de trabalho. Em certas modalidades, o sistema pode correspondentemente gerar conjuntos de dados a priori com relação à área de trabalho específica que pode ser percorrida por múltiplas máquinas de trabalho, ou conjuntos de dados a priori podem ser gerados com relação à dada localização fixa que pode ser posteriormente classificada como uma área de trabalho para uma dada máquina de trabalho com base em sua posição detectada.
[0038] Como aqui notado, máquinas de trabalho podem tipicamente modificar seu ambiente de alguma maneira, por exemplo, em que carregadeiras podem mover pilhas de material em torno, ou escavadeiras podem escavar um furo em uma localização e empilhar sujeira em uma outra. Um sistema de detecção de obstáculo como descrito aqui é direcionado em parte para detectar e classificar esses objetos como furos ou pilhas, não apenas por questões de segurança, mas também para melhor automação da tarefa em que é importante prover realimentação relativa a onde a máquina deve carregar e descarregar material.
[0039] Em certas modalidades, como descrito aqui, um sistema e método podem correspondentemente envolver analisar os movimentos da máquina de trabalho (por exemplo, os implementos de trabalho) e interferir dos mesmos na presença de furos e pilhas que a máquina está criando. Essa informação é adicionalmente implementada para estabelecer ou integrar conhecimento a priori previamente estabelecido e criar melhores anteriores para o classificador detectar e classificar esses elementos corretamente no ambiente.
[0040] Como um exemplo, o sistema pode ser configurado para lembrar lugares onde uma lança da carregadeira de rodas é levantada e a caçamba desce, interferindo adicionalmente em que o operador está descarregamento material nessa localização, e dessa forma aumentando o anterior para presença de uma “Pilha de Material” nessa localização. A pilha pode ser projetada como um certo tipo de localização ou “destino” fixo associado com as últimas iterações da rota de máquina de trabalho predita. Alternativamente, o sistema pode ter conhecimento anterior do projeto de máquina ou tarefar que inclui encher um caminhão basculante, em que o sistema é configurado para aumentar o anterior para o “Veículo” nessa localização particular. O veículo pode ser atribuído com um certo tipo de localização ou “destino” transiente nesse contexto com relação às últimas iterações de uma rota de máquina de trabalho predita.
[0041] Como um outro exemplo associado com uma escavadora de rodas ou esteira como a máquina de trabalho, o sistema pode ser configurado para monitorar e identificar posições onde a lança está abaixada e a caçamba está mais baixa que as esteiras e, dessa forma, aumentar o anterior para “Furo” nessa localização. O furo pode ser designado, por exemplo, como um outro certo tipo de localização ou “origem” fixa associada com as últimas iterações de uma rota de máquina de trabalho predita.
[0042] Versados na técnica podem perceber que várias combinações adicionais ou alternativas de movimentos de máquina e/ou implemento de máquina podem ser predeterminadas em associação com designações relevantes e implementada pelo sistema para melhorar anteriores e classificações associadas, dependendo, por exemplo, do tipo de máquina de trabalho, do tipo de área de trabalho, do tipo de projeto, etc.
[0043] Além de monitorar e analisar movimentos de implemento de máquina para melhorar anteriores, o sistema pode adicionalmente (ou na alternativa) considerar os trajetos de direção adotados pela máquina de trabalho para estabelecer ou desenvolver adicionalmente um conhecimento a priori para uma classe de “dirigibilidade”. Em um exemplo associado com uma carregadeira, a máquina de trabalho pode realizar uma série de movimentos tais como dirigir para uma pilha, coletar material, retroceder e então, durante virada, dirigir para frente para um caminhão basculante, descarregar, reverter enquanto vira, e então repetir os mesmos. O sistema como descrito aqui pode desenvolver um conhecimento a priori relativo à área de trabalho pelo monitoramento dos movimentos da máquina de trabalho por um curto período de tempo.
[0044] Por exemplo, o sistema pode determinar que as áreas sobre as quais a máquina de trabalho foi conduzida repetidamente são da classe “Dirigível” e que o sistema pode permissivelmente restringir a análise subsequente apenas aos objetos que poderiam mover para esses espaços (por exemplo, obstáculos “transientes” tais como pessoas e veículos, em vez de obstáculos “fixos” tais como edifícios ou estruturas equivalentes).
[0045] Adicionalmente, o sistema pode ser configurado para predizer precisamente uma rota ou trajeto de máquina de trabalho, com base no conhecimento de que a máquina de trabalho recentemente e com sucesso foi conduzida ao longo desse trajeto ou senão através de uma série de localizações. O sistema pode correspondentemente determinar uma porção mais provável (subconjunto) da área de trabalho a ser percorrida pela máquina de trabalho e restringir o foco do sistema de detecção de obstáculo no geral com relação a esse subconjunto da área de trabalho, ou ainda mais particularmente e sequencialmente com relação a localizações específicas ao longo da rota predita, em vez da maior área de trabalho como um todo. Isso pode em muitos casos reduzir substancialmente o espaço de busca e exigências de processamento de dados associadas do sistema, por meio disso permitindo que o sistema funcione de forma muito mais rápida e precisa.
[0046] Referindo-se, por exemplo, à Fig. 3, um sistema como aqui descrito pode ser configurado para detectar um primeiro obstáculo 302 em uma área de trabalho 300 e classificar o obstáculo com base em uma primeira combinação de um ou mais movimentos de máquina de trabalho monitorados como uma “origem” de carregamento de material e adicionalmente detectar um segundo obstáculo 304 na área de trabalho e classificar o obstáculo com base em uma segunda combinação de um ou mais movimentos de máquina de trabalho monitorados como “destino” de descarregamento de material. O sistema pode adicionalmente definir uma rota da máquina de trabalho 306 entre os primeiro e segundo obstáculos com base em uma travessia monitorada e rotineira da dita rota. Dessa forma, em uma modalidade de um método como discutido aqui, o sistema pode (dependendo, por exemplo, da tarefa particular ou de uma outra condição) predizer que a máquina de trabalho prosseguirá ao longo da rota definida e restringir a o processamento de dados de detecção de obstáculo, e a recuperação de dados a priori associada do armazenamento, apenas a uma porção da área de trabalho geral que corresponde à rota predita. Isso pode, por exemplo, isentar obstáculos previamente detectados e classificados como “permanente” (ou senão, por exemplo, “altamente prováveis” de ser permanentes) 308 que não correspondem ou se sobrepõem à rota predita. Isso pode adicionalmente assistir o sistema na classificação de um objeto 310 que é detectado ao longo da rota predita como sendo um obstáculo “transiente” (ou “altamente provável” de ser transiente) (por exemplo, ser humano ou veículo), e adicionalmente permitir realimentação otimizada e/ou resposta de controle com base na mesma.
[0047] Em algumas modalidades, um método de detecção de obstáculo incluindo geração de conjunto de dados a prior, recuperação e processamento de dados seletiva, e realimentação ou resposta de controle podem ser implementados a partir de um controlador ou sistema de controle de máquina associado com uma máquina de trabalho individual.
[0048] Em outras modalidades como ilustrado, por exemplo, na Fig. 4, um sistema de detecção de obstáculo distribuído 400 pode incluir um ou mais servidores remotos 402 ligados a máquinas de trabalho 100a, 100b, 100c em ou associados com a área de trabalho 300. O servidor pode ser configurado para comunicações bidirecionais com as máquinas de trabalho por meio de uma rede de comunicações 406 para receber conjuntos de dados de detecção de obstáculo das máquinas, e adicionalmente comunicar com o armazenamento de dados 404 para armazenar e seletivamente recuperar dados a priori com base pelo menos em parte nos dados brutos das máquinas.
[0049] A expressão “rede de comunicações” na forma aqui usada com relação a comunicação de dados entre duas ou mais entidades (por exemplo, servidor, controlador, dispositivo de computação de usuário) ou senão entre interfaces de rede de comunicações associadas com duas ou mais entidades pode se referir a qualquer uma de, ou a combinação de quaisquer duas ou mais de, redes de telecomunicações (quer por fio, sem fio, celular ou similares), uma rede global tal como a Internet, redes locais, ligações de rede, Provedores de Serviço de Internet (ISP's), e interfaces de comunicação intermediárias.
[0050] O sistema distribuído descrito aqui pode por meio disso gerar conjuntos de dados a priori para processamento e realimentação de dados coletivos com base em entradas de um número de máquinas de trabalho atribuídas à mesma área de trabalho. Em modalidades alternativas dessa estrutura, várias etapas de processamento de dados podem opcionalmente ser designadas para execução no nível de servidor, no nível de controlador de máquina de trabalho local, ou uma combinação dos dois.
[0051] A Fig. 5 representa uma modalidade exemplificativa do método de operação 500 como descrito aqui. A menos que de outra forma notado, várias etapas do método podem ser realizadas no nível de um controlador de máquina de trabalha local, no nível do dispositivo de computação associado com um operador da máquina de trabalho ou outro usuário, e/ou no nível de um ou mais servidores remotos comunicativamente ligados ao mesmo.
[0052] O método 500 pode começar na etapa 502 com a coleta de conjuntos de dados em tempo real de um ou mais sensores de obstáculo associados com a máquina de trabalho. Os conjuntos de dados coletados podem ser armazenados em armazenamento de dados, por exemplo, em localizações de base de dados predeterminadas para recuperação e processamento de dados seletivas em etapas posteriores.
[0053] Como previamente notado, os “sensores de obstáculo” disponíveis para implementação de sistema não são inerentemente limitados em escopo e podem englobar vários sensores convencionalmente conhecidos ou combinações de sensores para seu propósito visado, ou senão podem ser entendidos por um versado na técnica como aplicável para implementação na presente descrição.
[0054] Os conjuntos de dados em “tempo real” referidos aqui também não são inerentemente limitados em escopo a menos que de outra forma declarado, e podem englobar sinais de dados brutos que são transmitidos diretamente pelos sensores em tempo real para geração de conjuntos de dados no nível do controlador, conjuntos de sinais de dados brutos que são coletivamente transmitidos pelos sensores ao controlador após períodos de tempo predeterminados, em vez de instantaneamente, sinais de dados acionados por evento que são transmitidos pelos sensores ao controlador com base em eventos de detecção limiares ou não limiares, e similares.
[0055] O método 500 pode continuar na etapa 504 pela integração dos conjuntos de dados de detecção de obstáculo coletados para melhorar em relação a qualquer anterior conhecido, por meio disso gerando novos conjuntos de dados a priori em armazenamento de dados.
[0056] O método 500 pode opcionalmente continuar nas etapas 506 e 508 pelo monitoramento de movimentos da máquina de trabalho com o tempo, previsão do trajeto ou rota a ser percorrida pela máquina de trabalho, e adicionalmente definição de uma área de detecção de obstáculo para recuperação e processamento de dados a priori correspondente. Como precisamente notado, certas modalidades incluindo tais etapas podem diminuir substancialmente o tempo de processamento exigido pelo método, exigindo que apenas um subconjunto limitado da área de trabalho geral seja substancialmente revista em um dado momento.
[0057] O método 500 pode continuar na etapa 510 pela determinação da probabilidade de uma presença real (ou ausência) de um obstáculo em uma dada localização, e na etapa 512 pela determinação das respectivas probabilidades para categorias do dito obstáculo. Como um exemplo, sinais de dados recebidos de um sensor de obstáculo convencional (ou combinação de sensores de obstáculo) podem indicar que um obstáculo foi detectado. Recuperação e processamento de dados a priori, adicionalmente envolvendo, por exemplo, integração de novos sinais de dados, podem ser usadas para determinar uma probabilidade de que um obstáculo está realmente presente. Em contextos onde os sinais de dados brutos podem ser relativamente ruidosos por natureza, a implementação de anteriores pode confirmar que um obstáculo certamente está presente, ou, em vez disso, pode impedir (ou pelo menos amortecer ou atrasar) realimentação ou resposta de controle inapropriada pela determinação de que um obstáculo como esse é relativamente improvável.
[0058] Tais etapas podem, por exemplo, incluir gerar vetores de estado correspondentes a uma condição ou categoria (por exemplo, a presença ou ausência de um obstáculo), em que funções de transição ou similares podem ser usadas para gerar e atualizar com o tempo os valores de probabilidade associados com os respectivos vetores. Com travessia repetida de uma dada rota de máquina de trabalho, os sistema e método para reforçar os anteriores associados com obstáculo não fixo ao longo da dada rota, sem eliminar expressamente, por exemplo, a possiblidade de um obstáculo transiente entrando na rota. Dessa forma, os valores de probabilidade associados com os vetores de estado podem refletir essas distinções relativas e, se um obstáculo for posteriormente indicado por meio de sinais de sensores de detecção de obstáculo, o sistema pode inferir uma baixa probabilidade de que um obstáculo fixo está presente, mas pode haver uma possibilidade de um obstáculo transiente ao longo da rota.
[0059] De maneira geral, um desenvolvimento e implementação de conhecimento a priori como aqui discutido podem ser principalmente baseados em movimentos detectados do veículo de trabalho e/ou implementos de trabalho associados, e portanto não se baseando em informação dos próprios sensores de obstáculo para classificar as probabilidades que, por exemplo, um obstáculo de um certo tipo esteja presente. Entretanto, dados dos sensores de detecção de obstáculo podem ainda ser integrados em várias modalidades e/ou contextos de aprendizagem de máquina, tal como, por exemplo, onde o sistema pode reconhecer indicações falso positivas com o tempo a partir de um sensor de obstáculo particular em uma localização particular. O sistema pode adicionalmente aprender com o tempo a tratar sinais de certos sensores de detecção de obstáculo como sendo mais ou menos confiáveis no contexto, tal como, por exemplo, em localizações particulares na área de trabalho, ou em proximidade a uma rota de veículo previamente percorrida, etc.
[0060] Em certas modalidades, os conjuntos de dados a priori correspondentes à área de trabalho podem ser gerados somente ou primariamente com base em informação aprendida com o tempo com relação a movimentos detectados dos veículos de trabalhos e/ou implementos.
[0061] Alternativamente, os conjuntos de dados a priori podem integrar informação predeterminada relativa à área de trabalho tal como, por exemplo, informação topográfica mapeada, ou tal informação predeterminada pode ser separadamente provida em armazenamento de dados para integração pelo controlador de máquina ou servidor com relação aos dados de sensor de detecção de obstáculo e aos dados a priori.
[0062] O método 500 pode continuar na etapa 514 pela geração de uma ou mais saídas para uma interface de usuário (por exemplo, painel de controle na cabina do operador, dispositivo de computação móvel, exibição remota) e/ou às unidades de controle associadas com a máquina de trabalho. As saídas podem ser associadas com a mais alta probabilidade com relação a vetores de estado em um dado relacionamento, tal como, por exemplo, se um obstáculo está presente ou ausente (ou se o sistema é incerto com relação ao mesmo) em proximidade imediata com a máquina de trabalho, ou se o obstáculo detectado é fixo ou transiente, humano ou máquina, etc.
[0063] Em um contexto, as saídas são apenas para efeitos de exibição, e são apresentadas ao operador humano como suporte de decisão para a resposta de controle manual com base em uma representação mais precisa de obstáculos potenciais no trajeto da máquina de trabalho.
[0064] Em um outro contexto, a saídas podem ser providas para resposta de controle automática, e mais particularmente para habilitar, desabilitar, amortecer, etc., uma resposta de controle que pode de outra forma ser automaticamente provida com base em sinais brutos de detecção de obstáculo. Por exemplo, sinais ou comandos de controle podem ser gerados para regular o desvio de obstáculo para um sistema de direção de veículo, um sistema de acionamento de veículo (por exemplo, para frenagem e/ou propulsão), ou similares.
[0065] A incerteza nos valores de probabilidade gerados pelo sistema pode ser refletida nas saídas igualmente, tal como, por exemplo, onde as saídas são ponderadas como parte de um algoritmo separado para efeitos de controle, ou onde o operador pode ser apresentado com resultados exibidos que indicam um obstáculo potencial, mas refletem a incerteza relativa ou falta de confiança. Por exemplo, uma certa saída pode ser provida para regular o controle do veículo de trabalho se o sistema determinar que um obstáculo é altamente provável de estar presente no trajeto do veículo, ao passo que uma saída separada pode ser provida se o sistema for incerto com relação ao estado de um obstáculo detectado, de maneira tal que uma resposta de controle diferente é prudente ou senão exigida pelo veículo de trabalho.
[0066] Dessa forma, vê-se que o aparelho e métodos da presente descrição facilmente alcançam as finalidades e vantagens mencionadas, bem como as inerentes às mesmas. Embora certas modalidades preferidas da descrição tenham sido ilustradas e descritas para os presentes propósitos, inúmeras mudanças no arranjo de construção de partes e etapas podem ser feitas pelos versados na técnica, mudanças essas que são englobadas no espírito e escopo da presente descrição na forma definida pelas reivindicações anexas. Cada recurso ou modalidade descrita pode ser combinado com qualquer um dos outros recursos ou modalidades descritos.

Claims (15)

  1. Método implementado por computador (500) de suporte de decisão probabilística com relação a obstáculos detectados em uma área de trabalho, o método caracterizado pelo fato de que compreende:
    prover armazenamento de dados (156) compreendendo um ou mais conjuntos de dados a priori (160) correspondentes a uma área de trabalho;
    receber conjuntos de dados em tempo real (158) de um ou mais sensores de obstáculo associados com pelo menos um veículo de trabalho autopropulsor (502), os conjuntos de dados em tempo real correspondendo à presença ou ausência detectada de um obstáculo em uma dada localização na área de trabalho;
    determinar probabilidades para a presença ou ausência detectada do obstáculo (510) e, para cada uma dentre uma ou mais categorias de obstáculo (512), com base no conjunto de dados em tempo real recebido e um conjunto de dados a priori correspondentes à dada localização como um subconjunto de um ou mais conjuntos de dados a priori correspondentes à área de trabalho, e
    gerar uma saída correspondente a pelo menos uma mais provável das probabilidades determinadas (514).
  2. Método de acordo com a reivindicação 1, caracterizado pelo fato de que compreende adicionalmente:
    integrar os conjuntos de dados em tempo real recebidos em armazenamento de dados compreendendo conjuntos de dados a priori correspondentes à área de trabalho, para gerar um ou mais novos conjuntos de dados a priori (504).
  3. Método de acordo com a reivindicação 1 ou 2, caracterizado pelo fato de que compreende adicionalmente:
    monitorar movimentos de um ou mais componentes de veículo de trabalho móveis compreendendo pelo menos um dos implementos de trabalho; e
    atualizar um ou mais dentre um ou mais conjuntos de dados a priori com dados que categorizam um obstáculo em uma localização na área de trabalho com base em uma sequência predeterminada de movimento para um ou mais componentes de veículo de trabalho.
  4. Método de acordo com a reivindicação 3, caracterizado pelo fato de que, para atualizar um ou mais dentre um ou mais conjuntos de dados a priori:
    um primeiro obstáculo (302) é categorizado com base em uma primeira sequência predeterminada de movimento,
    um segundo obstáculo (304) é categorizado com base em uma segunda sequência predeterminada de movimento, e
    uma rota de veículo de trabalho (306) é adicionalmente categorizada entre os primeiro e segundo obstáculos.
  5. Método de acordo com a reivindicação 4, caracterizado pelo fato de que:
    com base em uma tarefa de trabalho especificada, um ou mais dentre o primeiro obstáculo e o segundo obstáculo são categorizados tanto como um obstáculo transiente quanto um obstáculo permanente.
  6. Método de acordo com qualquer uma das reivindicações 1 a 5, caracterizado pelo fato de que compreende adicionalmente:
    predizer uma rota de veículo de trabalho com base em movimento de veículo monitorado (506).
  7. Método de acordo com a reivindicação 6, caracterizado pelo fato de que compreende adicionalmente:
    definir uma área de detecção de obstáculo como um subconjunto da área de trabalho correspondente à rota de veículo de trabalho predita (508).
  8. Método de acordo com a reivindicação 7, caracterizado pelo fato de que compreende adicionalmente:
    limitar dinamicamente a recuperação e processamento de dados a priori com relação a um subconjunto do armazenamento de dados com base na área de detecção de obstáculo definida.
  9. Método de acordo com a reivindicação 6, caracterizado pelo fato de que compreende adicionalmente:
    para rotas de veículo de trabalho preditas e previamente percorridas que faltam um obstáculo permanente categorizado, restringir a determinação subsequente de probabilidades da presença ou ausência detectada do obstáculo apenas a obstáculos transientes.
  10. Método de acordo com qualquer uma das reivindicações 1 a 9, caracterizado pelo fato de que:
    a saída é provida a uma interface de usuário (114) localizada em ou sobre o veículo de trabalho e/ou um dispositivo de computação de usuário.
  11. Método de acordo com a reivindicação 10, caracterizado pelo fato de que compreende adicionalmente:
    realçar um ou mais obstáculos preditos e categorias associadas na interface de usuário com base na saída.
  12. Método de acordo com a reivindicação 11, caracterizado pelo fato de que compreende adicionalmente:
    realçar uma ou mais ferramentas de suporte de usuário ou controles manipuláveis pelo usuário com base na saída.
  13. Método de acordo com qualquer uma das reivindicações 1 a 12, caracterizado pelo fato de que:
    a saída inclui pelo menos um sinal de controle provido a uma unidade de controle de direção de veículo (126), uma unidade de controle de posicionamento de implemento de veículo (128) e/ou uma unidade de controle de acionamento de veículo (130), para regulagem de componentes de veículo de trabalho associados.
  14. Veículo de trabalho autopropulsor (100), tendo um ou mais implementos de trabalho (102), para trabalhar um terreno, e um ou mais sensores de obstáculo (104);
    o veículo de trabalho caracterizado pelo fato de que compreende adicionalmente:
    armazenamento de dados (156) compreendendo um ou mais conjuntos de dados a priori (160) correspondentes a uma área de trabalho (300), e
    um controlador (112) comunicativamente ligado a um ou mais implementos de trabalho, um ou mais sensores de obstáculo, e os armazenamento de dados, e configurado para executar um método como definido em qualquer uma das reivindicações 1 a 13.
  15. Sistema (400) compreendendo uma rede de servidor (402) comunicativamente ligada a uma pluralidade de veículos autopropulsores (100a, 100b, 100c), cada um dos veículos autopropulsores compreendendo pelo menos um implemento de trabalho (102) para trabalhar um terreno e um ou mais sensores de obstáculo (104);
    o sistema caracterizado pelo fato de que compreende adicionalmente armazenamento de dados compreendendo um ou mais conjuntos de dados a priori (160) correspondentes a uma área de trabalho (300); e
    em que o servidor é configurado para executar um método como definido em qualquer uma das reivindicações 1 a 13, com relação a cada um dos veículos autopropulsores localizados na área de trabalho.
BR102020017345-6A 2019-10-28 2020-08-25 Método implementado por computador, veículo de trabalho automotriz, e, sistema compreendendo uma rede de servidor BR102020017345A2 (pt)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/665,340 2019-10-28
US16/665,340 US11320830B2 (en) 2019-10-28 2019-10-28 Probabilistic decision support for obstacle detection and classification in a working area

Publications (1)

Publication Number Publication Date
BR102020017345A2 true BR102020017345A2 (pt) 2021-08-17

Family

ID=75379304

Family Applications (1)

Application Number Title Priority Date Filing Date
BR102020017345-6A BR102020017345A2 (pt) 2019-10-28 2020-08-25 Método implementado por computador, veículo de trabalho automotriz, e, sistema compreendendo uma rede de servidor

Country Status (4)

Country Link
US (1) US11320830B2 (pt)
CN (1) CN112799392A (pt)
BR (1) BR102020017345A2 (pt)
DE (1) DE102020211561A1 (pt)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102508693B1 (ko) * 2017-02-22 2023-03-09 스미토모 겐키 가부시키가이샤 쇼벨
JP7137328B2 (ja) * 2018-03-19 2022-09-14 株式会社小松製作所 作業分析装置および作業分析方法
US10883256B2 (en) * 2018-05-25 2021-01-05 Deere & Company Object responsive control system for a work machine
WO2020091002A1 (ja) * 2018-10-31 2020-05-07 住友建機株式会社 ショベル、ショベル支援システム
MX2022008716A (es) * 2021-07-20 2023-01-23 Polaris Inc Control de vehiculo automatico.
CN113657674B (zh) * 2021-08-18 2024-05-31 杭州华橙软件技术有限公司 任务规划调整方法和装置、存储介质及电子设备
US20240026644A1 (en) * 2022-07-19 2024-01-25 Cnh Industrial America Llc System and method for identifying obstacles encountered by a work vehicle within a work site
US20240246510A1 (en) * 2023-01-20 2024-07-25 Caterpillar Inc. Machine security system

Family Cites Families (206)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7630806B2 (en) 1994-05-23 2009-12-08 Automotive Technologies International, Inc. System and method for detecting and protecting pedestrians
JPH08166448A (ja) 1994-12-13 1996-06-25 Honda Motor Co Ltd 車両用周囲監視装置
JPH1088625A (ja) 1996-09-13 1998-04-07 Komatsu Ltd 自動掘削機、自動掘削方法および自動積み込み方法
JPH10143659A (ja) 1996-11-06 1998-05-29 Komatsu Ltd 物体検出装置
US6292725B1 (en) 1997-04-04 2001-09-18 Komatsu Ltd. Interference preventing device for vehicle
JP3642547B2 (ja) 1997-08-22 2005-04-27 株式会社小松製作所 自走車両の車速制御装置
JPH11296229A (ja) 1998-02-13 1999-10-29 Komatsu Ltd 車両の誘導装置
JPH11353593A (ja) 1998-06-04 1999-12-24 Daihatsu Motor Co Ltd 歩行者検知システム
JP2000090277A (ja) 1998-09-10 2000-03-31 Hitachi Denshi Ltd 基準背景画像更新方法及び侵入物体検出方法並びに侵入物体検出装置
JP4197209B2 (ja) 1999-05-21 2008-12-17 株式会社小松製作所 車両の無人走行システム
DE19961731C2 (de) 1999-12-21 2003-11-06 Eckart Hiss Erfassungssystem
JP2002049403A (ja) 2000-08-07 2002-02-15 Shin Caterpillar Mitsubishi Ltd 建設機械における音声機体制御装置
US6707419B2 (en) 2000-08-16 2004-03-16 Raytheon Company Radar transmitter circuitry and techniques
JP3574780B2 (ja) 2000-08-29 2004-10-06 株式会社日立製作所 車両の安全運転支援システム
DE10144689B4 (de) 2001-09-11 2010-04-08 Volkswagen Ag Verfahren und Einrichtung zur Erfassung von Objekten
US20060061008A1 (en) 2004-09-14 2006-03-23 Lee Karner Mounting assembly for vehicle interior mirror
US10144353B2 (en) 2002-08-21 2018-12-04 Magna Electronics Inc. Multi-camera vision system for a vehicle
KR100531198B1 (ko) 2002-09-09 2005-11-25 권대웅 자동차의 후방상황 및 인체감지용 와닝시스템 인터페이스
GB2400353A (en) 2003-04-09 2004-10-13 Autoliv Dev Pedestrian detecting system provided on a motor vehicle
US20040217851A1 (en) 2003-04-29 2004-11-04 Reinhart James W. Obstacle detection and alerting system
US7263209B2 (en) 2003-06-13 2007-08-28 Sarnoff Corporation Vehicular vision system
US7047132B2 (en) 2004-01-12 2006-05-16 Steven Jacobs Mobile vehicle sensor array
JP4013900B2 (ja) 2004-01-13 2007-11-28 株式会社デンソー 歩行者検出装置
JP4376653B2 (ja) 2004-02-17 2009-12-02 富士重工業株式会社 車外監視装置
US8050863B2 (en) 2006-03-16 2011-11-01 Gray & Company, Inc. Navigation and control system for autonomous vehicles
JP4996928B2 (ja) 2007-01-05 2012-08-08 日立建機株式会社 作業機械の周囲監視装置
JP4847913B2 (ja) 2007-03-30 2011-12-28 日立建機株式会社 作業機械周辺監視装置
US20090088979A1 (en) 2007-09-27 2009-04-02 Roger Dale Koch Automated machine navigation system with obstacle detection
JP2009169776A (ja) 2008-01-18 2009-07-30 Hitachi Ltd 検出装置
US7984574B2 (en) 2008-03-11 2011-07-26 Deere & Company Construction vehicle with rear object detection
US20090259399A1 (en) 2008-04-15 2009-10-15 Caterpillar Inc. Obstacle detection method and system
US8280621B2 (en) 2008-04-15 2012-10-02 Caterpillar Inc. Vehicle collision avoidance system
US8170787B2 (en) 2008-04-15 2012-05-01 Caterpillar Inc. Vehicle collision avoidance system
US8917904B2 (en) 2008-04-24 2014-12-23 GM Global Technology Operations LLC Vehicle clear path detection
US8331195B1 (en) 2008-10-20 2012-12-11 The United States Of America As Represented By The Secretary Of The Army Computer implemented sensor data analysis
US20100100324A1 (en) 2008-10-22 2010-04-22 Toyota Motor Engineering & Manufacturing North America, Inc. Communication based vehicle-pedestrian collision warning system
JP2010112100A (ja) 2008-11-07 2010-05-20 Hitachi Constr Mach Co Ltd 作業機械の監視装置
JP5227841B2 (ja) 2009-02-27 2013-07-03 日立建機株式会社 周囲監視装置
JP4951639B2 (ja) 2009-03-02 2012-06-13 日立建機株式会社 周囲監視装置を備えた作業機械
US8564502B2 (en) 2009-04-02 2013-10-22 GM Global Technology Operations LLC Distortion and perspective correction of vector projection display
US8164543B2 (en) 2009-05-18 2012-04-24 GM Global Technology Operations LLC Night vision on full windshield head-up display
US9036026B2 (en) 2009-06-12 2015-05-19 Magna Electronics Scalable integrated electronic control unit for vehicle
US8633810B2 (en) 2009-11-19 2014-01-21 Robert Bosch Gmbh Rear-view multi-functional camera system
US20110153169A1 (en) 2009-12-18 2011-06-23 Agco Corporation Sensor-Based Implement Motion Interlock System
DE102010007603A1 (de) 2010-02-05 2011-08-11 Kässbohrer Geländefahrzeug AG, 88471 Arbeitsfahrzeug
US8600606B2 (en) 2010-02-11 2013-12-03 GM Global Technology Operations LLC Vehicle safety systems and methods
US9633563B2 (en) 2010-04-19 2017-04-25 Caterpillar Inc. Integrated object detection and warning system
US20120050024A1 (en) 2010-08-25 2012-03-01 Delphi Technologies, Inc. Vehicle camera system
US9113047B2 (en) 2010-10-22 2015-08-18 Hitachi Construction Machinery Co., Ltd. Peripheral monitoring device for working machine
US8744693B2 (en) 2010-11-22 2014-06-03 Caterpillar Inc. Object detection system having adjustable focus
US8751103B2 (en) 2010-11-22 2014-06-10 Caterpillar Inc. Object detection system having interference avoidance strategy
US9001029B2 (en) 2011-02-15 2015-04-07 Basf Se Detector for optically detecting at least one object
US20120249342A1 (en) 2011-03-31 2012-10-04 Koehrsen Craig L Machine display system
US8688332B2 (en) 2011-04-20 2014-04-01 Caterpillar Inc. Management system incorporating performance and detection data
DE102011017707A1 (de) 2011-04-28 2012-10-31 Robert Bosch Gmbh Verfahren und Vorrichtung zur Erkennung von einem Objekt in einer Umgebung einer Kamera
US20120287277A1 (en) 2011-05-13 2012-11-15 Koehrsen Craig L Machine display system
EP2524847B1 (en) 2011-05-20 2017-04-19 Autoliv Development AB Vehicle control arrangement
JP5722127B2 (ja) 2011-06-07 2015-05-20 株式会社小松製作所 作業車両の周辺監視装置
AU2012268476B2 (en) 2011-06-07 2014-05-15 Komatsu Ltd. Perimeter monitoring device for work vehicle
KR20120140545A (ko) 2011-06-21 2012-12-31 현대자동차주식회사 보행자 보호 시스템 및 그 방법
PT2723615T (pt) 2011-06-24 2023-05-24 Surveillance Guard Co Ltd Um sistema de prevenção de acidente e um veículo que inclui o sistema de prevenção de acidente
CA2744561A1 (en) 2011-06-27 2012-12-27 Motion Metrics International Corp. Method and apparatus for generating an indication of an object within an operating ambit of heavy loading equipment
US9030332B2 (en) 2011-06-27 2015-05-12 Motion Metrics International Corp. Method and apparatus for generating an indication of an object within an operating ambit of heavy loading equipment
KR20130021986A (ko) 2011-08-24 2013-03-06 현대모비스 주식회사 환경 적응형 보행자 인식 장치 및 방법
CN103057459B (zh) 2011-10-19 2017-06-13 现代摩比斯株式会社 车用灯具及其控制方法
KR101393343B1 (ko) 2011-10-19 2014-05-09 현대모비스 주식회사 차량용 램프 장치
CN103649426B (zh) 2012-01-27 2016-05-11 斗山英维高株式会社 建筑机械的操作安全性提高装置
JP5667594B2 (ja) 2012-03-15 2015-02-12 株式会社小松製作所 障害物検出機構付きダンプトラックおよびその障害物検出方法
JP2013195086A (ja) 2012-03-15 2013-09-30 Komatsu Ltd 障害物検出機構付きダンプトラック
DE102012102236A1 (de) 2012-03-16 2013-09-19 Pilz Gmbh & Co. Kg Verfahren und Vorrichtung zum Absichern eines gefährlichen Arbeitsbereichs einer automatisiert arbeitenden Maschine
JP6029306B2 (ja) 2012-03-29 2016-11-24 住友建機株式会社 作業機械用周辺監視装置
EP2679450B1 (en) 2012-06-27 2016-07-20 Volvo Car Corporation System for protection of a vulnerable road user and method for operating the system
US9429650B2 (en) * 2012-08-01 2016-08-30 Gm Global Technology Operations Fusion of obstacle detection using radar and camera
JP5456123B1 (ja) 2012-09-20 2014-03-26 株式会社小松製作所 作業車両用周辺監視システム及び作業車両
JP5411976B1 (ja) 2012-09-21 2014-02-12 株式会社小松製作所 作業車両用周辺監視システム及び作業車両
JP5550695B2 (ja) 2012-09-21 2014-07-16 株式会社小松製作所 作業車両用周辺監視システム及び作業車両
JP5324690B1 (ja) 2012-09-21 2013-10-23 株式会社小松製作所 作業車両用周辺監視システム及び作業車両
CN202873034U (zh) 2012-11-04 2013-04-10 黑龙江科技学院 基于行人检测的汽车喇叭音量控制系统
GB2507769A (en) 2012-11-08 2014-05-14 Sentinel Systems Ltd Warning a person to move away from the side of a large vehicle
KR102003562B1 (ko) 2012-12-24 2019-07-24 두산인프라코어 주식회사 건설기계의 감지 장치 및 방법
US20140205139A1 (en) 2013-01-18 2014-07-24 Caterpillar Inc. Object recognition system implementing image data transformation
US9052393B2 (en) 2013-01-18 2015-06-09 Caterpillar Inc. Object recognition system having radar and camera input
US9142063B2 (en) 2013-02-15 2015-09-22 Caterpillar Inc. Positioning system utilizing enhanced perception-based localization
US9153144B2 (en) 2013-08-05 2015-10-06 Ford Global Technologies, Llc Rapid approach detector
US20150070498A1 (en) 2013-09-06 2015-03-12 Caterpillar Inc. Image Display System
KR101489836B1 (ko) 2013-09-13 2015-02-04 자동차부품연구원 보행자 감지 및 충돌 회피 장치 및 방법
JP6284741B2 (ja) 2013-10-24 2018-02-28 日立建機株式会社 後退支援装置
JP6272347B2 (ja) 2013-11-08 2018-01-31 株式会社日立製作所 自律走行車両、及び自律走行システム
US9809219B2 (en) 2014-01-29 2017-11-07 Continental Automotive Systems, Inc. System for accommodating a pedestrian during autonomous vehicle operation
JP6134668B2 (ja) 2014-02-18 2017-05-24 日立建機株式会社 作業車両の障害物検知装置
JP6301702B2 (ja) * 2014-03-27 2018-03-28 株式会社クボタ 作業車協調システム
JPWO2015147149A1 (ja) 2014-03-28 2017-04-13 ヤンマー株式会社 自律走行作業車両
JP6178280B2 (ja) 2014-04-24 2017-08-09 日立建機株式会社 作業機械の周囲監視装置
JP6262068B2 (ja) 2014-04-25 2018-01-17 日立建機株式会社 車体近傍障害物報知システム
CN105339061B (zh) 2014-04-25 2017-05-10 株式会社小松制作所 周边监视系统、作业车辆以及周边监视方法
WO2015162801A1 (ja) 2014-04-25 2015-10-29 株式会社小松製作所 周辺監視システム、作業車両、及び周辺監視方法
KR101566963B1 (ko) 2014-05-27 2015-11-06 주식회사 피엘케이 테크놀로지 작업 차량 상태를 고려하여 개체를 인식할 수 있는 어라운드 뷰 모니터링 방법, 이를 수행하는 어라운드 뷰 모니터링 장치 및 이를 저장하는 기록매체
KR102178433B1 (ko) 2014-05-30 2020-11-16 주식회사 만도 긴급 제동 시스템 및 그의 보행자 인식 방법
JP6386794B2 (ja) 2014-06-04 2018-09-05 日立建機株式会社 運搬車両
JP6378958B2 (ja) 2014-07-17 2018-08-22 日立建機株式会社 鉱山用ダンプトラック
JP6204884B2 (ja) 2014-07-25 2017-09-27 日立建機株式会社 旋回式作業機の周囲表示装置
US10444346B2 (en) 2014-07-25 2019-10-15 Robert Bosch Gmbh Method for migrating radar sensor limitations with video camera input for active braking for pedestrians
CN105722570B (zh) 2014-07-30 2017-10-20 株式会社小松制作所 搬运车辆、自卸车及搬运车辆的控制方法
JP5844475B1 (ja) 2014-07-30 2016-01-20 株式会社小松製作所 運搬車両及び運搬車両の制御方法
DE102014012825A1 (de) 2014-08-28 2016-03-03 Wirtgen Gmbh Selbstfahrende Baumaschine und Verfahren zur Steuerung einer selbstfahrenden Baumaschine
US10049574B2 (en) 2014-09-01 2018-08-14 Komatsu Ltd. Transporter vehicle, dump truck, and transporter vehicle control method
US9550493B2 (en) 2014-09-01 2017-01-24 Komatsu Ltd. Transporter vehicle and transporter vehicle control method
JP6393123B2 (ja) 2014-09-04 2018-09-19 日立建機株式会社 障害物検出システム及び運搬車両
JP6280850B2 (ja) 2014-09-29 2018-02-14 日立建機株式会社 障害物回避システム
US9834141B2 (en) 2014-10-28 2017-12-05 Nissan North America, Inc. Vehicle object detection system
US20160137125A1 (en) 2014-11-17 2016-05-19 Caterpillar Inc. Imaging system using virtual projection geometry
WO2016092650A1 (ja) * 2014-12-10 2016-06-16 三菱電機株式会社 画像処理装置及び車載表示システム及び表示装置及び画像処理方法及び画像処理プログラム
US9598843B2 (en) 2014-12-16 2017-03-21 Caterpillar Inc. Real-time route terrain validity checker
US9457718B2 (en) 2014-12-19 2016-10-04 Caterpillar Inc. Obstacle detection system
JP6352797B2 (ja) 2014-12-19 2018-07-04 日立建機株式会社 作業機械の周囲監視装置
CA2898288C (en) 2014-12-26 2017-12-05 Komatsu Ltd. Mining machine, management system of mining machine, and management method of mining machine
CN204346505U (zh) 2015-01-26 2015-05-20 广东交通职业技术学院 一种车身环境监控系统
KR20160091585A (ko) 2015-01-26 2016-08-03 엘지이노텍 주식회사 차량용 보행자 인지 표시 장치
CN104655186B (zh) 2015-01-26 2017-12-08 广东交通职业技术学院 车身环境监控系统
JP2018054290A (ja) 2015-01-29 2018-04-05 日立建機株式会社 運搬用車両の障害物検出装置
JP6456173B2 (ja) 2015-02-04 2019-01-23 日立建機株式会社 車体外部移動物体検知装置
KR102338554B1 (ko) 2015-03-16 2021-12-15 주식회사 만도모빌리티솔루션즈 자동 긴급 제동장치 및 그 제어방법
KR101684095B1 (ko) 2015-04-09 2016-12-07 현대자동차주식회사 보행자 거리 추정장치 및 방법
EP3086196B1 (en) 2015-04-21 2017-04-05 Hexagon Technology Center GmbH Method and control system for surveying and mapping a terrain while operating a bulldozer
JP2016203836A (ja) 2015-04-24 2016-12-08 日立建機株式会社 車両及び鉱山用運搬車両の運用システム
CN111762136A (zh) 2015-05-12 2020-10-13 深圳市大疆创新科技有限公司 识别或检测障碍物的设备和方法
CN108027887A (zh) 2015-05-15 2018-05-11 空气融合有限公司 用于实时自动化多传感器数据融合和分析的决策支持的便携式设备和方法
JP2017030688A (ja) 2015-08-06 2017-02-09 日立建機株式会社 作業機械の周囲監視装置
US9604639B2 (en) 2015-08-28 2017-03-28 Delphi Technologies, Inc. Pedestrian-intent-detection for automated vehicles
WO2017047688A1 (ja) 2015-09-17 2017-03-23 株式会社日立国際電気 落下物検知追跡システム
JP2017074870A (ja) 2015-10-15 2017-04-20 日立建機株式会社 車両周囲障害物検出装置
JP2017074871A (ja) 2015-10-15 2017-04-20 日立建機株式会社 車両周囲障害物検出装置
JP6401141B2 (ja) 2015-10-15 2018-10-03 日立建機株式会社 車両周囲障害物検出装置
US20170113608A1 (en) 2015-10-27 2017-04-27 Caterpillar Inc. System and method for operating a machine
JP6662604B2 (ja) 2015-10-28 2020-03-11 住友建機株式会社 ショベル
US10935660B2 (en) 2015-10-30 2021-03-02 Komatsu Ltd. Control system of work machine, work machine, management system of work machine, and method of managing work machine
KR102258475B1 (ko) 2015-11-03 2021-06-01 현대자동차주식회사 보행자 시선을 고려한 차량의 자동긴급제동 시스템 및 방법
US20170146990A1 (en) 2015-11-19 2017-05-25 Caterpillar Inc. Augmented communication and positioning using unmanned aerial vehicles
JP6473685B2 (ja) 2015-11-19 2019-02-20 日立建機株式会社 車両制御装置及び作業機械
US10344450B2 (en) 2015-12-01 2019-07-09 The Charles Machine Works, Inc. Object detection system and method
TWI570674B (zh) 2015-12-17 2017-02-11 合盈光電科技股份有限公司 交通運輸工具之影像偵測系統
JP6580982B2 (ja) 2015-12-25 2019-09-25 日立建機株式会社 オフロードダンプトラック及び障害物判別装置
AU2015418445B2 (en) 2015-12-25 2019-08-15 Komatsu Ltd. Control system for work machine, work machine, management system for work machine, and management method for work machine
DE102016100064B4 (de) 2016-01-04 2017-11-23 Volkswagen Aktiengesellschaft Adative Anzeige in B-Säule
AU2016204168B2 (en) 2016-02-01 2017-11-09 Komatsu Ltd. Work machine control system, work machine, and work machine management system
JP6087475B2 (ja) 2016-02-29 2017-03-01 株式会社小松製作所 作業機械の制御システム、作業機械、及び作業機械の管理システム
CA3010702A1 (en) 2016-02-29 2017-09-08 Komatsu Ltd. Work machine management system and work machine
JP6407183B2 (ja) 2016-03-11 2018-10-17 日立建機株式会社 障害物検知装置、作業機械、及び外界認識センサの検出軸調整方法
CN108027423B (zh) 2016-03-14 2022-01-04 日立建机株式会社 矿山用作业机械
US10486592B2 (en) 2016-03-21 2019-11-26 David Earl Irby, SR. Pedestrian detection system
JP6585532B2 (ja) 2016-03-24 2019-10-02 株式会社日立建機ティエラ 小型の油圧ショベル
US9535423B1 (en) 2016-03-29 2017-01-03 Adasworks Kft. Autonomous vehicle with improved visual detection ability
KR20170119059A (ko) 2016-04-18 2017-10-26 현대자동차주식회사 Aeb 센서융합 시스템
US9760806B1 (en) 2016-05-11 2017-09-12 TCL Research America Inc. Method and system for vision-centric deep-learning-based road situation analysis
US9925979B2 (en) 2016-06-06 2018-03-27 Robert Bosch Gmbh Autonomous braking failure management in pedestrian protection
US10768298B2 (en) 2016-06-14 2020-09-08 Magna Electronics Inc. Vehicle sensing system with 360 degree near range sensing
US10037033B2 (en) 2016-06-15 2018-07-31 Ford Global Technologies, Llc Vehicle exterior surface object detection
US11454719B2 (en) 2016-07-08 2022-09-27 Magna Electronics Inc. 2D MIMO radar system for vehicle
US10150414B2 (en) 2016-07-08 2018-12-11 Ford Global Technologies, Llc Pedestrian detection when a vehicle is reversing
US10239446B2 (en) 2016-07-13 2019-03-26 Magna Electronics Inc. Vehicle sensing system using daisy chain of sensors
JP6794449B2 (ja) 2016-08-05 2020-12-02 株式会社小松製作所 管理システム
DE102016215102A1 (de) 2016-08-12 2017-12-07 Conti Temic Microelectronic Gmbh Fußgängererkennung mittels Radar
US10641867B2 (en) 2016-08-15 2020-05-05 Magna Electronics Inc. Vehicle radar system with shaped radar antennas
US10852418B2 (en) 2016-08-24 2020-12-01 Magna Electronics Inc. Vehicle sensor with integrated radar and image sensors
WO2018042567A1 (ja) 2016-08-31 2018-03-08 日立建機株式会社 周辺監視システム及び周辺監視装置
US10699435B2 (en) 2016-08-31 2020-06-30 Topcon Positioning Systems, Inc. Apparatus and method for providing vehicular positioning
JP6718341B2 (ja) 2016-09-13 2020-07-08 日立建機株式会社 鉱山用作業機械及びその後方監視方法
US10202115B2 (en) 2016-09-13 2019-02-12 Here Global B.V. Method and apparatus for triggering vehicle sensors based on human accessory detection
ES2663655B1 (es) 2016-09-14 2018-09-24 Universidad De Huelva Sistema y dispositivo autónomo de detección y señalización vial
US10151830B2 (en) 2016-09-14 2018-12-11 Caterpillar Inc. Systems and methods for detecting objects proximate to a machine utilizing a learned process
JP6599835B2 (ja) 2016-09-23 2019-10-30 日立建機株式会社 鉱山用作業機械、障害物判別装置、及び障害物判別方法
KR20180041525A (ko) 2016-10-14 2018-04-24 주식회사 만도 차량의 물체 트래킹 시스템 및 그 제어 방법
DE102016012342A1 (de) 2016-10-14 2017-04-27 Daimler Ag Vorrichtung zur Erfassung der Umgebung eines Fahrzeugs
KR101967305B1 (ko) 2016-10-14 2019-05-15 주식회사 만도 차량의 보행자 인식 방법 및 차량의 보행자 인식 시스템
US20180105107A1 (en) 2016-10-19 2018-04-19 Novateur Research Solutions LLC Pedestrian collision warning system for vehicles
IT201600108172A1 (it) 2016-10-26 2018-04-26 Casagrande Spa Dispositivo e metodo di monitoraggio di un'area operativa
US10196058B2 (en) 2016-11-28 2019-02-05 drive.ai Inc. Method for influencing entities at a roadway intersection
KR101996419B1 (ko) 2016-12-30 2019-07-04 현대자동차주식회사 센서 융합 기반 보행자 탐지 및 보행자 충돌 방지 장치 및 방법
KR101996418B1 (ko) 2016-12-30 2019-07-04 현대자동차주식회사 센서 융합 기반 보행자 탐지 및 보행자 충돌 방지 장치 및 방법
EP3571562A4 (en) 2017-01-23 2020-12-02 Built Robotics Inc. EXCAVATION OF SOIL FROM AN EXCAVATION SITE USING AN EXCAVATION VEHICLE
KR102646644B1 (ko) 2017-03-01 2024-03-13 모빌아이 비젼 테크놀로지스 엘티디. 감지 불확실성이 있는 항법을 위한 시스템 및 방법
CN206657493U (zh) 2017-03-16 2017-11-21 李晔 一种行人车辆安全提示器用的检测电路
US10282999B2 (en) 2017-03-17 2019-05-07 GM Global Technology Operations LLC Road construction detection systems and methods
WO2018172849A1 (en) 2017-03-20 2018-09-27 Mobileye Vision Technologies Ltd. Trajectory selection for an autonomous vehicle
US20180273030A1 (en) 2017-03-27 2018-09-27 Kevin Michael Weldon Autonomous Vehicle having Pedestrian Protection Subsystem
JP6862257B6 (ja) 2017-04-14 2021-06-23 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 自動運転車両、自動運転車両の停車方法及びプログラム
US10108867B1 (en) 2017-04-25 2018-10-23 Uber Technologies, Inc. Image-based pedestrian detection
EP3631503A4 (en) 2017-05-23 2021-03-17 D.R Roads A.I. Ltd. TRAFFIC MONITORING AND MANAGEMENT SYSTEMS AND PROCEDURES
CN107244324B (zh) 2017-06-06 2020-04-17 龙岩学院 一种智能矿用猴车及其控制系统和控制方法
US10262528B2 (en) 2017-07-21 2019-04-16 State Farm Mutual Automobile Insurance Company Autonomous vehicle mode alert system for bystanders
EP3655290A4 (en) 2017-08-10 2020-08-26 Gentex Corporation AFFORDABLE CAMERA
US20200294401A1 (en) 2017-09-04 2020-09-17 Nng Software Developing And Commercial Llc. A Method and Apparatus for Collecting and Using Sensor Data from a Vehicle
US11150342B2 (en) 2017-09-07 2021-10-19 Magna Electronics Inc. Vehicle radar sensing system with surface segmentation using interferometric statistical analysis
US10877148B2 (en) 2017-09-07 2020-12-29 Magna Electronics Inc. Vehicle radar sensing system with enhanced angle resolution using synthesized aperture
US10962638B2 (en) 2017-09-07 2021-03-30 Magna Electronics Inc. Vehicle radar sensing system with surface modeling
US10489665B2 (en) 2017-09-07 2019-11-26 GM Global Technology Operations LLC Systems and methods for determining the presence of traffic control personnel and traffic control signage
US10962641B2 (en) 2017-09-07 2021-03-30 Magna Electronics Inc. Vehicle radar sensing system with enhanced accuracy using interferometry techniques
DE102017216000A1 (de) 2017-09-11 2019-03-14 Conti Temic Microelectronic Gmbh Gestensteuerung zur Kommunikation mit einem autonomen Fahrzeug auf Basis einer einfachen 2D Kamera
US10459443B2 (en) 2017-09-22 2019-10-29 Erik Jertberg Semi-autonomous farm transport vehicle for picked produce
GB2567142A (en) 2017-09-26 2019-04-10 Cambridge Consultants Delivery system
US20180074506A1 (en) 2017-11-21 2018-03-15 GM Global Technology Operations LLC Systems and methods for mapping roadway-interfering objects in autonomous vehicles
US10147320B1 (en) 2017-12-27 2018-12-04 Christ G. Ellis Self-driving vehicles safety system
DE102018003788A1 (de) 2018-05-09 2018-11-29 Daimler Ag Verfahren zum Identifizieren einer Person mittels eines Kraftfahrzeugs
US10205457B1 (en) 2018-06-01 2019-02-12 Yekutiel Josefsberg RADAR target detection system for autonomous vehicles with ultra lowphase noise frequency synthesizer
CN208460034U (zh) 2018-07-17 2019-02-01 江西精骏电控技术有限公司 一种全方位行人检测系统
JP7564609B2 (ja) * 2018-09-11 2024-10-09 株式会社小松製作所 端末装置、作業車両システム、情報処理方法、およびサーバ装置

Also Published As

Publication number Publication date
US20210124364A1 (en) 2021-04-29
DE102020211561A1 (de) 2021-04-29
US11320830B2 (en) 2022-05-03
CN112799392A (zh) 2021-05-14

Similar Documents

Publication Publication Date Title
BR102020017345A2 (pt) Método implementado por computador, veículo de trabalho automotriz, e, sistema compreendendo uma rede de servidor
JP7506876B2 (ja) 自律車両における運動挙動推定および動的挙動推定のための技術
CN111656412B (zh) 用于判定作业车辆所进行的作业的系统、方法以及已学习模型的制造方法
US20170168485A1 (en) System and Method for Controlling Autonomous Vehicles
KR102590855B1 (ko) 작업 기계를 포함하는 시스템, 작업 기계를 포함하는 시스템이 컴퓨터에 의해 실행되는 방법, 작업 기계를 포함하는 시스템에 사용되는 학습된 위치 추정 모델의 생성 방법
JP2020514158A (ja) 自車両の制御方法及び自車両の制御システム
US10163033B2 (en) Vehicle classification and vehicle pose estimation
BR102019015019A2 (pt) Máquina de trabalho móvel, e, método para controlar uma máquina móvel
US11713059B2 (en) Autonomous control of heavy equipment and vehicles using task hierarchies
JP7177608B2 (ja) 作業機械を含むシステム、コンピュータによって実行される方法、学習済みの位置推定モデルの製造方法、および学習用データ
JP7376264B2 (ja) 作業機械を含むシステム、および作業機械
JP5776332B2 (ja) 地図処理方法及びプログラム、並びにロボットシステム
US20150004574A1 (en) Prioritizing Method of Operator Coaching On Industrial Machines
JP7419348B2 (ja) 作業機械を含むシステム、コンピュータによって実行される方法、および学習済みの姿勢推定モデルの製造方法
JP6926172B2 (ja) 目標掘削点を選択するための方法と装置
JP7310408B2 (ja) 建設機械の作業情報生成システム
BR102020018359A2 (pt) Máquina de trabalho, e, métodos para identificar uma condição instável de uma máquina de trabalho e para avisar instabilidade em uma máquina de trabalho
US20220307226A1 (en) Method for producing trained work type estimation model, training data, computer-implemented method, and system comprising work machine
US11879231B2 (en) System and method of selective automation of loading operation stages for self-propelled work vehicles
WO2021182284A1 (ja) 作業システム、コンピュータによって実行される方法、学習済みの姿勢推定モデルの製造方法、および学習用データ
EP4102328A1 (en) Work machine
EP3757299A1 (en) Apparatus for generating environment data around construction equipment and construction equipment including the same
BR102022007373A2 (pt) Método de gerenciamento de implemento
US20240185719A1 (en) Systems and methods for detecting false positives in collision notifications
WO2022230880A1 (ja) 制御方法、制御システム、及び制御装置

Legal Events

Date Code Title Description
B03A Publication of a patent application or of a certificate of addition of invention [chapter 3.1 patent gazette]