KR20200027011A - 가속화된 수학 엔진 - Google Patents

가속화된 수학 엔진 Download PDF

Info

Publication number
KR20200027011A
KR20200027011A KR1020207004841A KR20207004841A KR20200027011A KR 20200027011 A KR20200027011 A KR 20200027011A KR 1020207004841 A KR1020207004841 A KR 1020207004841A KR 20207004841 A KR20207004841 A KR 20207004841A KR 20200027011 A KR20200027011 A KR 20200027011A
Authority
KR
South Korea
Prior art keywords
matrix
data
operand
input
weight
Prior art date
Application number
KR1020207004841A
Other languages
English (en)
Other versions
KR102353241B1 (ko
Inventor
피터 조셉 배넌
케빈 알테어 허드
에밀 탤프스
Original Assignee
테슬라, 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 테슬라, 인크. filed Critical 테슬라, 인크.
Priority to KR1020227000842A priority Critical patent/KR102452757B1/ko
Publication of KR20200027011A publication Critical patent/KR20200027011A/ko
Application granted granted Critical
Publication of KR102353241B1 publication Critical patent/KR102353241B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F7/00—Methods or arrangements for processing data by operating upon the order or content of the data handled
    • G06F7/38—Methods or arrangements for performing computations using exclusively denominational number representation, e.g. using binary, ternary, decimal representation
    • G06F7/48—Methods or arrangements for performing computations using exclusively denominational number representation, e.g. using binary, ternary, decimal representation using non-contact-making devices, e.g. tube, solid state device; using unspecified devices
    • G06F7/57—Arithmetic logic units [ALU], i.e. arrangements or devices for performing two or more of the operations covered by groups G06F7/483 – G06F7/556 or for performing logical operations
    • G06F7/575—Basic arithmetic logic units, i.e. devices selectable to perform either addition, subtraction or one of several logical operations, using, at least partially, the same circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/76—Architectures of general purpose stored program computers
    • G06F15/80—Architectures of general purpose stored program computers comprising an array of processing units with common control, e.g. single instruction multiple data processors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10—Complex mathematical operations
    • G06F17/16—Matrix or vector computation, e.g. matrix-matrix or matrix-vector multiplication, matrix factorization
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F7/00—Methods or arrangements for processing data by operating upon the order or content of the data handled
    • G06F7/38—Methods or arrangements for performing computations using exclusively denominational number representation, e.g. using binary, ternary, decimal representation
    • G06F7/48—Methods or arrangements for performing computations using exclusively denominational number representation, e.g. using binary, ternary, decimal representation using non-contact-making devices, e.g. tube, solid state device; using unspecified devices
    • G06F7/50—Adding; Subtracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F7/00—Methods or arrangements for processing data by operating upon the order or content of the data handled
    • G06F7/38—Methods or arrangements for performing computations using exclusively denominational number representation, e.g. using binary, ternary, decimal representation
    • G06F7/48—Methods or arrangements for performing computations using exclusively denominational number representation, e.g. using binary, ternary, decimal representation using non-contact-making devices, e.g. tube, solid state device; using unspecified devices
    • G06F7/52—Multiplying; Dividing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F7/00—Methods or arrangements for processing data by operating upon the order or content of the data handled
    • G06F7/38—Methods or arrangements for performing computations using exclusively denominational number representation, e.g. using binary, ternary, decimal representation
    • G06F7/48—Methods or arrangements for performing computations using exclusively denominational number representation, e.g. using binary, ternary, decimal representation using non-contact-making devices, e.g. tube, solid state device; using unspecified devices
    • G06F7/544—Methods or arrangements for performing computations using exclusively denominational number representation, e.g. using binary, ternary, decimal representation using non-contact-making devices, e.g. tube, solid state device; using unspecified devices for evaluating functions by calculation
    • G06F7/5443—Sum of products
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G06N3/0454—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/06—Physical realisation, i.e. hardware implementation of neural networks, neurons or parts of neurons
    • G06N3/063—Physical realisation, i.e. hardware implementation of neural networks, neurons or parts of neurons using electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/20—Processor architectures; Processor configuration, e.g. pipelining

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Data Mining & Analysis (AREA)
  • Software Systems (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computational Linguistics (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computer Hardware Design (AREA)
  • Algebra (AREA)
  • Neurology (AREA)
  • Databases & Information Systems (AREA)
  • Image Processing (AREA)
  • Complex Calculations (AREA)
  • Image Analysis (AREA)

Abstract

본 개시의 다양한 실시 예는 가속화된 수학 엔진에 관한 것이다. 특정 실시 예에서, 가속화된 수학 엔진은 ALU, 출력 레지스터 및 섀도우 레지스터를 포함하는 서브 회로를 포함하는 2 차원 매트릭스 프로세서를 사용함으로써 이미지의 컨볼루션이 가속되도록 이미지 프로세싱에 적용된다. 이 아키텍처는 이미지 데이터와 가중치를 동기화된 방식(synchronized manner)으로 곱하여 많은 수의 수학 연산을 병렬로 수행하는 클럭화된(clocked) 2 차원 아키텍처를 지원합니다.

Description

가속화된 수학 엔진
본 출원은 2017 년 7 월 24 일에 "가속화된 수학 엔진"이라는 명칭으로 하고, 피터 조셉 배넌(Peter Joseph Bannon), 케빈 알테어 허드(Kevin Altair Hurd) 및 에밀 탤프스(Emil Talpes)를 발명자로 등재하여 출원된 미국 특허 가출원 제62/536, 399(20150-2154P(P0822-1PUS))호에 대한 우선권을 주장한다. 상술한 특허 문헌은 참조로 여기에 포함된다.
본 출원서는 또한, 2017 년 9 월 20 일에 "가속화된 수학 엔진"이라는 명칭으로 하고, 피터 조셉 배넌, 케빈 알테어 허드 및 에밀 탤프스를 발명자로 등재하여 출원된 미국 특허출원 제15/710, 433(20150-2154(N0822-1NUS))호에 대한 우선권을 주장한다. 상술한 각 특허 문헌은 참조로 여기에 포함된다.
본 발명은 많은 양의 데이터를 처리하기 위한 가속화된 수학 엔진(accelerated mathematical engine)에 관한 것으로, 보다 구체적으로는 매트릭스 곱셈 연산(matrix multiply operation)에 기초하여 복잡한 컨볼루션 연산(complex convolution operation)을 수행하기 위한 가속화된 수학 엔진에 관한 것이다.
당업자는 시간에 민감하고 복잡한 수학 연산을 구현하는데 사용되는 일반 프로세서 및 시스템에 대한 속도 및 성능에 대한 요구가 계속 증가하고 있음을 인식할 것이다. 이러한 일반 시스템은 많은 양의 데이터를 처리하고 복잡한 수학 연산을 수행하는 데 사용되므로 계산 리소스 및 계산 속도는 해당 계산을 수행하는 기존의 일반 하드웨어 설계 기능에 의해 제한된다. 예를 들어, 매트릭스 연산을 실행하는 범용 컴퓨팅 장치(general-purpose computing device) 및 프로세서는 특정 상황에서 적시에 이러한 연산을 수행하지 못할 수 있다. 디지털 신호 처리 연산을 수행하는 많은 기존의 곱셈기는 일련의 소프트웨어 및 하드웨어 매트릭스 조작(hardware matrix manipulation) 단계(주소 생성, 전치(transposition), 비트 단위 추가 및 시프트 등)에 의존하며 시간에 민감한 시스템 내에서 병목 현상을 나타낼 수 있다. 종종, 이러한 조작 단계는 연산을 완료하기 위해 다양한 위치로부터 중간 결과(intermediate result)를 저장 및 페치(fetch)하는 추가 단계로 인해 컴퓨팅 시간을 낭비하는 비용으로 중간 결과를 생성하기 위해 프로세서의 산술 함수(arithmetic function)를 사용해야 한다.
도 1은 종래의 곱셈기 시스템의 예를 도시한다. 곱셈기 시스템(100)은 계산 유닛(computation unit)(102), 레지스터(register)(104), 캐시(cache)(106)및 메모리(108)를 포함하는 스칼라 머신(scalar machine)이다. 연산에서, 계산 유닛(102)은 레지스터(104)및 캐시(106)를 사용하여 메모리(108)에 저장된 데이터를 검색한다. 전형적으로, 계산 유닛(102)은 예를 들어, 곱셈을 가산으로 변환하고 결과를 일부 내부 레지스터로 출력함으로써, 결과 매트릭스(resultant matrix)를 얻기 위해 입력 매트릭스에 대한 매트릭스 곱셈()을 포함하는 다양한 계산 프로시저(computational procedure)를 수행할 수 있는 CPU 또는 GPU와 같은 마이크로 프로세서(microprocessor)이다.
예를 들어, 이미지의 출력 픽셀을 나타내는 내적(dot product)은 전형적으로 2개의 매트릭스로부터 개별 매트릭스 엘리먼트를 도트 곱셈(dot-multiply)하여 부분 결과를 얻은 다음 최종 내적을 얻기 위해 추가됨으로써 생성된다. 개별 매트릭스 엘리먼트의 곱셈, 즉 스칼라 곱셈은 전형적으로 도트 곱셈을 일련의 개별 서브 연산(sub-operation)으로 나누어 개별 데이터 요소에 대해 수행된다. 결과적으로, 단일 산술 연산을 완료하기 위해 하나 이상의 레지스터(104), 캐시(106) 및 메모리(108)로부터 부분적(partial product)이 저장되고 페치되어야 한다.
컨벌루션(convolution)과 같은 계산이 요구되는 애플리케이션은 종종 소프트웨어 함수가 계산 유닛(102)에 내장되어 컨벌루션 연산을 대체 매트릭스 곱 연산(alternate matrix-multiply operation)으로 변환하는데 사용된다. 이는 데이터를 두 개의 매트릭스로 재배열하고 재포맷하여 원시 매트릭스 곱셈(raw matrix-multiply)이 가능하다. 그러나, 스칼라 머신(100)에서 데이터를 효율적으로 공유 또는 재사용하는 메커니즘이 없으므로, 각각의 스칼라 연산을 실행하기 위해 필요한 데이터가 레지스터로부터 여러번 재저장(re-store)되고 재페치(re-fetch)되어야 한다. 컨볼루션 연산의 대상이 되는 이미지 데이터의 양이 증가함에 따라 이러한 연산의 복잡성(complexity)과 관리 오버 헤드(managerial overhead)가 크게 증가한다.
산술 연산을 완료하기 위해 레지스터(104), 캐시(106) 및 메모리(108)로부터 중간 결과를 저장하고 페치하는 추가적이고 비효율적인 단계와 결합된 스칼라 머신(100)에서 많은 데이터를 재사용할 수 없다는 것은 곱셈기 시스템(100)과 같은 기존 시스템의 단점(shortcoming) 중 일부일 뿐이다.
따라서, 매트릭스 수학 연산(matrix mathematical operation)을 빠르고 효율적으로 수행할 수 있는 높은 계산 처리 시스템(high-computational-throughput system) 및 방법이 필요하다.
본 명세서의 실시 예가 주로 컨벌루션(convolution)과 관련하여 논의되지만, 당업자는 디컨벌볼루션(deconvolution) 및 다른 매트릭스 연산이 또한 매트릭스-매트릭스 타입 곱셈 연산(matrix-matrix type multiply operation)으로 구성될 수 있으며, 따라서 본 발명의 원리를 디컨벌루션에서도 동일하게 적용될 수 있다. 또한, 다른 타입의 수학 연산(mathematical operation)이 본 개시의 다양한 실시 예에 따라 구현될 수 있다.
본 발명의 실시 예를 참조할 것이며, 그 예는 첨부 도면에 도시될 수 있다. 이들 도면은 제한적인 것이 아니라 예시적인 것으로 의도된다. 본 발명은 이들 실시 예와 관련하여 일반적으로 설명되지만, 본 발명의 범위를 이들 특정 실시 예로 제한하려는 것이 아님을 이해해야 한다. 도면의 아이템(item)은 스케일(scale)이 아닐 수 있다.
도 1은 종래의 곱셈기 시스템의 예를 도시한다.
도 2는 본 개시의 다양한 실시 예에 따른 산술 연산을 수행하기 위한 매트릭스 프로세서 아키텍처를 도시하고 예시한다.
도 3은 도 2에 도시된 매트릭스 프로세서 아키텍처의 예시적인 구성의 세부 사항을 도시한다.
도 4는 도 3에 도시된 논리 회로의 예시적인 곱셈 및 가산 회로 구현을 도시한다.
도 5는 본 개시의 다양한 실시 예에 따른 예시적인 컨볼루션 연산을 도시한다.
도 6 내지 도 8은 본 개시의 다양한 실시 예에 따른 예시적인 컨볼루션 연산의 세부 사항을 도시한다.
도 9는 본 개시의 다양한 실시 예에 따른 예시적인 디컨볼루션 연산을 도시한다.
도 10은 본 개시의 다양한 실시 예에 따른, 컨볼루션 신경망을 더 빨리 만들기 위해 산술 연산을 수행하는 프로세스를 도시한다.
다음의 설명에서, 설명의 목적으로, 본 발명의 이해를 제공하기 위해 특정 세부 사항이 설명된다. 그러나, 본 발명이 이러한 세부 사항없이 실시될 수 있다는 것이 당업자에게 명백할 것이다. 또한, 당업자는 후술하는 본 발명의 실시 예가 컴퓨터 판독 가능한 매체 유형의 프로세스, 장치, 시스템, 장치 또는 방법과 같은 다양한 방식으로 구현될 수 있음을 인식할 것이다.
도면에 도시된 컴포넌트(Component) 또는 모듈은 본 발명의 예시적인 실시 예를 설명하고 본 발명을 모호하게 하지 않도록 하기 위한 것이다. 또한, 본 논의 전반에 걸쳐, 컴포넌트는 서브 유닛(sub-unit)을 포함할 수 있는 별도의 기능 유닛(functional unit)으로서 설명될 수 있지만, 당업자는 다양한 컴포넌트 또는 그 일부가 단일 시스템 또는 컴포넌트 내에 통합되는 것을 포함하여 개별 컴포넌트로 분할되거나 함께 통합될 수 있음을 인식할 것이다. 본 명세서에서 논의된 함수(function) 또는 연산(operation)은 컴포넌트로서 구현될 수 있음에 유의해야 한다. 컴포넌트는 소프트웨어, 하드웨어 또는 이들의 조합으로 구현될 수 있다. 많은 컴포넌트는 많은 서브 컴포넌트(subcomponent)의 상호 접속(interconnection)을 통해 형성된다. 본 명세서에 도시된 것과 동작상 논리적으로 상이한 서브 컴포넌트가 선택될 수 있으며, 여기서 이들 논리적으로 상이한 서브 컴포넌트는 다른 서브 컴포넌트와 집합적으로 결합될 수 있으며, 여기에 기술된 것과 유사하거나 동일한 기능을 집계된 컴포넌트 레벨에서 제공한다(예를 들어, 액티브 하이 신호(active high signal)는 액티브 로우(active low)가 될 수 있으며, AND 게이트(AND gate)는 반전 입력 NOR 게이트(inverted-input NOR gate) 등으로 대체 될 수 있음).
또한, 도면 내의 컴포넌트 또는 시스템 사이의 접속(connection)은 직접 접속(direct connection)으로 제한되지 않는다. 오히려, 이들 컴포넌트들 사이의 데이터는 중간 컴포넌트에 의해 수정(modify), 재포맷(re-format) 또는 달리 변경될 수 있다. 또한 추가 또는 더 적은 연결이 사용될 수 있다. "연결된(coupled)", "접속된(connected)" 또는 "통신적으로 연결된(communicatively coupled)"이라는 용어는 직접 접속(direct connection), 하나 이상의 중개 장치를 통한 간접 접속(indirect connection) 및 무선 접속(wireless connection)을 포함하는 것으로 이해되어야 한다.
본 명세서에서 "일 실시 예", "바람직한 실시 예", "실시 예" 또는 "실시 예들"에 대한 언급은 실시 예와 관련하여 설명된 특정 특징(particular feature), 구조, 특성 또는 함수는 본 발명의 적어도 하나의 실시 예에 포함되며, 하나 이상의 실시 예에 있을 수 있다. 또한, 본 명세서의 여러 곳에서 언급된 문구의 출현이 반드시 모두 동일한 실시 예 또는 실시 예를 참조하는 것은 아니다.
본 명세서의 여러 곳에서 특정 용어의 사용은 예시를 위한 것이며 제한하는 것으로 해석되어서는 안된다. 서비스, 함수 또는 자원은 단일 서비스, 함수 또는 자원으로 제한되지 않는다. 이러한 용어의 사용은 배포(distribute) 또는 집계(aggregate)될 수 있는 관련 서비스, 함수 또는 자원의 그룹을 의미할 수 있다.
"포함하는(include)", "포함하는(including)", "포함하는(comprise)"및 "포함하는(comprising)"이라는 용어는 공개 용어(open term)로 이해되어야 하며, 다음에 나오는 모든 목록(list)은 예시이며 나열된 아이템(listed item)에 제한되지 않고, 추가 아이템(additional item)과 함께 아이템(item)의 서브세트(subset) 또는 슈퍼세트(superset)를 포함할 수 있다. 본 명세서에서 사용된 임의의 제목은 단지 조직적 목적을 위한 것이며, 설명 또는 청구 범위를 제한하기 위해 사용되지 않아야 한다. 본 특허 문헌에 언급된 각각의 문헌은 그 전문이 본원에 참조로 포함된다.
또한, 당업자는 (1)선택적인 단계들이 선택적으로 수행될 수 있음; (2)단계는 여기에 명시된 특정 순서로 제한되지 않을 수 있음; (3)특정 단계는 다른 순서로 수행될 수 있음; 및 (4)특정 단계가 동시에 수행될 수 있음을 인식해야 한다.
본 명세서의 실시 예가 주로 컨벌루션(convolution)과 관련하여 논의되지만, 당업자는 디컨벌볼루션(deconvolution) 및 다른 매트릭스 연산이 또한 매트릭스-매트릭스 타입 곱셈 연산(matrix-matrix type multiply operation)으로 구성될 수 있으며, 따라서 본 발명의 원리를 디컨벌루션에서도 동일하게 적용될 수 있다. 또한, 다른 타입의 수학 연산(mathematical operation)이 본 개시의 다양한 실시 예에 따라 구현될 수 있다.
도 2는 본 개시의 다양한 실시 예에 따른 산술 연산을 수행하기 위한 매트릭스 프로세서 아키텍처를 도시하고 예시한다. 시스템(200)은 논리 회로(logic circuit)(232 234), 캐시/버퍼(cache/buffer)(224), 데이터 포맷터(data formatter)(210), 가중치 포맷터(weight formatter)(212), 데이터 입력 매트릭스(data input matrix)(206), 가중치 입력 매트릭스(weight input matrix)(208), 매트릭스 프로세서(matrix processor)(240), 출력 어레이(output array)(226), 후 처리 유닛(post processing unit)(228)및 제어 로직(control logic)(250)을 포함한다. 매트릭스 프로세서(240)는 산술 논리 유닛(ALU: Arithmetic Logic Unit), 레지스터 및 일부 실시 예에서는 인코더(부스 인코더(booth encoder)와 같은)를 포함하는 복수의 서브 회로(sub-circuit)(242)를 포함한다. 논리 회로(232)는 N 입력 연산자(input operator) 및 데이터 레지스터를 나타내는 회로일 수 있다. 논리 회로(234)는 M 가중치 피연산자(M weight operand)를 매트릭스 프로세서(240)에 입력하는 회로일 수 있다. 논리 회로(232)는 이미지 데이터 피연산자(image data operand)를 매트릭스 프로세서(240)에 입력하는 회로일 수 있다. 가중치 입력 매트릭스(208)및 데이터 입력 매트릭스(206)는 SRAM 장치를 포함하는 다양한 타입의 메모리에 저장될 수 있다. 당업자는 다양한 타입의 피연산자가 매트릭스 프로세서(240)에 입력될 수 있음을 인식할 것이다.
특정 실시 예에 따른 연산에서, 시스템(200)은 시스템 내에서의 중복 연산(redundant operation)을 감소시키고 하드웨어 특정 로직을 구현하여 대규모 데이터 및 가중치 세트에 걸쳐 특정 수학 연산을 수행(certain mathematical operation)함으로써 컨볼루션 연산을 가속화(accelerate)한다. 이 가속은 매트릭스 프로세서(240)내에서 이미지 데이터 및 가중치를 검색하고 입력할 뿐만 아니라 매트릭스 프로세서(240)내에서의 수학 연산을 대규모로 수행하는 방법(및 대응하는 하드웨어 구성 요소)의 직접적인 결과이다.
실시 예에서, 포맷터(210, 212)는 예를 들어 도 2에서 인라인 포맷터(in-line formatter)로 구현된다. 특정 실시 예에서, 포맷터(210, 212)는 개별 컴포넌트(discrete component)이고, 다른 실시 예에서, 포맷터(210, 212)는 통합(integrate)되고/되거나 하나 이상의 다른 컴포넌트와 함께 통합(integrate)된다. 각각은 하드웨어로 구현되고 매트릭스 프로세서(240)내에서 연산되는 피연산자(operand) 상의 벡터로 매트릭스를 변환한다. 다른 실시 예에서, 포맷터(210, 212)는 소프트웨어로 구현되지만, 이것이 전형적으로 속도 손실을 발생시킨다. 데이터 포맷터(210)는 데이터 입력 매트릭스(data input matrix)(206)를 포함하는 2 차원 또는 3 차원(예를 들어, 3 x 3 x 3 큐브)데이터를 행 또는 열로 표현될 수 있는 단일 벡터(single vector) 또는 스트링(string)으로 변환함으로써, 데이터 입력 매트릭스(206)를 선형화(linearizing) 또는 벡터화(vectorizing)한다. 구체적으로, 포맷터(210)는 데이터 입력 매트릭스(206)를 수신하고 매트릭스 프로세서(240)에 의해 처리될 입력 데이터를 준비한다. 실시 예에서, 이것은 매트릭스 프로세서(240)가 출력 픽셀(output pixel)을 생성할 때 컨볼루션 계산의 일부로서 매트릭스 곱셈(matrix multiply)을 효율적으로 수행할 수 있도록 매트릭스 프로세서(240)의 하드웨어 요건(requirement)에 따라 데이터 입력 매트릭스(206)의 파라미터를 적절한 포맷으로 매핑함으로써 달성된다.
일 예로서, 매트릭스 프로세서(240)가 96 행(row) 및 96 열(column)을 포함한다고 가정하면, 96 x 96 포맷으로 매핑된 데이터는 매트릭스 프로세서(240)를 전체 계산 용량(full computational capacity)에 이용되게 하여 바람직한 효율(preferred efficiency)을 제공할 수 있다. 이 경우에, 포맷터(210)는 96 열 폭(columns wide)의 출력을 생성해야 한다. 유사하게, 포맷터(212)는 가중치 입력 매트릭스(weight input matrix)(208)에 기초하여 96 행 폭(rows wide)의 출력을 생성해야 한다.
실시 예에서, 포맷터(210)는 다수의 멀티플렉서(multiplexer) 또는 스위치(switch)를 사용하여 데이터 입력 매트릭스(206)의 일부 또는 전부를 페치(fetch)하고 매트릭스 프로세서(240)의 열에 따라 정렬되는 데이터를 생성하기 위해 그로부터 다른 요소를 선택한다. 실시 예에서, 선택(selection)은 데이터 입력 매트릭스(206)로부터의 적절한 데이터(appropriate data)가 정의된 클록 사이클(defined clock cycle)에서 각 열로 전달되는 것을 보장한다. 실시 예에서, 가중치가 정적(static) 인 경우, 가중치는 오프라인으로 사전 포맷(pre-format)되고, 메모리에 저장되고, 한번만 페치되고, 포맷터(212)를 사용하지 않고 수정된(modified), 벡터화된 포맷(vectorized format)으로 매트릭스 프로세서(240)에 직접 공급될 수 있다. 다른 실시 예에서, 가중치들은 다양한 포맷팅(various) 및 페치 연산(fetching operation)에 따라 동적으로 조정되고 매트릭스 프로세서(240)로 공급될 수 있다. 실시 예에서, 매트릭스 프로세서(240)는 다양한 크기의 열 및 행 입력을 허용한다. 즉, 매트릭스 프로세서(240)는 임의의 크기의 NxM 계산을 계산하도록 설계된다.
다른 실시 예에서, 데이터 입력 매트릭스(206)에서의 열의 수(예를 들어 X)가 매트릭스 프로세서(240)의 열의 수(예를 들어 N 열)보다 크도록(즉, X > N) 매트릭스 프로세서(240)의 열의 수가 제한되는 경우, 제어 로직(250)은, 데이터 입력 매트릭스(206)를 복수의 서브 매트릭스로 분할할 수 있으며, 각각의 서브 매트릭스(submatrix)는 매트릭스 프로세서(240)에 의해 계산된다. 그러한 경우에, 각각의 매트릭스 프로세서(240)는 다른 스레드(thread)에서 실행될 수 있다. 예를 들어, 데이터 입력 매트릭스(206)가 192 x 96 데이터 포인트(data point)로 구성되고, 매트릭스 프로세서가 96 열(columns) 및 96 행(rows)을 갖는 경우(즉, 96x96 계산이 1 클록 사이클에서 발생할 수 있음), 제어 로직(250)은 데이터 입력 매트릭스(206)를 (데이터 입력 행렬(206)의 왼쪽 절반 및 데이터 입력 행렬(206)의 오른쪽 절반과 같은) 2개의 서브 매트릭스로 분할 할 수 있다. 각 서브 매트릭스는 96x96 데이터 포인트로 구성된다. 각각의 개별 스레드(threaded) 매트릭스 프로세서(240)는 최종 출력 어레이(final output array)(260)에 배치된 결과로 서브 매트릭스로 전송된 서브 매트릭스를 위한 출력 채널(output channel)을 계산할 수 있으며, 이는 모든 채널로부터의 값(192 값)을 보유(hold)하기에 충분히 커야 한다. 보다 일반적으로, 데이터 입력 매트릭스(206)는 임의의 수의 서브 매트릭스로 분할될 수 있고 각각 다른 스레드에서 실행되는 상이한 매트릭스 프로세서(240)로 전송될 수 있다. 출력 어레이(226)와 마찬가지로, 데이터 입력 매트릭스(206), 데이터 포맷터(210), 캐시/버퍼(224), 논리 회로(232)및 후 처리 유닛(228)은 더 큰 데이터를 유사하게 수용(accommodate)할 수 있어야 한다.
대안적인 실시 예에서, CNN은 내적(inner product)을 따라 계산을 분할(spliting)하는 제어 로직(250)을 가짐으로써 다수의 매트릭스 프로세서(240) 사이에서 계산될 수 있다. 내적(inner product)의 세그먼트(segments)는 각각 다른 매트릭스 프로세서(240)에서 계산되고, 그 다음, 입력 곱셈(input product)은 더해져서 출력 벡터가 계산된 다음, 출력 어레이(260)에 저장된다.
고속 매트릭스 곱셈(fast matrix multiplication)에 적합한 대체 포맷(alternate format)으로 데이터를 재 배열(re-arrange)함으로써 컨볼루션 연산을 매트릭스 곱셈(matrix-multiply)으로 변환하는 CPU 또는 GPU에 의해 수행되는 포맷팅 함수(formatting function)의 일반적인 소프트웨어 구현과 달리, 본 개시의 다양한 하드웨어 구현은, 데이터를 즉석에서 포맷하고 실행가능하게 하고(예를 들어, 매 사이클마다 96 개의 데이터), 결과적으로, 매트릭스의 엘리먼트의 매우 많은 수가 병렬로 처리될 수 있게 하고, 따라서, 데이터를 매트릭스 연산에 효율적으로 매핑 할 수 있다. 실시 예에서, 2N 페치된 입력 데이터(2N fetched input data)에 대한 2N2 계산 데이터(2N2 compute data)는 단일 클록 사이클(single clock cycle)에서 획득될 수 있다. 이 아키텍처는 다수의 입력 데이터에 걸쳐 많은 수의 수학 연산을 수행함에 있어 병렬적이고 효율적이며 동기화된 프로세스를 제공할 뿐만 아니라, 일반적인 프로세서 아키텍처에서 사용되는 판독(read) 또는 페치 연산의 수를 효과적으로 줄임으로써 처리 속도의 의미 있는 개선을 초래한다.
실시 예에서, 임의의 수의 열 및 행을 가질 수 있는 매트릭스 프로세서(240)의 효율을 증가시키기 위해, 포맷터(212, 214)는 입력 행렬 데이터의 상이한 형상(different shape)을 매트릭스 프로세서(240)에 적합한 열 및 행으로 재포맷(reformat) 할 수 있다. 실시 예에서, 상이한 입력 크기를 갖는 매트릭스의 처리를 수용(accommodate)하기 위해 포맷팅(formatting)이 동적으로 수행된다. 실시 예에서, 입력 채널을 포함하는 재포맷된 매트릭스(reformatted matrix)는 캐시/버퍼(224)에 공급된다.
캐시/버퍼(224)는 다양한 데이터의 조각(various pieces of data)이 재사용될 수 있으므로 데이터 입력 매트릭스(206)로부터 1/k 회만 데이터를 페치 할 수 있으며, 여기서 k는 컨볼루션 커널 폭(convolution kernel width)이다. 예를 들어, 주어진 사이클에 대해, 행이 페치되면, 특정 열(certain column)은 해당 행의 모든 데이터에 접근(access) 할 수 있다. 실시 예에서, 캐시/버퍼(224)는 SRAM으로부터 데이터에 재접근(re-access) 및 판독할 필요없이 컨볼루션에 의해 재사용될 수 있는 데이터의 로컬 복사본(local copy)을 저장하는 로컬 버퍼(local buffer) 일 수 있다.
매트릭스 프로세서(240)가 계산을 완료하면, 결과의 세트는, 예를 들어, 매트릭스 프로세서(240)의 맨 아래 행에 있는 어큐뮬레이터(accumulator)로부터, 예를 들어, 내적을 수신하는 시프트 레지스터를 효과적으로 형성하는 출력 플립 플롭(미도시)으로 시프트될 수 있다. 실시 예에서, 출력 채널에 대응하는 행으로부터 결과를 출력 어레이(226), 예를 들어 클록 사이클 당 하나로 풀링(pulling) 또는 시프팅(shifting)하는 것은 상태 머신(state machine)(미도시)에 의해 달성될 수 있다. 상태 머신은 예를 들어 SRAM 및/또는 후 처리 유닛(228)에 데이터를 전송하기 전에 출력 채널에 대한 추가 연산(additional operation)을 수행할 수 있다. 매트릭스 프로세서(240)의 내부 연산(internal operation)은 아래에서 더 상세히 설명된다.
실시 예에서, 매트릭스 프로세서(240)는 매트릭스 프로세서(240)를 통해 출력 어레이(226)로 전달되는 결과의 복사본(copy)를 저장함으로써 병렬 처리를 가능하게 하는 섀도우 레지스트를 포함한다. 실시 예에서, 연산 결과를 출력 레지스터로부터 섀도우 레지스터로 이동시키는 것은 다음 값의 세트를 ALU에 로딩(loading)하는 것을 포함한다.
어큐뮬레이션(accumulation)이 완료되면, 컨벌루션이 시작(commence)될 수 있고, 이전 컨볼루션의 모든 데이터가 출력 어레이(226)로 출력되기 전에 어큐뮬레이션이 시작될 수 있다. 결과적으로, 모든 클록 사이클에서, 매트릭스 프로세서(240)의 데이터는 하나의 행만큼 아래로 이동하여, 각 사이클마다 마지막 행이 출력 어레이(226)로 출력될 수 있다. 실제로, 이 연산의 모드는 데이터를 SRAM에 저장하는 등과 같은 추가 처리 연산과 무관(independent)하게 중단없이 각 연속 사이클(consecutive cycle)에서 새로운 계산이 이루어질 수 있도록 한다.
후 처리 유닛(post processing unit)(228)은, 하드웨어 가속화된 풀링 유닛(hardware-accelerated pooling unit), 메모리로부터 데이터를 검색하고 SRAM 등에 데이터(예를 들어, 가중치 및 결과)를 저장하는 직접 메모리 액세스(DMA: direct memory access)의 일부일 수 있는 DRAM과 같은 다수의 디바이스(미도시)를 포함하거나 이러한 디바이스와 인터랙트(interact)할 수 있다. 디바이스는 시스템(200) 내의 포맷터(210, 212) 및 다른 컴포넌트를 관리할 수 있는 제어 로직(250)에 의해 부분적(partially)으로 또는 전체적(entirely)으로 제어될 수 있다.
도 2에 도시되지 않은 것은 데이터를 판독하기 위한 주소(addresses)를 생성하고, 결과를 기록하고, 컨볼루션의 서브 시퀀스 단계에서 사용될 데이터를 어디서 얻고 어떻게 실행할지 계산하기 위해 시스템(200)이 어디에 있는지 추적하는 시퀀서(sequencer)와 같은 관리 함수(management function)을 수행하는 보조 디바이스(auxiliary device)이다.
특정 실시 예에서, 가중치 입력 매트릭스(weight input matrix)(208)는 물리적으로 분할되고 매트릭스 프로세서(240)의 2 개의 상이한 측면으로부터 가중치를 구동(drives)하여, 2 차원 어레이가 각각 가중치 입력 매트릭스(208)에서 데이터의 일부를 수신하는 2 개의 영역(예를 들어, 좌측 및 우측)으로 분할되도록 한다. 이러한 구현은 가중치가 알려져 있다는 사실의 장점을 취하는 것에 의해 데이터 대기 시간(latency)을 줄인다. 실시 예에서, 피크 전력 소비(peak power consumption)를 감소시키기 위해, 연산의 타이밍은 가중치와 데이터의 곱셈이 특정 횟수의 사이클에 걸쳐 확산(spread out)되도록 선택될 수 있다. 이러한 효율적인 연산의 타이밍은 매트릭스 프로세서에 의해 수행되는 판독 연산의 수의 감소 및 매트릭스 내의(예를 들어, 서브-회로 사이의) 데이터 이동의 효율을 개선하는 것을 포함하여 에너지 소비 단계의 감소를 초래한다.
실시 예에서, 중복 데이터(redundant data)를 식별하도록 구성된 상태 머신(미도시)이 이용될 수 있다. 식별된 중복 데이터는 데이터를 재페치(re-fetch)할 필요가 없도록 열(columns)에 걸쳐(across)서 재사용될 수 있다. 상태 머신은 예를 들어 이미지 크기, 필터 크기, 스트라이드(stride), 채널의 수 및 유사한 파라미터(parameter)와 관련된 입력에 기초하여 실행될 데이터를 어떻게 그리고 어디로 시프트 할 것인지를 결정하도록 구성될 수 있다.
실시 예에서, 부스 인코더(booth encoder)는 매트릭스 프로세서(240)의 곱셈 아키텍처(multiplication architecture)에서 다수의 엘리먼트에 걸쳐(across) 공유된다. 부스 인코더는 당업계에 알려진 임의의 부스 인코더 일 수 있고, 2 개의 숫자를 곱하고, 예를 들어, 8 비트 값으로부터 12 비트 또는 곱셈기 논리(multiplier logic)에서 곱셈 연산을 더 쉽게, 그래서 결국 더 빠르게 만드는 어떤 다른 값으로 인코딩하는 것과 같이, 상기 2 개의 숫자 중 하나를 인코딩하는데 사용될 수 있다. 실시 예에서, 부스 인코더는 모든 열에 걸쳐 동일한 인코딩된 대체 가중치 값(alternate weight value)을 공유하기 위해 전체 행(entire row)에 걸쳐 병렬로 적용될 수 있다. 모든 열에 걸쳐 피연산자를 로드하면 전체 행 걸쳐 단일 클록 사이클로 곱셈을 수행할 수 있다. 따라서 N 계산 엘리먼트(computational element)에 걸쳐 동일한 데이터(예를 들어, 가중치)를 공유하기 위해 재인코딩을 활용(leverage)하는 비용은 각 열(또는 행)에 대해 한 번만 지불(paid)된다. 이에 비해 기존 컴퓨팅 아키텍처(computing architecture)에서 모든 단일 스칼라(scalar)에는 모든 단일 곱셈 연산(single multiplication operation)을 위해 부스 인코더를 필요로 한다.
도 3은 도 2에 도시된 매트릭스 프로세서 아키텍처의 예시적인 구성의 세부 사항을 도시한다. 실시 예에서, 매트릭스 프로세서(300)는 각각의 축 상에 기설정된 벡터 길이(vector length)를 수용(accommodate)할 수 있다. 도 3에 도시된 바와 같이, 매트릭스 프로세서(300)는 매트릭스 포맷으로 배열된 6 x 6 타일(302)의 어레이를 포함할 수 있다. 각각의 타일(302)은 차례로 서브-회로 서킷(sub-circuit circuit)(350)을 포함하는 매트릭스(320)를 포함할 수 있다. 도 4를 참조하여 아래에서 상세히 논의되는 바와 같이 각 서브-회로 서킷(350)은 산술 연산(arithmetic operation)을 수행할 수 있는 셀일 수 있다. 실시 예에서, 서브-회로 서킷(350)은 곱셈(multiplication), 어큐뮬레이션(accumulation) 및 시프트 연산을 동시에 수행한다.
실시 예에서, NxN 타일 출력을 생성하기 위해 매트릭스 프로세서(300)의 다수의 행 및 열을 이용함으로써 산술 연산이 병렬화된다. 예를 들어, 주어진 96의 행 크기와 대응하는 96의 열 크기는 2 * 9216 수학 계산(mathematical calculation)의 출력을 용이(facilitate)하게 한다. 다른 실시 예에서, 행 및 열의 수는 상이 할 수 있다. 즉, N 행 및 M 열이 있을 수 있고 NxM 타일 출력이 생성될 수 있다. 예를 들어, 96의 행 크기와 192의 해당 열 크기에 대해 단일 클록 사이클에서 2 * 18,432 계산의 출력이 생성된다.
도 4는 도 3에 도시된 논리 회로의 예시적인 곱셈 및 가산 회로 구현을 도시한다. 도 4에 도시된 바와 같이, 곱셈 및 가산 회로(multiply-and-add circuit)(400)는 곱셈기(multiplier)(430), 가산기(adder)(432), 논리(logic)(434, 436, 438), 어큐뮬레이터(accumulator)(424), 섀도우 레지스터(shadow register)(428)및 출력 레지스터(output register)(440)를 포함한다. 실시 예에서, 어큐뮬레이터(424)는 어큐뮬레이션 레지스터(accumulation register)로서 구현될 수 있다.
실시 예에서, 어큐뮬레이터(424)는 ALU의 출력을 수신하도록 구성될 수 있는 레지스터 및 섀도우 레지스터(428)를 포함하는 ALU 세트를 포함할 수 있다.
연산에서, 곱셈기(430)는 가중치(402)및 데이터(404)를 수신하고 곱하여 그로부터 곱(product)을 생성한다. 각 곱(product)은 가산기(432)에 제공되고, 가산기(432)는, 곱셈기(430)로부터 곱(product)을 수신하는 것에 응답하여, 어큐뮬레이터의(424)의 현재 값에 곱(product)을 가산한다.
실시 예에서, 어큐뮬레이터(424)는 예를 들어 출력 레지스터(440)에 저장된 어큐뮬레이트된 값(accumulated value)을 생성한다. 어큐뮬레이트된 값(accumulated value)은 컨벌루션의 결과이고, 도 2를 참조하여 언급된 바와 같이, 2 개의 포맷된 매트릭스의 내적에 대응할 수 있다.
실시 예에서, 출력 레지스터(440)에 있는 결과의 복사본은 섀도우 레지스터(428)에 제공될 수 있으며, 새도우 레지스터(428)는 결과(450)를 출력하고, 새로운 계산을 시작하기 위해 어큐뮬레이터(424)가 다시 접근(access)될 수 있다. 실시 예에서, 곱셈 및 가산 회로(400)는 도 4의 단일 사이클 내에서 동시에 곱셈, 가산 연산 및 시프트 연산을 수행하여, 각 사이클에서 발생하는 총 연산의 수를 두 배로 증가시킬 수 있다.
실시 예에서, ClearAcc 신호(408)는 어큐뮬레이터(424)의 컨텐츠(content)를 클리어(clear)하고, 예를 들어 곱셈기(430)가 곱셈 연산을 수행할 때 어큐뮬레이션 연산이 다시 시작될 수 있도록 한다. 실시 예에서, 데이터(404)가 유효하다는 결정에 응답하여 ResultEnable 신호(412)가 활성화된다. 어큐뮬레이터(424)는 데이터를 어큐뮬레이트(accumulate) 및 저장하거나, 데이터를 어큐뮬레이트 및 삭제하거나, 또는 단지 데이터를 클리어(clears)할 수 있는 것으로 이해된다.
실시 예에서, 결과는 단일 클록 사이클에서, 즉, 중간 실행 및 저장 연산없이 출력 레지스터(440)로부터 새도우 레지스터(428)로 이동된다.
도 5는 본 개시의 다양한 실시 예에 따른 예시적인 컨볼루션 연산을 도시한다. 컨볼루션(500)은 입력 이미지(502)의 입력 채널(IC: input channel), 가중치(weight)(532), 내적(dot product)(514), 출력 채널(OC: output channel) 및 어큐뮬레이터(accumulator)(540)를 포함한다.
실시 예에서, 컨볼루션 연산(500)은 입력 이미지(502)에 개별 필터(individual filter)(즉, 가중치)(532)를 적용하여, 예를 들어 입력 이미지(502)내의 작은 특징을 검출한다. 상이한 순서(different order)로 상이한 특징(different feature)의 시퀀스를 분석함으로써, 매크로 특징(macro feature)은 입력 이미지(502)에서 식별될 수 있다. 다른 실시 예에서, 입력(502)은 비-이미지 데이터(non- image data.)이다. 예를 들어, 입력(502)은 초음파(ultrasonic), 레이더(radar), LIDAR 또는 다른 센서 데이터와 같은 비-이미지 센서 데이터(be non-image sensor data) 일 수 있다. 입력(502)은 또한 일반적인 수학 계산 또는 당업자에게 알려진 임의의 다른 타입(type)의 데이터 일 수 있다.
컨볼루션(500)은 각 입력 채널(IC)에 대해 상이한 가중치 세트(532)를 사용할 수 있고, 각 입력 채널(IC)는 상이한 정보 세트를 포함할 수 있고, 각 가중치 매트릭스(532)는 상이한 특징을 식별하는 데 도움이 되도록 설계될 수 있다. 실시 예에서, 컨볼루션(500)은 부분 내적(partial dot product)을 얻기 위해 직사각형 입력 매트릭스(rectangular input matrix)(504)와 직사각형 가중치 매트릭스(a rectangular weight matrix)(532)를 곱한다. 부분 내적은 출력 이미지에서 출력 픽셀(output pixel)(514)을 나타내는 어큐뮬레이트된 내적(514)(즉, 정수(integer))을 생성하기 위해 가산기(546)에 의해 합산(sum)될 수 있다.
실시 예에서, 출력 채널(OC)의 각 픽셀은 곱셈기(542) 및 가산기(544)에 의해 생성된다. 실시 예에서, 부분 내적의 값은 입력 이미지(502)의 영역(504)에 전체적으로 가중치 매트릭스(532)의 어플리케이션(application)에 대응한다. 다시 말해서, 각 가중치(532)는 부분 내적을 생성하기 위해 영역(504)와 곱셈기(542)를 도트 곱셈(dot multiply)하고, 그런 다음 부분 내적은 컨볼루션을 나타내는 어큐뮬레이트된 출력을 생성하기 위해 어큐뷸레이터(540)에 어큐뷸레이트(accumulate)된다.
하나 이상의 입력 채널(IC), 예를 들어, 각각의 색상(예를 들어, RGB)마다 하나가 사용될 수 있다. 예를 들어, 각 컨볼루션은 각각의 컬러마다 하나씩 3 개의 상이한 매트릭스를 나타내는 가중치(532)를 사용할 수 있다. 각각의 출력 채널(OC)(512)은 입력 데이터(502)의 상이한 특징을 나타내는 상이한 필터 또는 가중치(532)를 사용하여 생성될 수 있다. 출력 채널의 수는 특징의 수에 따라 달라질 수 있다. 컨볼루션의 수는 출력 채널(OC)의 수에 입력 채널(IC)의 수를 곱한(times) 것과 같으며, 각 컨볼루션은 각 입력 채널(IC)에 대해 N 개의 컨볼루션을 가질 수 있다. 당업자는 입력 채널의 수 및 타입이 변할 수 있고 컬러 및/또는 클리어(clear) 입력을 포함할 수 있음을 인식할 것이다.
도 5에 도시된 바와 같이, 입력 매트릭스(504)는 3 개의 입력 채널, 즉, 3 x 3 x IC에 걸쳐 3 x 3 가중치 매트릭스(532)와 결합될 수 있는 Kx x Ky(즉, 3 x 3)매트릭스이며, 깊이(depth)는 출력 평면(output plane)에서 단일 엘리먼트(single element)인 내적(dot product)(514)을 매치(match)하고, 생성(produce)한다. 출력 채널(512)의 각 내적(514)은 도트 곱셈(dot multiplication)의 결과이다.
도 6 내지 도 8은 본 개시의 다양한 실시 예에 따른 예시적인 컨볼루션 연산의 세부 사항을 도시한다. 컨볼루션(600)은 입력 데이터 매트릭스(input data matrix)(602), 가중치 데이터 매트릭스(weight data matrix)(604), 어레이(array)(606)및 내적(dot product)(630)을 포함한다. 실시 예에서, 어레이(606)는 도 2 및 도 3에 도시된 바와 같은 매트릭스 프로세서 아키텍처(matrix processor architecture)이다.
도 6의 입력 데이터 매트릭스(602)는, 실시 예에서, 입력 매트릭스의 벡터화된 형태(vectorized form)를 얻기 위하여, 도 5에 도시된 직사각형 입력 매트릭스(rectangular input matrix)(504)와 같은 입력 매트릭스를 선형화함으로써 얻을 수 있는 열(column)(610)을 포함한다. 유사하게, 가중치 데이터 매트릭스(604)는 도 5의 직사각형 가중치 매트릭스(532)와 같은 가중치 매트릭스의 벡터화된 형태(vectorized form) 일 수 있는 행(row)(620)을 포함한다. 일 예로서, 3 x 3 입력 행렬 및 3 입력 채널은 입력 데이터 매트릭스(input data matrix)(602)에 사용하기 위해 27- 엘리먼트 열(27-element column)(610)이 생성될 수 있는 3 x 3 x 3 = 27 엘리먼트를 포함하는 벡터로 재포맷(re-format)될 수 있다. 반대로, 동일한 3 개의 입력 채널에 대한 3 x 3 가중치 매트릭스는 가중치 데이터 매트릭스(604)에 사용하기 위해 27-엘리먼트 행(27-element row)(620)을 생성하는데 사용될 수 있다. 당업자는 입력 매트릭스의 크기 및 입력 채널의 수가 상이한 어플리케이션을 걸쳐 변할 수 있음을 인식할 것이다.
실시 예에서, 도 5에서 직사각형으로 그려진 입력 채널 및 입력 가중치는, 예를 들어, 도 2를 참조하여 설명된 포맷터에 의해, 96 x 96 엘리먼트 내적 연산이 병렬로 수행될 수 있도록, 매트릭스 곱셈기/프로세서(도2의 엘리먼트(240)로 표시됨)에 제공되는 벡터 포맷(예를 들어, 96 엘리먼트를 갖는 벡터)으로 재포맷(reformat)된다. 구체적으로, 각 입력 채널에 대한 사각형으로 도 5에 도시된 입력 데이터(504) 및 입력 가중치(532)는 벡터 포맷으로 재포맷된다.
실시 예에서, 입력 데이터(602) 및 입력 가중치(604)(예를 들어, 각각 96 엘리먼트를 가짐)로 FIG. 6에 도시된, 결과 벡터 포맷(resulting vector format)은 병렬로 96 x 96 엘리먼트 내적 연산(96 x 96 element dot product operation)을 매트릭스 프로세서 또는 매트릭스 곱셈기(240)에 제공된다. 실시 예에서, 출력 채널의 계산에서, 동일한 출력 픽셀은 동일한 입력 데이터 세트를 사용하지만 다른 가중치 세트(즉, 필터)를 사용하여 생성되며, 입력 데이터를 한 번 판독함으로써 많은 출력 채널이 한 번에 생성될 수 있다. 상술한 바와 같이, 입력 및 출력 채널의 수는 임의로 선택될 수 있는 것으로 이해된다.
또한, 입력 데이터 매트릭스(602), 가중치 데이터 매트릭스(604) 및 어레이(606)는 도 6에 도시된 것과는 서로 다른 수의 열 및 행을 가질 수 있음을 이해해야 한다. 특히, 입력 데이터 매트릭스(input data matrix)(602)및 가중치 데이터 매트릭스(weight data matrix)(604)의 형상(shape)은 어레이(606)의 임의의 조정된 구성(arbitrate configuration)의 열 및 행을 수용하도록 포맷될 수 있다. 또한, 가중치 데이터 매트릭스(604)가 알려진 상황(circumstances)에서, 행(620)은 포맷터를 사용하지 않고 벡터화된 포맷으로 생성되고 저장될 수 있다.
실시 예에서, 도 6의 내적(630)은 열(610)에 대응하는 벡터에 행(620)에 대응하는 벡터를 도트 곱셈(dot-multiply)함으로써 생성된다. 실시 예에서, 도 7에 도시된 바와 같이, 다음 내적(632)은 열(612)에 대응하는 벡터와 행(620)에 대응하는 벡터를 도트 곱함으로써 획득될 수 있다. 당업자라면 인식할 수 있듯이, 어레이(606)의 제1 행의 모든 내적이 채워지면, 어레이(606)의 제2행의 내적은 입력 데이터 매트릭스(602)의 제1열(610)의 엘리먼트를 가중치 데이터 매트릭스(604)의 제2행 등과 도트 곱함으로써 계산될 수 있다.
도 6부터 도 8까지는 단지 예시적인 목적으로 제공하고, 상술한 도트 곱셈(dot-multiplication)은 원샷 매트릭스-매트릭스 곱셈 연산(one-shot matrix-matrix multiply operation)을 생성하기 위해 동시에 수행될 수 있다는 점에 유의하는 것이 중요하다.
도 9는 본 개시의 다양한 실시 예에 따른 예시적인 디컨볼루션 연산을 도시한다. 디컨볼루션 시스템(deconvolution system)(900)은 입력 이미지(902)의 입력 채널(IC), 가중치(922), 내적(904, 906)및 출력 채널(OC)을 포함한다. 당업자는 디컨볼루션 연산(900)이 사실상 컨볼루션 연산의 수학적 전치(mathematical transposition)(대략 반전), 예를 들어, 도 5에 도시된 컨볼루션임을 인식할 것이다. 당업자는 신경망(neural network)이 일반적인 컨볼루션 신경망에 사용된 것과 유사한 절차를 적용함으로써 디컨볼루션 연산(900)을 학습하는데 사용될 수 있음을 더 인식할 것이다. 간결성을 위해, 도 5와 유사한 컴포넌트의 설명 또는 함수는 여기서 반복하지 않는다.
실시 예에서, 도 9의 디컨볼루션 연산(900)은 가중치(922)를 사용하여 내적(904, 906)을 디컨스트럭팅(deconstructing)함으로써 매트릭스(912)를 재조립(reassemble)한다. 컨볼루션 연산에서와 같이, 디컨볼루션(900)은 각 입력 채널(IC)에 대해 서로 다른 가중치(922)의 세트를 사용할 수 있다. 실시 예에서, 디컨볼루션(900)은 예를 들어 아티팩트(artifact)에 대한 견고성(robustness)을 개선하기 위해 이미지 디컨볼루션을 수행하기 위해 이미지에 유리하게(advantageously) 적용될 수 있다. 다른 어플리케이션은 이미지 데이터의 분석 및 복원(restoration) 등을 포함할 수 있다.
도 10은 본 개시의 다양한 실시 예에 따른, 컨볼루션 신경망을 더 빨리 만들기 위해 산술 연산을 수행하는 프로세스를 도시한다.
산술 연산을 수행하기 위한 프로세스(1000)는 데이터 매트릭스에서 행을 나타낼 수 있는 제1 피연산자(operand) 세트가 제1 논리 회로(logic circuit)로부터 수신될 때 1002단계에서 시작한다. 제1 피연산자 세트는 피연산자가 매트릭스 프로세서로 입력과 정렬되도록 벡터화될 수 있다. 특정 실시 예에서, 벡터화된 피연산자(vectorized operand)의 크기는 축(axis)을 따라 매트릭스 프로세서로의 입력의 수와 직접 관련된다.
1004단계에서, 가중치 매트릭스에서 열을 나타낼 수 있는 제2 피연산자 세트가 제2 논리 회로로부터 수신된다. 제2 피연산자 세트는 피연산자가 매트릭스 프로세서에 대응하는 입력 내에서 정렬되도록 벡터화될 수 있다. 특정 실시 예에서, 벡터화된 피연산자의 크기는 상이한 축을 따라 매트릭스 프로세스(matrix process)로의 입력의 수와 직접 관련된다.
1006단계에서, 제1 피연산자 세트는 제2 피연산자 세트와 도트 곱셈(dot-multiply)되어 하나 이상의 내적을 획득한다. 특정 실시 예에서, 피연산자 세트에 걸친 세트 연산(set operation)은 단일 클록 사이클에서 수행된다.
1008단계에서, 내적은 컨볼루션 결과를 생성하기 위해 이미지를 필터로 컨볼루션(convolve)하기 위해 사용될 수 있다.
1010단계에서, 컨벌루션 결과는 이미지 출력을 향상시키기 위해 추가로 처리된다. 이러한 추가 처리(processing)는 비선형 함수(non-linear function), 정규화 연산(normalization operation) 또는 풀링 연산(pooling operation)을 사용하여 발생할 수 있다.
당업자는 컴퓨팅 시스템 또는 프로그래밍 언어가 본 발명의 실시에 중요하지 않다는 것을 인식할 것이다. 당업자는 상술한 많은 엘리먼트가 물리적으로 및/또는 기능적으로 서브 모듈(sub-module)로 분리되거나 함께 결합될 수 있음을 인식할 것이다.
이하의 청구 범위의 엘리먼트는 다수의 의존성, 구성 및 조합을 갖는 것을 포함하여 다르게 배열될 수 있음에 유의해야 한다. 예를 들어, 실시 예에서, 다양한 청구항들의 주제는 다른 청구항들과 결합될 수 있다.
앞선 예 및 실시 예는 예시적인 것이며 본 발명의 범위를 제한하지 않는 것은 당업자에게 이해될 것이다. 본 명세서를 읽고 도면을 연구할 때 당업자에게 명백한 모든 순열(permutation), 개선(enhancement), 등가(equivalent), 조합(combination) 및 개선(improvement)은 본 발명의 진정한 사상 및 범위 내에 포함되는 것으로 의도된다.

Claims (21)

  1. 신경망에서 컨볼루션을 가속화하기 위한 매트릭스 프로세서에 있어서,
    2차원 어레이 중 제1 차원에 배치되고, 제1 논리 회로로부터 N 피연사자를 수신하도록 연결된 제1 입력 회로;
    상기 2차원 어레이 중 제2 차원에 배치되고, 제2 논리 회로로부터 M 피연산자를 수신하도록 연결된 제2 입력회로; 및
    상기 N 피연산자와 상기 M 피연산자를 수신하도록 연결된 복수의 서브 회로(sub-circuits)
    를 포함하고,
    상기 N 피연산자는,
    상기 제1 차원과 관련된 제1 폭에 따라 포맷되고,
    상기 M 연산자는,
    상기 제2 차원과 관련된 제2 폭에 따라 포맷되고,
    상기 복수의 서브 회로 중 적어도 하나의 서브 세트는,
    산술 논리 유닛, 어큐뮬레이터 및 섀도우 레지스터
    를 포함하고,
    상기 서브 회로는,
    상기 2차원 어레이 내에서 상기 N 피연산자와 상기 M 피연산자에 대한 산술 연산을 수행하도록 연결된
    매트릭스 프로세서.
  2. 제1항에 있어서,
    상기 산술 연산은,
    컨볼루션 연산과 연관된 내적 계산인
    매트릭스 프로세서.
  3. 제2항에 있어서,
    상기 산술 논리 유닛은,
    상기 내적을 생성하기 위한 곱셈 및 가산 회로
    를 포함하는 매트릭스 프로세서.
  4. 제1항에 있어서,
    상기 N 피연산자는,
    이미지 데이터를 나타내고,
    상기 M 피연산자는,
    가중치 값을 나타내는
    매트릭스 프로세서.
  5. 제1항에 있어서,
    상기 서브 회로 중 적어도 일부는,
    상기 M 피연산자 중 하나 이상을 나타내는 값을 인코딩하도록 구성된 인코딩 엘리먼트
    를 포함하는 매트릭스 프로세서.
  6. 제5항에 있어서,
    상기 인코딩 엘리먼트는,
    부스 인코더인
    매트릭스 프로세서.
  7. 제1항에 있어서,
    상기 N 피연산자는,
    데이터 입력 매트릭스로부터 포맷되는
    매트릭스 프로세서.
  8. 제1항에 있어서,
    상기 N 피연산자 또는 상기 M 피연산자 내에서 재사용 가능한 피연산자를 결정하기 위하여 필터 크기 및 스트라이드 중 적어도 하나를 사용하는 상태 머신
    을 더 포함하는 매트릭스 프로세서.
  9. 제1항에 있어서,
    상기 캐시로부터의 판독 연산의 감소 및 상기 복수의 서브 회로를 통한 가속화된 데이터 처리량에 의해 가속화된 처리 속도가 달성되는
    매트릭스 프로세서.
  10. 신경망에서 컨볼루션을 가속화하기 시스템에 있어서,
    N 피연산자를 생성하는 제1 논리 회로;
    2차원 어레이 중 제1 차원에 배치되고, 상기 제1 논리 회로로부터 상기 N 피연사자를 수신하도록 연결된 제1 입력 회로;
    M 피연산자를 생성하는 제2 논리 회로;
    상기 2차원 어레이 중 제2 차원에 배치되고, 상기 제2 논리 회로로부터 상기 M 피연산자를 수신하도록 연결된 제2 입력회로;
    복수의 서브 회로를 포함하는 매트릭스 프로세서; 및
    상기 2차원 어레이에 연결된 출력 어레이
    를 포함하고,
    상기 복수의 서브 회로는,
    내적을 생성하기 위하여 상기 N 피연산자와 상기 M 피연산자의 도트 곱셈을 수행하도록 구성되고,
    상기 2 차원 어레이는,
    결과를 생성하기 위하여 상기 내적을 사용하도록 구성된
    시스템.
  11. 제10항에 있어서,
    상기 N 피연산자는,
    데이터 입력 매트릭스로부터 제1 벡터로 포맷되고,
    상기 M 피연산자는,
    가중치 입력 매트릭스로부터 제2 벡터로 포맷되는
    시스템.
  12. 제11항에 있어서,
    상기 제1 논리 회로는,
    상기 N 피연산자를 저장하는 복수의 데이터 레지스터를 포함하고,
    상기 복수의 데이터 레지스터는,
    상기 2차원 어레이의 상기 제1 차원에 대응하는 제1 폭을 가지고,
    상기 제2 논리 회로는,
    상기 M 가중치 피연산자를 저장하는 복수의 가중치 레지스터를 포함하고,
    상기 복수의 가중치 레지스터는,
    상기 2 차원 어레이의 상기 제2 차원에 대응하는 제2 폭을 가지는
    시스템
  13. 제12항에 있어서,
    상기 제1 폭은,
    상기 결과를 생성하는 사이클의 수에 대응하는
    시스템.
  14. 제12항에 있어서,
    상기 데이터 레지스터 및 상기 가중치 레지스터는,
    각각의 제1 개수 및 제2 개수의 엘리먼트를 페치하기 위하여 단 한번만 접근되는
    시스템.
  15. 제10항에 있어서,
    상기 서브 회로는,
    하나 이상의 클록 사이클에서 데이터를 시프트 레지스터로 이동 시키도록 구성된 섀도우 레지스터
    를 포함하는 시스템.
  16. 제10항에 있어서,
    상기 데이터 입력 매트릭스 및 상기 가중치 입력 매트릭스 중 적어도 하나에 연결된 버퍼
    를 더 포함하고,
    상기 버퍼는,
    서브시퀀스 사이클에서 재페치없이 재사용할 수 있도록 최근에 사용된 데이터의 복사본을 저장하는
    시스템.
  17. 제10항에 있어서,
    상기 결과는,
    이미지의 영역에 대한 필터의 적용에 대응하는 출력 매트릭스인 시스템.
  18. 제10항에 있어서,
    재사용 가능한 데이터를 식별하기 위하여 필터 크기 및 스트라이드 중 적어도 하나를 사용하는 상태 머신
    을 더 포함하는 시스템.
  19. 컨볼루션 신경망을 더 빠르게 만들기 위하여 매트릭스 곱셈 회로를 사용하는 방법에 있어서,
    데이터 매트릭스에서 행을 나타내는 제1 피연산자 세트를 제1 논리 회로로부터 수신하는 단계;
    가중치 매트릭스에서 열을 나타내는 제2 피연산자 세트를 제2 논리 회로로부터 수신하는 단계;
    상기 제1 피연산자 세트를 상기 제2 피연산자 세트와 도트 곱셈하여 하나 이상의 내적을 얻는 단계; 및
    상기 내적을 사용하여 이미지를 필터로 컨볼루션하여 컨벌루션 결과를 생성하는 단계
    를 포함하는 방법.
  20. 제19항에있어서,
    상기 이미지를 컨벌루션하는 단계는,
    상기 하나 이상의 내적을 컨볼루션 레이어에 의해 처리하여 레이어 출력을 생성하는 단계
    를 포함하는 방법.
  21. 제20항에 있어서,
    상기 레이어 출력을 생성하는 단계는,
    비선형 함수, 정규화 및 풀링 중 하나를 상기 컨볼루션 결과에 적용하는 단계
    를 포함하는 방법.
KR1020207004841A 2017-07-24 2018-07-19 가속화된 수학 엔진 KR102353241B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020227000842A KR102452757B1 (ko) 2017-07-24 2018-07-19 가속화된 수학 엔진

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762536399P 2017-07-24 2017-07-24
US62/536,399 2017-07-24
US15/710,433 2017-09-20
US15/710,433 US10671349B2 (en) 2017-07-24 2017-09-20 Accelerated mathematical engine
PCT/US2018/042959 WO2019023046A1 (en) 2017-07-24 2018-07-19 ACCELERATED MATHEMATICAL MOTOR

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020227000842A Division KR102452757B1 (ko) 2017-07-24 2018-07-19 가속화된 수학 엔진

Publications (2)

Publication Number Publication Date
KR20200027011A true KR20200027011A (ko) 2020-03-11
KR102353241B1 KR102353241B1 (ko) 2022-01-19

Family

ID=65018989

Family Applications (4)

Application Number Title Priority Date Filing Date
KR1020227000842A KR102452757B1 (ko) 2017-07-24 2018-07-19 가속화된 수학 엔진
KR1020227034432A KR102557589B1 (ko) 2017-07-24 2018-07-19 가속화된 수학 엔진
KR1020207004841A KR102353241B1 (ko) 2017-07-24 2018-07-19 가속화된 수학 엔진
KR1020237024159A KR20230113408A (ko) 2017-07-24 2018-07-19 가속화된 수학 엔진

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020227000842A KR102452757B1 (ko) 2017-07-24 2018-07-19 가속화된 수학 엔진
KR1020227034432A KR102557589B1 (ko) 2017-07-24 2018-07-19 가속화된 수학 엔진

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020237024159A KR20230113408A (ko) 2017-07-24 2018-07-19 가속화된 수학 엔진

Country Status (8)

Country Link
US (4) US10671349B2 (ko)
EP (2) EP4258182A3 (ko)
JP (3) JP7009609B2 (ko)
KR (4) KR102452757B1 (ko)
CN (2) CN111095241B (ko)
CA (1) CA3070972C (ko)
MX (2) MX2020000952A (ko)
WO (1) WO2019023046A1 (ko)

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180012439A (ko) * 2016-07-27 2018-02-06 삼성전자주식회사 회선 신경망에서 가속기 및 이의 동작 방법
US10795836B2 (en) * 2017-04-17 2020-10-06 Microsoft Technology Licensing, Llc Data processing performance enhancement for neural networks using a virtualized data iterator
US11113603B1 (en) 2017-05-01 2021-09-07 Perceive Corporation Training network with discrete weight values
JP6907700B2 (ja) * 2017-05-23 2021-07-21 富士通株式会社 情報処理装置、マルチスレッド行列演算方法、およびマルチスレッド行列演算プログラム
US10671349B2 (en) 2017-07-24 2020-06-02 Tesla, Inc. Accelerated mathematical engine
US11157287B2 (en) 2017-07-24 2021-10-26 Tesla, Inc. Computational array microprocessor system with variable latency memory access
US11409692B2 (en) 2017-07-24 2022-08-09 Tesla, Inc. Vector computational unit
US11157441B2 (en) 2017-07-24 2021-10-26 Tesla, Inc. Computational array microprocessor system using non-consecutive data formatting
US11893393B2 (en) 2017-07-24 2024-02-06 Tesla, Inc. Computational array microprocessor system with hardware arbiter managing memory requests
GB2568086B (en) * 2017-11-03 2020-05-27 Imagination Tech Ltd Hardware implementation of convolution layer of deep neutral network
KR20190051697A (ko) 2017-11-07 2019-05-15 삼성전자주식회사 뉴럴 네트워크의 디컨벌루션 연산을 수행하는 장치 및 방법
US10747844B2 (en) * 2017-12-12 2020-08-18 Tesla, Inc. Systems and methods for converting a matrix input to a vectorized input for a matrix processor
US11561791B2 (en) 2018-02-01 2023-01-24 Tesla, Inc. Vector computational unit receiving data elements in parallel from a last row of a computational array
US11875245B1 (en) * 2018-02-22 2024-01-16 United States Of America As Represented By The Secretary Of The Air Force System, apparatus and method for spiking neural network
US11586910B1 (en) 2018-04-20 2023-02-21 Perceive Corporation Write cache for neural network inference circuit
US11210586B1 (en) 2018-04-20 2021-12-28 Perceive Corporation Weight value decoder of neural network inference circuit
US11468145B1 (en) 2018-04-20 2022-10-11 Perceive Corporation Storage of input values within core of neural network inference circuit
US11568227B1 (en) 2018-04-20 2023-01-31 Perceive Corporation Neural network inference circuit read controller with multiple operational modes
US11501138B1 (en) 2018-04-20 2022-11-15 Perceive Corporation Control circuits for neural network inference circuit
US11222257B1 (en) 2018-04-20 2022-01-11 Perceive Corporation Non-dot product computations on neural network inference circuit
US10977338B1 (en) 2018-04-20 2021-04-13 Perceive Corporation Reduced-area circuit for dot product computation
US12093696B1 (en) 2018-04-20 2024-09-17 Perceive Corporation Bus for transporting output values of a neural network layer to cores specified by configuration data
US11783167B1 (en) 2018-04-20 2023-10-10 Perceive Corporation Data transfer for non-dot product computations on neural network inference circuit
JP7038608B2 (ja) * 2018-06-15 2022-03-18 ルネサスエレクトロニクス株式会社 半導体装置
US11995533B1 (en) 2018-12-05 2024-05-28 Perceive Corporation Executing replicated neural network layers on inference circuit
US11321819B2 (en) * 2019-01-07 2022-05-03 Hcl Technologies Limited System and method for performing a convolution operation
US11347297B1 (en) 2019-01-23 2022-05-31 Perceive Corporation Neural network inference circuit employing dynamic memory sleep
CN109933371A (zh) * 2019-02-01 2019-06-25 京微齐力(北京)科技有限公司 其单元可访问本地存储器的人工智能模块和系统芯片
US20200364552A1 (en) * 2019-05-13 2020-11-19 Baidu Usa Llc Quantization method of improving the model inference accuracy
US11941533B1 (en) 2019-05-21 2024-03-26 Perceive Corporation Compiler for performing zero-channel removal
US20210011732A1 (en) * 2019-07-09 2021-01-14 MemryX Inc. Matrix Data Reuse Techniques in Processing Systems
US11222092B2 (en) 2019-07-16 2022-01-11 Facebook Technologies, Llc Optimization for deconvolution
US11688032B2 (en) * 2019-08-16 2023-06-27 Meta Platforms, Inc. Three-dimensional convolution pipeline with memory organizer unit
KR102670905B1 (ko) * 2019-08-22 2024-05-31 구글 엘엘씨 전파 지연 감소
JP7230744B2 (ja) * 2019-08-28 2023-03-01 株式会社デンソー 畳込み演算方法及び演算処理装置
CN110717588B (zh) * 2019-10-15 2022-05-03 阿波罗智能技术(北京)有限公司 用于卷积运算的装置和方法
US11409838B2 (en) * 2019-10-29 2022-08-09 Meta Platforms, Inc. High throughput matrix processor with support for concurrently processing multiple matrices
US11520853B2 (en) 2020-02-28 2022-12-06 Meta Platforms, Inc. Mapping convolution to a partition channel convolution engine
US11687764B2 (en) 2020-04-17 2023-06-27 Samsung Electronics Co., Ltd. System and method for increasing utilization of dot-product based neural network accelerator
US11507817B2 (en) 2020-04-17 2022-11-22 Samsung Electronics Co., Ltd. System and method for performing computations for deep neural networks
CN111626412B (zh) * 2020-05-12 2023-10-31 浙江大学 复数神经网络的一维卷积加速装置及方法
US11309028B2 (en) * 2020-09-03 2022-04-19 Macronix International Co., Ltd. Inference operation method and controlling circuit of 3D NAND artificial intelligence accelerator
US11535271B2 (en) * 2021-01-08 2022-12-27 Argo AI, LLC Methods and systems for monitoring vehicle motion with driver safety alerts
CN112966729B (zh) * 2021-02-26 2023-01-31 成都商汤科技有限公司 一种数据处理方法、装置、计算机设备及存储介质
US20220334634A1 (en) * 2021-04-16 2022-10-20 Maxim Integrated Products, Inc. Systems and methods for reducing power consumption in embedded machine learning accelerators
CN113032723B (zh) * 2021-05-25 2021-08-10 广东省新一代通信与网络创新研究院 一种矩阵乘法器的实现方法及矩阵乘法器装置
US20220405571A1 (en) * 2021-06-16 2022-12-22 Microsoft Technology Licensing, Llc Sparsifying narrow data formats for neural networks
US20240069971A1 (en) * 2022-08-31 2024-02-29 Taiwan Semiconductor Manufacturing Company, Ltd. Artificial intelligence accelerator device
US12045309B1 (en) * 2023-11-29 2024-07-23 Recogni Inc. Systems and methods for performing matrix multiplication with a plurality of processing elements

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1994010638A1 (en) * 1992-11-05 1994-05-11 The Commonwealth Of Australia Scalable dimensionless array
US20120017066A1 (en) * 2003-07-24 2012-01-19 Martin Vorbach Low latency massive parallel data processing device
US20160342891A1 (en) * 2015-05-21 2016-11-24 Google Inc. Neural Network Processor

Family Cites Families (929)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5014235A (en) * 1987-12-15 1991-05-07 Steven G. Morton Convolution memory
US5239636A (en) 1988-09-09 1993-08-24 Advanced Micro Devices, Inc. Buffer memory subsystem for peripheral controllers
US5267185A (en) 1989-04-14 1993-11-30 Sharp Kabushiki Kaisha Apparatus for calculating matrices
EP0421639B1 (en) 1989-09-20 1998-04-22 Fujitsu Limited Parallel data processing system
US5138695A (en) 1989-10-10 1992-08-11 Hnc, Inc. Systolic array image processing system
CA2045756C (en) 1990-06-29 1996-08-20 Gregg Bouchard Combined queue for invalidates and return data in multiprocessor system
JPH04295953A (ja) 1991-03-25 1992-10-20 Nippon Telegr & Teleph Corp <Ntt> 要素プロセッサの２次元アレイを内蔵する並列データ処理装置および要素プロセッサのサブアレイユニット
JP2578262Y2 (ja) 1991-07-31 1998-08-06 エルナー株式会社 座付き偏平形電解コンデンサ及びこれに用いる座板材
US5355880A (en) * 1992-07-06 1994-10-18 Sandia Corporation Reliable noninvasive measurement of blood gases
US5311459A (en) 1992-09-17 1994-05-10 Eastman Kodak Company Selectively configurable integrated circuit device for performing multiple digital signal processing functions
US6002880A (en) 1992-12-29 1999-12-14 Philips Electronics North America Corporation VLIW processor with less instruction issue slots than functional units
US5717947A (en) 1993-03-31 1998-02-10 Motorola, Inc. Data processing system and method thereof
US5519864A (en) 1993-12-27 1996-05-21 Intel Corporation Method and apparatus for scheduling the dispatch of instructions from a reservation station
JP3547482B2 (ja) 1994-04-15 2004-07-28 株式会社日立製作所 情報処理装置
US5887183A (en) 1995-01-04 1999-03-23 International Business Machines Corporation Method and system in a data processing system for loading and storing vectors in a plurality of modes
US5850530A (en) 1995-12-18 1998-12-15 International Business Machines Corporation Method and apparatus for improving bus efficiency by enabling arbitration based upon availability of completion data
US6061521A (en) * 1996-12-02 2000-05-09 Compaq Computer Corp. Computer having multimedia operations executable as two distinct sets of operations within a single instruction cycle
US5909572A (en) * 1996-12-02 1999-06-01 Compaq Computer Corp. System and method for conditionally moving an operand from a source register to a destination register
US6587573B1 (en) 2000-03-20 2003-07-01 Gentex Corporation System for controlling exterior vehicle lights
US6289138B1 (en) * 1997-04-30 2001-09-11 Canon Kabushiki Kaisha General image processor
US6349379B2 (en) * 1997-04-30 2002-02-19 Canon Kabushiki Kaisha System for executing instructions having flag for indicating direct or indirect specification of a length of operand data
US5918062A (en) * 1997-10-23 1999-06-29 Advanced Micro Devices, Inc. Microprocessor including an efficient implemention of an accumulate instruction
US6446190B1 (en) 1998-03-12 2002-09-03 Bops, Inc. Register file indexing methods and apparatus for providing indirect control of register addressing in a VLIW processor
JP3941252B2 (ja) 1998-08-07 2007-07-04 マツダ株式会社 車両の位置検出装置
KR100326702B1 (ko) 1999-03-16 2002-03-12 이계안 차선이탈 경보장치의 실 도로폭 산출방법
US6425090B1 (en) 1999-06-25 2002-07-23 International Business Machines Corporation Method for just-in-time delivery of load data utilizing alternating time intervals
US6847365B1 (en) 2000-01-03 2005-01-25 Genesis Microchip Inc. Systems and methods for efficient processing of multimedia data
US6654507B2 (en) 2000-12-14 2003-11-25 Eastman Kodak Company Automatically producing an image of a portion of a photographic image
GB2370438A (en) 2000-12-22 2002-06-26 Hewlett Packard Co Automated image cropping using selected compositional rules.
JP2002333978A (ja) 2001-05-08 2002-11-22 Nec Corp Ｖｌｉｗ型プロセッサ
KR100440953B1 (ko) 2001-08-18 2004-07-21 삼성전자주식회사 영상 압축 비트 스트림의 트랜스코딩 방법
US6882755B2 (en) 2001-10-19 2005-04-19 Hewlett-Packard Development Company, L.P. Image transmission for low bandwidth with region of interest
JP3822515B2 (ja) 2002-03-29 2006-09-20 株式会社東芝 障害物検知装置及びその方法
FI118654B (fi) * 2002-11-06 2008-01-31 Nokia Corp Menetelmä ja järjestelmä laskuoperaatioiden suorittamiseksi ja laite
US7068817B2 (en) * 2002-11-07 2006-06-27 Mcmaster University Method for on-line machine vision measurement, monitoring and control of product features during on-line manufacturing processes
US20040164228A1 (en) 2003-02-21 2004-08-26 Fogg Jeremy A. Automatic vehicle exterior light control system assemblies
SE526424C2 (sv) 2003-06-02 2005-09-13 Lear Corp Aktivt mörkerseendesystem för ett inre passagerarutrymme hos ett fordon samt metod för att styra nämnda system
WO2005015355A2 (en) 2003-08-07 2005-02-17 Matsushita Electric Industrial Co., Ltd. Automatic image cropping system and method for use with portable devices equipped with digital cameras
JP4300098B2 (ja) 2003-11-13 2009-07-22 日本電信電話株式会社 オブジェクト識別方法とその装置、プログラム及び記録媒体
US7219085B2 (en) 2003-12-09 2007-05-15 Microsoft Corporation System and method for accelerating and optimizing the processing of machine learning techniques using a graphics processing unit
GB2409062C (en) 2003-12-09 2007-12-11 Advanced Risc Mach Ltd Aliasing data processing registers
US20050162445A1 (en) 2004-01-22 2005-07-28 Lumapix Method and system for interactive cropping of a graphical object within a containing region
US20060072847A1 (en) 2004-10-01 2006-04-06 Microsoft Corporation System for automatic image cropping based on image saliency
JP4282583B2 (ja) 2004-10-29 2009-06-24 シャープ株式会社 動画編集装置及び方法
US8913830B2 (en) 2005-01-18 2014-12-16 Siemens Aktiengesellschaft Multilevel image segmentation
TW200630833A (en) 2005-02-23 2006-09-01 Northern Taiwan Inst Of Science And Technology Method and device using intelligent theory to design heat dissipation opening of computer housing
TW200630819A (en) 2005-02-23 2006-09-01 Northern Taiwan Inst Of Science And Technology Method of using intelligent theory to design heat dissipation module and device thereof
TW200630834A (en) 2005-02-23 2006-09-01 Northern Taiwan Inst Of Science And Technology Method and device using intelligent theory to evaluate permeability of heat pipe
US20060224533A1 (en) 2005-03-14 2006-10-05 Thaler Stephen L Neural network development and data analysis tool
US8106956B2 (en) 2005-06-27 2012-01-31 Nokia Corporation Digital camera devices and methods for implementing digital zoom in digital camera devices and corresponding program products
US7533071B2 (en) 2005-06-28 2009-05-12 Neurosciences Research Foundation, Inc. Neural modeling and brain-based devices using special purpose processor
US7747070B2 (en) 2005-08-31 2010-06-29 Microsoft Corporation Training convolutional neural networks on graphics processing units
US20070255903A1 (en) 2006-05-01 2007-11-01 Meir Tsadik Device, system and method of accessing a memory
JP4388939B2 (ja) 2006-09-25 2009-12-24 富士フイルム株式会社 画像再生装置ならびにその制御方法およびその制御プログラム
US11625761B2 (en) 2007-09-06 2023-04-11 Mohammad A. Mazed System and method for machine learning and augmented reality based user application
US20090016571A1 (en) 2007-03-30 2009-01-15 Louis Tijerina Blur display for automotive night vision systems with enhanced form perception from low-resolution camera images
US7904867B2 (en) 2007-04-04 2011-03-08 Synopsys, Inc. Integrating a boolean SAT solver into a router
US20090113182A1 (en) 2007-10-24 2009-04-30 Abernathy Christopher M System and Method for Issuing Load-Dependent Instructions from an Issue Queue in a Processing Unit
JP4513865B2 (ja) 2008-01-25 2010-07-28 セイコーエプソン株式会社 並列演算装置および並列演算方法
US8108328B2 (en) 2008-07-17 2012-01-31 Tokyo Electron Limited Neural network based hermite interpolator for scatterometry parameter estimation
US8165380B2 (en) 2008-09-11 2012-04-24 PACSPLUS Co., Ltd. Method, apparatus and program for processing mammographic image
JP2010079840A (ja) * 2008-09-29 2010-04-08 Nec Electronics Corp デジタル演算回路
JP2010114731A (ja) 2008-11-07 2010-05-20 Toshiba Corp カメラモジュールの製造方法
CN101742324A (zh) 2008-11-14 2010-06-16 北京中星微电子有限公司 视频编解码方法、视频编解码系统及编解码器
JP5376920B2 (ja) 2008-12-04 2013-12-25 キヤノン株式会社 コンボリューション演算回路、階層的コンボリューション演算回路及び物体認識装置
KR100966288B1 (ko) 2009-01-06 2010-06-28 주식회사 이미지넥스트 주변 영상 생성 방법 및 장치
KR101082878B1 (ko) 2009-01-29 2011-11-11 연세대학교 산학협력단 홍채 영상 복원 방법
CN101477692B (zh) 2009-02-13 2012-08-22 阿里巴巴集团控股有限公司 图像特征提取方法及装置
US8284997B2 (en) 2009-03-11 2012-10-09 Honeywell International Inc. Vision-based vehicle navigation system and method
US20120110491A1 (en) 2009-04-27 2012-05-03 Vincent Charles Cheung Method, system and computer product for distribution of data objects
US8406515B2 (en) 2009-06-24 2013-03-26 Hewlett-Packard Development Company, L.P. Method for automatically cropping digital images
US8442927B2 (en) 2009-07-30 2013-05-14 Nec Laboratories America, Inc. Dynamically configurable, multi-ported co-processor for convolutional neural networks
JP2013501993A (ja) 2009-08-11 2013-01-17 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 表示用の画像を供給する方法及び装置
EP2362706B1 (en) * 2010-02-23 2013-10-09 BlackBerry Limited Method and apparatus for opportunistic communication scheduling in a wireless communication network using motion information
US8509526B2 (en) 2010-04-13 2013-08-13 International Business Machines Corporation Detection of objects in digital images
JP5503419B2 (ja) 2010-06-03 2014-05-28 株式会社日立製作所 無人搬送車および走行制御方法
US10645344B2 (en) 2010-09-10 2020-05-05 Avigilion Analytics Corporation Video system with intelligent visual display
US8509982B2 (en) 2010-10-05 2013-08-13 Google Inc. Zone driving
JP5656563B2 (ja) 2010-11-02 2015-01-21 キヤノン株式会社 文書管理システム、文書管理システムの制御方法、プログラム
JP5170226B2 (ja) 2010-12-10 2013-03-27 カシオ計算機株式会社 画像処理装置、画像処理方法、及びプログラム
US8924455B1 (en) 2011-02-25 2014-12-30 Xilinx, Inc. Multiplication of matrices using systolic arrays
CA2769788C (en) * 2011-03-23 2019-08-13 Trusted Positioning Inc. Methods of attitude and misalignment estimation for constraint free portable navigation
CN103609101A (zh) 2011-06-16 2014-02-26 爱信精机株式会社 车辆周边监视装置
JP5911165B2 (ja) 2011-08-05 2016-04-27 株式会社メガチップス 画像認識装置
CN103890781B (zh) 2011-08-25 2017-11-21 康奈尔大学 用于机器视觉的视网膜编码器
US8773498B2 (en) 2011-09-30 2014-07-08 Polycom, Inc. Background compression and resolution enhancement technique for video telephony and video conferencing
US8588470B2 (en) 2011-11-18 2013-11-19 Xerox Corporation Methods and systems for improved license plate signature matching by similarity learning on synthetic images
US8594217B2 (en) 2011-12-06 2013-11-26 The Mathworks, Inc. Parallel implementation of maximum a posteriori probability decoder
US20130159665A1 (en) 2011-12-15 2013-06-20 Verisilicon Holdings Co., Ltd. Specialized vector instruction and datapath for matrix multiplication
US10157060B2 (en) 2011-12-29 2018-12-18 Intel Corporation Method, device and system for control signaling in a data path module of a data stream processing engine
US9430391B2 (en) 2012-03-29 2016-08-30 Advanced Micro Devices, Inc. Managing coherent memory between an accelerated processing device and a central processing unit
US9586455B2 (en) 2012-03-29 2017-03-07 Toyota Jidosha Kabushiki Kaisha Road surface condition estimating apparatus
JP5863536B2 (ja) 2012-03-29 2016-02-16 富士重工業株式会社 車外監視装置
US9738223B2 (en) 2012-05-31 2017-08-22 GM Global Technology Operations LLC Dynamic guideline overlay with image cropping
US9208432B2 (en) 2012-06-01 2015-12-08 Brain Corporation Neural network learning and collaboration apparatus and methods
US8976269B2 (en) 2012-06-22 2015-03-10 California Institute Of Technology Compressive sensing based bio-inspired shape feature detection CMOS imager
US9008422B2 (en) 2012-06-28 2015-04-14 Lexmark International, Inc. Methods of content-driven image cropping
JP6044134B2 (ja) 2012-06-29 2016-12-14 カシオ計算機株式会社 最適画像サイズによる画像領域分割装置、方法、およびプログラム
CN102737236B (zh) 2012-07-06 2015-06-24 北京大学 一种基于多模态传感器数据自动获取车辆训练样本方法
JP6011104B2 (ja) 2012-07-24 2016-10-19 株式会社デンソー 車両用視界支援装置
WO2014025772A2 (en) 2012-08-06 2014-02-13 University Of Miami Systems and methods for responsive neurorehabilitation
US9477925B2 (en) 2012-11-20 2016-10-25 Microsoft Technology Licensing, Llc Deep neural networks training for speech and pattern recognition
US9081385B1 (en) 2012-12-21 2015-07-14 Google Inc. Lane boundary detection using images
US9811775B2 (en) 2012-12-24 2017-11-07 Google Inc. Parallelizing neural networks during training
US9501276B2 (en) 2012-12-31 2016-11-22 Intel Corporation Instructions and logic to vectorize conditional loops
US9754154B2 (en) 2013-02-15 2017-09-05 Microsoft Technology Licensing, Llc Identification using depth-based head-detection data
US9177192B2 (en) 2013-02-28 2015-11-03 Progyny, Inc. Apparatus, method, and system for image-based human embryo cell classification
US9764468B2 (en) 2013-03-15 2017-09-19 Brain Corporation Adaptive predictor apparatus and methods
US9165203B2 (en) 2013-03-15 2015-10-20 Arris Technology, Inc. Legibility enhancement for a logo, text or other region of interest in video
CN103236037B (zh) 2013-04-03 2016-05-11 北京航空航天大学 基于分层退化模型的无人机实时图像模拟方法
US9542643B2 (en) 2013-05-21 2017-01-10 Qualcomm Incorporated Efficient hardware implementation of spiking networks
JP2015004922A (ja) 2013-06-24 2015-01-08 株式会社ニコン 焦点調節装置及び撮像装置
CN103366339B (zh) 2013-06-25 2017-11-28 厦门龙谛信息系统有限公司 车载多广角摄像头图像合成处理装置及方法
GB2518589B (en) 2013-07-30 2019-12-11 Holition Ltd Image processing
US9317775B2 (en) 2013-08-14 2016-04-19 Ricoh Co., Ltd. Recognition procedure for identifying multiple items in images
CN103500322B (zh) 2013-09-10 2016-08-17 北京航空航天大学 基于低空航拍图像的车道线自动识别方法
JP5951570B2 (ja) * 2013-09-13 2016-07-13 株式会社東芝 行列演算装置
US20150104102A1 (en) 2013-10-11 2015-04-16 Universidade De Coimbra Semantic segmentation method with second-order pooling
US9978014B2 (en) * 2013-12-18 2018-05-22 Intel Corporation Reconfigurable processing unit
US9448936B2 (en) 2014-01-13 2016-09-20 Apple Inc. Concurrent store and load operations
US10832057B2 (en) 2014-02-28 2020-11-10 Second Spectrum, Inc. Methods, systems, and user interface navigation of video content based spatiotemporal pattern recognition
US10769446B2 (en) 2014-02-28 2020-09-08 Second Spectrum, Inc. Methods and systems of combining video content with one or more augmentations
WO2015134996A1 (en) 2014-03-07 2015-09-11 Pelican Imaging Corporation System and methods for depth regularization and semiautomatic interactive matting using rgb-d images
US9275289B2 (en) 2014-03-27 2016-03-01 Xerox Corporation Feature- and classifier-based vehicle headlight/shadow removal in video
US9384402B1 (en) 2014-04-10 2016-07-05 Google Inc. Image and video compression for remote vehicle assistance
JP2015215837A (ja) 2014-05-13 2015-12-03 株式会社デンソー 演算処理装置
JP2016013793A (ja) 2014-07-03 2016-01-28 株式会社デンソー 画像表示装置、画像表示方法
US20150046332A1 (en) 2014-08-08 2015-02-12 Brighterion, Inc. Behavior tracking smart agents for artificial intelligence fraud protection and management
SG10201405182WA (en) 2014-08-25 2016-03-30 Univ Singapore Technology & Design Method and system
US10824952B2 (en) 2014-09-22 2020-11-03 International Business Machines Corporation Reconfigurable array processor for pattern matching
WO2016048108A1 (en) 2014-09-26 2016-03-31 Samsung Electronics Co., Ltd. Image processing apparatus and image processing method
US20160132786A1 (en) 2014-11-12 2016-05-12 Alexandru Balan Partitioning data for training machine-learning classifiers
EP3035249B1 (en) * 2014-12-19 2019-11-27 Intel Corporation Method and apparatus for distributed and cooperative computation in artificial neural networks
CN105809655B (zh) 2014-12-30 2021-06-29 清华大学 车辆检查方法和系统
US9916540B2 (en) 2015-01-22 2018-03-13 Microsoft Technology Licensing, Llc Scalable-effort classifiers for energy-efficient machine learning
KR102534792B1 (ko) 2015-02-10 2023-05-19 모빌아이 비젼 테크놀로지스 엘티디. 자율 주행을 위한 약도
JP6525707B2 (ja) 2015-04-23 2019-06-05 キヤノン株式会社 画像処理装置、その制御方法及びプログラム、並びに撮像装置
US9886418B2 (en) * 2015-04-28 2018-02-06 Intel Corporation Matrix operands for linear algebra operations
CN104835114A (zh) 2015-05-06 2015-08-12 山东大学 一种图像自适应显示方法
US9542751B2 (en) 2015-05-08 2017-01-10 Qualcomm Incorporated Systems and methods for reducing a plurality of bounding regions
GB201508074D0 (en) 2015-05-12 2015-06-24 Apical Ltd People detection
US10049322B2 (en) 2015-05-21 2018-08-14 Google Llc Prefetching weights for use in a neural network processor
US10438117B1 (en) 2015-05-21 2019-10-08 Google Llc Computing convolutions using a neural network processor
US9805303B2 (en) 2015-05-21 2017-10-31 Google Inc. Rotating data for neural network computations
US10192162B2 (en) 2015-05-21 2019-01-29 Google Llc Vector computation unit in a neural network processor
US10083395B2 (en) 2015-05-21 2018-09-25 Google Llc Batch processing in a neural network processor
US9721569B2 (en) * 2015-05-27 2017-08-01 Intel Corporation Gaussian mixture model accelerator with direct memory access engines corresponding to individual data streams
WO2016207875A1 (en) 2015-06-22 2016-12-29 Photomyne Ltd. System and method for detecting objects in an image
US10062010B2 (en) 2015-06-26 2018-08-28 Intel Corporation System for building a map and subsequent localization
US20160379109A1 (en) * 2015-06-29 2016-12-29 Microsoft Technology Licensing, Llc Convolutional neural networks on hardware accelerators
US10410096B2 (en) 2015-07-09 2019-09-10 Qualcomm Incorporated Context-based priors for object detection in images
JP6616608B2 (ja) 2015-07-16 2019-12-04 ルネサスエレクトロニクス株式会社 半導体装置
WO2017022908A1 (ko) 2015-08-04 2017-02-09 재단법인 아산사회복지재단 심층신경망을 이용한 골 연령 산출방법 및 프로그램
WO2017031630A1 (zh) * 2015-08-21 2017-03-02 中国科学院自动化研究所 基于参数量化的深度卷积神经网络的加速与压缩方法
US9767565B2 (en) 2015-08-26 2017-09-19 Digitalglobe, Inc. Synthesizing training data for broad area geospatial object detection
KR101738422B1 (ko) 2015-09-14 2017-05-23 한국과학기술원 다종 센서 기반 시각 신경 회로 장치 및 이를 이용한 객체 탐색 시스템, 방법
US9442496B1 (en) 2015-09-18 2016-09-13 Amazon Technologies, Inc. Active airborne noise abatement
US10282623B1 (en) 2015-09-25 2019-05-07 Apple Inc. Depth perception sensor data processing
US9886377B2 (en) * 2015-10-05 2018-02-06 Intel Corporation Pipelined convolutional operations for processing clusters
US9704045B2 (en) 2015-10-06 2017-07-11 Yahoo! Inc. User classification based upon images
US10726328B2 (en) * 2015-10-09 2020-07-28 Altera Corporation Method and apparatus for designing and implementing a convolution neural net accelerator
US10614354B2 (en) * 2015-10-07 2020-04-07 Altera Corporation Method and apparatus for implementing layers on a convolutional neural network accelerator
US11074492B2 (en) * 2015-10-07 2021-07-27 Altera Corporation Method and apparatus for performing different types of convolution operations with the same processing elements
WO2017074966A1 (en) 2015-10-26 2017-05-04 Netradyne Inc. Joint processing for embedded data inference
CN105318888B (zh) 2015-12-07 2018-08-14 北京航空航天大学 基于无人机感知的无人驾驶车辆路径规划方法
CN105550701B (zh) 2015-12-09 2018-11-06 福州华鹰重工机械有限公司 实时图像提取识别方法及装置
US10318848B2 (en) 2015-12-15 2019-06-11 Qualcomm Incorporated Methods for object localization and image classification
CN108369746A (zh) 2015-12-21 2018-08-03 罗伯特·博世有限公司 用于多相机交通工具系统的动态图像融合
US10909453B1 (en) 2015-12-29 2021-02-02 State Farm Mutual Automobile Insurance Company Method of controlling for undesired factors in machine learning models
US10482380B2 (en) 2015-12-30 2019-11-19 Amazon Technologies, Inc. Conditional parallel processing in fully-connected neural networks
US11170293B2 (en) 2015-12-30 2021-11-09 Microsoft Technology Licensing, Llc Multi-model controller
US10373019B2 (en) 2016-01-13 2019-08-06 Ford Global Technologies, Llc Low- and high-fidelity classifiers applied to road-scene images
US20170206434A1 (en) 2016-01-14 2017-07-20 Ford Global Technologies, Llc Low- and high-fidelity classifiers applied to road-scene images
CN109069072B (zh) 2016-02-08 2021-11-30 纽洛斯公司 欺骗检测系统和方法
US10599701B2 (en) 2016-02-11 2020-03-24 Ebay Inc. Semantic category classification
GB2601067B (en) 2016-03-02 2022-08-31 Holition Ltd Locating and augmenting object features in images
WO2017158622A2 (en) 2016-03-16 2017-09-21 INDIAN INSTITUTE OF TECHNOLOGY MADRAS (IIT Madras) Method for managing image data at electronic device
US10599428B2 (en) 2016-03-23 2020-03-24 Arm Limited Relaxed execution of overlapping mixed-scalar-vector instructions
EP3229172A1 (en) 2016-04-04 2017-10-11 Conti Temic microelectronic GmbH Driver assistance system with variable image resolution
US10789544B2 (en) 2016-04-05 2020-09-29 Google Llc Batching inputs to a machine learning model
US11112784B2 (en) 2016-05-09 2021-09-07 Strong Force Iot Portfolio 2016, Llc Methods and systems for communications in an industrial internet of things data collection environment with large data sets
WO2019216975A1 (en) 2018-05-07 2019-11-14 Strong Force Iot Portfolio 2016, Llc Methods and systems for data collection, learning, and streaming of machine signals for analytics and maintenance using the industrial internet of things
US10366290B2 (en) 2016-05-11 2019-07-30 Baidu Usa Llc System and method for providing augmented virtual reality content in autonomous vehicles
CN114584660A (zh) 2016-06-13 2022-06-03 谷歌有限责任公司 向人类操作员的升级
US10019009B2 (en) 2016-06-15 2018-07-10 Allstate Insurance Company Vehicle control systems
US10489972B2 (en) 2016-06-28 2019-11-26 Cognata Ltd. Realistic 3D virtual world creation and simulation for training automated driving systems
US9858636B1 (en) 2016-06-30 2018-01-02 Apple Inc. Configurable convolution engine
US20180003511A1 (en) 2016-07-01 2018-01-04 Uber Technologies, Inc. Autonomous vehicle localization using submaps
US11298072B2 (en) 2016-07-01 2022-04-12 Bostel Technologies, Llc Dermoscopy diagnosis of cancerous lesions utilizing dual deep learning algorithms via visual and audio (sonification) outputs
US20180012411A1 (en) 2016-07-11 2018-01-11 Gravity Jack, Inc. Augmented Reality Methods and Devices
WO2018017467A1 (en) 2016-07-18 2018-01-25 NantOmics, Inc. Distributed machine learning systems, apparatus, and methods
CN106295678B (zh) 2016-07-27 2020-03-06 北京旷视科技有限公司 神经网络训练与构建方法和装置以及目标检测方法和装置
CN106156754B (zh) 2016-07-29 2019-05-31 浙江工业大学 一种基于最大外切矩阵感兴趣区域提取和双边滤波的手指多模态预处理方法
US20180039853A1 (en) 2016-08-02 2018-02-08 Mitsubishi Electric Research Laboratories, Inc. Object Detection System and Object Detection Method
US10664750B2 (en) 2016-08-10 2020-05-26 Google Llc Deep machine learning to predict and prevent adverse conditions at structural assets
US10891538B2 (en) 2016-08-11 2021-01-12 Nvidia Corporation Sparse convolutional neural network accelerator
KR102462502B1 (ko) 2016-08-16 2022-11-02 삼성전자주식회사 스테레오 카메라 기반의 자율 주행 방법 및 그 장치
EP3504661B1 (en) 2016-08-24 2023-08-16 Google LLC Change detection based imagery acquisition tasking system
US10019655B2 (en) 2016-08-31 2018-07-10 Adobe Systems Incorporated Deep-learning network architecture for object detection
US10394237B2 (en) 2016-09-08 2019-08-27 Ford Global Technologies, Llc Perceiving roadway conditions from fused sensor data
US10317901B2 (en) 2016-09-08 2019-06-11 Mentor Graphics Development (Deutschland) Gmbh Low-level sensor fusion
US20180068459A1 (en) 2016-09-08 2018-03-08 Ford Global Technologies, Llc Object Distance Estimation Using Data From A Single Camera
US10467459B2 (en) 2016-09-09 2019-11-05 Microsoft Technology Licensing, Llc Object detection based on joint feature extraction
CN106419893A (zh) 2016-09-18 2017-02-22 广州视源电子科技股份有限公司 睡眠状态检测方法和装置
US10133273B2 (en) 2016-09-20 2018-11-20 2236008 Ontario Inc. Location specific assistance for autonomous vehicle control system
GB201616097D0 (en) 2016-09-21 2016-11-02 Univ Oxford Innovation Ltd Segmentation of path proposals
WO2018057978A1 (en) 2016-09-23 2018-03-29 Apple Inc. Decision making for autonomous vehicle motion control
CN106650922B (zh) 2016-09-29 2019-05-03 清华大学 硬件神经网络转换方法、计算装置、软硬件协作系统
WO2018058426A1 (zh) 2016-09-29 2018-04-05 清华大学 硬件神经网络转换方法、计算装置、编译方法和神经网络软硬件协作系统
US10514711B2 (en) 2016-10-09 2019-12-24 Airspace Systems, Inc. Flight control using computer vision
KR101851155B1 (ko) 2016-10-12 2018-06-04 현대자동차주식회사 자율 주행 제어 장치, 그를 가지는 차량 및 그 제어 방법
CN106504253A (zh) 2016-10-14 2017-03-15 国政通科技股份有限公司 一种医疗影像照片的处理方法及系统
CN107031600A (zh) 2016-10-19 2017-08-11 东风汽车公司 基于高速公路的自动驾驶系统
US10127043B2 (en) 2016-10-19 2018-11-13 Rex Computing, Inc. Implementing conflict-free instructions for concurrent operation on a processor
US10346723B2 (en) 2016-11-01 2019-07-09 Snap Inc. Neural network for object detection in images
KR102156597B1 (ko) 2016-11-03 2020-09-16 후아웨이 테크놀러지 컴퍼니 리미티드 광학 촬영 방법 및 장치
US10331974B2 (en) 2016-11-08 2019-06-25 Nec Corporation Action recognition system with landmark localization on objects in images using convolutional neural networks
US11622713B2 (en) 2016-11-16 2023-04-11 Navix International Limited Estimators for ablation effectiveness
CN106598226B (zh) 2016-11-16 2019-05-21 天津大学 一种基于双目视觉和深度学习的无人机人机交互方法
US10650071B2 (en) 2016-11-28 2020-05-12 Google Llc Search and retrieval of keyed data maintained using a keyed database
CN108122234B (zh) 2016-11-29 2021-05-04 北京市商汤科技开发有限公司 卷积神经网络训练及视频处理方法、装置和电子设备
CN106558058B (zh) 2016-11-29 2020-10-09 北京图森未来科技有限公司 分割模型训练方法、道路分割方法、车辆控制方法及装置
US10417560B2 (en) * 2016-12-01 2019-09-17 Via Alliance Semiconductor Co., Ltd. Neural network unit that performs efficient 3-dimensional convolutions
US10395165B2 (en) * 2016-12-01 2019-08-27 Via Alliance Semiconductor Co., Ltd Neural network unit with neural memory and array of neural processing units that collectively perform multi-word distance rotates of row of data received from neural memory
US10438115B2 (en) * 2016-12-01 2019-10-08 Via Alliance Semiconductor Co., Ltd. Neural network unit with memory layout to perform efficient 3-dimensional convolutions
US10529088B2 (en) 2016-12-02 2020-01-07 Gabriel Fine Automatically determining orientation and position of medically invasive devices via image processing
US10699119B2 (en) 2016-12-02 2020-06-30 GEOSAT Aerospace & Technology Methods and systems for automatic object detection from aerial imagery
US10380741B2 (en) 2016-12-07 2019-08-13 Samsung Electronics Co., Ltd System and method for a deep learning machine for object detection
KR20180068511A (ko) 2016-12-14 2018-06-22 삼성전자주식회사 영상에 포함된 도로와 관련된 정보를 결정하는 뉴럴 네트워크를 학습시키는 학습 데이터를 생성하는 장치 및 방법
US11593632B2 (en) 2016-12-15 2023-02-28 WaveOne Inc. Deep learning based on image encoding and decoding
CN110832417B (zh) 2016-12-30 2023-06-09 辉达公司 使用高清地图为自主车辆生成路线
US11023807B2 (en) 2016-12-30 2021-06-01 Microsoft Technology Licensing, Llc Neural network processor
WO2018126215A1 (en) 2016-12-30 2018-07-05 DeepMap Inc. High definition map updates
US10140574B2 (en) * 2016-12-31 2018-11-27 Via Alliance Semiconductor Co., Ltd Neural network unit with segmentable array width rotator and re-shapeable weight memory to match segment width to provide common weights to multiple rotator segments
US10565492B2 (en) * 2016-12-31 2020-02-18 Via Alliance Semiconductor Co., Ltd. Neural network unit with segmentable array width rotator
US10565494B2 (en) * 2016-12-31 2020-02-18 Via Alliance Semiconductor Co., Ltd. Neural network unit with segmentable array width rotator
US10586148B2 (en) * 2016-12-31 2020-03-10 Via Alliance Semiconductor Co., Ltd. Neural network unit with re-shapeable memory
US10262218B2 (en) 2017-01-03 2019-04-16 Qualcomm Incorporated Simultaneous object detection and rigid transform estimation using neural network
US10824934B2 (en) * 2017-01-12 2020-11-03 Texas Instruments Incorporated Methods and apparatus for matrix processing in a convolutional neural network
US10228693B2 (en) 2017-01-13 2019-03-12 Ford Global Technologies, Llc Generating simulated sensor data for training and validation of detection models
US10192016B2 (en) 2017-01-17 2019-01-29 Xilinx, Inc. Neural network based physical synthesis for circuit designs
US20180211403A1 (en) 2017-01-20 2018-07-26 Ford Global Technologies, Llc Recurrent Deep Convolutional Neural Network For Object Detection
US11210584B2 (en) * 2017-01-31 2021-12-28 International Business Machines Corporation Memory efficient convolution operations in deep learning neural networks
US10740563B2 (en) 2017-02-03 2020-08-11 Benedict R. Dugan System and methods for text classification
CN106779060B (zh) 2017-02-09 2019-03-08 武汉魅瞳科技有限公司 一种适于硬件设计实现的深度卷积神经网络的计算方法
JP2018136803A (ja) 2017-02-23 2018-08-30 株式会社日立製作所 画像認識システム
US10359783B2 (en) 2017-02-28 2019-07-23 Warfarer, Inc. Transportation system
US11132599B2 (en) 2017-02-28 2021-09-28 Microsoft Technology Licensing, Llc Multi-function unit for programmable hardware nodes for neural network processing
US10146225B2 (en) 2017-03-02 2018-12-04 GM Global Technology Operations LLC Systems and methods for vehicle dimension prediction
US10733482B1 (en) 2017-03-08 2020-08-04 Zoox, Inc. Object height estimation from monocular images
US10261786B2 (en) 2017-03-09 2019-04-16 Google Llc Vector processing unit
US10671873B2 (en) 2017-03-10 2020-06-02 Tusimple, Inc. System and method for vehicle wheel detection
US10311312B2 (en) 2017-08-31 2019-06-04 TuSimple System and method for vehicle occlusion detection
JP6665819B2 (ja) 2017-03-17 2020-03-13 トヨタ自動車株式会社 車載表示装置
US11360770B2 (en) * 2017-03-20 2022-06-14 Intel Corporation Systems, methods, and apparatuses for zeroing a matrix
US10692000B2 (en) 2017-03-20 2020-06-23 Sap Se Training machine learning models
WO2018175441A1 (en) 2017-03-20 2018-09-27 Mobileye Vision Technologies Ltd. Navigation by augmented path prediction
CN107103113B (zh) 2017-03-23 2019-01-11 中国科学院计算技术研究所 面向神经网络处理器的自动化设计方法、装置及优化方法
WO2018176000A1 (en) 2017-03-23 2018-09-27 DeepScale, Inc. Data synthesis for autonomous control systems
JP6658643B2 (ja) 2017-03-24 2020-03-04 トヨタ自動車株式会社 車両用視認装置
US9965865B1 (en) 2017-03-29 2018-05-08 Amazon Technologies, Inc. Image data segmentation using depth data
US10248121B2 (en) 2017-03-31 2019-04-02 Uber Technologies, Inc. Machine-learning based autonomous vehicle management system
US10296828B2 (en) 2017-04-05 2019-05-21 Here Global B.V. Learning a similarity measure for vision-based localization on a high definition (HD) map
WO2018187632A1 (en) 2017-04-05 2018-10-11 Carnegie Mellon University Deep learning methods for estimating density and/or flow of objects, and related methods and software
DE202017102235U1 (de) 2017-04-13 2017-05-12 Robert Bosch Gmbh Trainingssystem
US10303961B1 (en) 2017-04-13 2019-05-28 Zoox, Inc. Object detection and passenger notification
DE202017102238U1 (de) 2017-04-13 2017-05-12 Robert Bosch Gmbh Aktorsteuerungssystem
US10614111B2 (en) 2017-04-17 2020-04-07 Mammoth Medical, Llc System and method for machine-learning input-based data autogeneration
EP3612984A4 (en) 2017-04-18 2021-03-24 D5A1 Llc MULTI-LEVEL MACHINE LEARNING AND RECOGNITION
CN107169560B (zh) 2017-04-19 2020-10-16 清华大学 一种自适应可重构的深度卷积神经网络计算方法和装置
DE102018200724A1 (de) 2017-04-19 2018-10-25 Robert Bosch Gmbh Verfahren und Vorrichtung zum Verbessern der Robustheit gegen "Adversarial Examples"
CN107169421B (zh) 2017-04-20 2020-04-28 华南理工大学 一种基于深度卷积神经网络的汽车驾驶场景目标检测方法
DE202017102381U1 (de) 2017-04-21 2017-05-11 Robert Bosch Gmbh Vorrichtung zum Verbessern der Robustheit gegen "Adversarial Examples"
US10585621B2 (en) 2017-04-21 2020-03-10 Intel Corporation Statically-schedulable feed and drain structure for systolic array architecture
US10860760B2 (en) * 2017-04-21 2020-12-08 Intel Corporation Systems and methods for implementing learned parameter systems on a programmable integrated circuit
EP3616387A1 (en) 2017-04-24 2020-03-04 Carnegie Mellon University Virtual sensor system
US10460053B2 (en) 2017-04-24 2019-10-29 Toyota Research Institute, Inc. Systems and methods for surface property identification using waveform classification
US10108867B1 (en) 2017-04-25 2018-10-23 Uber Technologies, Inc. Image-based pedestrian detection
CN107133943B (zh) 2017-04-26 2018-07-06 贵州电网有限责任公司输电运行检修分公司 一种防震锤缺陷检测的视觉检测方法
US10319066B2 (en) 2017-04-27 2019-06-11 Apple Inc. Convolution engine with per-channel processing of interleaved channel data
US10318794B2 (en) 2017-04-28 2019-06-11 Microsoft Technology Licensing, Llc Intelligent auto cropping of digital images
US10838936B2 (en) 2017-05-12 2020-11-17 Harris Lee Cohen Computer-implemented methods, computer readable medium and systems for generating an orchard data model for a precision agriculture platform
US10698974B2 (en) 2017-05-17 2020-06-30 Google Llc Low latency matrix multiply unit
US10372130B1 (en) 2017-05-19 2019-08-06 Zoox, Inc. Communicating reasons for vehicle actions
US20180374105A1 (en) 2017-05-26 2018-12-27 Get Attached, Inc. Leveraging an intermediate machine learning analysis
WO2018218149A1 (en) 2017-05-26 2018-11-29 Google Llc Data fusion system
US10310087B2 (en) 2017-05-31 2019-06-04 Uber Technologies, Inc. Range-view LIDAR-based object detection
US11983641B2 (en) 2017-06-05 2024-05-14 Umajin Inc. Asset tracking system and methods
US11273553B2 (en) 2017-06-05 2022-03-15 Autodesk, Inc. Adapting simulation data to real-world conditions encountered by physical processes
US11361243B2 (en) 2017-06-07 2022-06-14 Accenture Global Solutions Limited Recommending machine learning techniques, features, and feature relevance scores
US10853739B2 (en) 2017-06-09 2020-12-01 Sap Se Machine learning models for evaluating entities in a high-volume computer network
CN108229526B (zh) 2017-06-16 2020-09-29 北京市商汤科技开发有限公司 网络训练、图像处理方法、装置、存储介质和电子设备
US10007269B1 (en) 2017-06-23 2018-06-26 Uber Technologies, Inc. Collision-avoidance system for autonomous-capable vehicle
JP7050006B2 (ja) 2017-06-28 2022-04-07 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 移動体制御装置、移動体制御方法、及び学習方法
US10567674B2 (en) 2017-06-30 2020-02-18 Harman International Industries, Incorporated Systems and methods for detecting objects in imaging systems
CN109215067B (zh) 2017-07-03 2023-03-10 百度（美国）有限责任公司 基于cnn和crf模型生成高分辨率3-d点云
US10474161B2 (en) 2017-07-03 2019-11-12 Baidu Usa Llc High resolution 3D point clouds generation from upsampled low resolution lidar 3D point clouds and camera images
US10474160B2 (en) 2017-07-03 2019-11-12 Baidu Usa Llc High resolution 3D point clouds generation from downsampled low resolution LIDAR 3D point clouds and camera images
US10671082B2 (en) 2017-07-03 2020-06-02 Baidu Usa Llc High resolution 3D point clouds generation based on CNN and CRF models
US10402687B2 (en) 2017-07-05 2019-09-03 Perceptive Automata, Inc. System and method of predicting human interaction with vehicles
JP7080594B2 (ja) 2017-07-06 2022-06-06 株式会社東芝 計測装置および方法
US10606990B2 (en) 2017-07-06 2020-03-31 Ebay Inc. Machine learning system for computing asset access
US10592785B2 (en) 2017-07-12 2020-03-17 Futurewei Technologies, Inc. Integrated system for detection of driver condition
DE102017116017A1 (de) 2017-07-17 2019-01-17 Valeo Schalter Und Sensoren Gmbh Kraftfahrzeug-Sensorvorrichtung mit mehreren Sensoreinheiten und mehreren neuronalen Netzen zum Erzeugen einer kombinierten Repräsentation einer Umgebung
US10733755B2 (en) 2017-07-18 2020-08-04 Qualcomm Incorporated Learning geometric differentials for matching 3D models to objects in a 2D image
DE102017116411B4 (de) 2017-07-20 2022-02-03 Infineon Technologies Ag Elektronischen Steuerungseinheit, Gatewayschaltung für eine elektronische Airbag-Steuerungseinheit, Sicherheitssystem für ein Fahrzeug und Umgebungssensorelement
US10579063B2 (en) 2017-07-21 2020-03-03 Uatc, Llc Machine learning for predicting locations of objects perceived by autonomous vehicles
US10650278B1 (en) 2017-07-21 2020-05-12 Apple Inc. Semantic labeling of point clouds using images
US10671349B2 (en) * 2017-07-24 2020-06-02 Tesla, Inc. Accelerated mathematical engine
US10395144B2 (en) 2017-07-24 2019-08-27 GM Global Technology Operations LLC Deeply integrated fusion architecture for automated driving systems
US11157287B2 (en) * 2017-07-24 2021-10-26 Tesla, Inc. Computational array microprocessor system with variable latency memory access
US11893393B2 (en) * 2017-07-24 2024-02-06 Tesla, Inc. Computational array microprocessor system with hardware arbiter managing memory requests
US11157441B2 (en) * 2017-07-24 2021-10-26 Tesla, Inc. Computational array microprocessor system using non-consecutive data formatting
US11409692B2 (en) * 2017-07-24 2022-08-09 Tesla, Inc. Vector computational unit
US10542930B1 (en) 2017-07-25 2020-01-28 BlueOwl, LLC Audio assessment for analyzing sleep trends using machine learning techniques
CN107451659B (zh) 2017-07-27 2020-04-10 清华大学 用于位宽分区的神经网络加速器及其实现方法
CN107368926B (zh) 2017-07-28 2018-07-10 中南大学 一种智能环境运载机器人识别楼层的多自然传感参数融合处理方法
JP7002729B2 (ja) 2017-07-31 2022-01-20 株式会社アイシン 画像データ生成装置、画像認識装置、画像データ生成プログラム、及び画像認識プログラム
EP3651055A4 (en) 2017-08-01 2020-10-21 Huawei Technologies Co., Ltd. METHOD, APPARATUS AND DEVICE FOR GESTURE RECOGNITION
CN109389552B (zh) 2017-08-02 2023-03-28 中山大学 一种基于上下文相关多任务深度学习的图像超分辨算法
US11170288B2 (en) 2017-08-03 2021-11-09 Facebook, Inc. Systems and methods for predicting qualitative ratings for advertisements based on machine learning
KR102601604B1 (ko) 2017-08-04 2023-11-13 삼성전자주식회사 뉴럴 네트워크의 파라미터들을 양자화하는 방법 및 장치
KR102541559B1 (ko) 2017-08-04 2023-06-08 삼성전자주식회사 관심 객체를 검출하는 방법 및 장치
US10656657B2 (en) 2017-08-08 2020-05-19 Uatc, Llc Object motion prediction and autonomous vehicle control
US10423934B1 (en) 2017-08-10 2019-09-24 Zoox, Inc. Automated vehicle diagnostics and maintenance
CN108229647A (zh) 2017-08-18 2018-06-29 北京市商汤科技开发有限公司 神经网络结构的生成方法和装置、电子设备、存储介质
US10167800B1 (en) 2017-08-18 2019-01-01 Microsoft Technology Licensing, Llc Hardware node having a matrix vector unit with block-floating point processing
US10860924B2 (en) 2017-08-18 2020-12-08 Microsoft Technology Licensing, Llc Hardware node having a mixed-signal matrix vector unit
US20190228037A1 (en) 2017-08-19 2019-07-25 Wave Computing, Inc. Checkpointing data flow graph computation for machine learning
US10216189B1 (en) 2017-08-23 2019-02-26 Uber Technologies, Inc. Systems and methods for prioritizing object prediction for autonomous vehicles
US11455565B2 (en) 2017-08-31 2022-09-27 Ford Global Technologies, Llc Augmenting real sensor recordings with simulated sensor data
US10783381B2 (en) 2017-08-31 2020-09-22 Tusimple, Inc. System and method for vehicle occlusion detection
US10629080B2 (en) 2017-08-31 2020-04-21 Uatc Llc Autonomous vehicles featuring vehicle intention system
US20190072978A1 (en) 2017-09-01 2019-03-07 GM Global Technology Operations LLC Methods and systems for generating realtime map information
US11430331B2 (en) 2017-09-08 2022-08-30 Uatc, Llc Power and thermal management systems and methods for autonomous vehicles
US20190079526A1 (en) 2017-09-08 2019-03-14 Uber Technologies, Inc. Orientation Determination in Object Detection and Tracking for Autonomous Vehicles
JP6939307B2 (ja) 2017-09-19 2021-09-22 トヨタ自動車株式会社 水系リチウムイオン二次電池、負極活物質複合体の製造方法及び水系リチウムイオン二次電池の製造方法
US10402646B2 (en) 2017-09-21 2019-09-03 Amazon Technologies, Inc. Object detection and avoidance for aerial vehicles
CN107507134B (zh) 2017-09-21 2020-09-11 大连理工大学 基于卷积神经网络的超分辨率方法
US10551297B2 (en) 2017-09-22 2020-02-04 Saudi Arabian Oil Company Thermography image processing with neural networks to identify corrosion under insulation (CUI)
US10891715B2 (en) 2017-09-22 2021-01-12 Continental Automotive Systems, Inc. Deep neural network for image enhancement
CN111226257B (zh) 2017-09-22 2024-03-01 豪夫迈·罗氏有限公司 组织图像中的伪像移除
US20190095946A1 (en) 2017-09-25 2019-03-28 Get Attached, Inc. Automatically analyzing media using a machine learning model trained on user engagement information
US10546197B2 (en) 2017-09-26 2020-01-28 Ambient AI, Inc. Systems and methods for intelligent and interpretive analysis of video image data using machine learning
CN110809784B (zh) 2017-09-27 2021-04-20 谷歌有限责任公司 高分辨率图像分割的端到端网络模型
US10679129B2 (en) 2017-09-28 2020-06-09 D5Ai Llc Stochastic categorical autoencoder network
CA3076912C (en) 2017-09-29 2023-05-02 United Parcel Service Of America, Inc. Predictive parcel damage identification, analysis, and mitigation
CN107742311B (zh) 2017-09-29 2020-02-18 北京易达图灵科技有限公司 一种视觉定位的方法及装置
US10872531B2 (en) 2017-09-29 2020-12-22 Uber Technologies, Inc. Image processing for vehicle collision avoidance system
WO2019067695A1 (en) 2017-10-01 2019-04-04 Airspace Systems, Inc. FLIGHT CONTROL USING VISION BY COMPUTER
US20190101914A1 (en) 2017-10-02 2019-04-04 Allstate Insurance Company Data Processing System with Machine Learning Engine for Providing Driving Data Analysis and Vehicle Control Functions
US10579897B2 (en) 2017-10-02 2020-03-03 Xnor.ai Inc. Image based object detection
US10678997B2 (en) 2017-10-05 2020-06-09 Microsoft Technology Licensing, Llc Machine learned models for contextual editing of social networking profiles
US10733262B2 (en) 2017-10-05 2020-08-04 Adobe Inc. Attribute control for updating digital content in a digital medium environment
US11748653B2 (en) 2017-10-05 2023-09-05 DataRobot, Inc. Machine learning abstraction
WO2019070290A1 (en) 2017-10-06 2019-04-11 Hitachi, Ltd. MANAGEMENT AND EXECUTION OF A REPAIR
DE102017123452A1 (de) 2017-10-10 2019-04-11 Connaught Electronics Ltd. Verfahren zum Erzeugen eines ein Kraftfahrzeug und einen Umgebungsbereich des Kraftfahrzeugs in einer vorbestimmten Zielansicht zeigenden Ausgangsbildes, Kamerasystem sowie Kraftfahrzeug
US10652565B1 (en) 2017-10-12 2020-05-12 Amazon Technologies, Inc. Image compression and decompression using embeddings
CN107622258B (zh) 2017-10-16 2020-10-30 中南大学 一种结合静态底层特征和运动信息的快速行人检测方法
US10796221B2 (en) 2017-10-19 2020-10-06 General Electric Company Deep learning architecture for automated image feature extraction
US20190122111A1 (en) 2017-10-24 2019-04-25 Nec Laboratories America, Inc. Adaptive Convolutional Neural Knowledge Graph Learning System Leveraging Entity Descriptions
US20200250515A1 (en) 2017-10-27 2020-08-06 Google Llc Systems and Methods for Improved Optimization of Machine-Learned Models
US10467501B2 (en) 2017-10-30 2019-11-05 Sap Se Computer vision architecture with machine learned image recognition models
CN107729998B (zh) 2017-10-31 2020-06-05 中国科学院计算技术研究所 一种用于神经网络处理器的方法
US10346721B2 (en) 2017-11-01 2019-07-09 Salesforce.Com, Inc. Training a neural network using augmented training datasets
US11521068B2 (en) 2017-11-02 2022-12-06 The Trustees Of Princeton University Method and system for neural network synthesis
KR102589303B1 (ko) 2017-11-02 2023-10-24 삼성전자주식회사 고정 소수점 타입의 뉴럴 네트워크를 생성하는 방법 및 장치
US11054811B2 (en) 2017-11-03 2021-07-06 Drishti Technologies, Inc. Systems and methods for line balancing
EP3625697A1 (en) 2017-11-07 2020-03-25 Google LLC Semantic state based sensor tracking and updating
US10591914B2 (en) 2017-11-08 2020-03-17 GM Global Technology Operations LLC Systems and methods for autonomous vehicle behavior control
US11635815B2 (en) 2017-11-13 2023-04-25 Bios Health Ltd Neural interface
US20190147112A1 (en) 2017-11-13 2019-05-16 Facebook, Inc. Systems and methods for ranking ephemeral content item collections associated with a social networking system
US10678839B2 (en) 2017-11-13 2020-06-09 Facebook, Inc. Systems and methods for ranking ephemeral content item collections associated with a social networking system
US10824862B2 (en) 2017-11-14 2020-11-03 Nuro, Inc. Three-dimensional object detection for autonomous robotic systems using image proposals
US11061402B2 (en) 2017-11-15 2021-07-13 Uatc, Llc Sparse convolutional neural networks
WO2019099622A1 (en) 2017-11-15 2019-05-23 Uber Technologies, Inc. Autonomous vehicle lane boundary detection systems and methods
KR102095335B1 (ko) 2017-11-15 2020-03-31 에스케이텔레콤 주식회사 연산 가속화가 적용된 신경망 모델의 생성 및 활용을 위한 장치 및 방법
US20190147255A1 (en) 2017-11-15 2019-05-16 Uber Technologies, Inc. Systems and Methods for Generating Sparse Geographic Data for Autonomous Vehicles
US11475351B2 (en) 2017-11-15 2022-10-18 Uatc, Llc Systems and methods for object detection, tracking, and motion prediction
US11556777B2 (en) 2017-11-15 2023-01-17 Uatc, Llc Continuous convolution and fusion in neural networks
US10970553B2 (en) 2017-11-15 2021-04-06 Uatc, Llc Semantic segmentation of three-dimensional data
US10803328B1 (en) 2017-11-15 2020-10-13 Uatc, Llc Semantic and instance segmentation
US10803325B2 (en) 2017-11-15 2020-10-13 Uatc, Llc Autonomous vehicle lane boundary detection systems and methods
US20190145765A1 (en) 2017-11-15 2019-05-16 Uber Technologies, Inc. Three Dimensional Object Detection
US11080537B2 (en) 2017-11-15 2021-08-03 Uatc, Llc Autonomous vehicle lane boundary detection systems and methods
US10828790B2 (en) 2017-11-16 2020-11-10 Google Llc Component feature detector for robotic systems
KR102073351B1 (ko) 2017-11-17 2020-02-05 주식회사 하이퍼커넥트 서버 및 그것의 동작 방법
US10698868B2 (en) 2017-11-17 2020-06-30 Accenture Global Solutions Limited Identification of domain information for use in machine learning models
EP3486674A1 (en) 2017-11-17 2019-05-22 Koninklijke Philips N.V. Artificial intelligence-enabled localization of anatomical landmarks
US10409898B2 (en) 2017-11-17 2019-09-10 Adobe Inc. Generating a targeted summary of textual content tuned to a target audience vocabulary
US10535138B2 (en) 2017-11-21 2020-01-14 Zoox, Inc. Sensor data segmentation
US20180074506A1 (en) 2017-11-21 2018-03-15 GM Global Technology Operations LLC Systems and methods for mapping roadway-interfering objects in autonomous vehicles
CN107885214A (zh) 2017-11-22 2018-04-06 济南浪潮高新科技投资发展有限公司 一种基于fpga的加速自动驾驶视觉感知的方法及装置
US11989861B2 (en) 2017-11-28 2024-05-21 Intel Corporation Deep learning-based real-time detection and correction of compromised sensors in autonomous machines
JP2019101535A (ja) 2017-11-29 2019-06-24 コニカミノルタ株式会社 教師データ作成装置および該方法ならびに画像セグメンテーション装置および該方法
CN111656367A (zh) 2017-12-04 2020-09-11 优创半导体科技有限公司 神经网络加速器的系统和体系结构
DE102017128825A1 (de) 2017-12-05 2018-01-25 FEV Europe GmbH Doppelkupplungsgetriebe für einen Hybrid-Antriebsstrang und Hybrid-Fahrzeug
US10762396B2 (en) 2017-12-05 2020-09-01 Utac, Llc Multiple stage image based object detection and recognition
US10693740B2 (en) 2017-12-07 2020-06-23 Accenture Global Solutions Limited Data transformation of performance statistics and ticket information for network devices for use in machine learning models
US10528824B2 (en) 2017-12-11 2020-01-07 GM Global Technology Operations LLC Artificial neural network for lane feature classification and localization
US10747844B2 (en) * 2017-12-12 2020-08-18 Tesla, Inc. Systems and methods for converting a matrix input to a vectorized input for a matrix processor
US10768628B2 (en) 2017-12-12 2020-09-08 Uatc, Llc Systems and methods for object detection at various ranges using multiple range imagery
RU2691214C1 (ru) 2017-12-13 2019-06-11 Общество с ограниченной ответственностью "Аби Продакшн" Распознавание текста с использованием искусственного интеллекта
US10599958B2 (en) 2017-12-14 2020-03-24 Avigilon Corporation Method and system for classifying an object-of-interest using an artificial neural network
KR101969864B1 (ko) 2017-12-15 2019-04-18 동국대학교 산학협력단 객체영상과 배경영상의 상호 연동에 기반한 영상 합성 방법
US20190185010A1 (en) 2017-12-18 2019-06-20 PlusAI Corp Method and system for self capability aware route planning in autonomous driving vehicles
US11183274B2 (en) 2017-12-18 2021-11-23 International Business Machines Corporation Analysis of answers to questions
US11587264B2 (en) 2017-12-18 2023-02-21 Motorola Solutions, Inc. Method and device for generating an augmented image
WO2019122952A1 (en) 2017-12-18 2019-06-27 PlusAI Corp Method and system for personalized motion planning in autonomous driving vehicles
US10713502B2 (en) 2017-12-19 2020-07-14 Micron Technology, Inc. Providing autonomous vehicle assistance
DE102017130566B4 (de) 2017-12-19 2021-07-22 Mekra Lang Gmbh & Co. Kg Sichtsystem zur Erfassung einer Fahrzeugumgebung und Spiegelersatzsystem für ein Fahrzeug mit einem Sichtsystem
US10402986B2 (en) 2017-12-20 2019-09-03 Facebook, Inc. Unsupervised video segmentation
US10535191B2 (en) 2017-12-21 2020-01-14 Luminar Technologies, Inc. Object identification and labeling tool for training autonomous vehicle controllers
WO2019126755A1 (en) 2017-12-21 2019-06-27 Fugro N.V. Generating and classifying training data for machine learning functions
US10872254B2 (en) 2017-12-22 2020-12-22 Texas Instruments Incorporated Digital mirror systems for vehicles and methods of operating the same
US10748247B2 (en) 2017-12-26 2020-08-18 Facebook, Inc. Computing high-resolution depth images using machine learning techniques
US10657418B2 (en) 2017-12-27 2020-05-19 International Business Machines Corporation Object detection on local devices using remotely generated machine learning models
WO2019127363A1 (zh) 2017-12-29 2019-07-04 清华大学 神经网络权重编码方法、计算装置及硬件系统
US10755115B2 (en) 2017-12-29 2020-08-25 Here Global B.V. Method, apparatus, and system for generating synthetic image data for machine learning
CN108111873B (zh) 2017-12-29 2020-04-14 国网山东省电力公司泰安供电公司 一种基于机器学习的gis图像数据传输方法
US20190204842A1 (en) 2018-01-02 2019-07-04 GM Global Technology Operations LLC Trajectory planner with dynamic cost learning for autonomous driving
US11170006B2 (en) 2018-01-03 2021-11-09 Facebook, Inc. Machine-learning model for ranking diverse content
US10657391B2 (en) 2018-01-05 2020-05-19 Uatc, Llc Systems and methods for image-based free space detection
US10896763B2 (en) 2018-01-12 2021-01-19 Koninklijke Philips N.V. System and method for providing model-based treatment recommendation via individual-specific machine learning models
US11161464B2 (en) 2018-01-12 2021-11-02 Uatc, Llc Systems and methods for streaming processing for autonomous vehicles
EP3514494A1 (en) 2018-01-19 2019-07-24 Zenuity AB Constructing and updating a behavioral layer of a multi layered road network high definition digital map
US10909368B2 (en) 2018-01-23 2021-02-02 X Development Llc Crop type classification in images
US20180150081A1 (en) 2018-01-24 2018-05-31 GM Global Technology Operations LLC Systems and methods for path planning in autonomous vehicles
CN108399362B (zh) 2018-01-24 2022-01-07 中山大学 一种快速行人检测方法及装置
SG11202007109QA (en) 2018-01-26 2020-08-28 Ge Inspection Technologies Lp Generating natural language recommendations based on an industrial language model
KR102098713B1 (ko) 2018-01-29 2020-04-08 주식회사 유엑스팩토리 Cnn과 rnn이 하나의 고성능 저전력 칩으로 집적된 이기종 프로세서 구조
WO2019152308A1 (en) 2018-01-30 2019-08-08 D5Ai Llc Self-organizing partially ordered networks
US10962973B2 (en) 2018-01-30 2021-03-30 Uatc, Llc Autonomous vehicle safe stop
US10733668B2 (en) 2018-01-30 2020-08-04 PointPredictive Inc. Multi-layer machine learning classifier
CN110096937A (zh) 2018-01-31 2019-08-06 北京四维图新科技股份有限公司 一种用于辅助车辆自动驾驶的图像识别的方法及装置
US11561791B2 (en) * 2018-02-01 2023-01-24 Tesla, Inc. Vector computational unit receiving data elements in parallel from a last row of a computational array
DE112019000065T5 (de) 2018-02-02 2020-03-05 Nvidia Corporation Sicherheitsprozeduranalyse zur hindernisvermeidung in einem autonomen fahrzeug
US20190244138A1 (en) 2018-02-08 2019-08-08 Apple Inc. Privatized machine learning using generative adversarial networks
US10996683B2 (en) 2018-02-09 2021-05-04 Skydio, Inc. Aerial vehicle touchdown detection
WO2019157193A1 (en) 2018-02-09 2019-08-15 Nvidia Corporation Controlling autonomous vehicles using safe arrival times
US10489126B2 (en) 2018-02-12 2019-11-26 Oracle International Corporation Automated code generation
CN110147698A (zh) 2018-02-13 2019-08-20 Kpit技术有限责任公司 用于车道检测的系统和方法
US10955851B2 (en) 2018-02-14 2021-03-23 Zoox, Inc. Detecting blocking objects
KR101996167B1 (ko) 2018-02-14 2019-07-03 동국대학교 산학협력단 자율 무인 이동체를 학습하기 위한 학습용 이미지를 생성하는 장치 및 그 방법
US10839578B2 (en) 2018-02-14 2020-11-17 Smarter Reality, LLC Artificial-intelligence enhanced visualization of non-invasive, minimally-invasive and surgical aesthetic medical procedures
US10805629B2 (en) 2018-02-17 2020-10-13 Google Llc Video compression through motion warping using learning-based motion segmentation
DE112019000049T5 (de) 2018-02-18 2020-01-23 Nvidia Corporation Für autonomes fahren geeignete objekterfassung und erfassungssicherheit
US10628432B2 (en) 2018-02-19 2020-04-21 Microsoft Technology Licensing, Llc Personalized deep models for smart suggestions ranking
US20190266610A1 (en) 2018-02-21 2019-08-29 Accenture Global Solutions Limited Transaction management using machine learning and similarity analysis
US20200380362A1 (en) 2018-02-23 2020-12-03 Asml Netherlands B.V. Methods for training machine learning model for computation lithography
CN110197270B (zh) 2018-02-27 2020-10-30 上海寒武纪信息科技有限公司 集成电路芯片装置及相关产品
KR102022388B1 (ko) 2018-02-27 2019-09-18 (주)캠시스 실세계 물체 정보를 이용한 카메라 공차 보정 시스템 및 방법
US10997433B2 (en) 2018-02-27 2021-05-04 Nvidia Corporation Real-time detection of lanes and boundaries by autonomous vehicles
US11501105B2 (en) 2018-03-02 2022-11-15 Zoox, Inc. Automatic creation and updating of maps
US10990832B2 (en) 2018-03-06 2021-04-27 Phantom AI, Inc. Lane line reconstruction using future scenes and trajectory
KR101967339B1 (ko) 2018-03-06 2019-04-09 단국대학교 산학협력단 심층학습 기반의 ａｄａｓ 센서 고장 진단 및 백업을 위한 장치 및 방법
US10223611B1 (en) 2018-03-08 2019-03-05 Capital One Services, Llc Object detection using image classification models
US10621513B2 (en) 2018-03-08 2020-04-14 Capital One Services, Llc System and method for deploying and versioning machine learning models
US10157331B1 (en) 2018-03-08 2018-12-18 Capital One Services, Llc Systems and methods for image preprocessing to improve accuracy of object recognition
US10572757B2 (en) 2018-03-09 2020-02-25 Ricoh Co., Ltd. User interface for object detection and labeling
US10628686B2 (en) 2018-03-12 2020-04-21 Waymo Llc Neural networks for object detection and characterization
US10798368B2 (en) 2018-03-13 2020-10-06 Lyft, Inc. Exposure coordination for multiple cameras
US10755112B2 (en) 2018-03-13 2020-08-25 Toyota Research Institute, Inc. Systems and methods for reducing data storage in machine learning
JP7418340B2 (ja) 2018-03-13 2024-01-19 マジック リープ， インコーポレイテッド 機械学習を使用した画像増強深度感知
US20190286972A1 (en) 2018-03-14 2019-09-19 Microsoft Technology Licensing, Llc Hardware accelerated neural network subgraphs
US11221413B2 (en) 2018-03-14 2022-01-11 Uatc, Llc Three-dimensional object detection
US20190287028A1 (en) 2018-03-15 2019-09-19 Arm Ltd. Systems, devices, and/or processes for behavioral content processing
KR102329590B1 (ko) 2018-03-19 2021-11-19 에스알아이 인터내셔널 딥 신경망들의 동적 적응
US11429862B2 (en) 2018-03-20 2022-08-30 Sri International Dynamic adaptation of deep neural networks
US11657087B2 (en) 2018-03-19 2023-05-23 Verily Life Sciences Llc Surgical video retrieval based on preoperative images
US10901508B2 (en) 2018-03-20 2021-01-26 X Development Llc Fused electroencephalogram and machine learning for precognitive brain-computer interface for computer control
WO2019183087A1 (en) 2018-03-20 2019-09-26 Phantom AI, Inc. Data augmentation using computer simulated objects for autonomous control systems
US20190294975A1 (en) 2018-03-21 2019-09-26 Swim.IT Inc Predicting using digital twins
WO2019182782A1 (en) 2018-03-21 2019-09-26 Zoox, Inc. Generating maps without shadows
US10699477B2 (en) 2018-03-21 2020-06-30 Zoox, Inc. Generating maps without shadows
US10836379B2 (en) 2018-03-23 2020-11-17 Sf Motors, Inc. Multi-network-based path generation for vehicle parking
US10627818B2 (en) 2018-03-28 2020-04-21 Zoox, Inc. Temporal prediction model for semantic intent understanding
WO2019191578A1 (en) 2018-03-30 2019-10-03 Wave Computing, Inc. Data flow graph computation for machine learning
CN108491889A (zh) 2018-04-02 2018-09-04 深圳市易成自动驾驶技术有限公司 图像语义分割方法、装置及计算机可读存储介质
US10140544B1 (en) 2018-04-02 2018-11-27 12 Sigma Technologies Enhanced convolutional neural network for image segmentation
US10776939B2 (en) 2018-04-03 2020-09-15 Altumview Systems Inc. Obstacle avoidance system based on embedded stereo vision for unmanned aerial vehicles
US10468062B1 (en) 2018-04-03 2019-11-05 Zoox, Inc. Detecting errors in sensor data
US10887433B2 (en) 2018-04-03 2021-01-05 Pony Ai Inc. System and method for incremental data processing
US20190311290A1 (en) 2018-04-06 2019-10-10 Mentor Graphics Corporation Deep Learning Based Test Compression Analyzer
US10414395B1 (en) 2018-04-06 2019-09-17 Zoox, Inc. Feature-based prediction
US10725475B2 (en) 2018-04-09 2020-07-28 Toyota Jidosha Kabushiki Kaisha Machine learning enhanced vehicle merging
US10769494B2 (en) 2018-04-10 2020-09-08 Pony Ai Inc. Enhanced training information generation
US10740914B2 (en) 2018-04-10 2020-08-11 Pony Ai Inc. Enhanced three-dimensional training data generation
US11132444B2 (en) 2018-04-16 2021-09-28 International Business Machines Corporation Using gradients to detect backdoors in neural networks
CN108520247B (zh) 2018-04-16 2020-04-28 腾讯科技（深圳）有限公司 对图像中的对象节点的识别方法、装置、终端及可读介质
US10816992B2 (en) 2018-04-17 2020-10-27 Baidu Usa Llc Method for transforming 2D bounding boxes of objects into 3D positions for autonomous driving vehicles (ADVs)
CN115393536A (zh) 2018-04-18 2022-11-25 移动眼视力科技有限公司 利用相机进行车辆环境建模
US20200151692A1 (en) 2018-04-18 2020-05-14 Sbot Technologies, Inc. d/b/a Caper Inc. Systems and methods for training data generation for object identification and self-checkout anti-theft
US10321728B1 (en) 2018-04-20 2019-06-18 Bodygram, Inc. Systems and methods for full body measurements extraction
US11030486B2 (en) 2018-04-20 2021-06-08 XNOR.ai, Inc. Image classification through label progression
US11244484B2 (en) 2018-04-23 2022-02-08 Accenture Global Solutions Limited AI-driven design platform
DE102018206208A1 (de) 2018-04-23 2019-10-24 Robert Bosch Gmbh Verfahren, Vorrichtung, Erzeugnis und Computerprogramm zum Betreiben eines technischen Systems
US10565475B2 (en) 2018-04-24 2020-02-18 Accenture Global Solutions Limited Generating a machine learning model for objects based on augmenting the objects with physical properties
CN108549934B (zh) 2018-04-25 2020-06-19 福州瑞芯微电子股份有限公司 一种基于自动集群神经网络芯片组的运算方法和装置
US20190329790A1 (en) 2018-04-25 2019-10-31 Uber Technologies, Inc. Systems and Methods for Using Machine Learning to Determine Passenger Ride Experience
CN108647591A (zh) 2018-04-25 2018-10-12 长沙学院 一种基于视觉-语义特征的视频中行为识别方法和系统
US11138745B2 (en) 2018-04-30 2021-10-05 Uatc, Llc Object association for autonomous vehicles
US11334753B2 (en) 2018-04-30 2022-05-17 Uatc, Llc Traffic signal state classification for autonomous vehicles
US11244195B2 (en) 2018-05-01 2022-02-08 Adobe Inc. Iteratively applying neural networks to automatically identify pixels of salient objects portrayed in digital images
US10803743B2 (en) 2018-05-02 2020-10-13 Lyft, Inc. Monitoring ambient light for object detection
US11494200B2 (en) 2018-05-02 2022-11-08 Microsoft Technology Licensing, Llc. Configuring an electronic device using artificial intelligence
US20190340499A1 (en) 2018-05-04 2019-11-07 Microsoft Technology Licensing, Llc Quantization for dnn accelerators
US10699140B2 (en) 2018-05-04 2020-06-30 Qualcomm Incorporated System and method for capture and distribution of information collected from signs
US11645493B2 (en) 2018-05-04 2023-05-09 Microsoft Technology Licensing, Llc Flow for quantized neural networks
JP7440420B2 (ja) 2018-05-07 2024-02-28 グーグル エルエルシー 包括的機械学習サービスを提供するアプリケーション開発プラットフォームおよびソフトウェア開発キット
CN112088383A (zh) 2018-05-10 2020-12-15 松下半导体解决方案株式会社 神经网络构筑装置、信息处理装置、神经网络构筑方法及程序
US10748021B2 (en) 2018-05-11 2020-08-18 Samsung Electronics Co., Ltd. Method of analyzing objects in images recorded by a camera of a head mounted device
US20190349571A1 (en) 2018-05-11 2019-11-14 Ford Global Technologies, Llc Distortion correction for vehicle surround view camera projections
WO2019220436A2 (en) 2018-05-14 2019-11-21 BrainVu Ltd. Driver predictive mental response profile and application to automated vehicle brain interface control
US10776626B1 (en) 2018-05-14 2020-09-15 Amazon Technologies, Inc. Machine learning based identification of visually complementary item collections
US20190354850A1 (en) 2018-05-17 2019-11-21 International Business Machines Corporation Identifying transfer models for machine learning tasks
US11164016B2 (en) 2018-05-17 2021-11-02 Uatc, Llc Object detection and property determination for autonomous vehicles
US11126873B2 (en) 2018-05-17 2021-09-21 Zoox, Inc. Vehicle lighting state determination
US11301733B2 (en) 2018-05-18 2022-04-12 Google Llc Learning data augmentation strategies for object detection
US11138471B2 (en) 2018-05-18 2021-10-05 Google Llc Augmentation of audiographic images for improved machine learning
CN108710865B (zh) 2018-05-28 2022-04-22 电子科技大学 一种基于神经网络的司机异常行为检测方法
US20190373322A1 (en) 2018-05-29 2019-12-05 Sony Interactive Entertainment LLC Interactive Video Content Delivery
US11491350B2 (en) 2018-05-30 2022-11-08 Siemens Healthcare Gmbh Decision support system for individualizing radiotherapy dose
US20190370575A1 (en) 2018-05-31 2019-12-05 Uber Technologies, Inc. Systems and Methods for Implementing Trip Checks for Vehicles
TWI681366B (zh) 2018-05-31 2020-01-01 廣達電腦股份有限公司 非線性延展裁切影像之方法及系統
US20190370398A1 (en) 2018-06-01 2019-12-05 SayMosaic Inc. Method and apparatus for searching historical data
CN108764185B (zh) 2018-06-01 2022-07-19 京东方科技集团股份有限公司 一种图像处理方法及装置
US11966835B2 (en) * 2018-06-05 2024-04-23 Nvidia Corp. Deep neural network accelerator with fine-grained parallelism discovery
US20190042944A1 (en) 2018-06-08 2019-02-07 Intel Corporation Artificial neural network training using flexible floating point tensors
US11334960B2 (en) 2018-06-08 2022-05-17 Uatc, Llc Systems and methods for pipelined processing of sensor data using hardware
US20190378051A1 (en) 2018-06-12 2019-12-12 Bank Of America Corporation Machine learning system coupled to a graph structure detecting outlier patterns using graph scanning
US20190378049A1 (en) 2018-06-12 2019-12-12 Bank Of America Corporation Ensemble of machine learning engines coupled to a graph structure that spreads heat
US11740630B2 (en) 2018-06-12 2023-08-29 Skydio, Inc. Fitness and sports applications for an autonomous unmanned aerial vehicle
WO2019241022A1 (en) 2018-06-13 2019-12-19 Nvidia Corporation Path detection for autonomous machines using deep neural networks
SG11201811261SA (en) 2018-06-14 2020-01-30 Beijing Didi Infinity Technology & Development Co Ltd Systems and methods for updating a high-resolution map based on binocular images
US11370423B2 (en) 2018-06-15 2022-06-28 Uatc, Llc Multi-task machine-learned models for object intention determination in autonomous driving
US11341356B2 (en) 2018-06-15 2022-05-24 Uatc, Llc System and method for determining object intention through visual attributes
US11048265B2 (en) 2018-06-18 2021-06-29 Zoox, Inc. Occlusion aware planning
JP7422687B2 (ja) 2018-06-18 2024-01-26 ズークス インコーポレイテッド オクルージョン認識プランニング
US10642275B2 (en) 2018-06-18 2020-05-05 Zoox, Inc. Occulsion aware planning and control
US11966838B2 (en) 2018-06-19 2024-04-23 Nvidia Corporation Behavior-guided path planning in autonomous machine applications
US11501140B2 (en) 2018-06-19 2022-11-15 International Business Machines Corporation Runtime reconfigurable neural network processor core
US10726264B2 (en) 2018-06-25 2020-07-28 Microsoft Technology Licensing, Llc Object-based localization
CN108898177A (zh) 2018-06-26 2018-11-27 广东电网有限责任公司 一种输电线路走廊地表分类方法、系统、介质及设备
CN113056390A (zh) 2018-06-26 2021-06-29 伊泰·卡茨 情境驾驶员监控系统
CN108845574B (zh) 2018-06-26 2021-01-12 北京旷视机器人技术有限公司 目标识别与追踪方法、装置、设备及介质
US10685159B2 (en) 2018-06-27 2020-06-16 Intel Corporation Analog functional safety with anomaly detection
US11454975B2 (en) 2018-06-28 2022-09-27 Uatc, Llc Providing actionable uncertainties in autonomous vehicles
US10810445B1 (en) 2018-06-29 2020-10-20 Zoox, Inc. Pipeline with point cloud filtering
US10921817B1 (en) 2018-06-29 2021-02-16 Zoox, Inc. Point cloud filtering with semantic segmentation
CN109086867B (zh) 2018-07-02 2021-06-08 武汉魅瞳科技有限公司 一种基于fpga的卷积神经网络加速系统
US11500477B2 (en) 2018-07-02 2022-11-15 Google Llc Systems and methods for interacting and interfacing with an artificial intelligence system
KR20200004700A (ko) 2018-07-04 2020-01-14 삼성전자주식회사 뉴럴 네트워크에서 파라미터를 처리하는 방법 및 장치
US10685188B1 (en) 2018-07-06 2020-06-16 Facebook, Inc. Systems and methods for training machine learning models for language clusters
US11537906B2 (en) 2018-07-12 2022-12-27 The Regents Of The University Of California Machine learning based target localization for autonomous unmanned vehicles
JP7140580B2 (ja) 2018-07-13 2022-09-21 マクセル株式会社 ステレオ撮像装置
WO2020018394A1 (en) 2018-07-14 2020-01-23 Moove.Ai Vehicle-data analytics
EP3985684A1 (en) 2018-07-18 2022-04-20 NVIDIA Corporation Virtualized computing platform for inferencing, advanced processing, and machine learning applications
US10901416B2 (en) 2018-07-19 2021-01-26 Honda Motor Co., Ltd. Scene creation system for autonomous vehicles and methods thereof
US11042157B2 (en) 2018-07-23 2021-06-22 Baidu Usa Llc Lane/object detection and tracking perception system for autonomous vehicles
US20200033865A1 (en) 2018-07-24 2020-01-30 Qualcomm Incorporated Managing Cleaning Robot Behavior
US10768629B2 (en) 2018-07-24 2020-09-08 Pony Ai Inc. Generative adversarial network enriched driving simulation
US11636333B2 (en) 2018-07-26 2023-04-25 Tesla, Inc. Optimizing neural network structures for embedded systems
US11353871B2 (en) 2018-07-30 2022-06-07 Pony Ai Inc. Systems and methods for vehicle smart seats
US11284051B2 (en) 2018-07-30 2022-03-22 Pony Ai Inc. Systems and methods for autonomous vehicle interactive content presentation
US20200034665A1 (en) 2018-07-30 2020-01-30 DataRobot, Inc. Determining validity of machine learning algorithms for datasets
WO2020025696A1 (en) 2018-07-31 2020-02-06 Deutsches Krebsforschungszentrum Stiftung des öffentlichen Rechts Method and system for augmented imaging using multispectral information
US11584379B2 (en) 2018-08-06 2023-02-21 Honda Motor Co., Ltd. System and method for learning naturalistic driving behavior based on vehicle dynamic data
US10706308B2 (en) 2018-08-07 2020-07-07 Accenture Global Solutions Limited Image processing for automated object identification
US10609434B2 (en) 2018-08-07 2020-03-31 Adobe Inc. Machine-learning based multi-step engagement strategy generation and visualization
US10733638B1 (en) 2018-08-08 2020-08-04 Facebook, Inc. Analyzing tracking requests generated by client devices based on attributes describing items
US11138350B2 (en) 2018-08-09 2021-10-05 Zoox, Inc. Procedural world generation using tertiary data
WO2020034663A1 (en) 2018-08-13 2020-02-20 The Hong Kong Polytechnic University Grid-based image cropping
US11861458B2 (en) 2018-08-21 2024-01-02 Lyft, Inc. Systems and methods for detecting and recording anomalous vehicle events
US20200065879A1 (en) 2018-08-22 2020-02-27 Midea Group Co., Ltd. Methods and systems for home device recommendation
US10871444B2 (en) 2018-08-30 2020-12-22 Saudi Arabian Oil Company Inspection and failure detection of corrosion under fireproofing insulation using a hybrid sensory system
US10755575B2 (en) 2018-08-30 2020-08-25 Cisco Technology, Inc. Raw sensor data sharing for enhanced fleet-wide environmental awareness and safety
US11521009B2 (en) 2018-09-04 2022-12-06 Luminar, Llc Automatically generating training data for a lidar using simulated vehicles in virtual space
US11307584B2 (en) 2018-09-04 2022-04-19 Skydio, Inc. Applications and skills for an autonomous unmanned aerial vehicle
US10839230B2 (en) 2018-09-06 2020-11-17 Ford Global Technologies, Llc Multi-tier network for task-oriented deep neural network
US20200158822A1 (en) 2018-09-06 2020-05-21 Airspace Systems, Inc. Unmanned aerial vehicle radar detection
WO2020056157A1 (en) 2018-09-12 2020-03-19 Electra Vehicles, Inc. Systems and methods for managing energy storage systems
US11195030B2 (en) 2018-09-14 2021-12-07 Honda Motor Co., Ltd. Scene classification
US11465630B2 (en) 2018-09-14 2022-10-11 Uatc, Llc Driving surface friction estimations using vehicle steering
US11427223B2 (en) 2018-09-14 2022-08-30 Uatc, Llc Driving surface friction estimations for autonomous vehicles
EP3627399B1 (en) 2018-09-19 2024-08-14 Tata Consultancy Services Limited Systems and methods for real time configurable recommendation using user data
GB2577485B (en) 2018-09-20 2022-06-15 Jaguar Land Rover Ltd Control system for a vehicle
US11449771B2 (en) 2018-09-21 2022-09-20 Woven Planet North America, Inc. Systems and methods for processing vehicle data
US10846888B2 (en) 2018-09-26 2020-11-24 Facebook Technologies, Llc Systems and methods for generating and transmitting image sequences based on sampled color information
DE102018216413A1 (de) 2018-09-26 2020-03-26 Robert Bosch Gmbh Vorrichtung und Verfahren zur automatischen Bildverbesserung bei Fahrzeugen
CN109359731B (zh) 2018-09-27 2022-01-28 中科物栖（北京）科技有限责任公司 一种基于芯片设计缺陷的神经网络处理方法及装置
US11526713B2 (en) 2018-09-28 2022-12-13 Intel Corporation Embedding human labeler influences in machine learning interfaces in computing environments
EP3807821A1 (en) 2018-09-28 2021-04-21 Apple Inc. Distributed labeling for supervised learning
US10943101B2 (en) 2018-09-28 2021-03-09 Accenture Global Solutions Limited Target recognition and verification using image processing techniques and/or artifical intelligence
KR102354615B1 (ko) 2018-09-28 2022-01-24 바이두닷컴 타임즈 테크놀로지(베이징) 컴퍼니 리미티드 자율 주행 차량의 저속 정경을 위한 보행자 상호 작용 시스템
US11169531B2 (en) 2018-10-04 2021-11-09 Zoox, Inc. Trajectory prediction on top-down scenes
US11403509B2 (en) 2018-10-08 2022-08-02 Google Llc Systems and methods for providing feedback for artificial intelligence-based image capture devices
CN109389207A (zh) 2018-10-09 2019-02-26 四川理工学院 一种自适应神经网络学习方法及神经网络系统
US11403565B2 (en) 2018-10-10 2022-08-02 Wipro Limited Method and system for generating a learning path using machine learning
KR102545105B1 (ko) 2018-10-10 2023-06-19 현대자동차주식회사 차량용 허위 타겟 판별 장치 및 그의 허위 타겟 판별 방법과 그를 포함하는 차량
US11068724B2 (en) 2018-10-11 2021-07-20 Baidu Usa Llc Deep learning continuous lane lines detection system for autonomous vehicles
US11704568B2 (en) 2018-10-16 2023-07-18 Carnegie Mellon University Method and system for hand activity sensing
US11430025B2 (en) 2018-10-19 2022-08-30 Airbnb, Inc. Synthetic data generation modeling system
US11676244B2 (en) 2018-10-19 2023-06-13 Mineral Earth Sciences Llc Crop yield prediction at field-level and pixel-level
MX2021004475A (es) 2018-10-19 2021-06-04 Climate Llc Tecnica de aprendizaje automatico para identificar nubes y sombras de nubes en imagenes satelitales.
US11163998B2 (en) 2018-10-22 2021-11-02 Woven Planet North America, Inc. Systems and methods for automated image labeling for images captured from vehicles
US11568260B2 (en) 2018-10-29 2023-01-31 Google Llc Exponential modeling with deep learning features
US11055866B2 (en) 2018-10-29 2021-07-06 Samsung Electronics Co., Ltd System and method for disparity estimation using cameras with different fields of view
KR20200052444A (ko) 2018-10-30 2020-05-15 삼성전자주식회사 신경망을 이용하여 예측 결과를 출력하는 방법, 신경망을 생성하는 방법 및 그 장치들
CN109579856A (zh) 2018-10-31 2019-04-05 百度在线网络技术（北京）有限公司 高精度地图生成方法、装置、设备及计算机可读存储介质
US11829143B2 (en) 2018-11-02 2023-11-28 Aurora Operations, Inc. Labeling autonomous vehicle data
US11403492B2 (en) 2018-11-02 2022-08-02 Aurora Operations, Inc. Generating labeled training instances for autonomous vehicles
US11604992B2 (en) 2018-11-02 2023-03-14 Microsoft Technology Licensing, Llc Probabilistic neural network architecture generation
US20200143279A1 (en) 2018-11-06 2020-05-07 DeepSig Inc. Radio frequency band segmentation, signal detection and labelling using machine learning
CN111158355A (zh) 2018-11-07 2020-05-15 富华科精密工业（深圳）有限公司 自动导航云服务器及自动导航控制方法
EP3877867A4 (en) 2018-11-08 2022-07-27 Evangelos Simoudis VEHICLE DATA MANAGEMENT SYSTEMS AND METHODS
US11481665B2 (en) 2018-11-09 2022-10-25 Hewlett Packard Enterprise Development Lp Systems and methods for determining machine learning training approaches based on identified impacts of one or more types of concept drift
US11124185B2 (en) 2018-11-13 2021-09-21 Zoox, Inc. Perception collision avoidance
WO2020101246A1 (en) 2018-11-13 2020-05-22 Samsung Electronics Co., Ltd. Joint unsupervised object segmentation and inpainting
US11461583B2 (en) 2018-11-16 2022-10-04 Uatc, Llc Binary feature compression for autonomous devices
WO2020102733A1 (en) 2018-11-16 2020-05-22 Nvidia Corporation Learning to generate synthetic datasets for training neural networks
US11461963B2 (en) 2018-11-16 2022-10-04 Uatc, Llc Systems and methods for generating synthetic light detection and ranging data via machine learning
US11449713B2 (en) 2018-11-16 2022-09-20 Uatc, Llc Attention based feature compression and localization for autonomous devices
US11217012B2 (en) 2018-11-16 2022-01-04 Uatc, Llc System and method for identifying travel way features for autonomous vehicle motion control
US11755018B2 (en) 2018-11-16 2023-09-12 Uatc, Llc End-to-end interpretable motion planner for autonomous vehicles
US20200162489A1 (en) 2018-11-16 2020-05-21 Airspace Systems, Inc. Security event detection and threat assessment
US11494937B2 (en) 2018-11-16 2022-11-08 Uatc, Llc Multi-task multi-sensor fusion for three-dimensional object detection
US11354820B2 (en) 2018-11-17 2022-06-07 Uatc, Llc Image based localization system
US11346950B2 (en) 2018-11-19 2022-05-31 Huawei Technologies Co., Ltd. System, device and method of generating a high resolution and high accuracy point cloud
US10904072B2 (en) 2018-11-19 2021-01-26 Accenture Global Solutions Limited System and method for recommending automation solutions for technology infrastructure issues
US10853670B2 (en) 2018-11-21 2020-12-01 Ford Global Technologies, Llc Road surface characterization using pose observations of adjacent vehicles
KR102701601B1 (ko) 2018-11-21 2024-09-03 삼성전자주식회사 영상 처리 장치 및 그 제어방법
US11636681B2 (en) 2018-11-21 2023-04-25 Meta Platforms, Inc. Anticipating future video based on present video
US11423196B2 (en) 2018-11-28 2022-08-23 Toyota Research Institute, Inc. Systems and methods for predicting responses of a particle to a stimulus
US10867444B2 (en) 2018-11-29 2020-12-15 Adobe Inc. Synthetic data generation for training a machine learning model for dynamic object compositing in scenes
US11215997B2 (en) 2018-11-30 2022-01-04 Zoox, Inc. Probabilistic risk assessment for trajectory evaluation
US20200175354A1 (en) 2018-12-03 2020-06-04 Deep Learn, Inc. Time and accuracy estimate-based selection of machine-learning predictive models
CN109615073B (zh) 2018-12-03 2021-06-04 郑州云海信息技术有限公司 一种神经网络模型的构建方法、设备以及存储介质
US11816585B2 (en) 2018-12-03 2023-11-14 Tesla, Inc. Machine learning models operating at different frequencies for autonomous vehicles
US11537811B2 (en) 2018-12-04 2022-12-27 Tesla, Inc. Enhanced object detection for autonomous vehicles based on field view
US12093827B2 (en) 2018-12-04 2024-09-17 Bank Of America Corporation System and method for self constructing deep neural network design through adversarial learning
US11093783B2 (en) 2018-12-05 2021-08-17 Subaru Corporation Vehicle detection apparatus
US11048318B2 (en) 2018-12-06 2021-06-29 Intel Corporation Reducing microprocessor power with minimal performance impact by dynamically adapting runtime operating configurations using machine learning
CN113243016A (zh) 2018-12-10 2021-08-10 株式会社小糸制作所 物体识别系统、运算处理装置、汽车、车辆用灯具、分类器的学习方法
CN110084086A (zh) 2018-12-11 2019-08-02 安徽江淮汽车集团股份有限公司 一种基于视觉传感器的自动驾驶车辆可行驶区域检测方法
CN111326023B (zh) 2018-12-13 2022-03-29 丰翼科技(深圳)有限公司 一种无人机航线预警方法、装置、设备及存储介质
US10915783B1 (en) 2018-12-14 2021-02-09 Amazon Technologies, Inc. Detecting and locating actors in scenes based on degraded or supersaturated depth data
US20200193313A1 (en) 2018-12-14 2020-06-18 Parallel Machines, Inc. Interpretability-based machine learning adjustment during production
DE112019006209T5 (de) 2018-12-14 2021-09-02 Apple Inc. Maschinenlernunterstützte Bildvorhersage
US20220028052A1 (en) 2018-12-14 2022-01-27 Asml Netherlands B.V. Apparatus and method for grouping image patterns to determine wafer behavior in a patterning process
US11092966B2 (en) 2018-12-14 2021-08-17 The Boeing Company Building an artificial-intelligence system for an autonomous vehicle
KR20210006971A (ko) 2018-12-18 2021-01-19 구글 엘엘씨 지오로케이션 예측을 위한 시스템 및 방법
US10846831B2 (en) 2018-12-19 2020-11-24 GM Global Technology Operations LLC Computing system for rectifying ultra-wide fisheye lens images
US10937186B2 (en) 2018-12-19 2021-03-02 Fca Us Llc Techniques for precisely locating landmarks in monocular camera images with deep learning
JP7293644B2 (ja) 2018-12-20 2023-06-20 カシオ計算機株式会社 画像識別装置、識別器学習方法、画像識別方法及びプログラム
US10817732B2 (en) 2018-12-20 2020-10-27 Trimble Inc. Automated assessment of collision risk based on computer vision
US11443515B2 (en) 2018-12-21 2022-09-13 Ambient AI, Inc. Systems and methods for machine learning enhanced intelligent building access endpoint security monitoring and management
US11861481B2 (en) 2018-12-21 2024-01-02 Waymo Llc Searching an autonomous vehicle sensor data repository
CN109978132A (zh) 2018-12-24 2019-07-05 中国科学院深圳先进技术研究院 一种精细化车辆识别的神经网络方法及系统
CN113748315B (zh) 2018-12-27 2024-06-07 北京嘀嘀无限科技发展有限公司 用于自动车道标记的系统
US11023745B2 (en) 2018-12-27 2021-06-01 Beijing Didi Infinity Technology And Development Co., Ltd. System for automated lane marking
WO2020139357A1 (en) 2018-12-27 2020-07-02 Didi Research America, Llc Using image pre-processing to generate a machine learning model
CN109934163B (zh) 2018-12-27 2022-07-08 北京航空航天大学 一种基于场景先验和特征再融合的航空图像车辆检测方法
US11087173B2 (en) 2018-12-27 2021-08-10 Beijing Didi Infinity Technology And Development Co., Ltd. Using image pre-processing to generate a machine learning model
US11170299B2 (en) 2018-12-28 2021-11-09 Nvidia Corporation Distance estimation to objects and free-space boundaries in autonomous machine applications
EP3903243A4 (en) 2018-12-28 2022-08-31 Telefonaktiebolaget Lm Ericsson (Publ) WIRELESS DEVICE, NETWORK NODE AND RELATED METHODS FOR UPDATING A FIRST INSTANCE OF A MACHINE LEARNING MODEL
US20200209874A1 (en) 2018-12-31 2020-07-02 Chongqing Jinkang New Energy Vehicle, Ltd. Combined virtual and real environment for autonomous vehicle planning and control testing
US20200331476A1 (en) 2018-12-31 2020-10-22 Chongqing Jinkang New Energy Vehicle, Ltd. Automatic lane change with minimum gap distance
KR102097120B1 (ko) 2018-12-31 2020-04-09 주식회사 애자일소다 딥러닝 기반의 자동차 부위별 파손정도 자동 판정 시스템 및 방법
US20200210840A1 (en) 2018-12-31 2020-07-02 Microsoft Technology Licensing, Llc Adjusting precision and topology parameters for neural network training based on a performance metric
US20200209857A1 (en) 2018-12-31 2020-07-02 Uber Technologies, Inc. Multimodal control system for self driving vehicle
GB2584268B (en) * 2018-12-31 2021-06-30 Graphcore Ltd Load-Store Instruction
GB2580327B (en) * 2018-12-31 2021-04-28 Graphcore Ltd Register files in a multi-threaded processor
US20200218722A1 (en) 2019-01-04 2020-07-09 SayMosaic Inc. System and method for natural language processing (nlp) based searching and question answering
WO2020146445A1 (en) 2019-01-08 2020-07-16 Philip Christopher Du Toit Classifying perceived objects based on activity
US11294472B2 (en) 2019-01-11 2022-04-05 Microsoft Technology Licensing, Llc Augmented two-stage hand gesture input
CN109886997B (zh) 2019-01-23 2023-07-11 平安科技（深圳）有限公司 基于目标检测的识别框确定方法、装置及终端设备
US10692002B1 (en) 2019-01-28 2020-06-23 StradVision, Inc. Learning method and learning device of pedestrian detector for robust surveillance based on image analysis by using GAN and testing method and testing device using the same
CN109948428B (zh) 2019-01-28 2022-12-09 上海理工大学 面向传感信息处理的gpu集群深度学习边缘计算系统
US10373026B1 (en) 2019-01-28 2019-08-06 StradVision, Inc. Learning method and learning device for generation of virtual feature maps whose characteristics are same as or similar to those of real feature maps by using GAN capable of being applied to domain adaptation to be used in virtual driving environments
CN111488770A (zh) 2019-01-28 2020-08-04 初速度（苏州）科技有限公司 交通标志识别方法、神经网络模型的训练方法和装置
US10628688B1 (en) 2019-01-30 2020-04-21 Stadvision, Inc. Learning method and learning device, and testing method and testing device for detecting parking spaces by using point regression results and relationship between points to thereby provide an auto-parking system
US11087175B2 (en) 2019-01-30 2021-08-10 StradVision, Inc. Learning method and learning device of recurrent neural network for autonomous driving safety check for changing driving mode between autonomous driving mode and manual driving mode, and testing method and testing device using them
US20200242511A1 (en) 2019-01-30 2020-07-30 Oracle International Corporation Dynamic Data Selection for a Machine Learning Model
US10824947B2 (en) 2019-01-31 2020-11-03 StradVision, Inc. Learning method for supporting safer autonomous driving without danger of accident by estimating motions of surrounding objects through fusion of information from multiple sources, learning device, testing method and testing device using the same
US10726279B1 (en) 2019-01-31 2020-07-28 StradVision, Inc. Method and device for attention-driven resource allocation by using AVM and reinforcement learning to thereby achieve safety of autonomous driving
WO2020157761A1 (en) 2019-01-31 2020-08-06 Amnon Buxboim Automated evaluation of embryo implantation potential
US10540572B1 (en) 2019-01-31 2020-01-21 StradVision, Inc. Method for auto-labeling training images for use in deep learning network to analyze images with high precision, and auto-labeling device using the same
US10776673B2 (en) 2019-01-31 2020-09-15 StradVision, Inc. Learning method and learning device for sensor fusion to integrate information acquired by radar capable of distance estimation and information acquired by camera to thereby improve neural network for supporting autonomous driving, and testing method and testing device using the same
US10943355B2 (en) 2019-01-31 2021-03-09 Uatc, Llc Systems and methods for detecting an object velocity
US11150664B2 (en) 2019-02-01 2021-10-19 Tesla, Inc. Predicting three-dimensional features for autonomous driving
US11317863B2 (en) 2019-02-01 2022-05-03 Starkey Laboratories, Inc. Efficient wellness measurement in ear-wearable devices
BR112021015306A2 (pt) 2019-02-05 2021-10-05 Urugus S.A. Método e sistema para transferir automaticamente conhecimento em algoritmos de aprendizado por máquina
US10984575B2 (en) 2019-02-06 2021-04-20 Snap Inc. Body pose estimation
EP3924971A1 (en) 2019-02-11 2021-12-22 Flagship Pioneering Innovations VI, LLC Machine learning guided polypeptide analysis
US11635767B2 (en) 2019-02-13 2023-04-25 Semyon Nisenzon System and method of using multi-resolution camera clusters input data for controlling autonomous vehicles
US10568570B1 (en) 2019-02-14 2020-02-25 Trungram Gyaltrul Sherpa Methods and systems for providing a preferred fitness state of a user
US10726374B1 (en) 2019-02-19 2020-07-28 Icertis, Inc. Risk prediction based on automated analysis of documents
US10956755B2 (en) 2019-02-19 2021-03-23 Tesla, Inc. Estimating object properties using visual image data
US11977388B2 (en) 2019-02-21 2024-05-07 Nvidia Corporation Quantizing autoencoders in a neural network
US10970911B2 (en) 2019-02-21 2021-04-06 Facebook Technologies, Llc Graphics processing chip with machine-learning based shader
US11635764B2 (en) 2019-02-22 2023-04-25 Uatc, Llc. Motion prediction for autonomous devices
CN109902732B (zh) 2019-02-22 2021-08-27 哈尔滨工业大学（深圳） 车辆自动分类方法及相关装置
US11562176B2 (en) 2019-02-22 2023-01-24 Cisco Technology, Inc. IoT fog as distributed machine learning structure search platform
WO2020176442A1 (en) 2019-02-25 2020-09-03 Walmart Apollo, Llc Systems and methods of product recognition through multi-model image processing
US11710034B2 (en) 2019-02-27 2023-07-25 Intel Corporation Misuse index for explainable artificial intelligence in computing environments
EP3932105A1 (en) 2019-02-27 2022-01-05 Telefonaktiebolaget LM Ericsson (publ) Transfer learning for radio resource management
WO2020176304A1 (en) 2019-02-28 2020-09-03 Skidmore Owings & Merrill Llp Machine learning tool for structures
CN110223301B (zh) 2019-03-01 2021-08-03 华为技术有限公司 一种图像裁剪方法和电子设备
CN109949257B (zh) 2019-03-06 2021-09-10 西安电子科技大学 基于深度学习的感兴趣区域压缩感知图像重构方法
US10949997B2 (en) 2019-03-08 2021-03-16 Ford Global Technologies, Llc Vehicle localization systems and methods
US10930065B2 (en) 2019-03-08 2021-02-23 X Development Llc Three-dimensional modeling with two dimensional data
CN109978161B (zh) 2019-03-08 2022-03-04 吉林大学 一种通用的卷积-池化同步处理卷积核系统
US11648945B2 (en) 2019-03-11 2023-05-16 Nvidia Corporation Intersection detection and classification in autonomous machine applications
CN109902186B (zh) 2019-03-12 2021-05-11 北京百度网讯科技有限公司 用于生成神经网络的方法和装置
US20200294162A1 (en) 2019-03-13 2020-09-17 Opendoor Labs Inc. Value prediction error generation system
AU2019201716A1 (en) 2019-03-13 2020-10-01 Canon Kabushiki Kaisha System and method of generating a neural network architecture
US11483370B2 (en) 2019-03-14 2022-10-25 Hewlett-Packard Development Company, L.P. Preprocessing sensor data for machine learning
US11983909B2 (en) 2019-03-14 2024-05-14 Hewlett-Packard Development Company, L.P. Responding to machine learning requests from multiple clients
CN116569211A (zh) 2019-03-15 2023-08-08 辉达公司 使用变换训练神经网络的技术
CN109975308B (zh) 2019-03-15 2023-03-24 维库（厦门）信息技术有限公司 一种基于深度学习的表面检测方法
CN109871828B (zh) 2019-03-15 2022-12-02 京东方科技集团股份有限公司 视频识别方法和识别装置、存储介质
US11468582B2 (en) 2019-03-16 2022-10-11 Nvidia Corporation Leveraging multidimensional sensor data for computationally efficient object detection for autonomous machine applications
JP7399164B2 (ja) 2019-03-16 2023-12-15 エヌビディア コーポレーション 駐車スペース検出に適したスキューされたポリゴンを使用した物体検出
US11580386B2 (en) 2019-03-18 2023-02-14 Electronics And Telecommunications Research Institute Convolutional layer acceleration unit, embedded system having the same, and method for operating the embedded system
EP3942752A1 (en) 2019-03-19 2022-01-26 Liveperson, Inc. Dynamic communications routing to disparate endpoints
US10402641B1 (en) 2019-03-19 2019-09-03 Capital One Services, Llc Platform for document classification
US20200302288A1 (en) 2019-03-20 2020-09-24 Gyrfalcon Technology Inc. Using output equalization in training an artificial intelligence model in a semiconductor solution
US11559221B2 (en) 2019-03-22 2023-01-24 Siemens Healthcare Gmbh Multi-task progressive networks for patient modeling for medical scans
JP7240916B2 (ja) 2019-03-22 2023-03-16 ソニーセミコンダクタソリューションズ株式会社 情報処理装置、情報処理方法、および情報処理プログラム
US11548533B2 (en) 2019-03-23 2023-01-10 Uatc, Llc Perception and motion prediction for autonomous devices
CA3134819A1 (en) 2019-03-23 2020-10-01 Uatc, Llc Systems and methods for generating synthetic sensor data via machine learning
US20200302662A1 (en) 2019-03-23 2020-09-24 Uatc, Llc System and Methods for Generating High Definition Maps Using Machine-Learned Models to Analyze Topology Data Gathered From Sensors
WO2020198119A1 (en) 2019-03-23 2020-10-01 Uatc, Llc Depth estimation for autonomous devices
US11021148B2 (en) 2019-03-25 2021-06-01 Zoox, Inc. Pedestrian prediction based on attributes
CN113632096A (zh) 2019-03-25 2021-11-09 祖克斯有限公司 基于属性的行人预测
US11351991B2 (en) 2019-03-25 2022-06-07 Zoox, Inc. Prediction based on attributes
US10790919B1 (en) 2019-03-26 2020-09-29 Electronic Arts Inc. Personalized real-time audio generation based on user physiological response
CN109951710B (zh) 2019-03-26 2021-07-02 中国民航大学 基于深度学习的机坪监控视频压缩方法及系统
US11199415B2 (en) 2019-03-26 2021-12-14 Lyft, Inc. Systems and methods for estimating vehicle position based on contextual sensor information
US11276216B2 (en) 2019-03-27 2022-03-15 Electronic Arts Inc. Virtual animal character generation from image or video data
US11740335B2 (en) 2019-03-27 2023-08-29 Zoox, Inc. Identifying and/or removing false positive detections from LIDAR sensor output
US10657934B1 (en) 2019-03-27 2020-05-19 Electronic Arts Inc. Enhancements for musical composition applications
US10953334B2 (en) 2019-03-27 2021-03-23 Electronic Arts Inc. Virtual character generation from image or video data
US20220126878A1 (en) 2019-03-29 2022-04-28 Intel Corporation Autonomous vehicle system
US11709495B2 (en) 2019-03-29 2023-07-25 SafeAI, Inc. Systems and methods for transfer of material using autonomous machines with reinforcement learning and visual servo control
US10661902B1 (en) 2019-03-29 2020-05-26 QuantumID Technologies Inc Artificial intelligence system for estimating excess non-sapient payload capacity on mixed-payload aeronautic excursions
US20200311601A1 (en) 2019-03-29 2020-10-01 Optum, Inc. Hybrid rule-based and machine learning predictions
US11877801B2 (en) 2019-04-02 2024-01-23 Medicrea International Systems, methods, and devices for developing patient-specific spinal implants, treatments, operations, and/or procedures
US10559386B1 (en) 2019-04-02 2020-02-11 Kpn Innovations, Llc Methods and systems for an artificial intelligence support network for vibrant constituional guidance
WO2020198779A1 (en) 2019-04-04 2020-10-08 Presagen Pty Ltd Method and system for selecting embryos
US11250062B2 (en) 2019-04-04 2022-02-15 Kpn Innovations Llc Artificial intelligence methods and systems for generation and implementation of alimentary instruction sets
CN111797657A (zh) 2019-04-09 2020-10-20 Oppo广东移动通信有限公司 车辆周边障碍检测方法、装置、存储介质及电子设备
US11636380B2 (en) 2019-04-09 2023-04-25 Nxp B.V. Method for protecting a machine learning model against extraction using an ensemble of a plurality of machine learning models
EP3722992B1 (en) 2019-04-10 2023-03-01 Teraki GmbH System and method for pre-processing images captured by a vehicle
US10943132B2 (en) 2019-04-10 2021-03-09 Black Sesame International Holding Limited Distant on-road object detection
US11410303B2 (en) 2019-04-11 2022-08-09 Agilent Technologies Inc. Deep learning based instance segmentation via multiple regression layers
CN109961491B (zh) 2019-04-12 2023-05-26 上海联影医疗科技股份有限公司 多模态图像截断补偿方法、装置、计算机设备和介质
US11588760B2 (en) 2019-04-12 2023-02-21 Asapp, Inc. Initialization of automated workflows
US10928508B2 (en) 2019-04-12 2021-02-23 Ford Global Technologies, Llc Camera and radar fusion
EP3725354B1 (en) 2019-04-15 2023-04-12 Nxp B.V. Audio controller
US20200327449A1 (en) 2019-04-15 2020-10-15 Accenture Global Solutions Limited User retention platform
JP2020173744A (ja) 2019-04-15 2020-10-22 株式会社日立製作所 機械学習を用いた画像処理方式，およびそれを用いた電子制御装置
US11790171B2 (en) 2019-04-16 2023-10-17 Covera Health Computer-implemented natural language understanding of medical reports
JP7188255B2 (ja) 2019-04-16 2022-12-13 富士通株式会社 学習方法、学習プログラムおよび学習装置
CN109901595A (zh) 2019-04-16 2019-06-18 山东大学 一种基于单目摄像头和树莓派的自动驾驶系统及方法
US11809993B2 (en) 2019-04-18 2023-11-07 Google Llc Systems and methods for determining graph similarity
US11126890B2 (en) 2019-04-18 2021-09-21 Adobe Inc. Robust training of large-scale object detectors with a noisy dataset
US10893070B2 (en) 2019-04-18 2021-01-12 Facebook, Inc. Detecting a page for a real-world entity, an imposter of a real-world entity, or a non-real-world entity that complies with or violates a policy of an online system
CN110060202B (zh) 2019-04-19 2021-06-08 湖北亿咖通科技有限公司 一种单目slam算法的初始化方法及系统
KR20230019263A (ko) 2019-04-23 2023-02-07 딥시그 인크. 머신-러닝 네트워크를 이용한 통신 신호들의 프로세싱
US20200342968A1 (en) 2019-04-24 2020-10-29 GE Precision Healthcare LLC Visualization of medical device event processing
US11257272B2 (en) 2019-04-25 2022-02-22 Lucid VR, Inc. Generating synthetic image data for machine learning
JP7472170B2 (ja) 2019-04-26 2024-04-22 エヌビディア コーポレーション 自律マシン・アプリケーションにおける交差点姿勢検出
CN110175671B (zh) 2019-04-28 2022-12-27 华为技术有限公司 神经网络的构建方法、图像处理方法及装置
CN110111340B (zh) 2019-04-28 2021-05-14 南开大学 基于多路割的弱监督实例分割方法
US11176493B2 (en) 2019-04-29 2021-11-16 Google Llc Virtualizing external memory as local to a machine learning accelerator
GB2583509B (en) 2019-05-01 2023-02-22 Advanced Risc Mach Ltd System and method for fault detection and correction
US10789402B1 (en) 2019-05-01 2020-09-29 Xilinx, Inc. Compiler and hardware abstraction layer architecture for a neural network accelerator
US10475208B1 (en) 2019-05-02 2019-11-12 Capital One Services, Llc Vehicle analysis platform
US10924661B2 (en) 2019-05-02 2021-02-16 International Business Machines Corporation Generating image capture configurations and compositions
US11556615B2 (en) 2019-05-03 2023-01-17 Tesla, Inc. Data path for scalable matrix node engine with mixed data formats
US11557392B2 (en) 2019-05-03 2023-01-17 Gyrus Acmi, Inc. Context and state aware treatment room efficiency
CN110135485A (zh) 2019-05-05 2019-08-16 浙江大学 单目相机与毫米波雷达融合的物体识别与定位方法和系统
US11556861B2 (en) 2019-05-06 2023-01-17 Google Llc Debugging correctness issues in training machine learning models
US11461664B2 (en) 2019-05-07 2022-10-04 Kpn Innovations, Llc. Methods and systems for an artificial intelligence alimentary professional support network for vibrant constitutional guidance
US10949684B2 (en) 2019-05-08 2021-03-16 Ford Global Technologies, Llc Vehicle image verification
US10832418B1 (en) 2019-05-09 2020-11-10 Zoox, Inc. Object velocity from images
CN110334801A (zh) 2019-05-09 2019-10-15 苏州浪潮智能科技有限公司 一种卷积神经网络的硬件加速方法、装置、设备及系统
US20200356107A1 (en) 2019-05-10 2020-11-12 Uber Technologies, Inc. Walkway Detection for Autonomous Light Electric Vehicle
EP3739486A1 (en) 2019-05-14 2020-11-18 CrowdStrike, Inc. Applications of machine learning models to a binary search engine based on an inverted index of byte sequences
US20200364508A1 (en) 2019-05-14 2020-11-19 Nvidia Corporation Using decay parameters for inferencing with neural networks
CN110069071B (zh) 2019-05-15 2022-06-14 深圳铂石空间科技有限公司 无人机导航方法与装置、存储介质、电子设备
US11263467B2 (en) 2019-05-15 2022-03-01 Apical Limited Image processing
US11701771B2 (en) 2019-05-15 2023-07-18 Nvidia Corporation Grasp generation using a variational autoencoder
US11475277B2 (en) 2019-05-16 2022-10-18 Google Llc Accurate and interpretable classification with hard attention
US11869037B2 (en) 2019-05-17 2024-01-09 gStore LLC Integrating content-delivery platforms into programmatic environments generated by executed applications
KR102071179B1 (ko) 2019-05-20 2020-01-29 주식회사 루닛 데이터 셋의 연속적인 학습 방법 및 장치
KR102043143B1 (ko) 2019-05-20 2019-11-11 호서대학교 산학협력단 인공신경망을 이용한 agv 주행제어 방법 및 장치
US20200372402A1 (en) 2019-05-24 2020-11-26 Bank Of America Corporation Population diversity based learning in adversarial and rapid changing environments
US11610142B2 (en) 2019-05-28 2023-03-21 Ati Technologies Ulc Safety monitor for image misclassification
US11803981B2 (en) 2019-05-30 2023-10-31 Mobileye Vision Technologies Ltd. Vehicle environment modeling with cameras
CN110225341B (zh) 2019-06-03 2020-08-28 中国科学技术大学 一种任务驱动的码流结构化图像编码方法
KR20200142266A (ko) 2019-06-12 2020-12-22 (주)리터너블 객체 인식 시스템 및 이를 사용한 객체 인식 방법
US11928557B2 (en) 2019-06-13 2024-03-12 Lyft, Inc. Systems and methods for routing vehicles to capture and evaluate targeted scenarios
US11823460B2 (en) 2019-06-14 2023-11-21 Tusimple, Inc. Image fusion for autonomous vehicle operation
US11113568B2 (en) 2019-06-14 2021-09-07 Canon Kabushiki Kaisha Devices, systems, and methods for device-error analysis using computer vision and machine learning
US11494930B2 (en) 2019-06-17 2022-11-08 SafeAI, Inc. Techniques for volumetric estimation
KR20220024718A (ko) 2019-06-18 2022-03-03 몰로코, 인크. 머신 러닝 서비스를 제공하기 위한 방법 및 시스템
CN112101562B (zh) 2019-06-18 2024-01-30 第四范式（北京）技术有限公司 机器学习建模过程的实现方法和系统
US20200402155A1 (en) 2019-06-20 2020-12-24 Bank Of America Corporation Systems for providing real-time resource distribution to a resource event having standard delayed resource availability
US11501109B2 (en) 2019-06-20 2022-11-15 Western Digital Technologies, Inc. Non-volatile memory die with on-chip data augmentation components for use with machine learning
US11087463B2 (en) 2019-06-21 2021-08-10 StraxCorp Pty. Ltd. Image analysis method and system for assessing bone fragility
US11192558B2 (en) 2019-06-24 2021-12-07 Here Global B.V. Method, apparatus, and system for providing road curvature data
CN114008685A (zh) 2019-06-25 2022-02-01 辉达公司 用于自主机器应用的路口区域检测和分类
CN110310264B (zh) 2019-06-25 2021-07-20 北京邮电大学 一种基于dcnn的大尺度目标检测方法、装置
US20200410288A1 (en) 2019-06-26 2020-12-31 Here Global B.V. Managed edge learning in heterogeneous environments
US11158056B2 (en) 2019-06-26 2021-10-26 Intel Corporation Surround camera system with seamless stitching for arbitrary viewpoint selection
US11170567B2 (en) 2019-06-28 2021-11-09 Woven Planet North America, Inc. Dynamic object detection model based on static map collection data
US11163990B2 (en) 2019-06-28 2021-11-02 Zoox, Inc. Vehicle control system and method for pedestrian detection based on head detection in sensor data
DE102019209565A1 (de) 2019-06-28 2020-12-31 Robert Bosch Gmbh Verfahren und Vorrichtung zum Überprüfen der Robustheit eines künstlichen neuronalen Netzes
US11657094B2 (en) 2019-06-28 2023-05-23 Meta Platforms Technologies, Llc Memory grounded conversational reasoning and question answering for assistant systems
WO2020264010A1 (en) 2019-06-28 2020-12-30 Zoox, Inc. Low variance region detection for improved detection
US20210006835A1 (en) 2019-07-01 2021-01-07 Microsoft Technology Licensing, Llc Blurring to improve visual quality in an area of interest in a frame
CN110414362A (zh) 2019-07-02 2019-11-05 安徽继远软件有限公司 基于生成式对抗网络的电力图像数据增广方法
US11113689B2 (en) 2019-07-03 2021-09-07 Sap Se Transaction policy audit
US11467588B2 (en) 2019-07-03 2022-10-11 Denso International America, Inc. Systems and methods for controlling an autonomous vehicle using target orientated artificial intelligence
KR20210004306A (ko) 2019-07-04 2021-01-13 삼성전자주식회사 뉴럴 네트워크 장치 및 뉴럴 네트워크의 파라미터 양자화 방법
US11023749B2 (en) 2019-07-05 2021-06-01 Zoox, Inc. Prediction on top-down scenes based on action data
US11681925B2 (en) 2019-07-08 2023-06-20 Vianai Systems, Inc. Techniques for creating, analyzing, and modifying neural networks
US11475675B2 (en) 2019-07-08 2022-10-18 Uatc, Llc Systems and methods for identifying unknown instances
CN110321965B (zh) 2019-07-10 2021-06-18 腾讯科技（深圳）有限公司 物体重识别模型的训练方法、物体重识别的方法及装置
US11829896B2 (en) 2019-07-11 2023-11-28 Ghost Autonomy Inc. Uncertainty-based data filtering in a vehicle
US20210011908A1 (en) 2019-07-11 2021-01-14 Ghost Locomotion Inc. Model-based structured data filtering in an autonomous vehicle
US20210012239A1 (en) 2019-07-12 2021-01-14 Microsoft Technology Licensing, Llc Automated generation of machine learning models for network evaluation
US11379287B2 (en) 2019-07-17 2022-07-05 Factualvr, Inc. System and method for error detection and correction in virtual reality and augmented reality environments
US11191342B2 (en) 2019-07-18 2021-12-07 L'oreal Techniques for identifying skin color in images having uncontrolled lighting conditions
CN110473173A (zh) 2019-07-24 2019-11-19 熵智科技(深圳)有限公司 一种基于深度学习语义分割的缺陷检测方法
US10893107B1 (en) 2019-07-25 2021-01-12 Amazon Technologies, Inc. Techniques for managing processing resources
US11941976B2 (en) 2019-07-25 2024-03-26 Pony Ai Inc. System and method for sharing data collected from the street sensors
CN110599537A (zh) 2019-07-25 2019-12-20 中国地质大学（武汉） 基于Mask R-CNN的无人机图像建筑物面积计算方法及系统
US20210030276A1 (en) 2019-07-29 2021-02-04 DawnLight Technologies Inc. Remote Health Monitoring Systems and Method
CN112308095A (zh) 2019-07-30 2021-02-02 顺丰科技有限公司 图片预处理及模型训练方法、装置、服务器及存储介质
US11200456B2 (en) 2019-07-31 2021-12-14 GE Precision Healthcare LLC Systems and methods for generating augmented training data for machine learning models
CN110399875A (zh) 2019-07-31 2019-11-01 山东浪潮人工智能研究院有限公司 一种基于深度学习与像素投影的通用表格信息提取方法
US11182903B2 (en) 2019-08-05 2021-11-23 Sony Corporation Image mask generation using a deep neural network
CN110426051B (zh) 2019-08-05 2021-05-18 武汉中海庭数据技术有限公司 一种车道线绘制方法、装置及存储介质
US11449709B2 (en) 2019-08-08 2022-09-20 Nvidia Corporation Domain restriction of neural networks through synthetic data pre-training
US11531883B2 (en) 2019-08-12 2022-12-20 Bank Of America Corporation System and methods for iterative synthetic data generation and refinement of machine learning models
US11537880B2 (en) 2019-08-12 2022-12-27 Bank Of America Corporation System and methods for generation of synthetic data cluster vectors and refinement of machine learning models
US11348339B2 (en) 2019-08-13 2022-05-31 Uatc, Llc Association and tracking for autonomous devices
US11593753B2 (en) 2019-08-13 2023-02-28 United Parcel Service Of America, Inc. Multi-phase consolidation optimization tool
US11556992B2 (en) 2019-08-14 2023-01-17 Royal Bank Of Canada System and method for machine learning architecture for enterprise capitalization
US11634162B2 (en) 2019-08-16 2023-04-25 Uatc, Llc. Full uncertainty for motion planning in autonomous vehicles
CN110543837B (zh) 2019-08-16 2022-03-15 北京航空航天大学 一种基于潜在目标点的可见光机场飞机检测方法
US11302009B2 (en) 2019-08-19 2022-04-12 Fotonation Limited Method of image processing using a neural network
US11144754B2 (en) 2019-08-19 2021-10-12 Nvidia Corporation Gaze detection using one or more neural networks
US11594036B2 (en) 2019-08-21 2023-02-28 Micron Technology, Inc. Advanced driver-assistance system (ADAS) operation utilizing algorithmic skyline detection
US11232110B2 (en) 2019-08-23 2022-01-25 Capital One Services, Llc Natural language keyword tag extraction
CN110516665A (zh) 2019-08-23 2019-11-29 上海眼控科技股份有限公司 识别图像叠加文字区域的神经网络模型构建方法与系统
CN110619283B (zh) 2019-08-26 2023-01-10 海南撰云空间信息技术有限公司 一种无人机正射影像道路自动提取方法
CN110619282B (zh) 2019-08-26 2023-01-10 海南撰云空间信息技术有限公司 一种无人机正射影像建筑物自动提取方法
CN110569899B (zh) 2019-09-03 2022-06-10 嘉陵江亭子口水利水电开发有限公司 坝面缺陷分类模型训练方法及装置
CN110619330A (zh) 2019-09-18 2019-12-27 上海眼控科技股份有限公司 识别模型的训练方法、装置、计算机设备及识别方法
CN110751280A (zh) 2019-09-19 2020-02-04 华中科技大学 一种应用于卷积神经网络的可配置卷积加速器
US20210089316A1 (en) * 2019-09-25 2021-03-25 Intel Corporation Deep learning implementations using systolic arrays and fused operations
US11726950B2 (en) * 2019-09-28 2023-08-15 Intel Corporation Compute near memory convolution accelerator
CN110659628A (zh) 2019-10-09 2020-01-07 山东浪潮人工智能研究院有限公司 一种基于深度学习的煤矿监控视频解压缩方法及系统
CN110599864A (zh) 2019-10-28 2019-12-20 苏州智行众维智能科技有限公司 一种基于室内交通场景模拟传感器建模和验证装置及方法
CN110826566B (zh) 2019-11-01 2022-03-01 北京环境特性研究所 一种基于深度学习的目标切片提取方法
US10819923B1 (en) 2019-11-19 2020-10-27 Waymo Llc Thermal imaging for self-driving cars
CN110966991B (zh) 2019-11-21 2021-07-02 中国人民解放军国防科技大学 一种无控制点下的单幅无人机影像定位方法
CN110956185B (zh) 2019-11-21 2023-04-18 大连理工大学人工智能大连研究院 一种图像显著目标的检测方法
CN111307162B (zh) 2019-11-25 2020-09-25 奥特酷智能科技(南京)有限公司 用于自动驾驶场景的多传感器融合定位方法
DE102019008316A1 (de) 2019-11-29 2020-08-13 Daimler Ag Verfahren zur Objekterkennung und Abstandsbestimmung
CN111126453B (zh) 2019-12-05 2022-05-03 重庆邮电大学 基于注意力机制和切割填充的细粒度图像分类方法及系统
CN110688992B (zh) 2019-12-09 2020-08-04 中智行科技有限公司 交通信号识别方法、装置、车辆导航设备和无人驾驶车辆
CN111027549A (zh) 2019-12-10 2020-04-17 北京服装学院 一种针对女上装关键点识别方法
CN111027575B (zh) 2019-12-13 2022-06-17 广西师范大学 一种自注意对抗学习的半监督语义分割方法
US10902551B1 (en) 2019-12-17 2021-01-26 X Development Llc True positive transplant
US11536574B2 (en) 2019-12-27 2022-12-27 Intel Corporation System and method for acceleration-based vector field maps
US10796355B1 (en) 2019-12-27 2020-10-06 Capital One Services, Llc Personalized car recommendations based on customer web traffic
US10732261B1 (en) 2019-12-31 2020-08-04 Aurora Innovation, Inc. Generating data using radar observation model based on machine learning
CN111062973B (zh) 2019-12-31 2021-01-01 西安电子科技大学 基于目标特征敏感性和深度学习的车辆跟踪方法
CN111047225B (zh) 2020-01-10 2021-03-23 惠州光弘科技股份有限公司 一种基于边缘侧模型处理的smt表面组装组件焊点的质量评定方法
US11341170B2 (en) 2020-01-10 2022-05-24 Hearst Magazine Media, Inc. Automated extraction, inference and normalization of structured attributes for product data
CN111275618B (zh) 2020-01-12 2023-09-29 杭州电子科技大学 一种基于双支感知的深度图超分辨率重建网络构建方法
CN111275080B (zh) 2020-01-14 2021-01-08 腾讯科技（深圳）有限公司 基于人工智能的图像分类模型训练方法、分类方法及装置
US10845943B1 (en) 2020-02-14 2020-11-24 Carmax Business Services, Llc Systems and methods for generating a 360-degree viewing experience
CN111275129B (zh) 2020-02-17 2024-08-20 平安科技（深圳）有限公司 一种图像数据的增广策略选取方法及系统
CN111461110B (zh) 2020-03-02 2023-04-28 华南理工大学 一种基于多尺度图像和加权融合损失的小目标检测方法
CN111598095B (zh) 2020-03-09 2023-04-07 浙江工业大学 一种基于深度学习的城市道路场景语义分割方法
CN111444821B (zh) 2020-03-24 2022-03-25 西北工业大学 一种城市道路标志自动识别方法
US11455793B2 (en) 2020-03-25 2022-09-27 Intel Corporation Robust object detection and classification using static-based cameras and events-based cameras
US11597393B2 (en) 2020-03-26 2023-03-07 Intel Corporation Systems, methods, and devices for driving control
US11586854B2 (en) 2020-03-26 2023-02-21 Intel Corporation Devices and methods for accurately identifying objects in a vehicle's environment
US11568655B2 (en) 2020-03-26 2023-01-31 Intel Corporation Methods and devices for triggering vehicular actions based on passenger actions
US11886968B2 (en) 2020-03-27 2024-01-30 Intel Corporation Methods and devices for detecting objects and calculating a time to contact in autonomous driving systems
CN111445420B (zh) 2020-04-09 2023-06-06 北京爱芯科技有限公司 卷积神经网络的图像运算方法、装置和电子设备
CN111461053B (zh) 2020-04-13 2023-05-23 安徽大学 基于迁移学习的多个生育期小麦倒伏区域识别系统
CN111461052B (zh) 2020-04-13 2023-05-23 安徽大学 基于迁移学习的多个生育期小麦倒伏区域识别方法
CN111539514B (zh) 2020-04-16 2023-06-06 北京百度网讯科技有限公司 用于生成神经网络的结构的方法和装置
CN111428943B (zh) 2020-04-23 2021-08-03 福瑞泰克智能系统有限公司 障碍物车辆轨迹预测的方法、设备和计算机设备
KR102189262B1 (ko) 2020-04-29 2020-12-11 주식회사 글로벌브릿지 엣지 컴퓨팅을 이용한 교통 정보 수집 장치 및 방법
CN111565318A (zh) 2020-05-06 2020-08-21 中国科学院重庆绿色智能技术研究院 一种基于稀疏样本的视频压缩方法
CN111582216B (zh) 2020-05-15 2023-08-04 安徽师范大学 一种无人驾驶车载交通信号灯识别系统及方法
CN111693972B (zh) 2020-05-29 2022-11-15 东南大学 一种基于双目序列图像的车辆位置与速度估计方法
CN111783545A (zh) 2020-06-02 2020-10-16 山西潞安环保能源开发股份有限公司五阳煤矿 一种基于生成对抗网络的煤矿无人机图像增强方法
CN111767801B (zh) 2020-06-03 2023-06-16 中国地质大学（武汉） 一种基于深度学习的遥感影像水域自动提取方法及系统
CN111814623A (zh) 2020-06-29 2020-10-23 浙江工业大学 一种基于深度神经网络的车辆车道偏离视觉检测方法
CN111860499B (zh) 2020-07-01 2022-07-12 电子科技大学 一种基于特征分组的双线性卷积神经网络的汽车品牌识别方法
CN111783971B (zh) 2020-07-02 2024-04-09 上海赛昉科技有限公司 一种用于深度神经网络的可高度灵活配置的数据后处理器
CN111882579B (zh) 2020-07-03 2024-08-09 湖南爱米家智能科技有限公司 基于深度学习和目标跟踪的大输液异物检测方法、系统、介质及设备
CN111899227A (zh) 2020-07-06 2020-11-06 北京交通大学 基于无人机作业的铁路扣件缺陷自动采集辨识方法
CN111768002B (zh) 2020-07-10 2021-06-22 南开大学 一种基于弹性有效位的深度神经网络量化方法
CN111814902A (zh) 2020-07-21 2020-10-23 南方电网数字电网研究院有限公司 目标检测模型训练方法、目标识别方法、装置和介质
CN111898507B (zh) 2020-07-22 2022-06-03 武汉大学 一种预测无标签遥感影像地表覆盖类别的深度学习方法
CN111898523A (zh) 2020-07-29 2020-11-06 电子科技大学 一种基于迁移学习的遥感图像特种车辆目标检测方法
CN111897639B (zh) 2020-07-29 2022-12-27 平安科技（深圳）有限公司 图像增广方法、装置、计算机设备及存储介质
CN111899245B (zh) 2020-07-30 2021-03-09 推想医疗科技股份有限公司 图像分割、模型的训练方法及装置，电子设备及存储介质
CN111881856B (zh) 2020-07-31 2023-01-31 蚂蚁胜信(上海)信息技术有限公司 基于图像的车辆定损方法和装置
CN112101175B (zh) 2020-09-09 2024-05-10 沈阳帝信人工智能产业研究院有限公司 基于局部图像的高速公路车辆检测及多属性特征提取方法
CN112115953B (zh) 2020-09-18 2023-07-11 南京工业大学 一种基于rgb-d相机结合平面检测与随机抽样一致算法的优化orb算法
CN112232497A (zh) 2020-10-12 2021-01-15 苏州浪潮智能科技有限公司 一种编译ai芯片的方法、系统、设备及介质
CN112329552B (zh) 2020-10-16 2023-07-14 爱驰汽车（上海）有限公司 基于汽车的障碍物检测方法及装置
CN112348783B (zh) 2020-10-27 2022-08-05 基建通(三亚)国际科技有限公司 基于图像的人物识别方法、装置及计算机可读存储介质
CN112183739B (zh) 2020-11-02 2022-10-04 中国科学技术大学 基于忆阻器的低功耗脉冲卷积神经网络的硬件架构
CN112308799A (zh) 2020-11-05 2021-02-02 山东交通学院 基于多传感器海上道路复杂环境能见度优化屏幕显示方法
CN112288658B (zh) 2020-11-23 2023-11-28 杭州师范大学 一种基于多残差联合学习的水下图像增强方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1994010638A1 (en) * 1992-11-05 1994-05-11 The Commonwealth Of Australia Scalable dimensionless array
US20120017066A1 (en) * 2003-07-24 2012-01-19 Martin Vorbach Low latency massive parallel data processing device
US20160342891A1 (en) * 2015-05-21 2016-11-24 Google Inc. Neural Network Processor

Also Published As

Publication number Publication date
EP3659051A1 (en) 2020-06-03
MX2020000952A (es) 2020-07-22
WO2019023046A1 (en) 2019-01-31
MX2023010407A (es) 2023-09-18
KR20220140028A (ko) 2022-10-17
US10671349B2 (en) 2020-06-02
US20210048984A1 (en) 2021-02-18
KR102353241B1 (ko) 2022-01-19
JP7374236B2 (ja) 2023-11-06
CA3070972C (en) 2023-09-12
CN117171480A (zh) 2023-12-05
JP2020528621A (ja) 2020-09-24
CN111095241A (zh) 2020-05-01
EP4258182A2 (en) 2023-10-11
JP2022064892A (ja) 2022-04-26
US11698773B2 (en) 2023-07-11
JP7009609B2 (ja) 2022-01-25
US20190026078A1 (en) 2019-01-24
KR20220007709A (ko) 2022-01-18
EP3659051B1 (en) 2023-08-30
EP4258182A3 (en) 2024-01-03
US11403069B2 (en) 2022-08-02
JP2023179768A (ja) 2023-12-19
EP3659051A4 (en) 2021-04-14
KR102557589B1 (ko) 2023-07-20
CA3070972A1 (en) 2019-01-31
US20230305808A1 (en) 2023-09-28
US20220365753A1 (en) 2022-11-17
KR102452757B1 (ko) 2022-10-11
KR20230113408A (ko) 2023-07-28
CN111095241B (zh) 2023-09-12

Similar Documents

Publication Publication Date Title
KR102353241B1 (ko) 가속화된 수학 엔진
US10747844B2 (en) Systems and methods for converting a matrix input to a vectorized input for a matrix processor
US20210049463A1 (en) Low precision efficient convolutional neural network inference device that avoids multiplication without loss of accuracy
EP3676700B1 (en) Efficient direct convolution using simd instructions
KR20200081044A (ko) 뉴럴 네트워크의 컨볼루션 연산을 처리하는 방법 및 장치
CN117539546A (zh) 基于非空列存储的稀疏矩阵向量乘加速方法及装置
KR100533883B1 (ko) 그래픽스 프로세서에서의 그래픽스 데이터 처리방법과선형식 변환방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent