CN107003846A - 用于向量索引加载和存储的方法和装置 - Google Patents

用于向量索引加载和存储的方法和装置 Download PDF

Info

Publication number
CN107003846A
CN107003846A CN201580064123.4A CN201580064123A CN107003846A CN 107003846 A CN107003846 A CN 107003846A CN 201580064123 A CN201580064123 A CN 201580064123A CN 107003846 A CN107003846 A CN 107003846A
Authority
CN
China
Prior art keywords
vector
index
instruction
processor
register
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580064123.4A
Other languages
English (en)
Other versions
CN107003846B (zh
Inventor
A·杰哈
R·瓦伦天
E·乌尔德-阿迈德-瓦尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN107003846A publication Critical patent/CN107003846A/zh
Application granted granted Critical
Publication of CN107003846B publication Critical patent/CN107003846B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/30003Arrangements for executing specific machine instructions
    • G06F9/30007Arrangements for executing specific machine instructions to perform operations on data operands
    • G06F9/30036Instructions to perform operations on packed data, e.g. vector, tile or matrix operations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02Addressing or allocation; Relocation
    • G06F12/0223User address space allocation, e.g. contiguous or non contiguous base addressing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/30003Arrangements for executing specific machine instructions
    • G06F9/30007Arrangements for executing specific machine instructions to perform operations on data operands
    • G06F9/30018Bit or string instructions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/30098Register arrangements
    • G06F9/30101Special purpose registers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/76Architectures of general purpose stored program computers
    • G06F15/80Architectures of general purpose stored program computers comprising an array of processing units with common control, e.g. single instruction multiple data processors
    • G06F15/8053Vector processors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/30003Arrangements for executing specific machine instructions
    • G06F9/3004Arrangements for executing specific machine instructions to perform operations on memory
    • G06F9/30043LOAD or STORE instructions; Clear instruction

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Advance Control (AREA)
  • Complex Calculations (AREA)
  • Executing Machine-Instructions (AREA)

Abstract

用于执行向量索引加载和存储的装置和方法。例如,处理器的一个实施例包括:向量索引寄存器,用于存储多个索引值;掩码寄存器,用于存储多个掩码位;向量寄存器,用于存储加载自存储器的多个向量数据元素;以及向量索引加载逻辑,用于使用立即数值来标识存储在向量索引寄存器中的用于加载操作的索引,并且用于响应地将索引与基础存储器地址组合以确定用于加载操作的存储器地址,向量索引加载逻辑用于根据多个掩码位将向量数据元素从存储器地址加载到向量寄存器。

Description

用于向量索引加载和存储的方法和装置
背景
技术领域
本发明总体涉及计算机处理器领域。更具体地说,本发明涉及用于向量索引加载和存储的方法和装置。
相关技术描述
指令集,或指令集架构(ISA)是涉及编程的计算机架构的一部分,并包括原生数据类型、指令、寄存器架构、寻址模式、存储器架构、中断和异常处理、以及外部输入和输出(I/O)。应该注意,术语“指令”在本文中一般是指宏指令——即,提供给处理器供执行的指令——而不是作为由处理器的解码器解码宏指令产生的结果的微指令或微操作。微指令或微操作可以配置为指示处理器上的执行单元执行操作以实现与宏指令相关联的逻辑。
ISA与微架构不同,微架构是用于实现指令集的处理器设计技术的集合。具有不同的微架构的处理器可共享共同的指令集。例如,奔腾四(Pentium 4)处理器、酷睿(CoreTM)处理器、以及来自加利福尼亚州桑尼威尔(Sunnyvale)的超微半导体有限公司(Advanced Micro Devices,Inc.)的多个处理器执行几乎相同版本的x86指令集(在更新的版本中加入了一些扩展),但具有不同的内部设计。例如,ISA的相同寄存器架构在不同的微架构中可使用已知的技术以不同方法来实现,包括专用物理寄存器、使用寄存器重命名机制(诸如,使用寄存器别名表(RAT)、重排序缓冲器(ROB)、以及引退寄存器堆)的一个或多个动态分配物理寄存器。除非另作说明,否则短语“寄存器架构”、“寄存器堆”和“寄存器”在本文中用于指代对软件/编程者以及对指令指定寄存器的方式可见的寄存器架构、寄存器堆和寄存器。在需要区分的情况下,形容词“逻辑的”、“架构的”,或“软件可见的”将用于指示寄存器架构中的寄存器/寄存器堆,而不同的形容词将用于指定给定微型架构中的寄存器(例如,物理寄存器、重排序缓冲器、引退寄存器、寄存器池)。
指令集包括一个或多个指令格式。给定指令格式定义各个字段(位的数量、位的位置)以指定要执行的操作以及对其要执行该操作的操作数等。通过指令模板(或子格式)的定义来进一步分解一些指令格式。例如,可将给定指令格式的指令模板定义为具有指令格式的字段的不同子集(所包括的字段通常按相同的顺序,但是至少一些字段具有不同的位的位置,因为有较少的字段被包括)和/或定义为具有以不同的方式来解释的给定字段。使用给定的指令格式(并且如果经定义,则以该指令格式的一个给定的指令模板)来表达给定的指令,并且该给定的指令指定操作和操作数。指令流是具体的指令序列,其中,序列中的每条指令是按照指令格式(并且如果经定义,按照该指令格式的指令模板中的一个给定的指令模板)的指令的发生。
附图说明
结合以下附图,从以下具体实施方式中可获得对本发明更好的理解,其中:
图1A和1B是示出根据本发明的实施例的通用向量友好指令格式及其指令模板的框图;
图2A-D是示出根据本发明的实施例的示例性专用向量友好指令格式的框图;
图3是根据本发明的一个实施例的寄存器架构的框图;以及
图4A是示出根据本发明的实施例的示例性有序取出、解码、引退流水线以及示例性寄存器重命名的乱序发布/执行流水线两者的框图;
图4B是示出根据本发明的实施例的要包括在处理器中的有序取出、解码、引退核的示例性实施例和示例性的寄存器重命名的乱序发布/执行架构核的框图;
图5A是单个处理器核以及它与管芯上互连网络的连接的框图;
图5B示出根据本发明的实施例的图5A中的处理器核的一部分的展开图;
图6是根据本发明的实施例的具有集成存储器控制器和图形器件的单核处理器和多核处理器的框图;
图7示出根据本发明的一个实施例的系统的框图;
图8示出根据本发明的实施例的第二系统的框图;
图9示出根据本发明的实施例的第三系统的框图;
图10示出根据本发明的实施例的芯片上系统(SoC)的框图;
图11示出根据本发明的实施例的、对照使用软件指令转换器将源指令集中的二进制指令转换成目标指令集中的二进制指令的框图;
图12示出可在其上实现本发明的实施例的示例性处理器;
图13示出根据本发明的一个实施例的向量索引加载/存储逻辑;
图14示出向量索引加载/存储逻辑基于示例性立即数值和掩码值处理示例性索引集合;
图15示出根据本发明的一个实施例的执行向量索引加载操作的方法;以及
图16示出根据本发明的一个实施例的执行向量索引存储操作的方法。
具体实施方式
在下面的描述中,为了进行解释,阐述了众多具体细节以便提供对以下描述的本发明的多个实施例的透彻理解。然而,对本领域技术人员显而易见的是,可以在没有这些具体细节中的一些细节的情况下实施本发明的各实施例。在其他实例中,公知的结构和设备以框图形式示出,以避免使本发明的多个实施例的基本原理模糊。
示例性处理器架构和数据类型
指令集包括一个或多个指令格式。给定指令格式定义各种字段(位的数量、位的位置)以指定将要执行的操作(操作码)以及将对其执行该操作的操作数,等等。通过指令模板(或子格式)的定义来进一步分解一些指令格式。例如,可将给定指令格式的指令模板定义为具有指令格式的字段的不同子集(所包括的字段通常按相同的顺序,但是至少一些字段具有不同的位的位置,因为有较少的字段被包括)和/或定义为具有以不同的方式来解释的给定字段。如此,ISA的每一条指令使用给定的指令格式来表达(并且如果经定义,则按照该指令格式的指令模板中的给定指令模板),并包括用于指定操作和操作数的字段。例如,示例性ADD指令具有专用操作码以及包括用于指定该操作码的操作码字段和用于选择操作数的操作数字段(源1/目的地以及源2)的指令格式,并且该ADD指令在指令流中的出现将具有选择特定操作数的操作数字段中的特定内容。已发布和/或出版了被称为高级向量扩展(AVX)(AVX1和AVX2)并使用向量扩展(VEX)编码方案的SIMD扩展集(例如,参见2011年10月的《64和IA-32架构软件开发者手册》(“64and IA-32ArchitecturesSoftware Developers Manual”);并且参见2011年6月的《高级向量扩展编程参考》(“Advanced Vector Extensions Programming Reference))。”
示例性指令格式
本文中所描述的指令的实施例可以不同的格式体现。另外,在下文中详述示例性系统、架构、以及流水线。指令的实施例可在这些系统、架构、以及流水线上执行,但是不限于详述的系统、架构、以及流水线。
A.通用向量友好指令格式
向量友好指令格式是适于向量指令(例如,存在专用于向量操作的特定字段)的指令格式。尽管描述了其中通过向量友好指令格式支持向量和标量运算两者的实施例,但是替代实施例仅使用通过向量友好指令格式的向量运算。
图1A-1B是示出根据本发明的实施例的通用向量友好指令格式及其指令模板的框图。图1A是示出根据本发明的实施例的通用向量友好指令格式及其A类指令模板的框图;而图1B是示出根据本发明的实施例的通用向量友好指令格式及其B类指令模板的框图。具体而言,为通用向量友好指令格式100定义了A类和B类指令模板,这两类指令模板都包括无存储器访问105指令模板和存储器访问120指令模板。在向量友好指令格式的上下文中的术语“通用”指不束缚于任何专用指令集的指令格式。
尽管将描述其中向量友好指令格式支持以下情况的本发明的实施例,即:64字节向量操作数长度(或大小)与32位(4字节)或64位(8字节)数据元素宽度(或大小)(并且由此,64字节向量由16个双字大小的元素或者替代地8个四字大小的元素组成);64字节向量操作数长度(或大小)与16位(2字节)或8位(1字节)数据元素宽度(或大小);32字节向量操作数长度(或大小)与32位(4字节)、64位(8字节)、16位(2字节)、或8位(1字节)数据元素宽度(或大小);以及16字节向量操作数长度(或大小)与32位(4字节)、64位(8字节)、16位(2字节)、或8位(1字节)数据元素宽度(或大小);但是,替代实施例可支持更大、更小、和/或不同的向量操作数大小(例如,256字节向量操作数)与更大、更小或不同的数据元素宽度(例如,128位(16字节)数据元素宽度)。
图1A中的A类指令模板包括:1)在无存储器访问105的指令模板内,示出无存储器访问的完全舍入控制型操作110的指令模板以及无存储器访问的数据变换型操作115的指令模板;以及2)在存储器访问120的指令模板内,示出存储器访问的时效性的125的指令模板和存储器访问的非时效性的130的指令模板。图1B中的B类指令模板包括:1)在无存储器访问105的指令模板内,示出无存储器访问的写掩码控制的部分舍入控制型操作112的指令模板以及无存储器访问的写掩码控制的vsize型操作117的指令模板;以及2)在存储器访问120的指令模板内,示出存储器访问的写掩码控制127的指令模板。
通用向量友好指令格式100包括下文中按照图1A-1B中所示出的顺序列出的下列字段。
格式字段140-该字段中的特定值(指令格式标识符值)唯一地标识向量友好指令格式,并且由此标识指令在指令流中以向量友好指令格式出现。由此,该字段对于仅具有通用向量友好指令格式的指令集是不需要的,在这个意义上该字段是任选的。
基础操作字段142-其内容区分不同的基础操作。
寄存器索引字段144-其内容直接或者通过地址生成来指定源和目的地操作数在寄存器中或者在存储器中的位置。这些字段包括足够数量的位以从PxQ(例如,32x512、16x128、32x1024、64x1024)个寄存器堆中选择N个寄存器。尽管在一个实施例中N可高达三个源和一个目的地寄存器,但是替代实施例可支持更多或更少的源和目的地寄存器(例如,可支持高达两个源,其中这些源中的一个源还用作目的地,可支持高达三个源,其中这些源中的一个源还用作目的地,可支持高达两个源和一个目的地)。
修饰符(modifier)字段146-其内容将指定存储器访问的以通用向量指令格式出现的指令与不指定存储器访问的以通用向量指令格式出现的指令区分开;即在无存储器访问105的指令模板与存储器访问120的指令模板之间进行区分。存储器访问操作读取和/或写入到存储器层次(在一些情况下,使用寄存器中的值来指定源和/或目的地地址),而非存储器访问操作不这样(例如,源和/或目的地是寄存器)。尽管在一个实施例中,该字段还在三种不同的方式之间选择以执行存储器地址计算,但是替代实施例可支持更多、更少或不同的方式来执行存储器地址计算。
扩充操作字段150-其内容区分除基础操作以外还要执行各种不同操作中的哪一个操作。该字段是针对上下文的。在本发明的一个实施例中,此字段被划分为类字段168、α字段152以及β字段154。扩充操作字段150允许在单条指令而非2条、3条或4条指令中执行多组共同的操作。
比例字段160-其内容允许用于存储器地址生成(例如,用于使用2比例*索引+基址的地址生成)的索引字段的内容的按比例缩放。
位移字段162A-其内容用作存储器地址生成的一部分(例如,用于使用2比例*索引+基址+位移的地址生成)。
位移因数字段162B(注意,位移字段162A直接在位移因数字段162B上的并置指示使用一个或另一个)-其内容用作地址生成的一部分,它指定通过存储器访问的大小(N)按比例缩放的位移因数,其中N是存储器访问中的字节数量(例如,用于使用2比例*索引+基址+按比例缩放的位移的地址生成)。忽略冗余的低阶位,并且因此将位移因数字段的内容乘以存储器操作数总大小(N)以生成要在计算有效地址时使用的最终位移。N的值由处理器硬件在运行时基于完整操作码字段174(稍候在本文中描述)和数据操纵字段154C确定。位移字段162A和位移因数字段162B不用于无存储器访问105指令模板,和/或不同的实施例可以实现仅一者或两者都不实现,从这个意义上说,位移字段162A和位移因数字段162B是任选的。
数据元素宽度字段164-其内容区分将使用多个数据元素宽度中的哪一个(在一些实施例中用于所有指令,在其他实施例中仅用于指令中的一些)。如果支持仅一个数据元素宽度和/或使用操作码的某一方面来支持数据元素宽度,则该字段是不需要的,在这个意义上该字段是任选的。
写掩码字段170-其内容在每一数据元素位置的基础上控制目的地向量操作数中的数据元素位置是否反映基础操作和扩充操作的结果。A类指令模板支持合并-写掩码操作,而B类指令模板支持合并-写掩码操作和归零-写掩码操作两者。当合并时,向量掩码允许在执行任何操作期间保护目的地中的任何元素集免于更新(由基础操作和扩充操作指定);在另一实施例中,保持其中对应掩码位具有0的目的地的每一元素的旧值。相反,当归零时,向量掩码允许在执行任何操作期间使目的地中的元素的任何集合归零(由基础操作和扩充操作指定);在一个实施例中,目的地的元素在对应掩码位具有0值时被设为0。该功能的子集是控制执行的操作的向量长度的能力(即,从第一个到最后一个要修改的元素的跨度),然而,被修改的元素不一定要是连续的。如此,写掩码字段170允许部分向量操作,包括加载、存储、算术、逻辑等等。尽管描述了其中写掩码字段170的内容选择了多个写掩码寄存器中的包含要使用的写掩码的一个写掩码寄存器(并且由此写掩码字段170的内容间接地标识了要执行的掩码操作)的本发明的实施例,但是替代实施例相反或另外允许掩码写字段170的内容直接地指定要执行的掩码操作。
立即数字段172-其内容允许对立即数的指定。该字段在实现不支持立即数的通用向量友好格式中不存在且在不使用立即数的指令中不存在,在这个意义上该字段是任选的。
类字段168-其内容在不同类的指令之间进行区分。参考图1A-B,该字段的内容在A类和B类指令之间进行选择。在图1A-B中,使用圆角方形来指示在字段中存在专用值(例如,在图1A-B中,分别是针对类字段168的A类168A和B类168B)。
A类指令模板
在A类非存储器访问105的指令模板的情况下,α字段152被解释为RS字段152A,其内容区分将执行不同的扩充操作类型中的哪一种(例如,分别为无存储器访问的舍入型操作110以及无存储器访问的数据变换型操作115指令模板指定的舍入152A.1和数据变换152A.2),而β字段154区别将执行指定的类型的操作中的哪一个。在无存储器访问105的指令模板中,比例字段160、位移字段162A以及位移比例字段162B不存在。
无存储器访问的指令模板-完全舍入控制型操作
在无存储器访问的完全舍入控制型操作110指令模板中,β字段154被解释为舍入控制字段154A,其内容提供静态舍入操作。尽管在本发明的所描述的实施例中,舍入控制字段154A包括抑制所有浮点异常(SAE)字段156和舍入操作控制字段158,但是替代实施例可以支持将这两个概念编码为同一个字段,或仅具有这些概念/字段中的一个或另一个(例如,可以仅具有舍入操作控制字段158)。
SAE字段156-其内容区分是否禁用异常事件报告;当SAE字段156的内容指示启用抑制时,给定的指令不报告任何种类的浮点异常标志,并且不唤起任何浮点异常处理程序。
舍入操作控制字段158-其内容区分执行一组舍入操作中的哪一个(例如,向上舍入、向下舍入、向零舍入、以及就近舍入)。如此,舍入操作控制字段158允许逐指令地改变舍入模式。在其中处理器包括用于指定舍入模式的控制寄存器的本发明的一个实施例中,舍入操作控制字段150的内容优先于该寄存器值。
无存储器访问的指令模板-数据变换型操作
在无存储器访问的数据变换型操作115指令模板中,β字段154被解释为数据变换字段154B,其内容区分将执行数个数据变换中的哪一个(例如,无数据变换、混合、广播)。
在A类存储器访问120的指令模板的情况下,α字段152被解释为驱逐提示字段152B,其内容区分要使用驱逐提示中的哪一个(在图1A中,对于存储器访问时效性125的指令模板和存储器访问非时效性130的指令模板分别指定时效性的152B.1和非时效性的152B.2),而β字段154被解释为数据操纵字段154C,其内容区分要执行多个数据操纵操作(也称为基元(primitive))中的哪一个(例如,无操纵、广播、源的向上转换以及目的地的向下转换)。存储器访问120指令模板包括比例字段160,并且任选地包括位移字段162A或位移比例字段162B。
向量存储器指令使用转换支持来执行来自存储器的向量加载并将向量存储到存储器。如同寻常的向量指令,向量存储器指令以数据元素式的方式与存储器来回传输数据,其中实际传输的元素由选为写掩码的向量掩码的内容规定。
存储器访问的指令模板-时效性的
时效性的数据是可能足够快地重新使用以从高速缓存受益的数据。然而,这是提示,且不同的处理器可以不同的方式实现它,包括完全忽略该提示。
存储器访问的指令模板-非时效性的
非时效性数据是不大可能足够快地重复使用以从第1级高缓存中的高速缓存操作获益且应当给予驱逐优先级的数据。然而,这是提示,且不同的处理器可以不同的方式实现它,包括完全忽略该提示。
B类指令模板
在B类指令模板的情况下,α字段152被解释为写掩码控制(Z)字段152C,其内容区分由写掩码字段170控制的写掩码应当是合并还是归零。
在B类非存储器访问105指令模板的情况下,β字段154的部分被解释为RL字段157A,其内容区分将执行不同的扩充操作类型中的哪一种(例如,分别为无存储器访问的写掩码控制部分舍入控制型操作112指令模板和无存储器访问的写掩码控制VSIZE型操作117指令模板指定的舍入157A.1和向量长度(VSIZE)157A.2),而β字段154的其余部分区分将执行指定类型的操作中的哪一个。在无存储器访问105的指令模板中,比例字段160、位移字段162A以及位移比例字段162B不存在。
在无存储器访问的写掩码控制部分舍入控制型操作110指令模板中,β字段154的其余部分被解释为舍入操作字段159A,并且异常事件报告被禁用(给定的指令不报告任何种类的浮点异常标志,并且不引发任何浮点异常处理程序)。
舍入操作控制字段159A-正如舍入操作控制字段158,其内容区分执行一组舍入操作中的哪一个(例如,向上舍入、向下舍入、向零舍入、以及就近舍入)。由此,舍入操作控制字段159A允许在每一指令的基础上改变舍入模式。在其中处理器包括用于指定舍入模式的控制寄存器的本发明的一个实施例中,舍入操作控制字段150的内容优先于该寄存器值。
在无存储器访问的写掩码控制VSIZE型操作117指令模板中,β字段154的其余部分被解释为向量长度字段159B,其内容区分将执行数个数据向量长度中的哪一个(例如,128、256或512字节)。
在B类存储器访问120指令模板的情况下,β字段154的部分被解释为广播字段157B,其内容区分是否将执行广播类型数据操纵操作,而β字段154的其余部分被解释为向量长度字段159B。存储器访问120指令模板包括比例字段160,并且任选地包括位移字段162A或位移比例字段162B。
就通用向量友好指令格式100而言,完整操作码字段174示出为包括格式字段140、基础操作字段142以及数据元素宽度字段164。尽管示出了其中完整操作码字段174包括所有这些字段的一个实施例,但是,在不是支持所有这些字段的实施例中,完整操作码字段174包括少于全部这些字段。完整操作码字段174提供操作代码(操作码)。
扩充操作字段150、数据元素宽度字段164以及写掩码字段170允许以通用向量友好指令格式逐指令地指定这些特征。
写掩码字段和数据元素宽度字段的组合创建各种类型的指令,因为这些指令允许基于不同的数据元素宽度应用该掩码。
在A类和B类内出现的各种指令模板在不同的情形下是有益的。在本发明的一些实施例中,不同处理器或者处理器内的不同核可支持仅A类、仅B类、或者可支持两类。举例而言,旨在用于通用计算的高性能通用乱序核可仅支持B类,旨在主要用于图形和/或科学(吞吐量)计算的核可仅支持A类,并且旨在用于两者的核可支持两者(当然,具有来自两类的模板和指令的一些混合、但是并非来自两类的所有模板和指令的核在本发明的范围内)。同样,单一处理器可包括多个核,所有核支持相同的类或者其中不同的核支持不同的类。举例而言,在具有单独的图形和通用核的处理器中,图形核中的旨在主要用于图形和/或科学计算的一个核可仅支持A类,而通用核中的一个或多个可以是具有旨在用于通用计算的仅支持B类的乱序执行和寄存器重命名的高性能通用核。不具有单独的图形核的另一处理器可包括既支持A类又支持B类的一个或多个通用有序或乱序核。当然,在本发明的不同实施例中,来自一类的特征也可在其他类中实现。可使以高级语言撰写的程序成为(例如,及时编译或者静态编译)各种不同的可执行形式,包括:1)仅具有目标处理器支持以执行的类的指令的形式;或者2)具有使用所有类的指令的不同组合而编写的替代例程且具有选择这些例程以基于由当前正在执行代码的处理器支持的指令而执行的控制流代码的形式。
B.示例性专用向量友好指令格式
图2是示出根据本发明的实施例的示例性专用向量友好指令格式的框图。图2示出专用向量友好指令格式200,其指定位置、大小、解释、字段的次序、以及那些字段中的一些字段的值,在这个意义上专用向量友好指令格式200是专用的。专用向量友好指令格式200可以被用来扩展x86指令集,并且由此,这些字段中的一些与用于现有的x86指令集及其扩展(例如,AVX)中的那些字段类似或相同。该格式保持与具有扩展的现有x86指令集的前缀编码字段、实操作码字节字段、MOD R/M字段、SIB字段、位移字段、以及立即数字段一致。示出来自图1的字段,来自图2的字段映射到来自图1的字段。
应当理解,虽然出于说明的目的在通用向量友好指令格式100的上下文中,本发明的实施例参考专用向量友好指令格式200进行了描述,但是本发明不限于专用向量友好指令格式200,声明的地方除外。例如,通用向量友好指令格式100构想了各种字段的各种可能的大小,而专用向量友好指令格式200示出为具有特定大小的字段。作为具体示例,尽管数据元素宽度字段164示出为专用向量友好指令格式200中的一个位字段,但是本发明不限于此(也就是说,通用向量友好指令格式100构想数据元素宽度字段164的其他大小)。
通用向量友好指令格式100包括下文中按照图2A中所示出的顺序列出的字段。
EVEX前缀(字节0-3)202——以四字节形式进行编码。
格式字段140(EVEX字节0,位[7:0])——第一字节(EVEX字节0)是格式字段140,并且它包含0x62(在本发明的一个实施例中用于区分向量友好指令格式的唯一值)。
第二-第四字节(EVEX字节1-3)包括提供专用能力的多个位字段。
REX字段205(EVEX字节1,位[7-5])-由EVEX.R位字段(EVEX字节1,位[7]–R)、EVEX.X位字段(EVEX字节1,位[6]–X)以及(157BEX字节1,位[5]–B)组成。EVEX.R、EVEX.X和EVEX.B位字段提供与对应VEX位字段相同的功能,并且使用1补码的形式进行编码,即ZMM0被编码为1111B,ZMM15被编码为0000B。这些指令的其他字段对如在本领域中已知的寄存器索引的较低三个位(rrr、xxx、以及bbb)进行编码,由此可通过增加EVEX.R、EVEX.X以及EVEX.B来形成Rrrr、Xxxx以及Bbbb。
REX’字段110-这是REX’字段110的第一部分,并且是用于对扩展的32个寄存器集合的较高16个或较低16个寄存器进行编码的EVEX.R’位字段(EVEX字节1,位[4]–R’)。在本发明的一个实施例中,该位与以下指示的其他位一起以位反转的格式存储以(在公知x86的32位模式下)与实操作码字节是62的BOUND指令进行区分,但是在MOD R/M字段(在下文中描述)中不接受MOD字段中的值11;本发明的替代实施例不以反转的格式存储该指示的位以及下文中其他指示的位。值1用于对较低16个寄存器进行编码。换言之,R'Rrrr是通过组合来自其他字段的EVEX.R'、EVEX.R以及其他RRR而形成的。
操作码映射字段215(EVEX字节1,位[3:0]–mmmm)–其内容对隐含的前导操作码字节(0F、0F 38、或0F 3)进行编码。
数据元素宽度字段164(EVEX字节2,位[7]–W)-由记号EVEX.W表示。EVEX.W用于定义数据类型的粒度(大小)(32位数据元素或64位数据元素)。
EVEX.vvvv 220(EVEX字节2,位[6:3]-vvvv)——EVEX.vvvv的作用可包括如下:1)EVEX.vvvv编码第一源寄存器操作数且对具有两个或两个以上源操作数的指令有效,第一源寄存器操作数以反转(1补码)形式被指定;2)EVEX.vvvv编码目的地寄存器操作数,目的地寄存器操作数针对特定向量位移以1补码的形式被指定;或者3)EVEX.vvvv不编码任何操作数,保留该字段,并且应当包含1111b。由此,EVEX.vvvv字段220对以反转(1补码)的形式存储的第一源寄存器说明符的4个低阶位进行编码。取决于该指令,额外不同的EVEX位字段用于将说明符大小扩展到32个寄存器。
EVEX.U 168类字段(EVEX字节2,位[2]-U)——如果EVEX.U=0,则它指示A类或EVEX.U0;如果EVEX.U=1,则它指示B类或EVEX.U1。
前缀编码字段225(EVEX字节2,位[1:0]-pp)——提供了用于基础操作字段的附加位。除了对以EVEX前缀格式的传统SSE指令提供支持以外,这也具有紧缩SIMD前缀的益处(EVEX前缀只需要2位,而不是需要字节来表达SIMD前缀)。在一个实施例中,为了支持使用以传统格式和以EVEX前缀格式两者的SIMD前缀(66H、F2H、F3H)的传统SSE指令,将这些传统SIMD前缀编码为SIMD前缀编码字段;在提供给解码器的PLA之前,在运行时可被扩展为传统SIMD前缀(因此,PLA可执行传统和EVEX格式的这些传统指令,而无需修改)。虽然较新的指令可以直接将EVEX前缀编码字段的内容用作操作码扩展,但是某些实施例为了一致性而以类似的方式扩展,但是允许由这些传统SIMD前缀指定的不同含义。替代实施例可重新设计PLA以支持2位SIMD前缀编码,并且由此不需要扩展。
α字段152(EVEX字节3,位[7]–EH;也称为EVEX.EH、EVEX.rs、EVEX.RL、EVEX.写掩码控制、以及EVEX.N;也以α示出)-如先前所述,该字段是针对上下文的。
β字段154(EVEX字节3,位[6:4]-SSS,也称为EVEX.s2-0、EVEX.r2-0、EVEX.rr1、EVEX.LL0、EVEX.LLB,还被示为具有βββ)-如先前所述,该字段是内容专用的。
REX’字段110-这是REX’字段的其余部分,并且是可用于对扩展的32个寄存器集合的较高16个或较低16个寄存器进行编码的EVEX.V’位字段(EVEX字节3,位[3]–V’)。该位以位反转的格式存储。值1用于对较低16个寄存器进行编码。换言之,V'VVVV是通过组合EVEX.V'、EVEX.vvvv而形成的。
写掩码字段170(EVEX字节3,位[2:0]-kkk)-其内容指定写掩码寄存器中的寄存器索引,如先前所述。在本发明的一个实施例中,特定值EVEX.kkk=000具有暗示没有写掩码用于特定指令的特殊行为(这可以各种方式实现,包括使用硬连线成全部为1的写掩码或者旁路掩码硬件的硬件来实现)。
实操作码字段230(字节4)也称为操作码字节。操作码的一部分在该字段中被指定。
MOD R/M字段240(字节5)包括MOD字段242、Reg字段244以及R/M字段246。如前所述,MOD字段242的内容在存储器访问操作与非存储器访问操作之间进行区分。Reg字段244的作用可被归结为两种情形:对目的地寄存器操作数或源寄存器操作数进行编码;或者被视为操作码扩展且不用于对任何指令操作数进行编码。R/M字段246的作用可包括如下:对引用存储器地址的指令操作数进行编码,或者对目的地寄存器操作数或源寄存器操作数进行编码。
比例、索引、基址(SIB)字节(字节6)-如先前所述的,比例字段150的内容用于存储器地址生成。SIB.xxx 254和SIB.bbb 256-先前已经针对寄存器索引Xxxx和Bbbb提及了这些字段的内容。
位移字段162A(字节7-10)-当MOD字段242包含10时,字节7-10是位移字段162A,并且它以与传统32位位移(disp32)相同的方式工作,以字节粒度工作。
位移因数字段162B(字节7)-当MOD字段242包含01时,字节7是位移因数字段162B。该字段的位置与传统x86指令集8位位移(disp8)的位置相同,它以字节粒度工作。由于disp8是符号扩展的,因此它仅能在-128和127字节偏移量之间寻址;在64字节高速缓存行的方面,disp8使用可被设为仅四个真正有用的值-128、-64、0和64的8位;由于常常需要更大的范围,所以使用disp32;然而,disp32需要4个字节。与disp8和disp32对比,位移因数字段162B是disp8的重新解释;当使用位移因数字段162B时,通过将位移因数字段的内容乘以存储器操作数访问的大小(N)来确定实际位移。这种类型的位移被称为disp8*N。这减小了平均指令长度(用于位移的单个字节,但是具有大得多的范围)。这种压缩位移基于有效位移是存储器访问的粒度的倍数的假设,并且由此地址偏移量的冗余低阶位不需要被编码。换句话说,位移因数字段162B替代传统x86指令集8位位移。由此,位移因数字段162B以与x86指令集8位位移相同的方式(因此在ModRM/SIB编码规则中没有变化)进行编码,唯一的不同在于,将disp8超载至disp8*N。换句话说,在编码规则或编码长度中没有变化,而仅在通过硬件对位移值的解释中有变化(这需要按存储器操作数的尺寸按比例缩放位移量以获得字节式地址偏移量)。
立即数字段172如先前所述那样进行操作。
完整操作码字段
图2B是示出根据本发明的一个实施例的构成完整操作码字段174的专用向量友好指令格式200中的字段的框图。具体而言,完整操作码字段174包括格式字段140、基础操作字段142以及数据元素宽度(W)字段164。基础操作字段142包括前缀编码字段225、操作码映射字段215以及实操作码字段230。
寄存器索引字段
图2C是示出根据本发明的一个实施例的构成寄存器索引字段144的具有专用向量友好指令格式200的字段的框图。具体地,寄存器索引字段144包括REX字段205、REX’字段210、MODR/M.reg字段244、MODR/M.r/m字段246、VVVV字段220、xxx字段254以及bbb字段256。
扩充操作字段
图2D是示出根据本发明的一个实施例的构成扩充操作字段150的具有专用向量友好指令格式200的字段的框图。当类(U)字段168包含0时,它表示EVEX.U0(A类168A);当它包含1时,它表示EVEX.U1(B类168B)。当U=0并且MOD字段242包含11(表示无存储器访问操作)时,α字段152(EVEX字节3,位[7]-EH)被解释为rs字段152A。当rs字段152A包含1(舍入152A.1)时,β字段154(EVEX字节3、位[6:4]-SSS)被解释为舍入控制字段154A。舍入控制字段154A包括一位的SAE字段156和两位的舍入操作字段158。当rs字段152A包含0(数据变换152A.2)时,β字段154(EVEX字节3,位[6:4]-SSS)被解释为三位的数据变换字段154B。当U=0且MOD字段242包含00、01或10(表明存储器访问操作)时,α字段152(EVEX字节3,位[7]–EH)被解释为驱逐提示(EH)字段152B且β字段154(EVEX字节3,位[6:4]–SSS)被解释为三位的数据操纵字段154C。
当U=1时,α字段152(EVEX字节3,位[7]-EH)被解释为写掩码控制(Z)字段152C。当U=1且MOD字段242包含11(表示无存储器访问操作)时,β字段154的一部分(EVEX字节3,位[4]–S0)被解释为RL字段157A;当它包含1(舍入157A.1)时,β字段154的其余部分(EVEX字节3,位[6-5]–S2-1)被解释为舍入操作字段159A,而当RL字段157A包含0(VSIZE 157.A2)时,β字段154的其余部分(EVEX字节3,位[6-5]–S2-1)被解释为向量长度字段159B(EVEX字节3,位[6-5]–L1-0)。当U=1且MOD字段242包含00、01或10(表示存储器访问操作)时,β字段154(EVEX字节3,位[6:4]–SSS)被解释为向量长度字段159B(EVEX字节3,位[6-5]–L1-0)和广播字段157B(EVEX字节3,位[4]–B)。
C.示例性寄存器架构
图3是根据本发明的一个实施例的寄存器架构300的框图。在所示出的实施例中,有32个512位宽的向量寄存器310;这些寄存器被引用为zmm0到zmm31。较低的16个zmm寄存器的较低阶256个位覆盖在寄存器ymm0-16上。较低的16个zmm寄存器的较低阶128个位(ymm寄存器的较低阶128个位)覆盖在寄存器xmm0-15上。专用向量友好指令格式200按下表中所示方式对这些重叠寄存器堆进行操作。
换句话说,向量长度字段159B在最大长度与一个或多个其他较短长度之间进行选择,其中每一这种较短长度是前一长度的一半,并且不具有向量长度字段159B的指令模板对最大向量长度操作。此外,在一个实施例中,专用向量友好指令格式200的B类指令模板对紧缩或标量单/双精度浮点数据以及紧缩或标量整数数据操作。标量操作是对zmm/ymm/xmm寄存器中的最低阶数据元素位置执行的操作;取决于本实施例,较高阶数据元素位置保持与在指令之前相同或者归零。
写掩码寄存器315——在所示实施例中,有8个写掩码寄存器(k0到k7),每一个的尺寸都是64位。在替代实施例中,写掩码寄存器315的尺寸为16位。如先前所述的,在本发明的一个实施例中,向量掩码寄存器k0无法用作写掩码;当正常指示k0的编码用作写掩码时,它选择硬连线的写掩码0xFFFF,从而有效地停用该指令的写掩码操作。
通用寄存器325——在所示实施例中,有十六个64位通用寄存器,这些寄存器与现有的x86寻址模式一起使用来对存储器操作数寻址。这些寄存器通过名称RAX、RBX、RCX、RDX、RBP、RSI、RDI、RSP以及R8到R15来引用。
标量浮点栈寄存器堆(x87栈)345,在其上重叠了MMX紧缩整数平坦寄存器堆350——在所示出的实施例中,x87栈是用于使用x87指令集扩展来对32/64/80位浮点数据执行标量浮点操作的八元素栈;而使用MMX寄存器来对64位紧缩整数数据执行操作,以及为在MMX和XMM寄存器之间执行的某些操作保存操作数。
本发明的替代实施例可以使用较宽的或较窄的寄存器。另外,本发明的替代实施例可以使用更多、更少或不同的寄存器堆和寄存器。
D.示例性核架构、处理器和计算机架构
处理器核可以以不同方式、出于不同目的、在不同的处理器中实现。例如,这样的核的实现可以包括:1)旨在用于通用计算的通用有序核;2)旨在用于通用计算的高性能通用乱序核;3)旨在主要用于图形和/或科学(吞吐量)计算的专用核。不同处理器的实现可包括:1)包括旨在用于通用计算的一个或多个通用有序核和/或旨在用于通用计算的一个或多个通用乱序核的CPU;以及2)包括旨在主要用于图形和/或科学(吞吐量)的一个或多个专用核的协处理器。这样的不同处理器导致不同的计算机系统架构,其可包括:1)在与CPU分开的芯片上的协处理器;2)在与CPU相同的封装中但分开的管芯上的协处理器;3)与CPU在相同管芯上的协处理器(在该情况下,这样的协处理器有时被称为诸如集成图形和/或科学(吞吐量)逻辑等的专用逻辑,或被称为专用核);以及4)可以将所描述的CPU(有时被称为应用核或应用处理器)、以上描述的协处理器和附加功能包括在同一管芯上的芯片上系统。接着描述示例性核架构,随后描述示例性处理器和计算机架构。
图4A是示出根据本发明的实施例的示例性有序流水线和示例性的寄存器重命名的乱序发布/执行流水线的框图。图4B是示出根据本发明的实施例的要被包括在处理器中的有序架构核的和示例性寄存器重命名的乱序发布/执行架构核的示例性实施例的框图。图4A-B中的实线框示出了有序流水线和有序核,而可选增加的虚线框示出了寄存器重命名的、乱序发布/执行流水线和核。给定有序方面是乱序方面的子集的情况下,将描述乱序方面。
在图4A中,处理器流水线400包括取出级402、长度解码级404、解码级406、分配级408、重命名级410、调度(也被称为分派或发布)级412、寄存器读取/存储器读取级414、执行级416、写回/存储器写入级418、异常处理级422和提交级424。
图4B示出了包括耦合到执行引擎单元450的前端单元430的处理器核490,且执行引擎单元和前端单元两者都耦合到存储器单元470。核490可以是精简指令集计算(RISC)核、复杂指令集计算(CISC)核、超长指令字(VLIW)核或混合或替代核类型。作为又一选项,核490可以是专用核,诸如例如网络或通信核、紧缩引擎、协处理器核、通用计算图形处理单元(GPGPU)核、图形核、等等。
前端单元430包括耦合至指令高速缓存单元434的分支预测单元432,指令高速缓存单元434耦合至指令转换后备缓冲器(TLB)436,指令转换后备缓冲器436耦合至指令取出单元438,指令取出单元438耦合至解码单元440。解码单元440(或解码器)可解码指令,并生成从原始指令解码出的、或以其它方式反映原始指令的、或从原始指令导出的一个或多个微操作、微代码进入点、微指令、其它指令、或其它控制信号作为输出。解码单元440可使用各种不同的机制来实现。合适的机制的示例包括但不仅限于,查找表、硬件实现、可编程逻辑阵列(PLA)、微代码只读存储器(ROM)等等。在一个实施例中,核490包括(例如,在解码单元440中或以其他方式在前端单元430内的)用于存储某些宏指令的微代码的微代码ROM或其他介质。解码单元440耦合至执行引擎单元450中的重命名/分配器单元452。
执行引擎单元450包括耦合至引退单元454的重命名/分配器单元452以及一组一个或多个调度器单元456。调度器单元456表示任意数量的不同调度器,包括预留站、中心指令窗等。调度器单元456耦合到物理寄存器堆单元458。每个物理寄存器堆单元458表示一个或多个物理寄存器堆,其中不同的物理寄存器堆存储一种或多种不同的数据类型,诸如标量整数、标量浮点、紧缩整数、紧缩浮点、向量整数、向量浮点、状态(例如,作为要执行的下一指令的地址的指令指针)等。在一个实施例中,物理寄存器堆单元458包括向量寄存器单元、写掩码寄存器单元和标量寄存器单元。这些寄存器单元可以提供架构向量寄存器、向量掩码寄存器、和通用寄存器。物理寄存器堆单元458与引退单元454重叠以示出可以用来实现寄存器重命名和乱序执行的各种方式(例如,使用重新排序缓冲器和引退寄存器堆;使用将来的文件、历史缓冲器和引退寄存器堆;使用寄存器映射和寄存器池等等)。引退单元454和物理寄存器堆单元458耦合到执行群集460。执行群集460包括一组一个或多个执行单元462和一组一个或多个存储器访问单元464。执行单元462可以对各种类型的数据(例如,标量浮点、紧缩整数、紧缩浮点、向量整数、向量浮点)执行各种操作(例如,移位、加法、减法、乘法)。尽管一些实施例可以包括专用于特定功能或功能组的数个执行单元,但是其他实施例可以仅包括一个执行单元或全部都执行所有功能的多个执行单元。调度器单元456、物理寄存器堆单元458以及执行群集460示出为可能是复数个,因为某些实施例为某些类型的数据/操作创建单独的流水线(例如,各自都具有其自身的调度器单元、物理寄存器堆单元和/或执行群集的标量整数流水线、标量浮点/紧缩整数/紧缩浮点/向量整数/向量浮点流水线和/或存储器访问流水线——并且在单独的存储器访问流水线的情况下,实现了其中仅此流水线的执行群集具有存储器访问单元464的某些实施例)。还应当理解,在使用分开的流水线的情况下,这些流水线中的一个或多个可以是乱序发布/执行的,而其余的是有序的。
存储器访问单元464的集合耦合到存储器单元470,该存储器单元包括耦合到数据高速缓存单元474的数据TLB单元472,其中数据高速缓存单元耦合到第2级(L2)高速缓存单元476。在一个示例性实施例中,存储器访问单元464可包括加载单元、存储地址单元和存储数据单元,其中的每一个均耦合至存储器单元470中的数据TLB单元472。指令高速缓存单元434进一步耦合到存储器单元470中的第2级(L2)高速缓存单元476。L2高速缓存单元476被耦合到一个或多个其他级的高速缓存,并最终被耦合到主存储器。
作为示例,示例性寄存器重命名的、乱序发布/执行核架构可以如下实现流水线400:1)指令取出438执行取出和长度解码级402和404;2)解码单元440执行解码级406;3)重命名/分配器单元452执行分配级408和重命名级410;4)调度器单元456执行调度级412;5)物理寄存器堆单元458和存储器单元470执行寄存器读取/存储器读取级414;执行群集460执行执行级416;6)存储器单元470和物理寄存器堆单元458执行写回/存储器写入级418;7)各单元可牵涉到异常处理级422;以及8)引退单元454和物理寄存器堆单元458执行提交级424。
核490可支持一个或多个指令集(例如,x86指令集(具有与较新版本一起添加的一些扩展);加利福尼亚州桑尼维尔市的MIPS技术公司的MIPS指令集;加利福尼州桑尼维尔市的ARM控股的ARM指令集(具有诸如NEON等可选附加扩展)),其中包括本文中描述的各指令。在一个实施例中,核490包括用于支持紧缩数据指令集扩展(例如,AVX1、AVX2)的逻辑,进而允许由许多多媒体应用使用的操作通过使用紧缩数据来执行。
应当理解,核可以支持多线程操作(执行两个或更多个并行的操作或线程的集合),并且可以按各种方式来完成该多线程操作,各种方式包括时分多线程操作、同步多线程操作(其中,单个物理核为物理核正在同步进行多线程操作的多个线程中的每一个线程提供逻辑核)或其组合(例如,时分取出和解码以及此后诸如利用超线程技术的同步多线程操作)。
尽管在乱序执行的上下文中描述了寄存器重命名,但是,应当理解,寄存器重命名可以用于有序架构中。尽管所示出的处理器的实施例还包括分开的指令和数据高速缓存单元434/474以及共享L2高速缓存单元476,但替代实施例可以具有用于指令和数据两者的单个内部高速缓存,诸如例如第1级(L1)内部高速缓存或多个级别的内部高速缓存。在一些实施例中,系统可以包括内部高速缓存以及在核和/或处理器外部的外部高速缓存的组合。或者,全部高速缓存都可以在核和/或处理器的外部。
图5A-B示出更具体的示例性有序核架构的框图,该核将是芯片中的多个逻辑块中的一个(包括相同类型和/或不同类型的其他核)。根据应用,这些逻辑块通过高带宽的互连网络(例如,环形网络)与一些固定的功能逻辑、存储器I/O接口和其它必要的I/O逻辑通信。
图5A是根据本发明的实施例的单个处理器核以及它与管芯上互连网络502的连接及其第2级(L2)高速缓存的本地子集504的框图。在一个实施例中,指令解码器500支持具有紧缩数据指令集扩展的x86指令集。L1高速缓存506允许对进入标量和向量单元中的高速缓存存储器的低等待时间访问。尽管在一个实施例中(为了简化设计),标量单元508和向量单元510使用分开的寄存器集合(分别为标量寄存器512和向量寄存器514),并且在这些寄存器之间转移的数据被写入到存储器并随后从第一级(L1)高速缓存506读回,但是本发明的替代实施例可以使用不同的方法(例如,使用单个寄存器集合或包括允许数据在这两个寄存器堆之间传输而无需被写入和读回的通信路径)。
L2高速缓存的本地子集504是全局L2高速缓存的一部分,该全局L2高速缓存被划分成多个分开的本地子集,即每个处理器核一个本地子集。每个处理器核具有到其自己的L2高速缓存的本地子集504的直接访问路径。被处理器核读出的数据被存储在其L2高速缓存子集504中,并且可以与其它处理器核访问其自己的本地L2高速缓存子集并行地被快速访问。被处理器核写入的数据被存储在其自己的L2高速缓存子集504中,并在必要的情况下从其它子集转储清除。环形网络确保共享数据的一致性。环形网络是双向的,以允许诸如处理器核、L2高速缓存和其它逻辑块之类的代理在芯片内彼此通信。每个环形数据路径为每个方向1012位宽。
图5B是根据本发明的实施例的图5A中的处理器核的一部分的展开图。图5B包括L1高速缓存504的L1数据高速缓存506A部分,以及关于向量单元510和向量寄存器514的更多细节。具体地说,向量单元510是16宽向量处理单元(VPU)(见16宽ALU 528),该单元执行整型、单精度浮点以及双精度浮点指令中的一个或多个。该VPU通过混合单元520支持对寄存器输入的混合、通过数值转换单元522A-B支持数值转换、并通过复制单元524支持对存储器输入的复制。写掩码寄存器526允许断言所得的向量写入。
图6是根据本发明的实施例的可具有多于一个的核、可具有集成存储器控制器、以及可具有集成图形器件的处理器600的框图。图6中的实线框示出具有单一核602A、系统代理610、一组一个或多个总线控制器单元616的处理器600,而任选增加的虚线框示出具有多个核602A-N、系统代理单元610中的一组一个或多个集成存储器控制器单元614、以及专用逻辑608的替换处理器600。
因此,处理器600的不同实现可包括:1)CPU,其中专用逻辑608是集成图形和/或科学(吞吐量)逻辑(其可包括一个或多个核),并且核602A-N是一个或多个通用核(例如,通用的有序核、通用的乱序核、这两者的组合);2)协处理器,其中核602A-N是旨在主要用于图形和/或科学(吞吐量)的多个专用核;以及3)协处理器,其中核602A-N是多个通用有序核。因此,处理器600可以是通用处理器、协处理器或专用处理器,诸如例如网络或通信处理器、紧缩引擎、图形处理器、GPGPU(通用图形处理单元)、高吞吐量的集成众核(MIC)协处理器(包括30个或更多核)、或嵌入式处理器等。该处理器可以被实现在一个或多个芯片上。处理器600可以是一个或多个衬底的一部分,和/或可以使用诸如例如BiCMOS、CMOS或NMOS等的多个工艺技术中的任何一个技术将该处理器实现在一个或多个衬底上。
存储器层次结构包括核内的一个或多个层级的高速缓存、一组或一个或多个共享高速缓存单元606以及耦合到集成存储器控制器单元614的集合的外部存储器(未示出)。共享高速缓存单元606的集合可以包括一个或多个中级高速缓存,诸如,第2级(L2)、第3级(L3)、第4级(L4),或其他层级的高速缓存,末级高速缓存(LLC),和/或上述各项的组合。尽管在一个实施例中,基于环的互连单元612将集成图形逻辑608、共享高速缓存单元606的集合以及系统代理单元610/集成存储器控制器单元614互连,但替代实施例可使用任何数量的公知技术来将这些单元互连。在一个实施例中,可以维护一个或多个高速缓存单元606和核602-A-N之间的一致性。
在一些实施例中,核602A-N中的一个或多个能够实现多线程。系统代理610包括协调和操作核602A-N的那些组件。系统代理单元610可包括例如功率控制单元(PCU)和显示单元。PCU可以是或可包括用于调节核602A-N和集成图形逻辑608的功率状态所需的逻辑和组件。显示单元用于驱动一个或多个从外部连接的显示器。
核602A-N在架构指令集方面可以是同构的或异构的;即,这些核602A-N中的两个或更多个核可能能够执行相同的指令集,而其它核可能能够执行该指令集的仅仅子集或不同的指令集。
图7-10是示例性计算机架构的框图。本领域已知的对膝上型设备、台式机、手持PC、个人数字助理、工程工作站、服务器、网络设备、网络集线器、交换机、嵌入式处理器、数字信号处理器(DSP)、图形设备、视频游戏设备、机顶盒、微控制器、蜂窝电话、便携式媒体播放器、手持设备以及各种其它电子设备的其它系统设计和配置也是合适的。一般地,能够包含本文中所公开的处理器和/或其它执行逻辑的多个系统或电子设备一般都是合适的。
现在参考图7,所示出的是根据本发明的一个实施例的系统700的框图。系统700可以包括一个或多个处理器710、715,这些处理器耦合到控制器中枢720。在一个实施例中,控制器中枢720包括图形存储器控制器中枢(GMCH)790和输入/输出中枢(IOH)750(其可以在分开的芯片上);GMCH 790包括存储器和图形控制器,存储器740和协处理器745耦合到该存储器和图形控制器;IOH 750将输入/输出(I/O)设备760耦合到GMCH790。或者,存储器和图形控制器中的一个或两者可以被集成在处理器内(如本文中所描述的),存储器740和协处理器745直接耦合到处理器710以及控制器中枢720,控制器中枢720与IOH 750处于单个芯片中。
在图7中以虚线表示附加的处理器715的可选的性质。每个处理器710、715可包括本文中描述的处理核中的一个或多个,并且可以是处理器600的某一版本。
存储器740可以是例如动态随机存取存储器(DRAM)、相变存储器(PCM)或这两者的组合。对于至少一个实施例,控制器中枢720经由诸如前端总线(FSB)之类的多分支总线、诸如快速通道互连(QPI)之类的点对点接口、或者类似的连接795与处理器710、715进行通信。
在一个实施例中,协处理器745是专用处理器,诸如例如高吞吐量MIC处理器、网络或通信处理器、紧缩引擎、图形处理器、GPGPU、或嵌入式处理器等等。在一个实施例中,控制器中枢720可以包括集成图形加速器。
在物理资源710、715之间会存在包括架构、微架构、热、功耗特性等的一系列品质度量方面的各种差异。
在一个实施例中,处理器710执行控制一般类型的数据处理操作的指令。协处理器指令可嵌入在这些指令中。处理器710将这些协处理器指令识别为应当由附连的协处理器745执行的类型。因此,处理器710在协处理器总线或者其它互连上将这些协处理器指令(或者表示协处理器指令的控制信号)发布到协处理器745。协处理器745接受并执行所接收的协处理器指令。
现在参见图8,所示是根据本发明的实施例的第一更具体的示例性系统800的框图。如图8所示,多处理器系统800是点对点互连系统,并且包括经由点对点互连850耦合的第一处理器870和第二处理器880。处理器870和880中的每一个都可以是处理器600的某一版本。在本发明的一个实施例中,处理器870和880分别是处理器710和715,而协处理器838是协处理器745。在另一实施例中,处理器870和880分别是处理器710和协处理器745。
处理器870和880被示为分别包括集成存储器控制器(IMC)单元872和882。处理器870还包括点对点(P-P)接口876和878作为其总线控制器单元的部分;类似地,第二处理器880包括P-P接口886和888。处理器870、880可以经由使用点对点(P-P)接口电路878、888的P-P接口850来交换信息。如图8所示,IMC 872和882将处理器耦合至相应的存储器,即,存储器832和存储器834,它们可以是本地连接到相应的处理器的主存储器的部分。
处理器870、880可各自经由使用点对点接口电路876、894、886、898的各个P-P接口852、854与芯片组890交换信息。芯片组890可任选地经由高性能接口839与协处理器838交换信息。在一个实施例中,协处理器838是专用处理器,诸如例如高吞吐量MIC处理器、网络或通信处理器、紧缩引擎、图形处理器、GPGPU、或嵌入式处理器等等。
共享高速缓存(未示出)可以被包括在任一处理器之内,或被包括在两个处理器外部但仍经由P-P互连与这些处理器连接,使得如果将某处理器置于低功率模式时,可将任一处理器或两个处理器的本地高速缓存信息存储在该共享高速缓存中。
芯片组890可经由接口896耦合至第一总线816。在一个实施例中,第一总线816可以是外围组件互连(PCI)总线,或诸如PCI Express总线或其它第三代I/O互连总线之类的总线,但本发明的范围并不受此限制。
如图8所示,各种I/O设备814可以连同总线桥818被耦合至第一总线816,总线桥818将第一总线816耦合至第二总线820。在一个实施例中,诸如协处理器、高吞吐量MIC处理器、GPGPU的处理器、加速器(诸如例如图形加速器或数字信号处理(DSP)单元)、现场可编程门阵列或任何其它处理器的一个或多个附加处理器815耦合到第一总线816。在一个实施例中,第二总线820可以是低引脚数(LPC)总线。在一个实施例中,各种设备可以耦合到第二总线820,各种设备包括例如,键盘和/或鼠标822、通信设备827以及存储单元828,存储单元828诸如,可包括指令/代码和数据830的磁盘驱动器或其他大容量存储设备。此外,音频I/O824可以被耦合至第二总线820。注意,其他架构是可能的。例如,系统可实现多分支总线或者其他此类架构,而不是图8中的点对点架构。
现在参考图9,所示为根据本发明的实施例的更具体的第二示例性系统900的框图。图8和9中的类似元件使用类似附图标记,且在图9中省略了图8的某些方面以避免混淆图9的其它方面。
图9示出处理器870、880可以分别包括集成存储器和I/O控制逻辑(“CL”)872和882。因此,CL 872、882包括集成存储器控制器单元并包括I/O控制逻辑。图9示出不仅存储器832、834耦合到CL 872、882,而且I/O设备914也耦合到控制逻辑872、882。传统I/O设备915被耦合至芯片组890。
现在参照图10,所示出的是根据本发明的实施例的SoC 1000的框图。图6中相似的部件具有同样的附图标记。另外,虚线框是更先进的SoC的可选特征。在图10中,互连单元1002被耦合至:应用处理器1010,该应用处理器包括一个或多个核202A-N的集合以及共享高速缓存单元606;系统代理单元610;总线控制器单元616;集成存储器控制器单元614;一组或一个或多个协处理器1020,其可包括集成图形逻辑、图像处理器、音频处理器和视频处理器;静态随机存取存储器(SRAM)单元1030;直接存储器存取(DMA)单元1032;以及用于耦合至一个或多个外部显示器的显示单元1040。在一个实施例中,协处理器1020包括专用处理器,诸如例如网络或通信处理器、紧缩引擎、GPGPU、高吞吐量MIC处理器、或嵌入式处理器等等。
本文公开的机制的各实施例可以被实现在硬件、软件、固件或这些实现方法的组合中。本发明的实施例可实现为在可编程系统上执行的计算机程序或程序代码,该可编程系统包括至少一个处理器、存储系统(包括易失性和非易失性存储器和/或存储元件)、至少一个输入设备以及至少一个输出设备。
可将程序代码(诸如图8中示出的代码830)应用于输入指令,以执行本文描述的各功能并生成输出信息。可以按已知方式将输出信息应用于一个或多个输出设备。为了本申请的目的,处理系统包括具有诸如例如数字信号处理器(DSP)、微控制器、专用集成电路(ASIC)或微处理器之类的处理器的任何系统。
程序代码可以用高级程序化语言或面向对象的编程语言来实现,以便与处理系统通信。在需要时,也可用汇编语言或机器语言来实现程序代码。事实上,本文中描述的机制不限于任何特定编程语言的范围。在任一情形下,该语言可以是编译语言或解释语言。
至少一个实施例的一个或多个方面可以由存储在机器可读介质上的表示性指令来实现,指令表示处理器中的各种逻辑,指令在被机器读取时使得该机器制作用于执行本文所述的技术的逻辑。被称为“IP核”的这些表示可以被存储在有形的机器可读介质上,并被提供给多个客户或生产设施以加载到实际制造该逻辑或处理器的制造机器中。
这样的机器可读存储介质可以包括但不限于通过机器或设备制造或形成的物品的非瞬态的有形安排,其包括存储介质,诸如:硬盘;任何其它类型的盘,包括软盘、光盘、紧致盘只读存储器(CD-ROM)、紧致盘可重写(CD-RW)以及磁光盘;半导体器件,例如只读存储器(ROM)、诸如动态随机存取存储器(DRAM)和静态随机存取存储器(SRAM)之类的随机存取存储器(RAM)、可擦除可编程只读存储器(EPROM)、闪存、电可擦除可编程只读存储器(EEPROM);相变存储器(PCM);磁卡或光卡;或适于存储电子指令的任何其它类型的介质。
因此,本发明的各实施例还包括非暂态有形机器可读介质,该介质包含指令或包含设计数据,诸如硬件描述语言(HDL),它定义本文中描述的结构、电路、装置、处理器和/或系统特征。这些实施例也被称为程序产品。
在一些情况下,指令转换器可用来将指令从源指令集转换至目标指令集。例如,指令转换器可以变换(例如使用静态二进制变换、包括动态编译的动态二进制变换)、变形、仿真或以其它方式将指令转换成将由核来处理的一个或多个其它指令。指令转换器可以用软件、硬件、固件、或其组合实现。指令转换器可以在处理器上、在处理器外、或者部分在处理器上且部分在处理器外。
图11是根据本发明的各实施例的对照使用软件指令转换器将源指令集中的二进制指令转换成目标指令集中的二进制指令的框图。在所示的实施例中,指令转换器是软件指令转换器,但作为替代,该指令转换器可以用软件、固件、硬件或其各种组合来实现。图11示出可以使用x86编译器1104来编译高级语言1102形式的程序以生成可由具有至少一个x86指令集核的处理器1116原生地执行的x86二进制代码1106。具有至少一个x86指令集核的处理器1116表示能通过兼容地执行或以其他方式处理以下内容来执行与具有至少一个x86指令集核的英特尔处理器基本相同的功能的任何处理器:(1)英特尔x86指令集核的指令集的本质部分,或(2)目标为在具有至少一个x86指令集核的英特尔处理器上运行以实现与具有至少一个x86指令集核的英特尔处理器基本相同的结果的应用或其他软件的目标代码版本。x86编译器1104表示可用于生成x86二进制代码1106(例如,目标代码)的编译器,该x86二进制代码1106能够通过附加的链接处理或无需附加的链接处理而在具有至少一个x86指令集核的处理器1116上被执行。类似地,图11示出可以使用替代的指令集编译器1108来编译高级语言1102的程序以生成可由不具有至少一个x86指令集核的处理器1114(例如,具有执行加利福尼亚州桑尼维尔市的MIPS技术公司的MIPS指令集和/或执行加利福尼州桑尼维尔市的ARM控股公司的ARM指令集的核的处理器)原生地执行的替代的指令集二进制代码1110。指令转换器1112用于将x86二进制代码1106转换成可以由不具有x86指令集核的处理器1114原生地执行的代码。该转换后的代码不大可能与替代的指令集二进制代码1110相同,因为能够这样做的指令转换器难以制造;然而,转换后的代码将完成通用操作,并且将由来自替代指令集的指令构成。因此,指令转换器1112表示软件、固件、硬件或它们的组合,这些软件、固件、硬件或它们的组合通过仿真、模拟或任何其他过程允许不具有x86指令集处理器或核的处理器或其他电子设备执行x86二进制代码1106。
用于向量索引加载和存储的方法和装置
高性能代码(HPC)的关键特征是其具有大量存储器引用,大部分存储器引用指向相同的存储器但是具有不同的索引。在当前的实现方式中,这些存储器索引中的每一个需要“单独的”通用寄存器(例如,x86架构中的GPR x86-64)。在有限的寄存器集合(例如,八个x86寄存器和十六个x64寄存器)和大量存储器引用的情形下,GPR寄存器集合快速填充,导致堆栈上的溢出和填充,并且生成膨胀的和低效的代码。此外,这些索引进一步需要诸如加、乘或除的计算,这些计算全部需要GPR标量计算,进一步消耗GPR寄存器堆栈并且创建不必要的复制代码膨胀,因为这些计算在所有索引上是相同的。
本发明的实施例包括向量索引加载/存储指令,其通过将SIMD向量寄存器用作每个加载/存储操作的索引寄存器来改善加载和存储的性能。以此方式使用向量寄存器加速对索引的交换,这可以通过使用SIMD向量计算而不是GPR标量计算来完成,导致更紧凑和高效的代码。本发明的实施例还自然地在向量化的循环内流动。因为现在在SIMD向量寄存器中执行所有索引计算,并且不需要在堆栈上溢出而且然后读回以用于执行加载/存储,所以可以实现更高效的对HPC代码循环的向量化。此外,这些实施例对于编译器显著地更容易向量化(例如,由于对GPR堆栈更少的管理)。
本发明的一个实施例包括3源向量索引加载指令(VILD)和3源向量索引存储指令(VIST),其采取下列形式:
向量索引加载:VILD[B/W/D/Q]DST_SIMD_REG{k1}{z},[MEM+VectIndex],ImmSelectForVectIndex;以及
向量索引存储:VIST[B/W/D/Q][MEM+Vectlndex]{k1}{z},SRC_SIMD_REG,ImmSelectForVectIndex;其中
→MEM是存储器基础引用,
→VectIndex是SIMD向量寄存器,
→ImmSelectForVectIndex用于从VectorIndex寄存器选择对应的索引,以及
→B/W/D/Q指示是使用字节、字、双字还是四字值来执行指令。
图12示出可在其上实现本发明的实施例的示例性处理器1255。在一个实施例中,处理器1255的每个核0-N包括存储器管理单元1290,存储器管理单元1290具有向量索引加载/存储逻辑1291以用于执行本文中所描述的向量索引加载/存储操作。此外,每个核0-N包括通用寄存器(GPR)1205的集合、向量寄存器1206的集合和掩码寄存器1207的集合。在一个实施例中,将多个向量数据元素紧缩到每个向量寄存器1206中,每个向量寄存器1206可以具有512位宽度以用于存储两个256位值、四个128位值、八个64位值、十六个32位值等等。然而,本发明的基本原理不限于任何特定大小/类型的向量数据。在一个实施例中,掩码寄存器1207包括八个64位操作数掩码寄存器,用于对存储在向量寄存器1206中的值执行位掩码操作(例如,实现为上文所描述的掩码寄存器k0-k7)。然而,本发明的基本原理不限于任何特定的掩码寄存器大小/类型。
为简单起见,在图12中示出单个处理器核(“核0”)的细节。然而,将会理解,图12中所示的每个核都可具有与核0相同的逻辑集合。例如,每个核可包括根据指定的高速缓存管理策略的用于高速缓存指令和数据的专用一级(L1)高速缓存1212和二级(L2)高速缓存1211。L1高速缓存1212包括用于存储指令的单独的指令高速缓存1220和用于存储数据的单独的数据高速缓存1221。存储在各种处理器高速缓存之内的指令和数据以可以是固定尺寸(如,64字节、128字节、512字节长度的)高速缓存行的粒度被管理。该示例性实施例的每个核具有:从主存储器1200和/或共享的三级(L3)高速缓存1216取出指令的指令取出单元1210;用于对指令进行解码(例如,将程序指令解码成微操作或“uops”)的解码单元1220;用于执行指令的执行单元1240;以及用于引退指令和写回结果的写回单元1250。
指令取出单元1210包括各种公知的组件,包括:用于存储要从存储器1200(或高速缓存中的一个)取出的下一指令的地址的下一指令指针1203;用于存储最近使用的虚拟向物理指令地址的映射以改善地址转换速度的指令转换后备缓冲器(ITLB)1204;用于推测地预测指令分支地址的分支预测单元1202;以及用于存储分支地址和目标地址的分支目标缓冲器(BTB)1201。一旦被取出,随后指令被流式地传送到指令流水线的其余的级,包括,解码单元1230、执行单元1240和写回单元1250。本领域普通技术人员已很好地理解这些单元中的每一个的结构和功能,将不在此详细对其进行描述以避免使本发明的不同实施例的相关方面不清楚。
图13示出向量索引加载/存储逻辑1291的一个实施例,其利用向量索引寄存器1301以存储源索引值i0-i7、利用目的地/源向量寄存器1302以存储响应于向量索引加载指令加载自存储器1200或响应于向量索引存储指令存储到存储器1200的向量。在一个实施例中,目的地/源向量寄存器1302包括具有八个64位向量数据元素(位于63:0、127:64、191:128等等)的512位向量寄存器,并且向量索引寄存器1301包括具有八个64位索引值的512位向量寄存器。掩码寄存器1303存储用于执行本文中所描述的写掩码操作的掩码值。在一个实施例中,掩码寄存器1303是64位寄存器(例如,诸如上文所描述的k0-k7寄存器)。提供基础存储器引用1304与来自向量索引寄存器1301的索引组合以用于计算存储器地址。此外,提供立即数选择值1305以标识来自向量索引寄存器1301的特定向量索引,该特定向量索引会与基础存储器引用1304组合以计算最终存储器地址。虽然出于说明的目的上文提及了各种示例性寄存器大小和数据类型,但是应当注意本发明的基本原理不限于任何特定大小/类型的索引、掩码、立即数值或数据元素。
在操作中,多个不同索引i0-i7被存储在向量索引寄存器1301内。向量索引加载/存储逻辑1291标识来自立即数值1305的会被用于当前加载/存储操作的索引。在一个实施例中,立即数值1305包括0和N-1之间的值以标识存储在向量索引寄存器1301内的N个不同的索引值(在图13中,N=8)。一旦向量索引加载/存储逻辑1291标识了合适的索引,其就将索引与基础存储器引用1304组合以计算加载/存储操作的存储器地址。向量索引加载/存储逻辑1291然后通过使用目的地/源向量寄存器1302、将来自存储器的值加载到向量寄存器1302内的数据元素位置或将来自向量寄存器1302的数据元素位置的值存储到存储器,来执行加载/存储。在一个实施例中,来自掩码寄存器1303的掩码值用于指定会从给定的存储器地址加载或会被加载到给定的存储器地址的元素的数量。
图14示出其中双精度浮点值(每个64位)会被从存储器加载的具体示例,其中Struct Atom[double x,y,z]和Atom AtomArray[10000]。在该示例中,MEM指向数组的基址,即,&AtomArray[0]。VectIndex是ZMM1寄存器1301,包括作为存储器索引的八个值(DWORD值)。ZMM1={7000,6000,4000,3000,900,500,2000,1000}。Mask k1 1303=binary00000111指示元素x、y和z会在给定索引处被加载(由LSB位置中的三个设置位111指示)。在示出的示例中,假设索引2000标识会被加载的数据,其存储在ZMM1寄存器的第二元素(元素1)中。因此,为了从AtomArray的索引2000加载Atom元素x、y、z,可以执行指令VILD ZMM2{k1},[MEM+ZMM1],1。加载操作的结果是目的地向量寄存器1302,ZMM2={0,0,0,0,0,AtomArray[2000].z,AtomArray[2000].y,AtomArray[2000].x}。
在图15中示出根据本发明的一个实施例的方法。该方法可在上述架构的情境内执行,但并不限于任何特定系统架构。
在1501处,从存储器取出或从高速缓存(例如,L1、L2或L3高速缓存)读出向量索引加载指令。在1502处,索引值存储在源向量索引寄存器中。在1503处,使用向量索引加载指令包括的立即数值在向量索引寄存器内标识会与基础存储器地址组合的索引。在1504处,将索引与基础存储器引用组合以确定加载操作的存储器地址。最后,在1505处,从存储器加载由存储器地址标识的数据(例如,诸如上文所述的数组数据)。
在图16中示出根据本发明的一个实施例的方法。该方法可在上述架构的情境内执行,但并不限于任何特定系统架构。
在1601处,从存储器取出或从高速缓存(例如,L1、L2或L3高速缓存)读出向量索引加载指令。在1602处,索引值存储在源向量索引寄存器中。在1603处,使用向量索引存储指令包括的立即数值,在向量索引寄存器内标识会与基础存储器地址组合的索引。在1604处,将索引与基础存储器引用组合以确定存储操作的存储器地址。最后,在1605处,将数据存储到存储器地址处的存储器。
如上所述,高性能代码(HPC)具有大量的存储器引用,其中基础存储器地址是相同的,但是索引是不同的。此外,通常在SIMD向量寄存器中计算索引并且存储和维持值。本发明的实施例利用维持和重新使用SIMD向量寄存器中的索引来进行加载和存储而无须执行溢出到mem和/或填充到GPR的寄存器操作。
作为示例,考虑下列应用使用情形,其是来自对双精度数据集进行操作的HPC应用的C代码序列的快照:
以上程序代码分别从f_tbl或从eed_cub加载4个元素,取决于存在"if"条件还是"else"条件。此外,当循环被向量化时,对索引的计算(即,"ind")的结果自然地在向量SIMD寄存器中。
举一个简单的情形,对于向量化的循环,假设"if"条件为真。在该情形下,所有8个索引"ind"在SIMD向量寄存器中。因为在给定的索引处只有四个元素会被加载,所以掩码被设置为0x00001111。注意,掩码值和指向f_tbl的基础地址寄存器对于所有这些8个加载是不变的。因此,唯一的区别是索引。
相反,在当前ISA实现方式中,为了对"f_tbl"数组执行8个向量加载,需要将SIMD寄存器溢出到存储器,并且索引值从该处读出。这导致膨胀的代码,如果它们在其他地方被使用则导致进一步溢出填充通用寄存器(例如,x86-64GPR寄存器),导致慢代码。
当SIMD寄存器用于执行加载/存储时,用于执行向量索引加载/存储的本发明的实施例通过重新使用SIMD寄存器中的索引值来解决该问题。这导致高效、紧凑的完全SIMD代码,而且更可读。该特征还类似于用于聚集和分散的SIMD索引寄存器,但是扩展到平常的加载和存储。
下列示例将帮助强调本文中所描述的本发明的实施例的益处:
Struct Atom[double x,y,z];
Atom AtomArray[10000];
1.存储器被定义为:
Struct Table[double x,y,z,w];
Table f_tbl[10000];
2.根据本发明的一个实施例,计算出的索引保存在ZMM寄存器中,如以下表1所示,并且为使用x86-64GPR寄存器的实现方式示出对应的值。
GPR r15 r14 r13 r12 r11 r10 r9 r8
ZMM 7000 6000 4000 3000 9000 5000 2000 1000
表1
假设掩码K1被设置为0x0F以加载四个元素x、y、z和w。
使用当前ISA实现方式,如下在寄存器ZMM1-8中执行八个向量加载:
VMOVDQA ZMM1{k1},[MEM+r8]
VMOVDQA ZMM2{k1},[MEM+r9]
VMOVDQA ZMM3{k1},[MEM+r10]
VMOVDQA ZMM4{k1},[MEM+r11]
VMOVDQA ZMM5{k1},[MEM+r12]
VMOVDQA ZMM6{k1},[MEM+r13]
VMOVDQA ZMM7{k1},[MEM+r14]
VMOVDQA ZMM8{k1},[MEM+r15]
在本发明的实施例使用向量索引加载的情形下,可以将索引存储在一个或多个ZMM寄存器中(例如,以下示例中的ZMM15)。使用上述指令格式,可以利用下列指令序列来执行对应的向量索引加载(假设四字(Q)值):
VILDQ ZMM1{k1},[MEM+ZMM15],0
VILDQ ZMM2{k1},[MEM+ZMM15],1
VILDQ ZMM3{k1},[MEM+ZMM15],2
VILDQ ZMM4{k1},[MEM+ZMM15],3
VILDQ ZMM5{k1},[MEM+ZMM15],4
VILDQ ZMM6{k1},[MEM+ZMM15],5
VILDQ ZMM7{k1},[MEM+ZMM15],6
VILDQ ZMM8{k1},[MEM+ZMM15],7
可以使用VIST为存储操作执行类似的执行序列。注意,对于以上VILD指令(以及对于VIST指令),当检索索引值时,不需要涉及GPR寄存器。
在前述的说明书中,已经参考本发明的特定示例性实施例描述了本发明的多个实施例。然而,显然可对这些实施例作出各种修改和改变,而不背离如所附权利要求所述的本发明的更宽泛精神和范围。因此,说明书和附图应被认为是说明性而非限制性意义。
本发明的多个实施例可包括上述各个步骤。可在可用于使通用或专用处理器执行这些步骤的机器可执行指令中具体化这些步骤。或者,可由包含用于执行这些步骤的硬连线逻辑的专用硬件组件,或可由被编程的计算机组件和自定义硬件组件的任何组合来执行这些步骤。
如本文中所描述的,指令可以指硬件的具体配置,例如,配置成用于执行某些操作或具有预定功能的专用集成电路(ASIC),或者被存储在被具体化在非暂态计算机可读介质中的存储器中的软件指令。因而,附图中示出的技术可以使用存储在一个或多个电子设备(例如,终端站、网络元件等等)并在其上执行的代码和数据来实现。此类电子设备使用诸如非暂态计算机机器可读存储介质(例如,磁盘;光盘;随机存取存储器;只读存储器;闪存设备;相变存储器)之类的计算机机器可读介质和暂态计算机机器可读通信介质(例如,电、光、声或其他形式的传播信号——诸如载波、红外信号、数字信号等)来(内部地和/或在网络上与其他电子设备之间进行)存储和传递代码和数据。另外,此类电子设备一般包括耦合至一个或多个其他组件的一个或多个处理器的集合,所述一个或多个其他组件例如是一个或多个存储设备(非暂态机器可读存储介质)、用户输入/输出设备(例如,键盘、触摸屏和/或显示器)以及网络连接。该组处理器和其他组件的耦合一般是通过一个或多个总线和桥(也称为总线控制器)实现的。存储设备和携带网络话务的信号分别表示一个或多个机器可读存储介质和机器可读通信介质。因此,给定电子设备的存储设备通常存储用于在该电子设备的一个或多个处理器的集合上执行的代码和/或数据。当然,本发明的实施例的一个或多个部分可使用软件、固件和/或硬件的不同组合来实现。贯穿此具体实施方式,为了进行解释,陈述了众多具体细节以提供对本发明的透彻理解。然而,对本领域技术人员显而易见的是,没有这些具体细节中的一些细节也可实施本发明。在某些实例中,并不详细描述公知的结构和功能,以免使本发明的主题模糊。因此,本发明的范围和精神应根据所附权利要求书来确定。

Claims (27)

1.一种处理器,包括:
向量索引寄存器,用于存储多个索引值;
掩码寄存器,用于存储多个掩码位;
向量寄存器,用于存储加载自存储器的多个向量数据元素;以及
向量索引加载逻辑,用于使用立即数值来标识存储在所述向量索引寄存器中的用于加载操作的索引,并且用于响应地将所述索引与基础存储器地址组合以确定用于所述加载操作的存储器地址,所述向量索引加载逻辑用于根据所述多个掩码位将向量数据元素从所述存储器地址加载到所述向量寄存器。
2.如权利要求1所述的处理器,其特征在于,所述多个掩码位用于指示会从所述存储器地址加载的多个向量数据元素。
3.如权利要求1所述的处理器,其特征在于,所述掩码寄存器包括64位掩码寄存器,以及其中所述向量索引寄存器和向量寄存器包括具有八个64位值的512位向量寄存器。
4.如权利要求1所述的处理器,其特征在于,所述立即数值包括标识在所述向量索引寄存器内的索引的索引位置的整数值。
5.如权利要求1所述的处理器,进一步包括:
存储器管理单元,用于计算所述索引值中的每一个并且将所述索引值存储在所述向量索引寄存器内。
6.如权利要求1所述的处理器,其特征在于,所述向量数据元素包括双精度浮点值。
7.如权利要求1所述的处理器,其特征在于,包括所述向量数据元素的数据数组会被存储在存储器中,以及其中所述基础存储器地址指向所述数组的基址,所述向量索引加载逻辑用于将所述基础存储器地址与所述索引值中的每一个组合以标识所述数组中的所述向量数据元素中的每一个。
8.如权利要求1所述的处理器,其特征在于,响应于对向量索引加载指令的解码和执行,执行标识索引、将所述索引与基础存储器地址组合并且加载所述向量数据元素。
9.如权利要求1所述的处理器,其特征在于,所述向量索引加载指令被解码为多个微操作。
10.一种处理器,包括:
向量索引寄存器,用于存储多个索引值;
掩码寄存器,用于存储多个掩码位;
向量寄存器,用于存储会被存储到存储器的多个向量数据元素;以及
向量索引存储逻辑,用于使用立即数值来标识存储在所述向量索引寄存器中的用于存储操作的索引,并且用于响应地将所述索引与基础存储器地址组合以确定用于所述存储操作的存储器地址,所述向量索引加载逻辑用于根据所述多个掩码位将向量数据元素从所述向量寄存器存储到系统存储器中的所述存储器地址。
11.如权利要求10所述的处理器,其特征在于,所述多个掩码位用于指示会被存储到所述存储器地址的多个向量数据元素。
12.如权利要求10所述的处理器,其特征在于,所述掩码寄存器包括64位掩码寄存器,以及其中所述向量索引寄存器和向量寄存器包括具有八个64位值的512位向量寄存器。
13.如权利要求10所述的处理器,其特征在于,所述立即数值包括标识在所述向量索引寄存器内的索引的索引位置的整数值。
14.如权利要求10所述的处理器,进一步包括:
存储器管理单元,用于计算所述索引值中的每一个并且将所述索引值存储在所述向量索引寄存器内。
15.如权利要求10所述的处理器,其特征在于,所述向量数据元素包括双精度浮点值。
16.如权利要求10所述的处理器,其特征在于,包括所述向量数据元素的数据数组会被存储在存储器中,以及其中所述基础存储器地址指向所述数组的基址,所述向量索引存储逻辑用于将所述基础存储器地址与所述索引值中的每一个组合以标识用来存储所述数组中的所述向量数据元素中的每一个的位置。
17.如权利要求10所述的处理器,其特征在于,响应于对向量索引加载指令的解码和执行,执行标识索引、将所述索引与基础存储器地址组合并且存储所述向量数据元素。
18.如权利要求17所述的处理器,其特征在于,所述向量索引加载指令被解码为多个微操作。
19.一种方法,包括:
将多个索引值存储在向量索引寄存器中;
将多个掩码位存储在掩码寄存器中;
存储加载自存储器的多个向量数据元素;以及
使用立即数值来标识存储在所述向量索引寄存器中的用于加载操作的索引;
响应地将所述索引与基础存储器地址组合以确定用于所述加载操作的存储器地址;以及
根据所述多个掩码位将向量数据元素从所述存储器地址加载到所述向量寄存器。
20.如权利要求19所述的方法,其特征在于,所述多个掩码位用于指示会从所述存储器地址加载的多个向量数据元素。
21.如权利要求19所述的方法,其特征在于,所述掩码寄存器包括64位掩码寄存器,以及其中所述向量索引寄存器和向量寄存器包括具有八个64位值的512位向量寄存器。
22.如权利要求19所述的方法,其特征在于,所述立即数值包括标识在所述向量索引寄存器内的索引的索引位置的整数值。
23.如权利要求19所述的方法,进一步包括:
存储器管理单元,用于计算所述索引值中的每一个并且将所述索引值存储在所述向量索引寄存器内。
24.如权利要求19所述的方法,其特征在于,所述向量数据元素包括双精度浮点值。
25.如权利要求19所述的方法,进一步包括:
将包括所述向量数据元素的数据数组存储在存储器中,其中所述基础存储器地址指向所述数组的基址;以及
将所述基础存储器地址与所述索引值中的每一个组合以标识所述数组中的所述向量数据元素中的每一个。
26.如权利要求19所述的方法,其特征在于,响应于对向量索引加载指令的解码和执行,执行标识索引、将所述索引与基础存储器地址组合并且加载所述向量数据元素。
27.如权利要求26所述的方法,其特征在于,所述向量索引加载指令被解码为多个微操作。
CN201580064123.4A 2014-12-23 2015-11-23 用于向量索引加载和存储的方法和装置 Active CN107003846B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/581,289 US9830151B2 (en) 2014-12-23 2014-12-23 Method and apparatus for vector index load and store
US14/581,289 2014-12-23
PCT/US2015/062057 WO2016105755A1 (en) 2014-12-23 2015-11-23 Method and apparatus for vector index load and store

Publications (2)

Publication Number Publication Date
CN107003846A true CN107003846A (zh) 2017-08-01
CN107003846B CN107003846B (zh) 2021-02-26

Family

ID=56129467

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580064123.4A Active CN107003846B (zh) 2014-12-23 2015-11-23 用于向量索引加载和存储的方法和装置

Country Status (9)

Country Link
US (1) US9830151B2 (zh)
EP (1) EP3238026B1 (zh)
JP (1) JP6711480B2 (zh)
KR (1) KR102463858B1 (zh)
CN (1) CN107003846B (zh)
BR (1) BR112017010956A2 (zh)
SG (1) SG11201704243UA (zh)
TW (1) TWI617978B (zh)
WO (1) WO2016105755A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111158757A (zh) * 2019-12-31 2020-05-15 深圳芯英科技有限公司 并行存取装置和方法以及芯片
CN111782270A (zh) * 2020-06-09 2020-10-16 Oppo广东移动通信有限公司 一种数据处理方法及装置、存储介质

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9658821B2 (en) * 2014-09-29 2017-05-23 International Business Machines Corporation Single operation array index computation
EP3428792B1 (en) * 2017-07-10 2022-05-04 Arm Ltd Testing bit values inside vector elements
US10684858B2 (en) * 2018-06-01 2020-06-16 Intel Corporation Indirect memory fetcher
US20200004535A1 (en) * 2018-06-30 2020-01-02 Intel Corporation Accelerator apparatus and method for decoding and de-serializing bit-packed data
US11175915B2 (en) * 2018-10-10 2021-11-16 Micron Technology, Inc. Vector registers implemented in memory
US11340904B2 (en) * 2019-05-20 2022-05-24 Micron Technology, Inc. Vector index registers
US11327862B2 (en) * 2019-05-20 2022-05-10 Micron Technology, Inc. Multi-lane solutions for addressing vector elements using vector index registers
US11403256B2 (en) 2019-05-20 2022-08-02 Micron Technology, Inc. Conditional operations in a vector processor having true and false vector index registers
US11507374B2 (en) * 2019-05-20 2022-11-22 Micron Technology, Inc. True/false vector index registers and methods of populating thereof
KR20220145656A (ko) 2021-04-22 2022-10-31 에스케이하이닉스 주식회사 호스트 및 이를 포함하는 컴퓨팅 시스템
KR20230158257A (ko) * 2022-05-11 2023-11-20 서울시립대학교 산학협력단 명령어를 처리하는 방법 및 이를 위한 프로세서 모듈

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030046559A1 (en) * 2001-08-31 2003-03-06 Macy William W. Apparatus and method for a data storage device with a plurality of randomly located data
US20040250044A1 (en) * 2003-03-28 2004-12-09 Seiko Epson Corporation Method for referring to address of vector data and vector processor
WO2006033056A2 (en) * 2004-09-21 2006-03-30 Koninklijke Philips Electronics N.V. Micro processor device and method for shuffle operations
US20100042808A1 (en) * 2008-08-15 2010-02-18 Moyer William C Provision of extended addressing modes in a single instruction multiple data (simd) data processor
US20110055497A1 (en) * 1997-10-09 2011-03-03 Mips Technologies, Inc. Alignment and Ordering of Vector Elements for Single Instruction Multiple Data Processing
CN102200905A (zh) * 2010-03-26 2011-09-28 Mips技术公司 具有紧凑指令集架构的微处理器
CN103562856A (zh) * 2011-04-01 2014-02-05 英特尔公司 用于数据元素的跨步图案聚集及数据元素的跨步图案分散的系统、装置及方法
US20140189322A1 (en) * 2012-12-28 2014-07-03 Elmoustapha Ould-Ahmed-Vall Systems, Apparatuses, and Methods for Masking Usage Counting
CN104094218A (zh) * 2011-12-23 2014-10-08 英特尔公司 用于执行写掩码寄存器到向量寄存器中的一系列索引值的转换的系统、装置和方法
CN104126171A (zh) * 2011-12-27 2014-10-29 英特尔公司 用于基于两个源写掩码寄存器生成依赖向量的系统、装置和方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4722049A (en) * 1985-10-11 1988-01-26 Unisys Corporation Apparatus for out-of-order program execution
US7529907B2 (en) * 1998-12-16 2009-05-05 Mips Technologies, Inc. Method and apparatus for improved computer load and store operations
CA2406679A1 (en) * 2000-01-18 2001-07-26 Mips Technologies, Inc. Method and apparatus for improved computer load and store operations
US20130212353A1 (en) 2002-02-04 2013-08-15 Tibet MIMAR System for implementing vector look-up table operations in a SIMD processor
US20070150697A1 (en) 2005-05-10 2007-06-28 Telairity Semiconductor, Inc. Vector processor with multi-pipe vector block matching
US10387151B2 (en) * 2007-12-31 2019-08-20 Intel Corporation Processor and method for tracking progress of gathering/scattering data element pairs in different cache memory banks

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110055497A1 (en) * 1997-10-09 2011-03-03 Mips Technologies, Inc. Alignment and Ordering of Vector Elements for Single Instruction Multiple Data Processing
US20030046559A1 (en) * 2001-08-31 2003-03-06 Macy William W. Apparatus and method for a data storage device with a plurality of randomly located data
US20040250044A1 (en) * 2003-03-28 2004-12-09 Seiko Epson Corporation Method for referring to address of vector data and vector processor
WO2006033056A2 (en) * 2004-09-21 2006-03-30 Koninklijke Philips Electronics N.V. Micro processor device and method for shuffle operations
US20100042808A1 (en) * 2008-08-15 2010-02-18 Moyer William C Provision of extended addressing modes in a single instruction multiple data (simd) data processor
CN102200905A (zh) * 2010-03-26 2011-09-28 Mips技术公司 具有紧凑指令集架构的微处理器
CN103562856A (zh) * 2011-04-01 2014-02-05 英特尔公司 用于数据元素的跨步图案聚集及数据元素的跨步图案分散的系统、装置及方法
CN104094218A (zh) * 2011-12-23 2014-10-08 英特尔公司 用于执行写掩码寄存器到向量寄存器中的一系列索引值的转换的系统、装置和方法
CN104126171A (zh) * 2011-12-27 2014-10-29 英特尔公司 用于基于两个源写掩码寄存器生成依赖向量的系统、装置和方法
US20140189322A1 (en) * 2012-12-28 2014-07-03 Elmoustapha Ould-Ahmed-Vall Systems, Apparatuses, and Methods for Masking Usage Counting

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111158757A (zh) * 2019-12-31 2020-05-15 深圳芯英科技有限公司 并行存取装置和方法以及芯片
CN111158757B (zh) * 2019-12-31 2021-11-30 中昊芯英(杭州)科技有限公司 并行存取装置和方法以及芯片
CN111782270A (zh) * 2020-06-09 2020-10-16 Oppo广东移动通信有限公司 一种数据处理方法及装置、存储介质
WO2021249054A1 (zh) * 2020-06-09 2021-12-16 Oppo广东移动通信有限公司 一种数据处理方法及装置、存储介质
CN111782270B (zh) * 2020-06-09 2023-12-19 Oppo广东移动通信有限公司 一种数据处理方法及装置、存储介质

Also Published As

Publication number Publication date
US9830151B2 (en) 2017-11-28
CN107003846B (zh) 2021-02-26
US20160179526A1 (en) 2016-06-23
WO2016105755A1 (en) 2016-06-30
KR20170097626A (ko) 2017-08-28
JP2018500660A (ja) 2018-01-11
BR112017010956A2 (pt) 2018-02-14
TWI617978B (zh) 2018-03-11
TW201640331A (zh) 2016-11-16
EP3238026A4 (en) 2018-08-01
KR102463858B1 (ko) 2022-11-03
JP6711480B2 (ja) 2020-06-17
SG11201704243UA (en) 2017-07-28
EP3238026B1 (en) 2019-11-20
EP3238026A1 (en) 2017-11-01

Similar Documents

Publication Publication Date Title
CN104094218B (zh) 用于执行写掩码寄存器到向量寄存器中的一系列索引值的转换的系统、装置和方法
CN105278917B (zh) 无局部性提示的向量存储器访问处理器、方法、设备、制品和电子设备
CN104011649B (zh) 用于在simd/向量执行中传播有条件估算值的装置和方法
CN104011647B (zh) 浮点舍入处理器、方法、系统和指令
CN107003846A (zh) 用于向量索引加载和存储的方法和装置
CN109791488A (zh) 用于执行用于复数的融合乘-加指令的系统和方法
CN104040482B (zh) 用于在打包数据元素上执行增量解码的系统、装置和方法
CN104011673B (zh) 向量频率压缩指令
CN104137059B (zh) 多寄存器分散指令
CN104145245B (zh) 浮点舍入量确定处理器、方法、系统和指令
CN104350492B (zh) 在大寄存器空间中利用累加的向量乘法
CN104011652B (zh) 打包选择处理器、方法、系统和指令
CN107003843A (zh) 用于对向量元素集合执行约减操作的方法和设备
CN104126167B (zh) 用于从通用寄存器向向量寄存器进行广播的装置和方法
CN104081337B (zh) 用于响应于单个指令来执行横向部分求和的系统、装置和方法
CN104126172B (zh) 用于掩码寄存器扩充操作的装置和方法
CN104011665B (zh) 超级乘加(超级madd)指令
CN109840068A (zh) 用于复数乘法的装置和方法
CN104011671B (zh) 用于执行置换操作的设备和方法
CN104185837B (zh) 在不同的粒度等级下广播数据值的指令执行单元
CN108292224A (zh) 用于聚合收集和跨步的系统、设备和方法
CN104204989B (zh) 用于选择向量计算的元素的装置和方法
CN104137061B (zh) 用于执行向量频率扩展指令的方法、处理器核和计算机系统
CN107003852A (zh) 用于执行向量位混洗的方法和装置
CN107741861A (zh) 用于混洗浮点或整数值的装置和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant