kaiyun官方注册
您所在的位置: 首页> 可编程逻辑> 其他> FPGA教学——详解FPGA如何实现FP16格式点积级联运算

FPGA教学——详解FPGA如何实现FP16格式点积级联运算

2022-09-06
来源:FPGA之家
关键词: FPGA FP16

通过使用Achronix Speedster7tFPGA中的机器学习加速器MLP72,开发人员可以轻松选择浮点/定点格式和多种位宽,或快速应用块浮点,并通过内部级联可以达到理想性能。


神经网络架构中的核心之一就是卷积层,卷积的最基本操作就是点积。向量乘法的结果是向量的每个元素的总和相乘在一起,通常称之为点积。此向量乘法如下所示:

微信图片_20220906181113.png

图1点积操作

该总和S由每个矢量元素的总和相乘而成,因此
微信图片_20220906181130.png

本文讲述的是使用FP16格式的点积运算实例,展示了MLP72支持的数字类型和乘数的范围。
此设计实现了同时处理8对FP16输入的点积。该设计包含四个MLP72,使用MLP内部的级联路径连接。每个MLP72将两个并行乘法的结果相加微信图片_20220906181225.png,每个乘法都是i_a输入乘以i_b输入(均为FP16格式)的结果。来自每个MLP72的总和沿着MLP72的列级联到上面的下一个MLP72块。在最后一个MLP72中,在每个周期上,计算八个并行FP16乘法的总和。
最终结果是多个输入周期内的累加总和,其中累加由i_first和i_last输入控制。i_first输入信号指示累加和归零的第一组输入。i_last信号指示要累加和加到累加的最后一组输入。最终的i_last值可在之后的六个周期使用,并使用i_last o_valid进行限定。两次运算之间可以无空拍。
配置说明

微信图片_20220906181154.png

表1 FP16点积配置表


端口说明

微信图片_20220906181246.png

表2 FP16点积端口说明表


时序图

微信图片_20220906181330.png

图2 FP16点积时序图


其中,

微信图片_20220906181346.png

那么,以上运算功能如何对应到MLP内部呢?其后的细节已分为MLP72中的多个功能阶段进行说明。
进位链

首先请看下图,MLP之间的进位链结构,这是MLP内部的专用走线,可以保证级联的高效执行。

微信图片_20220906181423.png

图3 MLP进位链


乘法阶段

下图是MLP中浮点乘法功能阶段,其中寄存器代表一级可选延迟。

微信图片_20220906181455.png

图4 MLP乘法功能阶段框图


MLP72浮点乘法级包括两个24位全浮点乘法器和一个24位全浮点加法器。两个乘法器执行A×B和C×D的并行计算。加法器将两个结果相加得到A×B + C×D。
乘法阶段有两个输出。下半部分输出可以在A×B或(A×B + C×D)之间选择。上半部分输出始终为C×D。
乘法器和加法器使用的数字格式由字节选择参数以及和参数设置的格式确定。
浮点输出具有与整数输出级相同的路径和结构。MLP72可以配置为在特定阶段选择整数或等效浮点输入。输出支持两个24位全浮点加法器,可以对其进行加法或累加配置。进一步可以加载加法器(开始累加),可以将其设置为减法,并支持可选的舍入模式。
最终输出阶段支持将浮点输出格式化为MLP72支持的三种浮点格式中的任何一种。此功能使MLP72可以外部支持大小一致的浮点输入和输出(例如fp16或bfloat16),而在内部以fp24执行所有计算。

微信图片_20220906181623.png

图5 MLP浮点输出阶段框图


需要强调的是本设计输入和输出都是FP16格式,中间计算过程,即进位链上的fwdo_out和fwdi_dout 都是FP24格式。具体逻辑框图如下所示:

微信图片_20220906181645.png

图6 FP16点积逻辑框图


MLP内部数据流示意图:

微信图片_20220906181700.png

图7 FP16点积在MLP内部数据流图


最终ACE的时序结果如下:

微信图片_20220906181726.png


 更多信息可以来这里获取==>>电子技术应用-AET<<

微信图片_20210517164139.jpg


本站内容除特别声明的原创文章之外,转载内容只为传递更多信息,并不代表本网站赞同其观点。转载的所有的文章、图片、音/视频文件等资料的版权归版权所有权人所有。本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如涉及作品内容、版权和其它问题,请及时通过电子邮件或电话通知我们,以便迅速采取适当措施,避免给双方造成不必要的经济损失。联系电话:010-82306118;邮箱:aet@chinaaet.com。
Baidu
map