Herbert

nn.init.uniform_将张量的值填充为从均匀分布中采样的随机数# 对权重参数进行筛选和调整。具体来说，它会将权重参数矩阵 m.weight.data 中绝对值大于等于 5 的元素保留，而将绝对值小于 5 的元素设置为 0# 由于 weight 为均匀分布，所以数值在[-5,5]的概率为1/2,[-10,-5]的概率为1/4,[5,10]的概率为1/4;

块是比层更高层次的构建单元，它通常由多个层按照某种特定的方式组合而成，形成一个相对独立的功能模块。块可以看作是一个封装好的子网络，具有一致的输入输出接口，可以在不同的位置重复使用。块（block）可以描述单个层、由多个层组成的组件或整个模型本身块由类（class）表示。它的任何子类都必须定义一个将其输入转换为输出的前向传播函数， 并且必须存储任何必需的参数（有些块不需要任何参数）。块必须具有反向传播函数# 用模型参数声明层。这里，我们声明两个全连接的层。