Attention is all you need.
德语->英语项目： https://github.com/TCcjx/pytorch_transformer-remake 项目目录结构（文件说明）： .data(文件夹)：数据集Multi30K checkpoints(文件夹):训练权重文件保存处 config.py：全局配置文件，DEVICE以及输入token的最大长度 dataset.py：数据预处理文件，构建德语和英语词表，实现德语和英语的词元token和IDX的一一隐射，以及德语和英语句子预处理函数（输入德语和英语句子，返回分词后的词元列表信息，以及词元ID列表） multihead_attn.py: 构建多头注意力机制模块，这里的实现同时也考虑了解码器中第二个多头注意力机制模块的代码复用，在编码器和解码器的多头注意力机制模块中都可以复用这个多头注意力机制的模块 encoder_block.py：编码器模块的构建 encoder.py：编码器的实现，同时自动处理PAD掩码矩阵，再传入encoder_block中，实现多个encoder_block的堆叠使用 decoder_block.py:解码器模块的构建 de...