Deep_Learning_Task04: 机器翻译及其相关技术/注意力机制/Transformer

机器翻译与数据集 机器翻译 机器翻译（MT）:将一段文本从一种语言自动翻译为另一种语言，用神经网络解决这个问题通常称之为神经机器翻译（NMT）。主要特征：输出是单词序列而不是单个单词，输出序列的长度可能和源序列的长度不同 数据预处理-将数据清洗、转化为神经网络的输入minbatch def preprocess_raw(text): text = text.replace('\u202f', ' ').replace('\xa0', ' ') out = '' for i, char in enumerate(text.lower()): if char