自注意力机制 自注意力机制公式
注意力机制和自注意力机制的区别 1、注意力机制和自注意力机制的主要区别在于它们作用的位置和对象不同。注意力机制 注意力机制主要作用在encoder和decoder之间，是对source（源数据）和target（目标数据）之间的相关性进行分析。这种机制在诸如机器翻译等序列到序列（seq2seq）的任务中尤为常见。（图片来源网络，侵删）2、自注意力机制是注意力机制的变体，它减少了对外部信息的依赖，更擅
3小时前
增云 
