自注意力是一种技术,帮助计算机通过关注自身来识别信息中的重要部分。
想象你在阅读一句话,想要理解各个单词之间的联系。
自注意力会查看每个单词,并决定它与其他单词的关联强度。
这样计算机就能更好地捕捉重要的联系,例如理解或翻译文本。
这种技术常用于语言和文本任务,以更好地把握上下文。