『人工智能』原来Transformer就是一种图神经网络,这个概念你清楚吗?( 四 )


『人工智能』原来Transformer就是一种图神经网络,这个概念你清楚吗?
本文插图
从以上几点来看 , GNN 和 Transformer 有很多共同点 。 以 GNN 的视角来分析 Transformer , 对于理解语言模型的思路 , 在今后提升模型训练的效率 , 减少参数量等方面有着重要意义 。
【『人工智能』原来Transformer就是一种图神经网络,这个概念你清楚吗?】参考链接:https://graphdeeplearning.github.io/post/transformers-are-gnns/


推荐阅读