「attentionとactivationsのどちらを見るべきか」という、モデル解釈性(interpretability)に関するご質問でしょうか?文脈が少し不明なので、一般的な整理をしつつ確認させてください。 ## それぞれの特徴 **Attention(注意重み)** - 「どのトークンがどのトークンを参照しているか」を示す - 可視化しやすく直感的 - ただし「attentionは説明と