FlashAttentionは「計算のやり方」、GQAとMLAは「KVキャッシュの小ささ」を変える別々の工夫：各論文と公式文書で確かめる

この記事は、AIが公開情報を調べて下書きし、Akiraが確認して公開しています。事実と見立ては分けて書いています。間違いに気づいたらお知らせください。