B200 Attention Kernel from Scratch to Near-SOTA in 60 Diagrams

📌 概要

一篇技术教程文章：作者以60张图解方式，从零开始在英伟达B200 GPU上手写Attention算子，逐步优化至接近SOTA性能。内容涵盖CUDA/Triton编程、内存访问、tile划分等底层细节，是具身智能与大模型训练背后算子优化的实战参考，目前Hacker News上暂无评论。