有人说，我做一款AI芯片，只要原生支持PyTorch就好了呀，用户直接用PyTorch跑模型，根本接触不到CUDA呀。

没错，一般的用户只要在PyTorch层面做应用，但是总是有新的模型架构出来，这些架构都需要做特定的性能优化才能在一个芯片上得到较高的性能，这时候就涉及到算子开发了。

比如说一开始LLM在GPU上的性能不好，后来社区针对Nvidia GPU做了flash attention等的优化才把LLM的性能提升到了比较可观的程度。

CUDA已经被各种开源AI框…。

上一篇： class="title">男医生在给年轻靓丽的女性检查时会是什么心态？

下一篇： 为什么UC曾经是国内主流浏览器之一，但现在却逐渐销声匿迹了？