是的。如果还是Transformer, ASIC 可以砍掉所有与矩阵乘法和注意力(attention)机制无关的晶体管

当然,Nvidia 也在搞“ASIC 化”,但不可能在性能上超过“量身定制”的纯 ASIC。只不过,前提条件还是,如果AI还是transformer, 这个架构比较长期的稳定下来。

请您先登陆,再发跟帖!