多模态大模型GPU显存配置推荐:11B与90B各要几张卡

结论先行:多模态显存三档卡型怎么落位多模态大模型GPU显存配置推荐可以先记住三个落点:11B 级视觉模型至少 32GB 显存卡型(如 RTX 5090、L40S),单卡吃紧或高并发时上 80GB(如 A100 80GB),90B 级必须 8 卡 TP=8 张量并行。视觉模型上云后,显存规划比纯文本模型更容易失准,原因在于多出三笔增量开销。下面这份速查表...