英伟达 NIM API 中有很多模型,但是很多是几乎不可用,或者是使用体验很差的,做了一份可用模型列表
还有发布时间表,用于给佬友们对照
筛选标准,首先是 API 稳定调用,还有输出速度和首字延迟。第二考虑的是发布的时间尽量要新。综合这些标准,长期自用,测试出下面这些模型
调用稳定,速度有保障
| 模型 ID | 发布日期 | 首字延迟 TTFT (ms) | 输出速度 (tok/s) |
|---|---|---|---|
google/diffusiongemma-26b-a4b-it |
2026-06-10 | 1501 ±507 | 182.4 ±44.2 |
nvidia/nemotron-3-ultra-550b-a55b |
2026-06-04 | 1120 ±11 | 144.7 ±67.5 |
stepfun-ai/step-3.7-flash |
2026-05-28 | 1149 ±206 | 68.0 ±16.1 |
stepfun-ai/step-3.5-flash |
2026-02-12 | 937 ±21 | 117.3 ±65.7 |
google/gemma-4-31b-it |
2026-04-02 | 2515 ±839 | 20.6 ±7.4 |
不够稳定,可以尝试
| 模型 ID | 发布日期 | 首字延迟 TTFT (ms) | 输出速度 (tok/s) | 备注 |
|---|---|---|---|---|
deepseek-ai/deepseek-v4-pro |
2026-04-24 | 4266 ±3271 | 18.4 ±7.9 | 5/5 成功;TTFT 波动大 |
deepseek-ai/deepseek-v4-flash |
2026-04-24 | 1125 | 12.8 | 仅 1/5 成功 |
minimaxai/minimax-m2.7 |
2026-03-18 | 2078 ±614 | 37.4 ±16.3 | 5/5 成功 |
minimaxai/minimax-m3 |
2026-06-01 | 5756 ±8622 | 3.7 ±1.1 | 5/5 成功;极慢 |
z-ai/glm-5.1 |
2026-04-07 | — | — | 0/5;HTTP 410,已于 2026-07-02 EOL |
z-ai/glm-5.2 |
2026-06-16 | 2568 ±932 | 17.3 ±4.7 | 5/5 成功 |
如有错误,欢迎佬友指正