NVIDIA 推出全新轻量前沿模型 Nemotron 3.5 Lightning 与动态流量调度引擎 NeMo Switchyard。可在企业私有集群中实现多模型秒级动态路由，针对代码生成与结构化抽取任务降低推理成本超 50%。

核心要点速览 (Key Takeaways)

  • ✓Nemotron 3.5 Lightning 专为极速指令遵循与代码补全微调，吞吐达行业领先水平；
  • ✓NeMo Switchyard 提供亚毫秒级模型路由决策，依据输入难度动态将任务分流至轻量或前沿模型；
  • ✓企业级安全隔离：支持全私有化部署并深度适配 NVIDIA NIM 微服务架构。