【新智元导读】12月2日,英伟达发布了最新的TensorRT 8.2版本,对10亿级参数模型进行了优化,让实时运行NLP应用成为可能。与原始PyTorch模型相比,TensorRT可以将T5、GPT-2的延迟降低9到21倍。 众所周知,PyTorch和TensorFlow是两个非常受欢迎的深度学习框架。 12月2日 ...