标签:TensorRT

Nvidia 发布 TensorRT 8,将 BERT 推理时间缩短至毫秒

点击进入:ChatGPT工具插件导航大全 TensorRT是 Nvidia 的深度学习 SDK,它使应用程序在推理过程中的执行速度比纯 CPU 平台快 40 倍。借助 CUDA 的并行编程...