英伟达深度学习推理引擎TensorRT，现在开源了

机器之心报道参与：李亚洲、李泽南、思英伟达的深度学习推理引擎TensorRT是连接神经网络框架与GPU之间的桥梁，它支持所有种类的神经网络框架，近期也实现了容器化，目前的TensorRT是5.1版。6月17日，英伟达宣布了TensorRT的开源。项目链接：https://github.com/NVIDIA/TensorRT本次开源的内容是英伟达 TensorRT 的一部分，其中包括 TensorRT 的插件与一些解析器（Caffe 和 ONNX），以及演示 TensorRT 平台的使用和功能的示例应用程序。相信未来更多的内容也会持续开源。TensorRT 是一个高性能深度学习推理平台，能够为在英伟达 GPU 上运行的语音、视频等 APP 提供更低地延迟、更高的吞吐量。TensorRT 包含输入模型的解析器、支持全新 ops 的插件以及在利用优化进行推理之前的层。今日，英伟 ………………………………