Hugging Face 的 LOGO

text-generation-inference 文档

在 Google TPU 上使用 TGI

Hugging Face's logo
加入 Hugging Face 社区

并获得增强的文档体验

开始使用

在 Google TPU 上使用 TGI

请查看此指南，了解如何在 TPU 上使用 TGI 提供模型。

< > 在 GitHub 上更新

←在 AWS Trainium 和 Inferentia 上使用 TGI 在 Intel GPU 上使用 TGI→