为 Hugging Face 用户带来无服务器 GPU 推理服务

我们想向大家宣布: 部署到 Cloudflare Workers AI 服务 正式上线，这是 Hugging Face Hub 平台上的一项新服务，它使得通过 Cloudflare 边缘数据中心部署的先进 GPU、轻松使用开放模型作为无服务器 API 成为可能。我们将把 Hugging Face 上一些最受欢迎的开放模型整合到 Cloudflare Workers AI 中，这一切都得益于我们的生产环境部署的解决方案，例如文本生成推理 (TGI)。文本生成推理 (TGI)https://github.com/huggingface/text-generation-inference/通过 部署到 Cloudflare Workers AI 服务，开发者可以在无需管理 GPU 基础架构和服务器的情况下，以极低的运营成本构建强大的生成式 AI (Generative AI) 应用，你只需 为实际计算消耗付费，无需为闲置资源支付费用。开发者的生成式 AI 工具这项新服务基于我们去年与 Cloudfalre 共同宣布的战略合作伙伴关系——简化开放生成式 AI 模型的访问与部署过程 ………………………………