定价

使用 🤗 Inference Endpoints 在专用基础设施上轻松部署机器学习模型。当您创建 Endpoint 时，您可以选择实例类型，并根据每小时费率扩展您的模型。🤗 Inference Endpoints 供拥有有效订阅和已备案信用卡的 Hugging Face 帐户使用。在订阅期结束时，用户或组织帐户将被收取成功部署的 Endpoints (准备好服务) 在初始化和运行状态期间使用的计算资源费用。

您可以在下面找到 🤗 Inference Endpoints 所有可用实例的每小时定价，以及成本计算示例。虽然价格按小时显示，但实际成本按分钟计算。

CPU 实例

下表显示了当前可用的 CPU 实例及其每小时定价。如果在应用程序中无法选择实例类型，您需要 请求配额 才能使用它。

GPU 实例

下表显示了当前可用的 GPU 实例及其每小时定价。如果在应用程序中无法选择实例类型，您需要 请求配额 才能使用它。

加速器实例

下表显示了当前可用的自定义加速器实例及其每小时定价。如果在应用程序中无法选择实例类型，您需要 请求配额 才能使用它。

定价示例

以下定价场景示例演示了成本的计算方式。您可以在上表中找到所有实例类型和大小的每小时费率。使用以下公式计算成本

instance hourly rate * ((hours * # min replica) + (scale-up hrs * # additional replicas))

基本 Endpoint

• AWS CPU intel-spr x2 (2x vCPUs 4GB RAM)
• 自动伸缩 (最少 1 个副本，最多 1 个副本)

每小时成本

instance hourly rate * (hours * # min replica) = hourly cost
$0.067/hr * (1hr * 1 replica) = $0.067/hr

每月成本

instance hourly rate * (hours * # min replica) = monthly cost
$0.064/hr * (730hr * 1 replica) = $46.72/month

高级 Endpoint

• AWS GPU small (1x GPU 14GB RAM)
• 自动伸缩 (最少 1 个副本，最多 3 个副本)，每小时流量高峰将 Endpoint 从 1 个副本扩展到 3 个副本，持续 15 分钟

每小时成本

instance hourly rate * ((hours * # min replica) + (scale-up hrs * # additional replicas)) = hourly cost
$0.5/hr * ((1hr * 1 replica) + (0.25hr * 2 replicas)) = $0.75/hr

每月成本

instance hourly rate * ((hours * # min replica) + (scale-up hrs * # additional replicas)) = monthly cost
$0.5/hr * ((730hr * 1 replica) + (182.5hr * 2 replicas)) = $547.5/month

配额

列出的可用配额现在可以在 Inference 仪表板 https://ui.endpoints.huggingface.co 的“已用配额”下查看。

显示的数字将引用已用实例数 / 可用实例配额。已暂停 的 endpoints 不会占用“已用”配额。已缩放到零 的 endpoints 将被计为“已用”配额 - 如果您想解锁此配额，只需暂停已缩放到零的 endpoint 即可。

如果您想增加配额分配，请联系我们。PRO 用户和企业中心组织在请求时将获得更高的配额。