比赛文档

创建比赛

您正在查看 主分支 版本,需要从源代码安装。如果您希望使用常规的 pip 安装,请查看最新的稳定版本(v0.1.6)。
Hugging Face's logo
加入 Hugging Face 社区

并获得增强型文档体验

开始使用

创建比赛

创建比赛非常简单,您可以完全控制数据、评估指标和使用的硬件。

要创建比赛,您需要拥有一个 Hugging Face 账户。您还需要一个写入令牌,该令牌将在整个比赛过程中用于上传数据和提交结果。请注意,写入令牌是私密的,不应与任何人共享,并且在比赛过程中不得刷新。如果您决定刷新令牌,则需要在比赛空间的设置中更新令牌,否则参赛者将无法上传提交结果,比赛将停止运行。您可以在 此处 查找/生成写入令牌。

要创建比赛,您还需要一个组织。您可以创建一个新的组织,也可以使用您已经是成员的现有组织。您可以在 此处 创建一个新的组织。

要创建比赛,请点击 此处

比赛创建者

competition

请注意:您之后可以更改几乎所有设置。但是,我们不建议在比赛开始后更改评估指标。因为它需要您重新评估所有提交结果。

比赛类型

  • 通用型:通用型比赛是指参赛者提交包含整个测试集预测结果的 CSV 文件(或任何其他文件)的比赛。然后使用比赛创建者提供的评估指标,根据 solution.csv(或解决方案文件)对预测结果进行评估。这些比赛易于设置且免费托管(如果您使用 cpu-basic)。您可以通过将通用型比赛升级到 cpu-upgrade 来提高评估运行时间。对于通用型比赛,所有测试数据(无标签)始终可供参赛者使用。

  • 脚本型:脚本型比赛是指参赛者提交一个 Python 脚本,该脚本接收测试集并输出预测结果的比赛。然后使用比赛创建者提供的评估指标,根据 solution.csv(或解决方案文件)对预测结果进行评估。这些比赛仅在您使用 cpu-basic 作为评估的后端时才免费托管,这并不推荐!在脚本型比赛中,测试数据可以保持私密。参赛者根本无法查看测试数据。参赛者提交一个包含 script.py 的 Hugging Face 模型仓库,该脚本用于在隐藏的测试数据上生成预测结果。

< > 更新 在 GitHub 上