竞赛文档
创建竞赛
并获得增强的文档体验
开始使用
创建竞赛
创建竞赛非常容易,您可以完全控制数据、评估指标和使用的硬件。
要创建竞赛,您需要拥有一个 Hugging Face 账户。您还需要一个写入令牌,该令牌将在整个竞赛中用于上传数据和提交作品。请注意,写入令牌是私有的,不应与任何人共享,并且在竞赛期间不得刷新。如果您决定刷新令牌,则需要在竞赛 Space 的设置中更新令牌,否则参赛者将无法上传提交作品,并且竞赛将停止工作。您可以在此处查找/生成写入令牌。
要创建竞赛,您还需要一个组织。您可以创建一个新组织,也可以使用您已经是成员的现有组织。您可以在此处创建一个新组织。
要创建竞赛,请点击此处。
竞赛创建器
请注意:您稍后可以更改几乎所有设置。但是,我们不建议在竞赛开始后更改评估指标。因为它将需要您重新评估所有提交的作品。
竞赛类型
通用:通用竞赛是指参赛者提交 CSV 文件(或任何其他文件)的竞赛,其中包含整个测试集的预测。然后,使用竞赛创建者提供的评估指标,根据 solution.csv(或解决方案文件)评估预测结果。这些竞赛易于设置且可以免费托管(如果您使用 cpu-basic)。您可以通过将通用竞赛升级到 cpu-upgrade 来提高评估运行时。对于通用竞赛,所有测试数据(不带标签)始终对参赛者可用。
脚本:脚本竞赛是指参赛者提交 python 脚本的竞赛,该脚本接收测试集并输出预测结果。然后,使用竞赛创建者提供的评估指标,根据 solution.csv(或解决方案文件)评估预测结果。只有当您使用 cpu-basic 作为评估的后端时,这些竞赛才能免费托管,但这不推荐!在脚本竞赛中,测试数据可以保持私有。参赛者根本无法看到测试数据。参赛者提交一个包含
script.py
的 huggingface 模型仓库,该脚本运行以生成对隐藏测试数据的预测。