LLM 课程文档
基本用法已完成!
加入 Hugging Face 社区
并获得增强的文档体验
开始使用
基本用法已完成!
干得漂亮!您已经学完了本课程的这一部分!回顾一下,在本章中,您
- 学习了 Transformer 模型的基本构建模块。
- 了解了分词 pipeline 的组成部分。
- 了解了如何在实践中使用 Transformer 模型。
- 学习了如何利用分词器将文本转换为模型可理解的张量。
- 一起设置了分词器和模型,以从文本获得预测结果。
- 了解了输入 ID 的局限性,并学习了注意力掩码。
- 体验了通用且可配置的分词器方法。
从现在开始,您应该能够自由浏览 🤗 Transformers 文档:词汇表听起来会很熟悉,并且您已经了解了您将在大多数时间使用的方法。
< > 在 GitHub 上更新