FeeL:通过反馈循环,一次次让多语言大型语言模型变得更好
一个社区驱动的项目
麻省理工学院 | HuggingFace | IBM | Cohere | KAIST | BIU
欢迎来到 FeeL
你是否曾尝试用英语以外的语言与**开源语言模型**聊天,结果却得到了一个几乎毫无意义的回答??你并不孤单。
大多数现代 AI 改进只优先考虑广泛使用的语言,而其他语言则落后。但是,如果我们可以**为所有语言构建更好的 AI——由用户为用户**呢?
**FeeL**——反馈循环——是一个首创的开放平台,用于**通过使用和反馈来改进**语言模型。无论你的语言是荷兰语、阿拉伯语、韩语、希伯来语、印地语还是其他语言,你都可以使用该模型,它将通过 FeeL 学习以适应你的语言偏好。
FeeL 的故事 📖
语言模型通过交互中的反馈进行学习和演变。然而,封闭模型(例如 ChatGPT、Gemini、Claude 等)的最终行为是由控制它们的公司塑造的,而开放模型通常只共享一次,然后保持不变——两者都从未真正**适应用户需求**。这些模型也没有考虑到与不同语言社区相关的不同文化,而且用于改进模型的开放数据有限。
这里的**根本问题**变得显而易见
- 缺乏高质量的开源数据集
- 没有持续改进开放模型的方法
- 社区对模型行为几乎没有控制权
即使主流 AI 公司在多语言能力方面取得了巨大进步,**数据和改进管道**也无法在公司之外使用。
FeeL 登场 🎉
我们 FeeL 开发团队的每个人都对开源语言模型有着相似的经验,并且都热爱为更大的利益推进技术,FeeL 就这样诞生了。
当我们渴望在全球范围内扩展技术时,我们也必须迎合全球社区的**文化**、**价值观**,当然还有**语言**。
FeeL 的目标是**扭转局面**——让真实用户以**自己的语言**塑造开放模型的演变。通过与模型聊天、纠正其错误并提供反馈,不同语言的使用者可以直接影响 AI 理解和响应其母语的程度,从而实现**更好、更具认知能力的 AI**。
反馈越多样化,这些模型对每个人来说就越好。
FeeL 如何运作?
FeeL 是 HuggingFace Space 上的一个开源平台,用户可以在其中选择自己喜欢的语言并与模型聊天。
生成响应后,你可以执行以下任何操作
如果模型响应很棒:
- 点赞👍 - 快速反馈,让我们知道模型是正确的!
如果模型响应需要改进:
- 重新生成 🔄 - 看看再试一次是否会得到更好的结果。
- 点踩👎 - 快速反馈,让我们知道模型需要改进!
- 编辑响应 ✏️ - 重写使其听起来更自然。
如果您选择提交对话数据,它将直接从用户端传输到数据集中,该数据集是开源的,用于促进多语言 AI 的开发。您的反馈将**直接进入 RLHF(基于人类反馈的强化学习)**管道,以实时微调和改进模型。
加入循环!
FeeL 是一个由用户为用户(就像**你**!)打造的项目。如果你热衷于为你的语言带来更智能的模型,请加入 FeeL,与模型聊天,提供反馈,并看着它们一点一点地改进——一次一个响应。如果你有模型应该更好地支持的不同社区,请随意复制和改编,或者联系我们!我们很高兴你能帮助我们为每个人改进 AI。🚀