Clarifai 10.5:提升您的 AI:微调 LLM

微调 LLM、编码应用程序模板、Clarifai LiteLLM 集成、新模型:GPT-4o、Gemini-1.5-Flash、Snowflake Arctic-Instruct 模型,以及其他功能改进和错误修复。

来源:Clarifai博客 | 实际应用中的人工智能

这篇博文重点介绍新功能和改进。有关完整列表(包括错误修复),请参阅发行说明。

这篇博文重点介绍新功能和改进。有关完整列表(包括错误修复),请参阅 发行说明。 发行说明。 发行说明

使用 Clarifai 平台微调大型语言模型

使用 Clarifai 平台微调大型语言模型

微调允许您将基础文本到文本模型适应特定任务或领域,使其更适合特定应用程序。通过对特定于任务的数据进行训练,您可以提高模型在这些任务上的性能。微调可让您利用迁移学习并利用从预训练文本模型中获得的知识来促进新模型针对相关问题的学习过程。选择要用于训练数据的预配置模型模板。您可以从以下模板中进行选择:

    带有 GPTQ-Lora 的 Llama2 7/13B 或 Mistral 模型,增强了对量化/混合精度训练技术的支持。GPT-Neo 模型,1.25 亿个参数版本或 27 亿个参数版本。
  • 带有 GPTQ-Lora 的 Llama2 7/13B 或 Mistral 模型,增强了对量化/混合精度训练技术的支持。
  • GPT-Neo 模型,1.25 亿个参数版本或 27 亿个参数版本。
  • 您也可以选择配置训练和推理设置以增强模型的性能。查看有关微调大型语言模型

    的完整指南。 此处。

    此处。

    已发布编码模板,通过促进高效的代码完成、错误检测、重构等,帮助简化开发过程。应用模板是预先构建的、随时可用的应用,可简化应用创建过程,使其更快、更高效。 编码模板 编码模板

    将 LiteLLM 与 Clarifai 集成 LiteLLM 此处

    此处

    对深度微调模板进行了改进YOLOX