Hugging Face Blog·· 2023-05-09精选AI 评分62
用 StarCoder 微调出编程助手 StarChat
Creating a Coding Assistant with StarCoder
AI 导读
Hugging Face 团队基于 BigCode 的 16B 参数 StarCoder,用 OpenAssistant 对话数据集微调出编程助手 StarChat,并开源了代码、数据集与模型。
推荐理由
完整给出了从对话提示词到 ChatML 格式、标签掩码与 DeepSpeed ZeRO-3 微调的可复现流程,并附代码与数据集链接。
来源:Hugging Face Blog · huggingface.co