Hugging Face Blog·· 2023-09-06精选AI 评分80
TII 的 Falcon 180B 上线 Hugging Face
Spread Your Wings: Falcon 180B is here
AI 导读
TII 的 Falcon 180B 正式上线 Hugging Face,以 1800 亿参数成为当时最大的公开可用语言模型,基于 RefinedWeb 等数据训练了 3.5 万亿 token,使用最多 4096 张 GPU、约 700 万 GPU 小时。
推荐理由
官方给出 180B 模型的训练规模、评测对比与显存需求,可据此判断开源大模型的部署门槛。
来源:Hugging Face Blog · huggingface.co