跳到正文
原文
Hugging Face Blog·· 2024-02-08精选AI 评分60

Hugging Face 为 TGI 和 Inference Endpoints 推出兼容 OpenAI 的 Messages API

From OpenAI to Open LLMs with Messages API on Hugging Face

AI 导读

Hugging Face 为 Text Generation Inference(TGI)和 Inference Endpoints 推出 Messages API,从 TGI 1.4.0 起提供与 OpenAI Chat Completion API 兼容的接口,可直接配合 OpenAI 客户端库以及 LangChain、LlamaIndex 使用。

推荐理由

官方给出 OpenAI 兼容接口的接入方式与限制,读者可据此评估把现有 OpenAI 调用迁到开源模型的成本。

来源:Hugging Face Blog · huggingface.co