跳到正文
原文
Hugging Face Blog·· 2023-04-17AI 评分38

Hugging Face 用 AWS Inferentia2 加速 Transformers 推理

Accelerating Hugging Face Transformers with AWS Inferentia2

AI 导读

Hugging Face 与 AWS 合作,将 Hugging Face Transformers 针对 AWS Inferentia2 推理加速器进行优化,借助 optimum-neuron 无需切分或修改模型,一行代码即可编译。

来源:Hugging Face Blog · huggingface.co