Hugging Face Transformers是由Hugging Face开发和维护的开源Python库。它于2018年以pytorch-pretrained-bert(BERT的PyTorch移植版)起步,2019年更名为Transformers,使开发者能用几行代码下载Hugging Face Hub上托管的大量预训练模型,用于推理和微调。
AutoModel、AutoTokenizer等Auto类仅凭模型名称即可自动加载相应的架构和分词器,pipeline API则能用一次调用完成文本生成、分类等任务。分词器的聊天模板功能可将对话消息转换为模型所要求的特殊标记格式。该库主要基于PyTorch运行,除自然语言处理外也支持视觉和语音模型。