[轉]Transformers使用

Transformers 是由 Hugging Face 開發的一個 NLP 包，支持加載目前絕大部分的預訓練模型。隨着 BERT、GPT 等大規模語言模型的興起，越來越多的公司和研究者採用 Transformers 庫來構建 NLP 應用。

Transformers 庫快速入門

• 第一部分：初識 Transformers

  • 第一章：開箱即用的 pipelines
  • 第二章：模型與分詞器
  • 第三章：必要的 Pytorch 知識
  • 第四章：微調預訓練模型

• 第二部分：Transformers 實戰

  • 第五章：快速分詞器
  • 第六章：序列標註任務
  • 第七章：翻譯任務
  • 第八章：文本摘要任務
  • 第九章：抽取式問答
  • 第十章：Prompt 情感分析

Demo 一覽

• pairwise_cls_similarity_afqmc：句子對分類任務，金融同義句判斷。
• sequence_labeling_ner_cpd：序列標註任務，命名實體識別。
• seq2seq_translation：seq2seq任務，中英翻譯。
• seq2seq_summarization：seq2seq任務，文本摘要。
• sequence_labeling_extractiveQA_cmrc：序列標註任務，抽取式問答。
• text_cls_prompt_senti_chnsenticorp：文本分類任務，Prompt 情感分析。