HuggingFace简明教程,BERT中文模型实战示例.NLP预训练模型,Tr

huggingface

丰富模型数据集

分类

中文Bert

环境安装

使用字典和分词工具

默认返回List

增强的编码函数

批量编码句子

批量成对编码

字典操作

数据集操作，加载数据集

数据集操作

选择过滤

切分，分桶

列操作和转换类型

map

保存加载

评价函数

文档

计算

管道函数

pipline 一些不需要训练模型的就可以执行的NLP任务

阅读理解

完形填空

文本生成

文本总结

翻译

实战中文分类

定义数据集

加载

定义批处理函数

定义数据加载器，并查看数据样例

加载模型 不使用finetuning

定义下游任务

训练下游任务

迁移学习威力 ，基于预训练模型抽取特征

测试

中文填空

定义数据集

设置一个Mask

下游

训练参数量大

测试

关系推断任务

样例