mindspore_bert

使用mindspore的bert做finetune

1.下载数据

来自https://github.com/CLUEbenchmark/CLUE里面的今日头条新闻数据集华为对象存储下载预训练模型：/chz/bert_base.ckpt，并上传到自己的对象存储

第一步：json转tsv

python preprocess.py 'train'
python preprocess.py 'dev'

第二步：tsv转TFRecord

sh run.sh

生成的tfrecord上传到对象存储

将bert目录上传到对象存储，modelarts执行的代码目录选它执行finetune.py

执行evaluation.py

Name		Name	Last commit message	Last commit date
Latest commit History 4 Commits
bert		bert
README.md		README.md
bert_config.json		bert_config.json
preprocess.py		preprocess.py
run.sh		run.sh
run_classifier.py		run_classifier.py
vocab.txt		vocab.txt