第29期Datawhale组队学习——NLP之transformer_datawhale github transformer

前言

Datawhale第29期组队学习来了！这次选择的是Datawhale开源学习项目——“基于transformers的自然语言处理入门”，学习周期为9.13-10.1，在此记录初次接触NLP的小白学习历程。基于教程写的比较详细，这里的记录只作为补充。

学习路线

Task01：熟悉规则，学习概览（9.13）

教程：第一章前言1.0-本地阅读和代码运行环境配置和1.1-Transformers在NLP中的兴起

1、环境配置+本地阅读

笔者使用的软件实验环境为Win10系统，Anaconda3。
1、环境配置（Anaconda Prompt）
（1）建立NLP的环境：conda create --name NLP python=3.8.5然后输入 y
（2）激活环境：conda activate NLP
（3）安装transformers、datasets、notebook、torch、sklearn、scipy、matplotlib、torchtext、seaborn、spacy（不加-i选项豆瓣的源也没有问题，我配置用的是中科大的）
pip install transformers==4.4.2 -i https://pypi.douban.com/simple/
pip install datasets==1.6.2 -i https://pypi.douban.com/simple/
pip install torch==1.9.0 -i https://pypi.douban.com/simple/
pip install jupyter scikit-learn scipy matplotlib torchtext seaborn spacy

2、打开文件（Anaconda Prompt）
首先到下载好的文件夹路径（D盘）