Python Torch和Transformer安装及记录
由于安装总是出现各种奇怪问题,现总结帮助以后环境搭建
anaconda promt 命令框
国内常用镜像源
在base中创建需要的环境:
- 查看环境目录:conda env list
- 创建环境,并指定python版本:conda create –name peculiar python=3.6.9
- 激活环境,conda activate peculiar
- 查看pip版本:pip show pip 或者 conda list
最好更新下pip版本,避免出现问题: pip install –upgrade pip - 安装pytorch: 参考链接
个人觉得下载文件后安装也可以,而且不容易出错 - 安装transformers
如果使用 pip install transformers 安装出现问题,如:ERROR: Failed building wheel for tokenizers Failed to build tokenizers ERROR: Could not build wheels for tokenizers, which is required to install pyproject.toml-based projects
解决方法:指定transformers版本
一般用transformers版本3.4.0
报错:HuggingFace 报错 ImportError: cannot import name ‘HfApi‘
命令行:conda install -c huggingface transformers # 对于python 3.9.13版本 pip install -i https://pypi.tuna.tsinghua.edu.cn/simple/ transformers==3.4.0 #可能出错
测试transformers安装是否成功: python
from transformers import pipeline print(pipeline('sentiment-analysis')('we love you')) # 会有一个下载操作
出现超时情况试试加镜像,如果还不可以看看是不是下面的问题
ERROR: Could not find a version that satisfies the requirement tree_sitter (from versions: none)
链接
sklearn安装需要需要先安装
Numpy
Scipy
matpolotlib
接着安装sklearn,这里需要注意的是在Anaconda中sklearn叫做scikit-learn,并且在安装scikit-learn前还需要安装其他一些依赖,并且最好是按顺序下载
conda install numpy
conda install pandas
conda install scipy
conda install matplotlib
conda install scikit-learn==0.20.0