文章目录
1、anaconda下载 安装 配置 环境变量(安装时点击add path 选项不用在配置)
清华镜像:
https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/?C=N&O=D
对应版本:
https://blog.csdn.net/yuejisuo1948/article/details/81043823
anaconda配置环境变量
我的电脑右键-属性-高级系统设置-高级-环境变量中在path中加入
F:\Anaconda3
F:\Anaconda3\Scripts
F:\Anaconda3\Library\bin
pycharm环境配置
https://blog.csdn.net/C_tommy/article/details/86706458
pycharm和anaconda的配置
https://www.cnblogs.com/yuxuefeng/articles/9235431.html
python3环境搭建(利用Anaconda+pycharm)完整版
https://blog.csdn.net/qq_40644583/article/details/82790636
初学 Python 者自学 Anaconda 的正确姿势是什么?
https://www.zhihu.com/question/58033789
Pycharm初始创建项目和环境搭建
https://www.cnblogs.com/loyung/p/8554836.html
2、升级pip
python -m pip install --upgrade pip
管理员身份运行
3、需要将pip源设置为国内源,阿里源、豆瓣源、网易源等
windows (1)打开文件资源管理器(文件夹地址栏中) (2)地址栏上面输入 %appdata% (3)在这里面新建一个文件夹 pip
(4)在pip文件夹里面新建一个文件叫做 pip.ini ,内容写如下即可
[global]
timeout = 6000
index-url = https://mirrors.aliyun.com/pypi/simple/
trusted-host = mirrors.aliyun.com
linux (1)cd ~ (2)mkdir ~/.pip (3)vi ~/.pip/pip.conf (4)编辑内容,和windows一模一样
需要安装:pip install bs4 bs4在使用时候需要一个第三方库,把这个库也安装一下 pip install lxml
4、利用Anaconda简单安装scrapy框架
设置Anaconda镜像仓库
在CMD中运行下面的命令:
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/
conda config --set show_channel_urls yes
运行命令
conda install scrapy
5、scrapy生成csv文件空行、csv文件打开乱码(解决方案)
改的源码
https://www.cnblogs.com/sjfeng1987/p/9924735.html
https://blog.csdn.net/u011361138/article/details/79912895