首先,确定目标百度双色球,第一页第一个网页便是,我也就以这个为例来开始爬取须要历史双色球数据
当然我们在开始变成之前,还须要做些准备事情,
①安装anconda,www.anaconda.com/,大家可以直接搜索下载,然后安装该程序,安装完成的时候记得将系统环境变量的勾上,

②在打开anconda的命令行,最好是管理员打开:
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/conda-forge
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/msys2
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/pytorch/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/r
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main
conda config --set show_channel_urls yes
目的是添加海内源
③实行conda update conda,更新所有的程序包(不会更新python版本),大家也可以选择 conda install python=3.8.3更新python最新版本(更新比较久,依赖比较多),不更新python也没事,最新的功能基本上用不到
④在上面的命令行中conda install pymysql 或者pip install pymysql安装必要的库,我这里须要pymysql,我喜好用数据库,这个免费大略;说到用数据库,我由于是利用就不用那么高等的东西去弄了,就只用大略的别人做好的模板(拿来主义),安装phpstudy,这个比较大略,安装完,直接运行就可以了,大家可以将数据库的初始root密码改改
⑤ 安装编写python的软件,我建议用vscode或者wing,pycharm用过,这个软件每次开始都更新很花韶光,我不以为太累了;装好vscode后,装下python包,不装也可以,在用的时候会自动提示你确实这个包;简体中文包,英文好的可以忽略,我是以为英文看着累,装了中文
环境安装部分基本上安装完了,那么我们就可以开始进行思路的整理和开始爬虫的编写了