Python爬虫抓取智联招聘(基础版)
运行平台:WindowsPython版本:Python3.6IDE:Sublime Text其他工具:Chrome浏览器 1、网页分析 1.1 分析请求地址 以北京海淀区的python工程师为例进行网页分析。打开智联招聘首页,选择北京地区,在搜索框输入"python工程师",点击"搜工作": 想学习可以加Python学习q-u-n-227-435-450 即可获取,内附:开发工具和安装包,以及系统学习路线图,接下来跳转到搜索结果页面,按"F12"打开开发者工具,然后在"热门地区"栏选择"海淀",我们看一下地址栏: 由地址栏后半部分searchresult.ashx?jl=北京&kw=python工程师&sm=0&isfilter=1&p=1&re=2005可以看出,我们要自己构造地址了。接下来要对开发者工具进行分析,按照如图所示步骤找到我们需要的数据:Request Headers和Query String Parameters: 构造请求地址: paras = {'jl': '北京', # 搜索城市'kw': 'python工程师', # 搜索...