python爬虫案例——抓取链家租房信息

文章目录

• 1、任务目标
• 2、分析网页
• 3、编写代码

1、任务目标

目标站点：链家租房版块(https://bj.lianjia.com/zufang/)
要求：抓取该链接下前5页所有的租房信息，包括：标题、详情信息、详情链接、价格

如：

2、分析网页

1. 用浏览器打开链接，按F12或右键检查，进入开发者模式；因为是同步加载的网站，我们可以直接在 Network-Doc 下查找数据接口，发现第一页数据存放在一个叫 zufang/ 的接口下，且网页源码中内容与网页内容符合
   
2. 查看 Headers 信息，发现该接口的请求URL和请求方式如下：