python自如爬虫

  • Z时代
  • 2024-01-10
  • 分类：综合

python

如果你想入门数据分析，但是苦于没有数据，那就看下文如何用 10 行代码写一个最简单的自如房源爬虫

首先我们通过分析看到自如手机版有个 url 如下：http://m.ziroom.com/list/ajax-get-data  能够返回 json 数据

这个基本上包括了租房的一些重要信息，价格，小区，地铁沿线，朝向

所以要做的就是遍历这个地址得到所有的 json 数据

下面是代码：

import requests
import time
with open('ziroom.txt', 'a+') as f:
    for i in xrange(10, 9001, 10):
        payload = {'step': i}
        res = requests.post('http://m.ziroom.com/list/ajax-get-data', data=payload)
        for i in res.json()['data']:
            print i['id']
            f.write(str(i)+'\n')
        time.sleep(3)

以上是 python自如爬虫 的全部内容， 来源链接： utcz.com/z/388642.html

回到顶部