京东商城百万数据抓取--苏宁易购 淘宝网 京东商城 百万级价格数据海量抓取

按照惯例先上成果:

过了分割线就是代码

ps:.5.14更新了代码：京东商城每周都会更改规则咱们也不能落后

# -*- coding: utf-8 -*-import requestsimport reimport timeimport datetimeimport csvimport urllib.parsedef request_jd():list = (电池,主板, 屏幕总成, 屏加工, 中框, 后壳, 大相头, 小相头, 尾插排线, 开机排线, 音量排线, 闪光灯排线, 喇叭, 听筒, 振动器)for kw in list:print(kw)u1 = /search?keyword=u2 = &ev=exprice_ = 0kw = 电池if 主板 in kw:n = 100if