Question

python爬虫如何给url设置变量

如何给图中url设置变量获取1-44页数据

Answer 1

url = 'http://xxxxxxx.simple.com/xxxxxxxx'
data = {
    'xxx': 0,
    'type': 0,
    'status': 3,
    'actName': ''}
cookies = {'xxxx': 'xxxxxx',
           'uid': 'xxxxxx'}

data['xxx'] = 44
h = requests.get(url, params=data, cookies=cookies, timeout=3000)

# url可以通过h.url查看

requests可以通过params自动拼接

如果是urllib, 没用过, 只知道parse可以拼接参数

>>> import urllib
>>> urllib.parse.urlencode({"a": 11, "b": 22})
'a=11&b=22'