当前位置:首页 > python

Spiderdemo第一题

admin3个月前 (01-01)python604
import requests

session = requests.session()
session.headers.clear()

cookies = {
    'sessionid': 'ncj02skbstbgqh4fc3mcaryprq1trmmr',
}

headers = {
    'accept': 'application/json, text/javascript, */*; q=0.01',
    'accept-language': 'zh-CN,zh;q=0.9,en;q=0.8,en-GB;q=0.7,en-US;q=0.6',
    'priority': 'u=1, i',
    'referer': 'https://www.spiderdemo.cn/sec1/header_check/',
    'sec-ch-ua': '"Microsoft Edge";v="143", "Chromium";v="143", "Not A(Brand";v="24"',
    'sec-ch-ua-mobile': '?0',
    'sec-ch-ua-platform': '"Windows"',
    'sec-fetch-dest': 'empty',
    'sec-fetch-mode': 'cors',
    'sec-fetch-site': 'same-origin',
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/143.0.0.0 Safari/537.36 Edg/143.0.0.0',
    'x-requested-with': 'XMLHttpRequest',
    # 'cookie': 'sessionid=ncj02skbstbgqh4fc3mcaryprq1trmmr',
}

params = {
    'challenge_type': 'header_check',
}
res = 0
for i in range(1, 101):
    url = f'https://www.spiderdemo.cn/sec1/api/challenge/page/{i}/'
    response = session.get(url=url, params=params, cookies=cookies,
                           headers=headers)
    print(f'第{i}页数据')
    print(response.json()['page_data'])
    print(f"第{i}页数据的和是:{sum(response.json()['page_data'])}")
    res += sum(response.json()['page_data'])
    print(f'前{i}页的总和是{res}')


扫描二维码推送至手机访问。

版权声明:本文由匡民博客发布,如需转载请注明出处。

本文链接:https://kuangmin.top/post/89.html

分享给朋友:

“Spiderdemo第一题” 的相关文章

dp爬携程

# https://hotels.ctrip.com/hotels/list?starlist=5&highPrice=-1&barCurr=CNY&sort=1 from DrissionPage import ChromiumPa…

一道数学题

# 已知50个1998相乘的结果是a,a的各位数的和是b, b的各位数的和是c,c的各位数的和是d, # 求d的值 a = 1998 ** 50 print(a) str_a = str(a) b&nbs…

dp爬boss直聘

# url='https://www.zhipin.com/web/geek/job?query=python&city=101010100&page=1' from DrissionPage import ChromiumP…

ddddocr的安装使用

pip install -i https://mirrors.bfsu.edu.cn/pypi/web/simple/  ddddocrfrom DrissionPage import ChromiumPage imp…

跳转新标签页获取元素

from DrissionPage import Chromium browser = Chromium() tab = browser.latest_tab tab.get('https://www.163.c…

自动填写问卷星

# https://www.wjx.cn/jq/87910206.aspx import random from DrissionPage import Chromium browser = Chromium() ta…