Python 网络请求实战:Requests 与 aiohttp,从单请求到并发提速
做数据分析、竞品调研,第一步永远是 "把数据从网络拿下来"。Python 里最常用的两个 HTTP 库 ——Requests(同步)和 aiohttp(异步),足以覆盖绝大多数场景。⚠️ 技术本身是中性工具,请务必遵守目标网站 robots.
[爬虫] 系列④urllib 发请求:Python 自带爬虫库
Python 自带一个 urllib 库,不用 pip install 就能发 HTTP 请求。虽然后面你大概率会用 requests,但 urllib 是理解 Python 网络请求的基础,面试也常问它和 requests 的区别。
[自动化测试] 别只会手动点接口,pytest+requests 这样测
每次接口改了就 Postman 手动点一遍,点完记在 Excel 里,发版前再点一遍。其实 pytest 写个脚本,一条命令跑完,还能自动生成报告。今天从单元测试一路讲到 API 验证,一套流程跑通。
[爬虫] 系列①爬虫第一步:搞懂 HTTP 请求响应
写爬虫之前先搞懂一件事:浏览器输入网址后到底发生了什么?你看到的网页,本质是服务器返回的一段 HTML 文本。爬虫要做的,就是模拟这个 "请求 - 响应" 过程。一、HTTP 是什么HTTP(超文本传输协议)是浏览器和服务器之间对话的规则。你在浏览器输入www.baidu.
Python教程 第20章:字典方法——get、items、update 的实战技巧
一、get 的妙用为什么需要 get:d[k] 报错不是缺点,是设计上一章我们已经会用方括号取值 student["name"]。它很直接,但有个脾气:键不在,程序当场崩。
[爬虫] 系列⑥requests 上手:比 urllib 好用十倍
合规提醒:本文仅用于学习公开数据采集技术,实际爬取请遵守目标网站 robots 协议和相关法律法规。urllib 能用但写起来啰嗦,requests 是 Python 生态最流行的 HTTP 库,一行代码发请求。这篇把 requests 的核心用法一次讲透。
Python第六十二讲 Requests网络请求 零基础打通互联网数据 GET/POST
上一节课我们学会了 pip安装第三方库。 从今天开始,我们正式进入 Python联网编程。 Python之所以万能:能爬数据、能对接接口、能做自动化、能写后台,全部依赖 Requests。 它是 Python 网络界的「万能钥匙」,所有爬虫、接口测试、自动化、AI对接必学。
给Codex写链接检查Skill:200不等于读到正文
让 Codex 检查一批网页链接,如果结果表里写着“状态码200,正常”,你会直接把链接发给别人吗?本文搭了四个本地测试入口:其中三个最终返回200,但只有两个拿到了预期正文。另一个打开的是登录页。这个区别很实用。
jd.item.get(京东商品详情 API)全业务场景落地手册
版本:V2.0|适用:ERP、跨境铺货、竞品监控、反向海淘代购、选品中台、比价系统定位:根据 SKU 编号获取京东商品完整结构化详情;本手册包含接口规范、标准 JSON 样例、8 大业务场景落地、缓存限流策略、踩坑清单、Python 最小可运行 Demo一、接口基础说明1.
每天一个 Python 库:httpx异步请求,让接口测试飞起来
requests瓶颈突出,异步性能碾压,httpx正在悄然取代它?最近我在做爬虫项目,发现传统的requests库在并发请求时特别慢,一次请求等几秒,几十个请求下来要等好久。后来了解到httpx这个库,能同步也能异步,支持HTTP/2,性能提升很大。