Python HTTP 请求神器升级！HTTPX 全面解析（附 Requests 对比）
在 Python 网络请求领域，很多人第一时间想到的就是 Requests。但随着异步编程的普及，一个更现代、更强大的库逐渐走红——HTTPX。今天这篇文章，就带你全面了解 HTTPX 的功能特色、使用方法，并和 Requests 做一次深入对比。一、HTTPX 是什么？
java爬虫设置代理：三大常用HTTP组件的配置差异与选型建议！
写Java爬虫的时候配代理这事儿，说难不难，说简单吧，不同HTTP组件写起来还真不太一样。
第21章 爬虫基础与HTTP协议：打开互联网数据宝库的钥匙
开篇语>如果说Python是连接现实与数字世界的桥梁，那么网络爬虫就是这座桥上最繁忙的货车——它日夜不息地将散落在互联网各个角落的数据，运送到你的数据库、表格和分析模型中。
初识爬虫的那天，我选择了Java
第9 章本章重点介绍了3 种比较流行的Java 网络爬虫开源框架，即Crawler4j、WebCollector 和WebMagic。
零基础上手秒杀系统：抢购接口隐藏 + 单用户限制频率
此外，我做了一张流程图，描述了目前我们实现的秒杀接口下单流程：前文回顾和文章规划零基础上手秒杀系统：令牌桶限流+ 再谈超卖零基础上手秒杀系统零基础上手秒杀系统：使用Redis缓存热点数据零基础上手秒杀系统：消息队列异步处理订单…
httpclient+jsoup实现小说线上采集阅读
用过老版本UC看小说的同学都知道，当年版权问题比较松懈，我们可以再UC搜索不同来源的小说，并且阅读，那么它是怎么做的呢?
Python3 爬虫教程 - HTTP 基本原理
在正式学习网络爬虫之前，我们需要详细了解 HTTP 的基本原理，了解在浏览器中敲入 URL 到获取网页内容之间发生了什么。了解这些内容，有助于我们进一步了解爬虫的基本原理。1.
小心！java爬虫设置代理时DNS解析与连接超时的调优参数一览
写爬虫的人应该都遇到过这种糟心事：代理配好了，代码跑起来，结果要么卡在DNS解析半天不动，要么连上了又超时断开。尤其是用Java写爬虫的朋友，HttpClient或者OkHttp里面那几个timeout参数，看着差不多，调起来却一头雾水。
手把手教你搭建一个基于Java的分布式爬虫系统「转」
1 概述在不用爬虫框架的情况，经过多方学习，尝试实现了一个分布式爬虫系统，并且可以将数据保存到不同地方，类似MySQL、HBase等。