本文深入解析 Scrapy 框架中的两类核心中间件：下载器中间件（Downloader Middleware）与 Spider 中间件。详细说明了中间件的注册顺序、执行流程及关键方法（process_request、process_response、process_exception）的行为差异。提供了自定义 User-Agent 轮换、代理 IP 切换及基于状态码的重试中间件代码示例，并介绍了 Spider 中间件对 Item 和 Request 的处理逻辑，帮助开发者构建更稳健的爬虫系统。
本文介绍如何使用Python脚本获取百度指数数据。通过提取登录Cookie，利用自定义类解析API返回的加密数据，生成Pandas DataFrame。文章包含获取Cookie的步骤、核心代码示例、数据保存为CSV的方法，以及使用Plotly进行时间序列可视化的完整流程，帮助开发者便捷地获取并分析关键词热度趋势。
本文介绍如何在Python中使用js2py库直接运行JavaScript代码。针对爬虫中常见的JS加密、混淆及动态接口返回JS变量等场景，详细讲解eval_js和EvalJs两种核心用法。通过提取JS对象属性和调用函数，实现从复杂JS代码中高效获取数据，解决传统正则或字符串解析的繁琐问题，满足90%日常爬虫需求。
本文介绍如何使用Python Flask框架搭建一个个性化网站，通过抓取高清图片与特定语录数据，结合前端懒加载技术实现流畅浏览体验，并详细讲解使用Gunicorn进行服务部署的具体配置与启动命令。
本文详细介绍Python爬虫中如何使用Beautiful Soup模块快速定位网页元素。涵盖模块安装、基础用法、四大核心对象（BeautifulSoup、Tag、NavigableString、Comment）解析，以及find与find_all方法的参数详解与实战代码示例，帮助初学者掌握高效的数据提取技巧。
本文详解PyCharm中etree与lxml模块标红问题的两种常见原因及解决方法。首先解决解释器路径不匹配导致的红线，其次通过指定版本下载whl文件并pip安装修复库引用错误，帮助开发者快速恢复代码正常提示。
本文详解Python爬虫中urllib模块的异常处理机制。重点解析URLError（主机错误）与HTTPError（路径或参数错误）的区别与捕获顺序，通过具体代码实例演示如何构建健壮的爬虫程序，确保在网络请求失败时能正确识别错误类型并执行相应处理逻辑。
本文详解Python爬虫中如何使用lxml库结合XPath技术高效提取网页局部内容。涵盖XPath基础语法、谓词与属性查询，以及lxml库在PyCharm中的安装配置。通过本地文件解析、服务器响应处理及百度关键词搜索等完整代码示例，展示从数据抓取到节点定位的全过程，帮助开发者快速掌握精准数据提取技巧。
本文详解如何使用Python Selenium库模拟滑块验证码。通过开发者工具获取滑轨与滑块尺寸，计算需移动的距离（如260像素），并利用ActionChains模块的click_and_hold、move_by_offset及release方法模拟鼠标拖拽动作。此外，还介绍了针对webdriver检测的反爬应对策略，包括手动登录配合Selenium继续爬取的方案。
本文详解如何使用Python从东方财富网抓取M0、M1、M2货币供应量数据，并通过Matplotlib库绘制增速对比图。重点展示M1与M2的差值区间颜色填充，直观反映经济活跃度与流动性变化，适合初学者学习数据获取、处理及可视化全流程。
本文详细介绍如何使用Python爬虫技术抓取东方财富网北上资金逐日持仓数据。通过逆向分析API接口参数，利用requests库获取JSON数据，并结合prettyTable进行格式化展示。此外，文章还构建了一个简单的线性筛选模型，用于识别近期连续加仓且幅度超过流通股份1%的股票，为量化分析提供基础参考。
本文深入解析Python中强大的错误重试库tenacity。通过retry装饰器，实现自动重试逻辑。详解如何配置最大重试次数(stop_after_attempt)、超时限制(stop_after_delay)及组合条件。介绍wait_fixed和wait_random设置重试间隔，以及retry_if_exception_type和retry_if_result自定义重试触发条件，助力构建高可用程序。
