Python Selenium自动化实战：利用Cookies模拟登录微博
本文介绍如何使用Python和Selenium实现携带Cookies模拟登录微博。首先通过手机扫码获取斗鱼Cookies并保存，随后加载该Cookies文件登录微博，实现高效模拟登录。
2026-10-14
6
本文介绍如何使用Python和Selenium实现携带Cookies模拟登录微博。首先通过手机扫码获取斗鱼Cookies并保存，随后加载该Cookies文件登录微博，实现高效模拟登录。
本文分享一款基于Python Tkinter开发的微博图片批量下载工具。文章详细解析了从环境依赖、界面设计到核心逻辑的实现过程，重点介绍了使用多线程解决UI卡顿问题及后台线程管理技巧。包含完整源代码、流程图解析及四大功能亮点，提供网盘下载链接，适合Python初学者学习GUI编程与网络爬虫实战。
本文详细介绍Python中Tenacity库的使用，涵盖无限重试、次数限制、时间控制、随机间隔及日志记录等核心功能。通过具体代码示例，展示如何在爬虫、测试用例及抢票场景中实现健壮的错误重试机制。
本文介绍使用Python爬取免费代理IP网站数据并生成JSON文件的方法。通过lxml模块提取IP和端口，利用requests库向百度发起请求以验证代理可用性，并将有效IP及耗时写入文件。代码包含分页抓取、延时处理及异常捕获，旨在为小型爬虫项目提供低成本的动态IP解决方案。
本文介绍使用 Python 编写爬虫程序，通过 requests 发送请求并配合 lxml 解析 HTML 结构，从京东搜索页面提取 PS4 商品名称、价格、评论数及链接等关键信息。代码包含完整的请求头设置与数据清洗逻辑，适用于电商数据抓取学习。
本文系统讲解Python爬虫核心知识，涵盖Web交互原理、Requests库的get/post/put方法及Response对象属性。提供10个基础代码实例，演示URL传参、Headers伪装绕过反爬、文件保存及编码处理。最后通过完整实例展示如何结合正则表达式从百度贴吧批量下载图片，适合初学者快速掌握爬虫基本操作。
本文深入解析Python标准库urllib.request模块。详细讲解Request类的构造参数与数据编码，阐述Handler与Opener的协作机制。通过身份验证、代理配置及Cookie持久化（Mozilla与LWP格式）的完整代码示例，展示如何灵活构建HTTP请求处理器，适用于Python网络编程与爬虫开发场景。
本文介绍如何在 Python Selenium 中通过 Chrome DevTools Protocol (CDP) 获取接口数据。Selenium 本身不提供直接查询接口响应的方法，但可通过配置性能日志（performance logging）捕获 requestid，进而调用 Network.getResponseBody 命令提取特定 URL 的完整响应内容。
本文详解在Python爬虫中获取指定class样式的div标签的三种方法。对比字符串查找与正则表达式的局限性，重点介绍BeautifulSoup库的使用技巧。通过字典形式赋值attrs参数解决官方文档示例无效的问题，并提供完整代码示例及图片下载实战，帮助开发者高效准确提取网页数据。
本文介绍如何在Python中使用BeautifulSoup库，通过指定标签名和ID属性来精准定位HTML页面中的特定元素。以span标签下id为is-like-span为例，展示find方法的用法，并说明如何调用get_text()提取其中的字符串内容，帮助开发者快速掌握DOM元素获取技巧。
本文详细解析Scrapy中请求头部的生成机制与覆盖优先级。从自动添加的User-Agent和Accept-Encoding，到settings.py中的DEFAULT_REQUEST_HEADERS配置，再到Request对象及下载中间件中的自定义Header，层层剖析其生效顺序。特别指出Referer中间件的最高优先级特性及关闭方法，帮助开发者精准控制HTTP请求头部。
本文深入解析Python函数中return语句的使用机制，阐明未显式返回时默认返回None的原理，并通过对比代码实例说明调用差异。同时，结合爬虫场景，介绍如何利用random和time库实现随机等待时间，以降低被封IP的风险。