Python利用PyQuery抓取网页数据并导出为Excel文件

七月

发布时间：2026-10-13| 4人浏览过

原创

本文介绍使用Python结合PyQuery库抓取网页数据并生成Excel文件的方法。通过解析HTML结构提取标题与内容，写入CSV文件后利用Notepad++转换为ANSI编码，最终在Excel中保存为Excel格式。

本文详细介绍了一种使用Python程序抓取网页内容并生成Excel文件的实现方案，供读者参考学习。

在Python中抓取网页数据时，主要依赖PyQuery库。该库的API设计与jQuery高度一致，功能强大且易于上手。

具体实现代码示例如下：

#-*- encoding:utf-8 -*-
import sys
import locale
import string
import traceback
import datetime
import urllib2
from pyquery import PyQuery as pq
# 确定运行环境的encoding
reload(sys);
sys.setdefaultencoding('utf8');
f = open('gongsi.csv', 'w');
for i in range(1,24):
  d = pq(url="http://www.yourwebname.com/?Code=HANGYELINGYU&myFlag=allShow&SiteID=122&PageIndex=%d"%(i));
  itemsa=d('dl dt a') #取title元素
  itemsb=d('dl dd') #取title元素
  for j in range(0,len(itemsa)):
    f.write("%s,\"%s\"\n"%(itemsa[j].get('title'),itemsb[j*2].text));
  #end for
#end for
f.close();

代码执行后，使用Notepad++打开生成的gongsi.csv文件，将其编码格式转换为ANSI并保存。随后，使用Excel软件打开该CSV文件，并通过“另存为”功能将其保存为标准的Excel文件格式。

如需了解更多Python相关技巧，可参考本站专题：《Python操作Excel表格技巧总结》、《Python文件与目录操作技巧汇总》、《Python文本文件操作技巧汇总》、《Python数据结构与算法教程》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》及《Python入门与进阶经典教程》。

希望本文的内容能对读者的Python编程实践提供帮助。