Python实现FTP文件下载及黑名单过滤机制
本文介绍如何使用Python实现FTP文件下载,并通过自定义黑名单过滤机制筛选特定词语。代码展示了连接FTP服务器、遍历目录下载文件的过程,同时利用in_lists函数读取黑名单文件,结合Python内置filter函数过滤包含敏感词的文件名,确保下载内容符合预设规则。
具体实现代码如下所示:
#!/usr/bin/python
# -*- coding: GBK -*-
# -*- coding: UTF-8 -*-
from ftplib import FTP
import os
import datetime
ftp_server = '127.0.0.1' # 对应ftp服务器地址
username = 'ponshine' # 用户名
password = '1qaz2wsx' # 密码
ftp_path = '/GBCC/' # ftp目录
local_path = "C:\F\python\pythonwangtest\wyjj2\\" #本地的目录
# 连接FTP
def ftpconnect():
ftp = FTP()
ftp.set_debuglevel(2) # 打开调试级别2,显示详细信息
ftp.connect(ftp_server, 21) # 连接
ftp.login(username, password) # 登录,如果匿名登录则用空串代替即可
return ftp
# 获取当前的年月日时分秒
def getdatetime():
i = datetime.datetime.now()
date = ("%s%s%s%s%s%s" % (i.year, i.month, i.day, i.hour,i.minute,i.second))
return date # 需返回才能取值
# 获取当前的年月日
def getdate():
import datetime
i = datetime.datetime.now()
date = ("%s%s%s" % (i.year, i.month, i.day))
return date # 需返回才能取值
def downloadfile(remotepath, localpath):
ftp = ftpconnect() # 连接ftp
print ftp.getwelcome() # 显示ftp服务器欢迎信息
ftp_filename = ftp.nlst(remotepath) # 运用nlst()获取文件名
print 'ftp_filename: ', ftp_filename # ftp上的文件名
for eachfile in ftp_filename: # 循坏取文件名
if eachfile.endswith('.AVL'):
localpath_files = eachfile.split("/")
localpath_file = localpath_files[len(localpath_files) - 1] # 文件名:localpath_file= GBCC_201611102155_01.AVL
print "localpath_file--->" + localpath_file
# 创建记录下载文件名的文件名
writefiletext = local_path + getdate() + ".txt" # 记录下载后的文件名
print "writefile_text--->" + writefiletext
if os.path.exists(writefiletext):
print writefiletext + "is exists"
else:
print writefiletext + "is not exists"
makefile = open(writefiletext,"w+")
makefile.close()
files = open(writefiletext, "r") # 打开黑名单表
print "writefiletext--->" + writefiletext
try:
all_the_text = files.read()
print "all_the_text-------》" + all_the_text
if all_the_text.__contains__(localpath_file):
print "文件已下载,不需要重复下载"
else:
print "文件没有下载,现在开始下载"
bufsize = 1024 # 设置缓冲块大小
fp = open(localpath + localpath_file, "wb+")
ftp.retrbinary('RETR ' + eachfile, fp.write, bufsize) # 下载文件
fo = open(writefiletext,"ab+")
fo.write(localpath_file + "\n") # 将每个文件名写入文件
fo.flush() # 刷新文件
fo.close()
fp.flush()
finally:
print "结束了"
files.close()
ftp.set_debuglevel(0)
ftp.close()
if __name__ == "__main__":
downloadfile("/GBCC", "C:\F\python\pythonwangtest\wyjj2\\")
补充:Python黑名单过滤逻辑
系统需要过滤掉某些特定的词语。
编写了以下函数,并在blacklist文件中添加需要被过滤的词语列表。
#过滤黑名单列表中出现的
def in_lists(str):
str_lists=[]
fd = open('./filter/blacklist')
for line in fd.readlines():
str_lists.append(line.strip())
if str in str_lists:
return 0
else:
return 1
通过Python自带的filter函数调用in_lists函数,filter函数会过滤掉列表中布尔值为1的元素(即不在黑名单中的元素,保留黑名单中的元素或反之,需结合具体逻辑,此处指利用filter进行筛选)。
filter( in_lists , urls )
总结
以上所述是小编给大家介绍的Python下载文件记录黑名单的实现方法,希望对大家有所帮助。如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对本站网站的支持!
免责声明:本文内容仅供参考,不代表本站观点。转载或引用请注明出处。









