python下载文件暂停恢复_python下载文件记录黑名单的实现代码
具体代码如下所示:
#!/usr/bin/python
# -*- coding: GBK -*-
# -*- coding: UTF-8 -*-
from ftplib import FTP
import os
import datetime
ftp_server = '127.0.0.1' # 对应ftp服务器地址
username = 'ponshine' # 用户名
password = '1qaz2wsx' # 密码
ftp_path = '/GBCC/' # ftp目录
local_path = "C:\F\python\pythonwangtest\wyjj2\\" #本地的目录
# 连接FTP
def ftpconnect():
ftp = FTP()
ftp.set_debuglevel(2) # 打开调试级别2,显示详细信息
ftp.connect(ftp_server, 21) # 连接
ftp.login(username, password) # 登录,如果匿名登录则用空串代替即可
return ftp
# 获取当前的年月日时分秒
def getdatetime():
i = datetime.datetime.now()
date = ("%s%s%s%s%s%s" % (i.year, i.month, i.day, i.hour,i.minute,i.second))
return date # 需返回才能取值
# 获取当前的年月日
def getdate():
import datetime
i = datetime.datetime.now()
date = ("%s%s%s" % (i.year, i.month, i.day))
return date # 需返回才能取值
def downloadfile(remotepath, localpath):
ftp = ftpconnect() # 连接ftp
print ftp.getwelcome() # 显示ftp服务器欢迎信息
ftp_filename = ftp.nlst(remotepath) # 运用nlst()获取文件名
print 'ftp_filename: ', ftp_filename # ftp上的文件名
for eachfile in ftp_filename: # 循坏取文件名
if eachfile.endswith('.AVL'):
localpath_files = eachfile.split("/")
localpath_file = localpath_files[len(localpath_files) - 1] # 文件名:localpath_file= GBCC_201611102155_01.AVL
print "localpath_file--->" + localpath_file
# 创建记录下载文件名的文件名
writefiletext = local_path + getdate() + ".txt" # 记录下载后的文件名
print "writefile_text--->" + writefiletext
if os.path.exists(writefiletext):
print writefiletext + "is exists"
else:
print writefiletext + "is not exists"
makefile = open(writefiletext,"w+")
makefile.close()
files = open(writefiletext, "r") # 打开黑名单表
print "writefiletext--->" + writefiletext
try:
all_the_text = files.read()
print "all_the_text-------》" + all_the_text
if all_the_text.__contains__(localpath_file):
print "文件已下载,不需要重复下载"
else:
print "文件没有下载,现在开始下载"
bufsize = 1024 # 设置缓冲块大小
fp = open(localpath + localpath_file, "wb+")
ftp.retrbinary('RETR ' + eachfile, fp.write, bufsize) # 下载文件
fo = open(writefiletext,"ab+")
fo.write(localpath_file + "\n") # 将每个文件名写入文件
fo.flush() # 刷新文件
fo.close()
fp.flush()
finally:
print "结束了"
files.close()
ftp.set_debuglevel(0)
ftp.close()
if __name__ == "__main__":
downloadfile("/GBCC", "C:\F\python\pythonwangtest\wyjj2\\")
补充:python 黑名单过滤
需要过滤一些词语
写了下面这个函数,在blacklist 文件中添加需要过滤的词语
#过滤黑名单列表中出现的
def in_lists(str):
str_lists=[]
fd = open('./filter/blacklist')
for line in fd.readlines():
str_lists.append(line.strip())
if str in str_lists:
return 0
else:
return 1
通过 python 自带的 filter函数 调用, in_lists ,filter函数会过滤掉 bool 值为 1 的列表中的元素
filter( in_lists , urls )
总结
以上所述是小编给大家介绍的python下载文件记录黑名单,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对我们网站的支持!
本文标题: python下载文件记录黑名单的实现代码
本文地址: http://www.cppcns.com/jiaoben/python/208302.html
python下载文件暂停恢复_python下载文件记录黑名单的实现代码相关推荐
- python下载文件暂停恢复_Python关于Threading暂停恢复解决办法
我们都知道python中可以是threading模块实现多线程, 但是模块并没有提供暂停, 恢复和停止线程的方法, 一旦线程对象调用start方法后, 只能等到对应的方法函数运行完毕. 也就是说一旦s ...
- python下载后是黑的_python下载文件记录黑名单的实现代码
具体代码如下所示: #!/usr/bin/python # -*- coding: GBK -*- # -*- coding: UTF-8 -*- from ftplib import FTP imp ...
- python教程2017百度云_python下载ICCV2017全套paper
发现直接把我之前写的下载CVPR的那段代码中的CVPR改成ICCV就可以运行了,代码内容的一些解释在原文章中. 代码默认下载到'E:\study\papers\ICCV2017\'文件夹下,文件名称为 ...
- python 电脑文件变动提醒_Python整理文件方法,效率提升100倍-docx是什么文件
现在人们经常要去下载或者接收一些文件. 比如说同事传来的文档,自己建立的文件,想看的电影等等,那大家都会怎么处理这些文件呢? 科研工作者.学生们可能需要阅读大量的文献,我们也需要阅读很多的电子书等等, ...
- python对文件操作实例_Python对文件文件夹的操作实例
代码背景: 最近老看视频教程,我需要知道一部教程,需要多久能看完.win下文件夹里,多选视频文件,可以直接在属性中查看一共需要的时间.不过在网上下载的很多视频教程每一章都分布在不同的文件夹下,无法快捷 ...
- python程序怎样在手机上_python手机文件怎么上传至电脑?
本文讲解python的一个内置文件传输下载器,可以用来在局域网内进行文件传输,当然可能有人会问,我用微信QQ也能传,为什么还要用python来传输下载?在此,其实我个人感觉的是,这种操作更简单,省了时 ...
- python操作文件和目录_Python操作文件和目录
Python操作文件和目录 读写文件比较简单,有一点特别注意就好了 windows下Python默认打开的文件以gbk解码,而一般我们的文件是utf-8编码的,所以如果文本含有中文,就会出现异常或者乱 ...
- python windows和linux路径_python复制文件,路径不存在问题(Windows和linux路径分隔符不统一)...
问题: python脚本涉及到复制文件,而我们需要兼容Windows.linux和mac环境 (Windows和linux的路径分隔符不同:通过os.path.sep查看分隔符) 如果用[路径名+os ...
- python数学公式pdf文件的转换_python转换文件 多种文件转换为pdf
1.office文件 这里用的是win32com, 需要注意已经安装的python版本是32位还是64位. 安装后导入 from win32com.client import Dispatch, co ...
最新文章
- 重装操作系统的20条原则(转载)
- AOP、注解实现日志收集
- 启动Tomcat出现乱码--淇℃伅
- 客户决定架构-架构是赤裸裸的
- [Luogu5105]不强制在线的动态快速排序
- 携号转网时间明确了: 下半年在全国实施!
- 中国凝血测试耗材行业市场供需与战略研究报告
- 你被大数据“杀熟”了么?
- sql server怎么设置id字段自增
- data1 op data2 c语言,编写一个简单计算器程序,输入格式为:data1 op data2。其中data1和data2是参加...
- 自抗扰控制(ADRC)
- 清华大学计算机科学学院刘钊,姚 骏-清华大学生命学院
- 1995-2020年国泰安并购重组数据库
- 你真的会用区块链赚钱吗?论区块链的商业思维
- 修改MP4文件二进制内容,实现安卓Camera2旋转录制视频画面功能
- Schema_CN28_CNNG净薪酬计算
- HAUT 1262 魔法宝石 (最短路变形 or 暴力)
- 图片预加载学习(二):有序加载之图片切换
- 华为路由器AR2200-S调试限速
- 榆次哪儿有学计算机的,山西榆次计算机专业院校太重技校抓住机会