python下载文件记录黑名单的实现代码
时间:2019-04-07
本文章向大家介绍python下载文件记录黑名单的实现代码,主要包括python下载文件记录黑名单的实现代码使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。
具体代码如下所示:
#!/usr/bin/python # -*- coding: GBK -*- # -*- coding: UTF-8 -*- from ftplib import FTP import os import datetime ftp_server = '127.0.0.1' # 对应ftp服务器地址 username = 'ponshine' # 用户名 password = '1qaz2wsx' # 密码 ftp_path = '/GBCC/' # ftp目录 local_path = "C:\F\python\pythonwangtest\wyjj2\\" #本地的目录 # 连接FTP def ftpconnect(): ftp = FTP() ftp.set_debuglevel(2) # 打开调试级别2,显示详细信息 ftp.connect(ftp_server, 21) # 连接 ftp.login(username, password) # 登录,如果匿名登录则用空串代替即可 return ftp # 获取当前的年月日时分秒 def getdatetime(): i = datetime.datetime.now() date = ("%s%s%s%s%s%s" % (i.year, i.month, i.day, i.hour,i.minute,i.second)) return date # 需返回才能取值 # 获取当前的年月日 def getdate(): import datetime i = datetime.datetime.now() date = ("%s%s%s" % (i.year, i.month, i.day)) return date # 需返回才能取值 def downloadfile(remotepath, localpath): ftp = ftpconnect() # 连接ftp print ftp.getwelcome() # 显示ftp服务器欢迎信息 ftp_filename = ftp.nlst(remotepath) # 运用nlst()获取文件名 print 'ftp_filename: ', ftp_filename # ftp上的文件名 for eachfile in ftp_filename: # 循坏取文件名 if eachfile.endswith('.AVL'): localpath_files = eachfile.split("/") localpath_file = localpath_files[len(localpath_files) - 1] # 文件名:localpath_file= GBCC_201611102155_01.AVL print "localpath_file--->" + localpath_file # 创建记录下载文件名的文件名 writefiletext = local_path + getdate() + ".txt" # 记录下载后的文件名 print "writefile_text--->" + writefiletext if os.path.exists(writefiletext): print writefiletext + "is exists" else: print writefiletext + "is not exists" makefile = open(writefiletext,"w+") makefile.close() files = open(writefiletext, "r") # 打开黑名单表 print "writefiletext--->" + writefiletext try: all_the_text = files.read() print "all_the_text-------》" + all_the_text if all_the_text.__contains__(localpath_file): print "文件已下载,不需要重复下载" else: print "文件没有下载,现在开始下载" bufsize = 1024 # 设置缓冲块大小 fp = open(localpath + localpath_file, "wb+") ftp.retrbinary('RETR ' + eachfile, fp.write, bufsize) # 下载文件 fo = open(writefiletext,"ab+") fo.write(localpath_file + "\n") # 将每个文件名写入文件 fo.flush() # 刷新文件 fo.close() fp.flush() finally: print "结束了" files.close() ftp.set_debuglevel(0) ftp.close() if __name__ == "__main__": downloadfile("/GBCC", "C:\F\python\pythonwangtest\wyjj2\\")
补充:python 黑名单过滤
需要过滤一些词语
写了下面这个函数,在blacklist 文件中添加需要过滤的词语
#过滤黑名单列表中出现的 def in_lists(str): str_lists=[] fd = open('./filter/blacklist') for line in fd.readlines(): str_lists.append(line.strip()) if str in str_lists: return 0 else: return 1
通过 python 自带的 filter函数 调用, in_lists ,filter函数会过滤掉 bool 值为 1 的列表中的元素
filter( in_lists , urls )
总结
以上所述是小编给大家介绍的python下载文件记录黑名单,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对脚本之家网站的支持!
- JavaScript 教程
- JavaScript 编辑工具
- JavaScript 与HTML
- JavaScript 与Java
- JavaScript 数据结构
- JavaScript 基本数据类型
- JavaScript 特殊数据类型
- JavaScript 运算符
- JavaScript typeof 运算符
- JavaScript 表达式
- JavaScript 类型转换
- JavaScript 基本语法
- JavaScript 注释
- Javascript 基本处理流程
- Javascript 选择结构
- Javascript if 语句
- Javascript if 语句的嵌套
- Javascript switch 语句
- Javascript 循环结构
- Javascript 循环结构实例
- Javascript 跳转语句
- Javascript 控制语句总结
- Javascript 函数介绍
- Javascript 函数的定义
- Javascript 函数调用
- Javascript 几种特殊的函数
- JavaScript 内置函数简介
- Javascript eval() 函数
- Javascript isFinite() 函数
- Javascript isNaN() 函数
- parseInt() 与 parseFloat()
- escape() 与 unescape()
- Javascript 字符串介绍
- Javascript length属性
- javascript 字符串函数
- Javascript 日期对象简介
- Javascript 日期对象用途
- Date 对象属性和方法
- Javascript 数组是什么
- Javascript 创建数组
- Javascript 数组赋值与取值
- Javascript 数组属性和方法
- JavaWeb - Linux Operating System
- 第三章--第六节:元祖
- JavaWeb - 开发环境搭建和 Shell 编程
- 第四章--第一节:函数
- 教育平台项目后台管理系统:接口文档
- 第四章--第二节:类
- 教育平台项目后台管理系统:介绍与搭建
- Python办公自动化之Excel做表自动化:全网最全,看这一篇就够了!
- Java学习笔记-spring-Bean实例化
- Java学习笔记-spring-Bean作用于
- 教育平台项目后台管理系统:课程信息模块
- 教育平台项目后台管理系统:课程内容模块
- 100 个 Python 小例子
- Entity Framework初体验
- Entity Framework 小知识(一)