python通过FTP方式从虚拟机服务器上下载文件
程序员文章站
2024-03-18 10:51:34
...
因业务需求,需要将几台虚拟机服务器上的特定文件夹下的日志集中到一台服务器上,参考前人工作直接写python脚本,先上代码:
#!/usr/bin/python
# -*- coding:utf-8 -*-
'''
Created on 2017年6月28日
@author: Luoxun
'''
import os
import sys
import ftplib
import socket
#desDirectory 本地服务器绝对路径 oriDirectory 虚拟机上绝对路径 fileName 日志名
#port 端口 host 主机地址 userName 用户名 password 密码
def getServerLog(desDirectory, oriDirectory,fileName,port, host, userName, password):
if not os.path.exists(desDirectory):
os.makedirs(desDirectory)
# change download directory: cd 到本地服务器上的指定文件夹下
os.chdir(desDirectory)
print '****The file will be over writed in this dir ' + desDirectory
# connect
try:
f = ftplib.FTP(host)
except (socket.error, socket.gaierror), e:
print '----ERROR:cannot reach ' + host
print e
return False
# login
try:
f.login(user=userName, passwd=password)
except ftplib.error_perm , e:
print '----ERROR:cannot login to server ' + host
print e
f.quit()
return False
print '****Logged in as ' + userName + ' to server ' + host
# 打印登录的虚拟机时默认的路径
try:
print f.pwd()
except ftplib.error_perm, e:
print '----ERROR:cannot display to %s on %s' % (oriDirectory, host)
print e
f.quit()
return False
# change folder: cd到虚拟机上要下载的日志所在的路径
try:
f.cwd(oriDirectory)
except ftplib.error_perm, e:
print '----ERROR:cannot CD to %s on %s' % (oriDirectory, host)
print e
f.quit()
return False
print '****Changed to %s folder on %s' % (oriDirectory, host)
'''
#该代码可以批量下载目录下全部日志文件 不需要fileName参数
# get file
try:
f.retrbinary('RETR %s' % fileName, open(fileName, 'wb').write)
except ftplib.error_perm, e:
print '----ERROR:cannot read file %s on %s' % (fileName, host)
print e
os.unlink(fileName)
return False
'''
# get file 下载指定日志
try:
files = f.nlst()
#进入本地目录
os.chdir(desDirectory)
#循环下载每个文件
for fileName in files:
f.retrbinary('RETR %s' % fileName, open(fileName, 'wb').write)
except ftplib.error_perm, e:
print '----ERROR:cannot read file %s on %s' % (fileName, host)
print e
os.unlink(fileName)
return False
f.close()
if __name__ == "__main__":
getServerLog("E:/workspace/crawler/logs/","/home/crawler/crawler/logs/","log-url.log",22, "192.168.1.1", "username", "password")
print '****done'
运行之后出现如下错误:
默认目录是“根目录”然后是550错误,直接网上搜索,都提示是vsftpd的设置问题,按照大神的说法各种更改,错误依旧。
没办法,ftp命令方式登录,手动cd到程序中的目标日志路径,恩,依旧报错,ls一下,发现“根目录”下全是乱七八糟的东西,明显“/”不代表根目录。于是更改绝对路径”/home/crawler/crawler/logs/”为相对路径”crawler/logs/”
再次运行,问题解决,文件妥妥的下载下来了。
还可以批量下载日志,见程序代码说明。
参考:
http://blog.sina.com.cn/s/blog_44a82be2010103gh.html
http://blog.csdn.net/wengyupeng/article/details/44587299
http://blog.csdn.net/linda1000/article/details/8255771
上一篇: RabbitMQ入门