无法在应用引擎中从 FTP 服务器下载 CSV 文件



我试图从AppEngine中的ftp服务器读取CSV文件,并且我能够连接到ftp服务器。但是当我尝试检索文件时,它返回了错误。这是我从服务器读取CSV文件的代码:

import ftplib
import cStringIO
import csv
session = ftplib.FTP('myftpserver.com')
session.login('username','pwd')
session.set_pasv(False)
output = cStringIO.StringIO()
session.retrbinary('RETR myfile.csv', output.write)
csvfile = csv.reader(output.getvalue().splitlines(), delimiter=',')
for i, row in enumerate(csvfile):
    print row

这是我得到的错误回溯:

  Traceback (most recent call last):
  File "/home/vikas/apps/myproj/django/core/handlers/base.py", line 111, in get_response
    response = callback(request, *callback_args, **callback_kwargs)
  File "/home/vikas/apps/myproj/admin/admin_actions.py", line 3528, in get_ftp_file
    session.retrbinary('RETR myfile.csv', output.write)
  File "/usr/lib/python2.7/ftplib.py", line 414, in retrbinary
    conn = self.transfercmd(cmd, rest)
  File "/usr/lib/python2.7/ftplib.py", line 376, in transfercmd
    return self.ntransfercmd(cmd, rest)[0]
  File "/usr/lib/python2.7/ftplib.py", line 354, in ntransfercmd
    sock = self.makeport()
  File "/usr/lib/python2.7/ftplib.py", line 283, in makeport
    for res in socket.getaddrinfo(None, 0, self.af, socket.SOCK_STREAM, 0, socket.AI_PASSIVE):
  File "/home/vikas/gcloud/google-cloud-sdk/platform/google_appengine/google/appengine/api/remote_socket/_remote_socket.py", line 318, in getaddrinfo
    raise gaierror(EAI_NONAME, 'nodename nor servname provided, or not known')
gaierror: [Errno 8] nodename nor servname provided, or not known

我不知道我做错了什么,dir() nlst()等命令都不起作用,并且上述错误在我添加它们后立即发生.

唉,App Engine 目前提供的套接字模拟还不足以涵盖所有用例。

下面是一个访问一个著名的公共匿名FTP服务器并从中获取一个小文本文件的示例,以便每个人都可以复制和实验...:在文件getit.py中,我们有:

import ftplib
import cStringIO
def getit():
    session = ftplib.FTP('ftp.mozilla.org')
    session.login('anonymous','')
    # session.set_pasv(False)
    session.cwd('/pub/mozilla.org')
    output = cStringIO.StringIO()
    session.retrbinary('RETR README', output.write)
    return output.getvalue()
if __name__ == '__main__':
    print(getit())

这作为独立运行良好,python getit.py,无论您是将set_pasv保留在此处注释,还是删除注释。

要将其嵌入到 GAE 应用中,例如:

import getit
class GetitPage(webapp2.RequestHandler):
  def get(self):  # pylint:disable-msg=invalid-name
     try: result = getit.getit()
     except Exception as e:
         result = 'Error {}: {}'.format(type(e), e)
     self.response.headers['Content-Type'] = 'text/plain'
     self.response.out.write(result)

这适用于左边评论set_pasv,但如果你取消评论它,你会得到与你收到的相同的异常。

因此,对强制您进入主动模式(不支持被动模式)的服务器执行FTP不会以这种方式工作。 但是,这是一个相当破碎的服务器 - 您能否修复它以支持流行的默认被动模式? 然后,您的 GAE 应用程序可以愉快地使用它...!

最新更新