在 Google App Engine 中上传文件

Posted

技术标签:

【中文标题】在 Google App Engine 中上传文件【英文标题】：Upload files in Google App Engine 【发布时间】：2010-09-10 00:50:08 【问题描述】：

我计划创建一个允许用户降级其 Visual Studio 项目文件的 Web 应用程序。但是，Google App Engine 似乎通过db.TextProperty 和db.BlobProperty 接受文件上传和平面文件存储在Google 服务器上。

我很高兴有人能提供代码示例（客户端和服务器端）来说明如何做到这一点。

【问题讨论】：

@user858915 链接坏了:( 【参考方案1】：

事实上，这个问题在 App Egnine 文档中得到了解答。请参阅Uploading User Images 上的示例。

html 代码，在

内：

Python 代码：

类留言簿（webapp.RequestHandler）：
  def post（自我）：
    问候=问候（）
    如果 users.get_current_user():
      greeting.author = users.get_current_user()
    greeting.content = self.request.get("content")
    头像 = self.request.get("img")
    问候.头像 = db.Blob（头像）
    问候语.put()
    self.redirect('/')

【讨论】：

不喜欢这种方法会导致您丢失 mime 类型信息。 @santiagobasulto：你为什么不自己检查一下？ 我不想检查它。当您必须显示图像时，您必须提供 mime 类型信息（无论图像是 JPG、GIF 等）因此，您必须提供内容类型 HTTP 标头。如果您使用您提供的解决方案上传图像，那么您将来不会知道图片的内容类型，ergo，您无法设置标题，ergo，旧的奇怪浏览器将无法显示图像（因为没有内容类型） 如果您不检查您信任的客户端的 mime 类型，那么您将面临黑帽攻击或客户端中配置错误的 mime 类型。如果您打算这样做，您可以只信任文件扩展名本身。【参考方案2】：

这是一个完整的工作文件。我从 Google 网站上提取了原始版本并对其进行了修改，使其更加真实。

需要注意的几点：

    此代码使用BlobStore API

    此行的目的 ServeHandler 类是为了“修复” 键，以便它摆脱任何名称 可能发生在 浏览器（我没有观察到任何 铬）

    blob_key = str(urllib.unquote(blob_key))

    最后的“save_as”子句很重要。它将确保文件名在发送到您的浏览器时不会被破坏。摆脱它来观察会发生什么。

    self.send_blob(blobstore.BlobInfo.get(blob_key), save_as=True)

祝你好运！

import os
import urllib

from google.appengine.ext import blobstore
from google.appengine.ext import webapp
from google.appengine.ext.webapp import blobstore_handlers
from google.appengine.ext.webapp import template
from google.appengine.ext.webapp.util import run_wsgi_app

class MainHandler(webapp.RequestHandler):
    def get(self):
        upload_url = blobstore.create_upload_url('/upload')
        self.response.out.write('<html><body>')
        self.response.out.write('<form action="%s" method="POST" enctype="multipart/form-data">' % upload_url)
        self.response.out.write("""Upload File: <input type="file" name="file"><br> <input type="submit" name="submit" value="Submit"> </form></body></html>""")

        for b in blobstore.BlobInfo.all():
            self.response.out.write('<li><a href="/serve/%s' % str(b.key()) + '">' + str(b.filename) + '</a>')

class UploadHandler(blobstore_handlers.BlobstoreUploadHandler):
    def post(self):
        upload_files = self.get_uploads('file')
        blob_info = upload_files[0]
        self.redirect('/')

class ServeHandler(blobstore_handlers.BlobstoreDownloadHandler):
    def get(self, blob_key):
        blob_key = str(urllib.unquote(blob_key))
        if not blobstore.get(blob_key):
            self.error(404)
        else:
            self.send_blob(blobstore.BlobInfo.get(blob_key), save_as=True)

def main():
    application = webapp.WSGIApplication(
          [('/', MainHandler),
           ('/upload', UploadHandler),
           ('/serve/([^/]+)?', ServeHandler),
          ], debug=True)
    run_wsgi_app(application)

if __name__ == '__main__':
  main()

【讨论】：

令人惊讶的是，这对除我之外的所有人都有效...blobstore_handler 中的self.__uploads 是None，当我尝试此操作时。【参考方案3】：

Google Groups 中有一个关于它的帖子：

Uploading Files

有了很多有用的代码，那次讨论对我上传文件很有帮助。

【讨论】：

【参考方案4】：

Google 发布了一项用于存储大文件的服务。看看blobstore API documentation。如果您的文件大于 1MB，则应该使用它。

【讨论】：

如何保存文件 > 1mb。我正在使用 github.com/ckopanos/django-google-cloud-storage【参考方案5】：

我今天试了一下，效果如下：

我的sdk版本是1.3.x

html页面：

<form enctype="multipart/form-data" action="/upload" method="post" > 
<input type="file" name="myfile" /> 
<input type="submit" /> 
</form>

服务器代码：

file_contents = self.request.POST.get('myfile').file.read()

【讨论】：

【参考方案6】：

如果你仍然有问题，请检查你是否在表单标签中使用 enctype

没有：

<form encoding="multipart/form-data" action="/upload">

是的：

<form enctype="multipart/form-data" action="/upload">

【讨论】：

在实施您的回答之前遇到编码错误 当我这样做时，一个真正烦人的障碍是不包括文件输入类型的“大小”。我正在使用 Safari 进行测试，默认情况下它的文件长度显然很短（？），而我在 GAE 中获得的文件内容只是文件名。只是一句警告，可能会让人头疼。【参考方案7】：

您不能存储文件，因为没有传统的文件系统。您只能将它们存储在它们自己的 DataStore 中（在定义为 BlobProperty 的字段中）

上一个链接有一个例子：

class MyModel(db.Model):
  blob = db.BlobProperty()

obj = MyModel()
obj.blob = db.Blob( file_contents )

【讨论】：

【参考方案8】：

我个人发现here 中描述的教程在将 Java 运行时与 GAE 结合使用时很有用。出于某种原因，当我尝试使用

上传文件时 
<form action="/testservelet" method="get" enctype="multipart/form-data">
    <div>
        Myfile:<input type="file" name="file" size="50"/>
    </div>

    <div>
        <input type="submit" value="Upload file">
    </div>
</form>

我发现我的 HttpServlet 类由于某种原因不接受带有“enctype”属性的表单。删除它可以，但是，这意味着我无法上传任何文件。

【讨论】：

可能是因为你使用的是get方法，试试把它设置成post吧。我不确定它是否会起作用，但值得一试。【参考方案9】：

Google App Engine 中没有存储平面文件。一切都必须进入Datastore，这有点像关系数据库，但又不完全一样。

您可以将文件存储为TextProperty 或BlobProperty 属性。

DataStore 条目有 1MB 的限制，这可能是也可能不是问题。

【讨论】：

如何保存大于 1mb 的文件。我正在使用github.com/ckopanos/django-google-cloud-storage【参考方案10】：

我在 App Engine 上上传文件时观察到一些奇怪的行为。当您提交以下表单时：

<form method="post" action="/upload" enctype="multipart/form-data">
    <input type="file" name="img" />
    ...
</form>

然后你像这样从请求中提取img：

img_contents = self.request.get('img')

img_contents 变量在 Google Chrome 中是 str()，但在 Firefox 中是 unicode。就像你现在一样，db.Blob() 构造函数接受一个字符串，如果你传入一个 unicode 字符串，它会抛出一个错误。

有谁知道如何解决这个问题？

另外，我觉得非常奇怪的是，当我复制和粘贴留言簿应用程序（带有头像）时，它可以完美运行。我在我的代码中以完全相同的方式执行所有操作，但它不起作用。我已经快要拔掉头发了。

【讨论】：

:D 表格中说：mutlipart/form-data 而不是 multipart/form-data。 Chrome 足够聪明，可以纠正错字，而 Firefox 则不然。【参考方案11】：

有一种使用平面文件系统的方法（至少从使用角度来看）

有这个Google App Engine Virtual FileSystem project。这是在数据存储和内存缓存 API 的帮助下实现的，以模拟普通文件系统。使用这个库，您可以在项目中使用类似的文件系统访问（读取和写入）。

【讨论】：

以上是关于在 Google App Engine 中上传文件的主要内容，如果未能解决你的问题，请参考以下文章

将大型视频文件上传到 Google App Engine

Google App Engine 和 Amazon S3 文件上传

Google App Engine 大文件上传

上传属性 Google App Engine - app.yaml

与 Google App Engine 一起上传图片

上传 Google App Engine 应用程序时出错