将数万个小文件移动到Azure存储容器的最快方法

将数万个小型映像文件从本地计算机移动到Azure云存储中的容器的最快方法是什么？

我正在尝试为Azure推荐的CloudBerry资源pipe理器，估计完成时间大约为4小时 （总共约3万个文件，平均文件大小为5KB）。 这对我来说是不可接受的 – 我想大幅度削减那个时间。

你能build议其他的select吗？ 我认为非GUI的会更快。 我将提供一个我尝试过的基于Linux的解决scheme的示例（下面），这对我来说不起作用。 也许专家可以指出类似的东西，但是有一个正确的用法例子。 当涉及到详尽的例子时，下面的解决scheme没有特别好的logging。 在此先感谢，如果您需要，请随时向我询问更多信息。

我试过的基于Linux的解决scheme叫做blobxfer ，就像Azcopy，但是对于Linux。 我使用的命令是blobxfer mystorageaccount pictures /home/myuser/s3 --upload --storageaccountkey=<primary access key from portal.azure.com> --no-container 。 但是我不断收到一个神秘的错误： 未知错误（HTTP标头之一的值不是正确的格式。）

工人angular色进程在被杀之前可以将状态设置为“繁忙”多长时间？

从Azure队列中删除邮件时出现exception？

Windows Azure sdk 1.7，CloudTableClient缺lessGetTableReference函数

Azure Powershell模块 – Linux（.NET核心）支持

如何configurationWindows Azure WCF服务Webangular色以使用netTcpBinding？

完整的追溯：

<?xml version="1.0" encoding="utf-8"?><Error><Code>InvalidHeaderValue</Code><Message>The value for one of the HTTP headers is not in the correct format. RequestId:61a1486c-0101-00d6-13b5-408578134000 Time:2015-12-27T12:56:03.5390180Z</Message><HeaderName>x-ms-blob-content-length</HeaderName><HeaderValue>0</HeaderValue></Error> Exception in thread Thread-49 (most likely raised during interpreter shutdown): Traceback (most recent call last): File "/usr/lib/python2.7/threading.py",line 810,in __bootstrap_inner File "/home/myuser/.virtualenvs/redditpk/local/lib/python2.7/site-packages/blobxfer.py",line 506,in run File "/home/myuser/.virtualenvs/redditpk/local/lib/python2.7/site-packages/blobxfer.py",line 597,in putblobdata File "/home/myuser/.virtualenvs/redditpk/local/lib/python2.7/site-packages/blobxfer.py",line 652,in azure_request <type 'exceptions.AttributeError'>: 'nonetype' object has no attribute 'Timeout'

如何方便地推断出Azure SDK csrun.exe的path？

无法在Microsoft Azure上configuration域

如何保护在Windows Azure上运行的odata服务

安装pip-2.7

Windows中azure色的Xp

请尝试将您的blobxfer升级到0.9.9.6。 最近修复了一些零字节文件的错误。

关于你的blobxfer问题，你应该直接在GitHub页面而不是在stackoverflow上打开问题。 代码维护人员可以更轻松地查看您的问题，并针对该特定工具回答和/或解决您的问题。 如果在升级到0.9.9.6后仍然遇到blobxfer问题，请直接在GitHub项目页面上发布问题。

一般来说，正如shellter指出的那样，对于成千上万的小文件，您应该首先将它们归档，然后上传归档文件以获得更高的吞吐量。