如何将 AppendBlob/大于 4mb 限制的文件上传到 Java 中的 Azure 存储/Blob？

Posted 2023-03-28

【中文标题】如何将 AppendBlob/大于 4mb 限制的文件上传到 Java 中的 Azure 存储/Blob？

【英文标题】：How to upload AppendBlob/a file larger than the 4mb limit into Azure Storage/Blob in Java?

【发布时间】：2021-12-12 14:27:17

【问题描述】：

如何使用 Azure Storage Blob client library for Java 将大 (>4mb) 文件作为 AppendBlob 上传？

我已经成功实现了大文件的 BlockBlob 上传，并且似乎该库在内部处理了单个请求的 4mb(?) 限制并将文件分块为多个请求。

但似乎该库无法为 AppendBlob 做同样的事情，那么如何手动完成这种分块呢？基本上我认为这需要将 InputStream 分块成更小的批次......

使用 Azure Java SDK 12.14.1

【参考方案1】：

受以下 SO 中答案的启发（与在 C# 中执行此操作相关）： c-sharp-azure-appendblob-appendblock-adding-a-file-larger-than-the-4mb-limit

...我最终在 Java 中这样做了：

    AppendBlobRequestConditions appendBlobRequestConditions = new AppendBlobRequestConditions()
            .setLeaseId("myLeaseId");
    
    try (InputStream input = new BufferedInputStream(
            new FileInputStream(file));) 
        byte[] buf = new byte[AppendBlobClient.MAX_APPEND_BLOCK_BYTES];
        int bytesRead;
        while ((bytesRead = input.read(buf)) > 0) 
            if (bytesRead != buf.length) 
                byte[] smallerData = new byte[bytesRead];
                smallerData = Arrays.copyOf(buf, bytesRead);
                buf = smallerData;
            
            try (InputStream byteStream = new ByteArrayInputStream(buf);) 
                appendBlobClient
                        .appendBlockWithResponse(byteStream, bytesRead,
                                null, appendBlobRequestConditions, null,
                                null);
            
        
    

当然，在此之前您需要做很多事情，例如确保 AppendBlob 存在，如果不存在，则在尝试附加任何数据之前创建它。