从 URL 获取 blob 并写入文件

Posted

技术标签:

【中文标题】从 URL 获取 blob 并写入文件【英文标题】:Fetch blob from URL and write to file 【发布时间】:2018-12-28 21:45:36 【问题描述】:

我正在尝试fetch来自服务器的一些二进制数据(MP3),然后将其存储在一个文件中:

var fs = require ('fs');
var fetch = require ('node-fetch');

fetch (
   audioUrl,
   
      method: 'GET',
      headers:  'Accept': '*/*' 
   
)
.then ((res) => res.blob())
.then ((blob) => 
    console.log ('Blob size: ', blob.size);

    fs.writeFile (
        `filename.mp3`,
        blob,  // BUG HERE
        (err) => 
            if (err) 
                console.log (`Error writing audio $audioIdx`, err);
            
        
    );
)

问题标记在BUG HERE。我将一个 blob 传递给 fs,它不理解 blob,只写 [object Blob]。我还尝试了以下方法:

blob                                // writes [object Blob]
new Uint8Array (blob)               // writes empty file
Buffer.from (new Uint8Array (blob)) // writes empty file
new Buffer (blob, 'binary')   // Error: argument is not a Buffer

以上都不起作用。如何正确地做到这一点?

请注意,我在调用writeFile 之前记录了blob.sizeblob.size 显示正确的大小,所以 fetch 似乎成功了。

【问题讨论】:

您使用的是哪个 fetch 库? 节点获取。我会更新问题。 【参考方案1】:

好的,所以从MDN Docs 开始,Blob 不是缓冲区,这是写入文件系统所需要的。

我认为从响应中获取缓冲区可能会更好,例如:

.then(res => res.buffer())
.then(/* write your file here */)

尽管取决于文件的大小,您最好的选择可能是完全跳过 .writeFile 函数并改为管道流。

【讨论】:

【参考方案2】:

您可以使用fs.createWriteStream 将响应流式传输到文件。

fetch(
    audioUrl,
    
        method: 'GET',
        headers:  'Accept': '*/*' 
    
).then(res => 
    new Promise((resolve, reject) => 
        const dest = fs.createWriteStream(`filename.mp3`);
        res.body.pipe(dest);
        res.body.on('end', () => resolve());
        dest.on('error', reject);
    )
);

【讨论】:

这比.buffer().arrayBuffer() 好(至少对于大文件)【参考方案3】:

简单且有效(在 nodejs 中使用 Buffer API)

const fetch = require('node-fetch');
const Buffer = require('buffer').Buffer 
const fs = require('fs');
fetch("https://example.com/file.mp3", 
  "headers": ,
  "method": "GET"
).then(function(resp) 
    return resp.blob();
).then(async function(blob) 
    var buffer = await blob.arrayBuffer();
    buffer = Buffer.from(buffer)
    fs.createWriteStream('file.mp3').write(buffer);
)

【讨论】:

以上是关于从 URL 获取 blob 并写入文件的主要内容,如果未能解决你的问题,请参考以下文章

直接从 URL 读取并写入文件 - Java [重复]

有没有办法将电子表格 excel 文件直接写入 blob 存储?

断点续传

java 以二进制流的方式读取mysql 中的blob文件,并写入本地文件夹下

如何在blob中写入txt文件

如何将在从控制台获取的 URL 中找到的特定字符串替换为在 Ruby 文本文件中写入的每一行中找到的文件内容?