从Node.js Stream写入多个文件
Posted
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了从Node.js Stream写入多个文件相关的知识,希望对你有一定的参考价值。
我正在写一个简短的Node.js片段,它解析RSS提要,提取链接,将它们重新配置为我想要的PDF链接,然后写入这些文件。代码如下所示:
var https = require('https');
var fs = require('fs');
const Parser = require("rss-parser");
let parser = new Parser();
parser.parseURL("https://regulations.justia.com/regulations/fedreg?limit=20&mode=atom")
.then((feed) => {
const base = "https://docs.regulations.justia.com/entries"
feed.items.forEach((item, i) => {
// Parsing to create PDF link...
const str = item.link;
let dates = str.substring(50, 60);
let newDates = dates.replace(/\//, "-").replace(/\//, "-");
let ending = str.substring(61).replace(".html",".pdf");
let fullString = `${base}/${newDates}/${ending}`;
// Fetching and saving the PDF file....
const file = fs.createWriteStream(`${item.title}.pdf`);
const request = https.get(fullString, (res) => {
res.pipe(file);
});
});
})
.catch((err) => console.log(err));
我现在遇到两个错误。
1)与我的可写流有关。当我尝试根据RSS提要中的item.title
创建文件时,我每次都会收到此错误:
Error: ENOENT: no such file or directory, open 'Notice - Solicitation of Nominations for Appointment to the World Trade Center Health Program Scientific/Technical Advisory Committee (STAC).pdf'
这是否与项目标题中的括号或em-dash有关?如果没有,还有什么可能导致这个问题?
2)当我更改代码(将可写流命名为更简单的东西)时,我的代码将抛出以下错误:
Error: socket hang up
at TLSSocket.onHangUp (_tls_wrap.js:1135:19)
at Object.onceWrapper (events.js:313:30)
at emitNone (events.js:111:20)
at TLSSocket.emit (events.js:208:7)
at endReadableNT (_stream_readable.js:1056:12)
at _combinedTickCallback (internal/process/next_tick.js:138:11)
at process._tickCallback (internal/process/next_tick.js:180:9)
在我下载了大量PDF之后,通常会抛出此错误,但不是全部。在此示例中我可以更改哪些内容以克服这些错误?谢谢您帮忙!
答案
问题是item.title
的一些包含/
字符,表示在这种情况下不存在的文件夹。
当你从标题中删除那些/
时它会起作用。例如。
const file = fs.createWriteStream(`${item.title.replace('/', '-')}.pdf`);
以上是关于从Node.js Stream写入多个文件的主要内容,如果未能解决你的问题,请参考以下文章