Windows _settings.yml、文件夹/目录和驱动器上的 FSCrawler

Posted 2023-03-22

【中文标题】Windows _settings.yml、文件夹/目录和驱动器上的 FSCrawler

【英文标题】：FSCrawler on Windows _settings.yml, folders/directories and drives

【发布时间】：2021-05-03 02:54:08

【问题描述】：

Windows 服务器上的 FSCrawler 2.7

对于给定的作业，例如 test1，会自动创建一个 _settings.yaml 文件夹

例如c:\users\jbloggs\.fscrawler\test1\_settings.yml

您需要指定要抓取的文档的位置

fs: url: "驱动器和文档文件夹放在这里"

url c:\tmp 会报错

06:33:00,788 DEBUG [f.p.e.c.f.FsParserAbstract] Fs crawler thread [test2200] is now running. Run #1...
06:33:00,788 WARN  [f.p.e.c.f.FsParserAbstract] Error while crawling c: mp: c:  mp doesn't exists.
06:33:00,788 WARN  [f.p.e.c.f.FsParserAbstract] Full stacktrace

【参考方案1】：

这两种格式都有效

url: "/c:/tmp" 
url: "c:\\tmp"

这里的文档有误： https://fscrawler.readthedocs.io/en/latest/user/tutorial.html#start-fscrawler

但在其他地方正确：

https://fscrawler.readthedocs.io/en/latest/admin/fs/ssh.html#windows-drives

还有https://fscrawler.readthedocs.io/en/latest/admin/fs/local-fs.html#id2

【讨论】：

嘿约翰C。您想帮助修复文档吗？非常感谢！