Webmagci功能--获取链接

Posted 2020-12-10 IT特工

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了Webmagci功能--获取链接相关的知识，希望对你有一定的参考价值。

获取连接

一个站点的页面是很多的，一开始不可能全部列举出来，于是如何发现后续的链接，是一个爬虫不可缺少的一部分

获取链接(例子)：

page.addTargetRequests(page.gethtml().css("div#news_div").links().regix(".*9$").all());
//验证是否真正拿到下一个页面的数据
page.putField("div",page.getHtml().css("div.mt h1").all())

以上是关于Webmagci功能--获取链接的主要内容，如果未能解决你的问题，请参考以下文章