程序抓取的内容和浏览器打开的内容不一样

Posted 方寸之间

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了程序抓取的内容和浏览器打开的内容不一样相关的知识,希望对你有一定的参考价值。

请求时带上referer。

var message = new HttpRequestMessage(HttpMethod.Get, url);

if (!string.IsNullOrEmpty(referer)) message.Headers.Add("Referer", referer);

 

以上是关于程序抓取的内容和浏览器打开的内容不一样的主要内容,如果未能解决你的问题,请参考以下文章

如何利用python读取网页中变量的内容

QT打开一个网页,并获取网页内容,该怎么处理

如何用Python爬虫抓取网页内容?

第⼀个爬虫案例

易语言取当前浏览器网页地址和网页源码

Python中怎样获取一网页上的内容?我想通过python读取网页上的各个不同的单词和分别出现的次数