一次Web探测服务器技术学习总结

Posted 2022-02-04 汇编语言

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了一次Web探测服务器技术学习总结相关的知识，希望对你有一定的参考价值。

一

URL((conn.getResponseCode() != RuntimeException((key : map.keySet()) System.out.println(key + + map.get(key));BufferedReader(InputStreamReader(conn.getInputStream()));line = reader.readLine();HttpClient httpClient = HttpClient.newBuilder().build();

java.net.URI;java.net.http.*;java.net.http.HttpClient.Version;java.time.Duration;java.util.*; httpClient = void main(

       url =        request =                       .header(                      .timeout(                      .version(                            (header : headers.keySet())

+ headers. url = body = URI(url)) .header( .header( .timeout(Duration.ofSeconds( .version(Version.HTTP_2) .POST(BodyPublishers.ofString(body, StandardCharsets.UTF_8)).build();s = response.body();

example.com/form.cgi curl --user-agent [URL] * 功能说明 * Curl指令的java代码 * 输入函数：curl指令 * 返回参数：curl指令的返回值 * 例子：curl [option] [url] * curl url //获取url的html * curl -A "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.0)" url //使用指定的浏览器去访问 * curl -I url //返回header信息 * */ execCurl(chartname) ProcessBuilder process = ProcessBuilder(cmds); Process p; p = process.start(); BufferedReader reader = BufferedReader(InputStreamReader(p.getInputStream(),chartname)); StringBuilder builder = StringBuilder(); line; ((line = reader.readLine()) != builder.append(line); builder.append(System.getProperty( builder.toString(); (IOException e) System.out.print( e.printStackTrace();

      result_html = execCurl(cmds,charset);

   String domain =    String ip =    String title=   String http_server =    String http_server_version =    String language =    String set_Cookie =    String X_Powered_By =       isServerCrypto =    String charset =

WebInfo() String toString()

       String str =        str = str +        str = str +        str = str +        str = str +        str = str +        str = str +        str;

boolean checkComplete() && && && && &&

getServerInfo(WebInfo wi,domain) throws IOException charset = charset = getCharset(domain); charset = result_html = execCurl(cmds,charset); wi.title = getTitle(result_html); System.out.println( strName(wi,result_html); LanguageCheck(wi); NormalLanguageTest(wi); ExceptionCheck(wi);

* 功能说明 * Curl指令的java代码 * 输入函数：curl指令 * 返回参数：curl指令的返回值 * 例子：curl [option] [url] * curl url //获取url的html * curl -A "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.0)" url //使用指定的浏览器去访问 * curl -I url //返回header信息 * */ execCurl(chartname) ProcessBuilder process = ProcessBuilder(cmds); Process p; p = process.start(); BufferedReader reader = BufferedReader(InputStreamReader(p.getInputStream(),chartname)); StringBuilder builder = StringBuilder(); line; ((line = reader.readLine()) != builder.append(line); builder.append(System.getProperty( builder.toString(); (IOException e) System.out.print( e.printStackTrace();

* 函数说明： `* getTitle(String webcontent):` `* 输入参数：web页面信息html` `* 返回结果：标题` `* */` `String Pattern pattern = Pattern.compile( Matcher ma =pattern.matcher(webContent);` `(ma.find())` `outTag(ma.`

[[email protected] ~]# yum -y install libcurl-devel [[email protected] ~]# python3 -m easy_install -i http://pypi.douban.com/simple/ pycurl Finished processing dependencies for pycurl

#!/usr/bin/python3 # _*_ coding:utf-8 _*_ import sys,os import time import pycurl url = "http://fm.mykurol.com" #探测的目标URL c = pycurl.Curl() #创建一个Curl对象 c.setopt(pycurl.URL,url) #定义请求的URL常量 c.setopt(pycurl.CONNECTTIMEOUT,5) #定义请求连接的等待时间 c.setopt(pycurl.TIMEOUT,5) #定义请求超时时间 c.setopt(pycurl.NOPROGRESS,1) #屏蔽下载进度条 c.setopt(pycurl.FORBID_REUSE,1) #完成交互后强制断开连接，不重用 c.setopt(pycurl.MAXREDIRS,1) #指定HTTP重定向的最大数为1 c.setopt(pycurl.DNS_CACHE_TIMEOUT,30) #设置保存DNS信息的时间为30秒 #创建一个文件对象，以"web"方式打开，用来存储返回的http头部及页面内容 indexfile = open(os.path.dirname(os.path.realpath(__file__))+"/content.txt","wb") c.setopt(pycurl.WRITEHEADER, indexfile) #将返回的HTTP HEADER定向到indexfile文件 c.setopt(pycurl.WRITEDATA, indexfile) #将返回的HTML内容定向到indexfile文件对象 try: c.perform() except Exception as e: print ("connection error:"+str(e)) indexfile.close() c.close() sys.exit() NAMELOOKUP_TIME = c.getinfo(c.NAMELOOKUP_TIME) #获取DNS解析时间 CONNECT_TIME = c.getinfo(c.CONNECT_TIME) #获取建立连接时间 PRETRANSFER_TIME = c.getinfo(c.PRETRANSFER_TIME) #获取从建立连接到准备传输所消耗的时间 STARTTRANSFER_TIME = c.getinfo(c.STARTTRANSFER_TIME) #获取从建立连接到传输开始消耗的时间 TOTAL_TIME = c.getinfo(c.TOTAL_TIME) #获取传输的总时间 HTTP_CODE = c.getinfo(c.HTTP_CODE) #获取HTTP状态码 SIZE_DOWNLOAD = c.getinfo(c.SIZE_DOWNLOAD) #获取下载数据包的大小 HEADER_SIZE = c.getinfo(c.HEADER_SIZE) #获取HTTP头部大小 SPEED_DOWNLOAD = c.getinfo(c.SPEED_DOWNLOAD) #获取平均下载速度 #打印输出相关数据 print ("HTTP状态码：%s" % (HTTP_CODE)) print ("DNS解析时间：%.2f ms" % (NAMELOOKUP_TIME*1000)) print ("建立连接时间：%.2f ms" % (CONNECT_TIME*1000)) print ("准备传输时间：%.2f ms" % (PRETRANSFER_TIME*1000)) print ("传输开始时间：%.2f ms" % (STARTTRANSFER_TIME*1000)) print ("传输结束总时间：%.2f ms" % (TOTAL_TIME*1000)) print ("下载数据包大小：%d bytes/s" % (SIZE_DOWNLOAD)) print ("HTTP头部大小：%d bytes/s" % (HEADER_SIZE)) print ("平均下载速度：%d bytes/s" % (SPEED_DOWNLOAD)) #关闭文件及curl对象 indexfile.close() c.close()

HTTP状态码：200 DNS解析时间：17.44 ms 建立连接时间：17.88 ms 准备传输时间：17.89 ms 传输开始时间：39.79 ms 传输结束总时间：39.88 ms 下载数据包大小：2526 bytes/s HTTP头部大小：389 bytes/s 平均下载速度：63333 bytes/s

HTTP/1.1 200 OK Date: Fri, 09 Jun 2017 03:01:46 GMT Server: Apache/2.2.15 (CentOS) X-Powered-By: PHP/5.3.3 Set-Cookie: PHPSESSID=qmhmq2hkbb3v5hs67rf38c5006; path=/ Expires: Thu, 19 Nov 1981 08:52:00 GMT Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0 Pragma: no-cache Content-Length: 2526 Connection: close Content-Type: text/html; charset=UTF-8 <!doctype html> <link href="css.css" rel="stylesheet" type="text/css" /> <title>MyKurol电影推荐网</title> <link rel="icon" href="image/logo.ico" type="img/x-ico" /> <body> <link rel="icon" href="image/logo.ico" type="img/x-ico" /> <div class="in"> <div class="header"> <div class="mykurol"> <a href="index.php" class="biaoyu"><strong>本网站由谢育政设计</strong></a> </div> <div class="key-sousuo"> <input type="text" name="mo_key" placeholder="电影/导演/演员"> <input type="submit" name="mo_sub" value="搜索"> </div> <div class="Inlogin"> <a href="MovEncy.php" class="movie-ency">电影大全</a> <a href="#" class="movie-guess">猜一猜</a> <a href="#" class="movie-album">电影专辑</a> <a href="login.php" class="login-sub">登录</a><a href="reg.php" class="reg-sub">注册</a> </div> </div> </div> <div style="z-index:999; position:absolute; right: 20px; bottom:40%"> <div> <img src="image/1495501340.png" style="width:120px;"/> </div> <div style="padding:0; margin:0; background-color:#FFF; width:120px; height:30px"> <a style="color:#666; font-size:12px;">友情链接：<a href="http://www.mygdmec.cn" style="text-decoration:none; color:#F9F; font-size:12px">凡梦购物网</a> </div> </div> <div class="body"> <div class="flo"> <div class="flo-biaoti"> <p href="#" class="movie-name" data-toggle="tooltip" title="《生化危机6》的详细介绍"><strong>生化危机6</strong></p> <p class="movie-jieshao"> 在华盛顿特区爱丽丝被威斯克背叛后人类几乎要失去最后的希望。作为唯一的幸存者，也是人类对抗僵尸大军的最后防线，爱丽丝必须回到噩梦开始的地方——浣熊市。在那里保护伞公司正在集结所有的力量企图对残余的幸存者发起最后的打击。<br> 导演：保罗·安德森<br> 主演：米拉·乔沃维奇，伊恩·格雷，艾丽·拉特，鲁比·罗丝，李准基，肖恩·罗伯茨，威廉·利维，伊恩·马肯 <br> 动作 / 惊悚 / 科幻 </p> </div> </div> </div> <div class="foot"> </div> </div> </body>

一次Web探测服务器技术学习总结

* 函数说明： * getTitle(String webcontent): * 输入参数：web页面信息html * 返回结果：标题 * */ String Pattern pattern = Pattern.compile( Matcher ma =pattern.matcher(webContent); (ma.find()) outTag(ma.

Python学习笔记-实现探测Web服务质量

* 函数说明： `* getTitle(String webcontent):` `* 输入参数：web页面信息html` `* 返回结果：标题` `* */` `String Pattern pattern = Pattern.compile( Matcher ma =pattern.matcher(webContent);` `(ma.find())` `outTag(ma.`