这里还有一款代理服务器它不香嘛!直接带你起飞!squid代理服务器!

Posted 龙少。

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了这里还有一款代理服务器它不香嘛!直接带你起飞!squid代理服务器!相关的知识,希望对你有一定的参考价值。

squid代理服务器应用

一.缓存代理概述

1.web代理的工作机制

缓存网页对象,减少重复请求

2.代理的基本类型

(1)传统代理

适用于Internet,需在客户机指定代理服务器的地址和端口

(2)透明代理

客户机不需指定代理服务器的地址和端口,而是通过默认路由、防火墙策略将web访问重定向给代理服务器处理。

(3)反向代理

反向代理服务器中缓存了该请求的资源,则将该请求的资源直接返回给客户端;否则反向代理服务器将向后台的 WEB服务器请求资源,然后将请求的应答返回给客户端,同时也将该应答缓存(静态)在本地,供下一个请求者使用。

3.使用代理的好处

(1)提高web访问速率

将获得的网页数据(静态Web元素)保存到缓存中并发送给客户机,以便下次请求相同的数据时快速响应

(2)隐藏客户机真实IP

代替客户机向网站请求数据,从而可以隐藏用户的真实IP地址。

二.部署squid服务器

1.安装依赖环

[root@localhost ~]# hostnamectl set-hostname squid
[root@localhost ~]# su
[root@squid ~]# yum -y install gcc gcc-c++ make

2.解压编译安装

[root@squid ~]# cd /opt
[root@squid opt]# ls
rh  squid-3.5.27.tar.gz
[root@squid opt]# tar xvf squid-3.5.27.tar.gz

[root@squid opt]# ls
rh  squid-3.5.27  squid-3.5.27.tar.gz
[root@squid opt]# cd squid-3.5.27/
[root@squid squid-3.5.27]# ./configure --prefix=/usr/local/squid --sysconfdir=/etc --enble-linux-netfilter --enable-linux-tproxy --enable-async-io=100 --enable-err-language="--enable-underscore --enable-poll --enable-gnuregex

[root@squid squid-3.5.27]# make && make install

说明:
–prefix=/usr/ local/ squid ##安装目录
–sysconfdir=/etc/ ##单独将配置文件修改到/etc目录下
–enable-arp-acl ##可在ACL中设置通过MAC地址进行管理,防止IP欺骗
–enable-linux-netfilter ##使用内核过滤
–enable-linux-tproxy ##支持透明模式
–enable-async-io=100 ##异步工/o,提升储存性能,值可修改
–enable-err-language=“Simplify Chinese” ##错误信息的显示语言
–enable-underscore ##允许URL中有下划线
–enable-poll ##使用Poll()模式,提升性能
–enable-gnuregex ##使用GNU正则表达式

3.路径优化创建软链接

[root@squid squid-3.5.27]# ln -s /usr/local/squid/sbin/* /usr/local/sbin/

4.创建用户管理

[root@squid squid-3.5.27]# useradd -M -s /sbin/nologin squid

5.更改用户和组

[root@squid squid-3.5.27]# chown -R squid:squid /usr/local/squid/var/

6.修改配置文件

[root@squid squid-3.5.27]# vim /etc/squid.conf

56行插入
56 http_access allow all		#放在http_access deny all之前,允许任意客户机使用代理服务,控制规则自上而下匹配
57 http_access deny all
60 http_ port 3128				#用来指定代理服务监听的地址和端口(默认的端口号为3128)

60行下面插入
61 cache_effective_user squid	#添加,指定程序用户,用来设置初始化、运行时缓存的账号,否则启动不成功
62 cache_effective_group squid	#添加,指定账号基本组
68 coredumpl dir /usr/ local/ squid/var/ cache/ squid	#指定缓存文件目录

7.编写squid服务脚本

[root@squid squid-3.5.27]# vim /etc/init.d/squid


#!/bin/bash
#chkconfig: 35 90 25
#config: /etc/squid.conf
#pidfile: /usr/local/squid/var/run/squid.pid
#Description: Squid - Internet Object Cache

PID="/usr/local/squid/var/run/squid.pid"
CONF="/etc/squid.conf"
CMD="/usr/local/squid/sbin/squid"

case "$1" in
        start)
                netstat -utpln | grep squid &>/dev/null
                if [ $? -eq 0 ]
                        then
                                echo "Squid is running"
                else
                        $CMD
                fi
        ;;
        stop)
                $CMD -k kill &>/dev/null
                rm -rf $PID &>/dev/null
        ;;
        status)
                [ -f $PID ] &>/dev/null
                        if [ $? -eq 0 ]
                          then
                                netstat -utpln | grep squid
                        else
                                echo "Squid is not running"
                        fi
	;;
        restart)
                $0 stop &>/dev/null
                echo "正在关闭Squid..."
                $0 start &>/dev/null
                echo "正在启动Squid..."
        ;;
        reload)
                $CMD -k reconfigure
        ;;
        check)
                $CMD -k parse
        ;;
        *)
                echo "用法:{start | stop | restart | reload | check | status}"
esac

8.启动squid

[root@squid squid-3.5.27]# chmod +x /etc/init.d/squid
[root@squid squid-3.5.27]# chkconfig --add squid

[root@squid squid-3.5.27]# squid -k parse		##检查配置文件
[root@squid squid-3.5.27]# squid -k rec 		##重新加载配置文件;rec:reconfigure
[root@squid squid-3.5.27]# squid -zX			##初始化缓存目录

[root@squid squid-3.5.27]# squid
2021/08/10 02:39:35| aclParseAccessLine: /etc/squid.conf line 62: cache effective group squid
2021/08/10 02:39:35| aclParseAccessLine: expecting 'allow' or 'deny', got 'effective'.
[root@squid squid-3.5.27]# netstat -anpt | grep squid
tcp6       0      0 :::3128                 :::*                    LISTEN      23241/(squid-1)

三.squid代理

1.搭建传统代理

需求
在服务器上构建Squid代理服务器,允许客户机指定Squid代理服务器作为web代理,访问网站服务器,但禁止通过代理下载超过10MB的文件,超过4MB的文件不进行缓存。

服务器准备
squid服务器:192.168.206.166
web1服务器:192.168.206.177
web2服务器:192.168.206.188
win10客户端

(1)squid服务器配置

① 修改配置文件

[root@squid squid-3.5.27]# vim /etc/squid.conf

    cache_effective_user squid
	cache_ effective_ group squid
	#63行插入
	cache_mem 64 MB					##指定缓存功能所使用的内存空间大小,便于保存访问较频繁的WEB对象,容量最好为4的倍数,单位为MB,建议设为物理内存的1/4
	reply_body_max_size 10 MB		##允许用户下载的最大文件大小,以字节为单位,当下载超过指定大小的Web对象时,浏览器的报错页面中会出现“请求或访问太大”的提示默认设置0表示不进行限制
	maximum_object_size 4096 KB 	##允许保存到缓存空间的最大对象大小,以KB为单位,超过大小限制的文件将不被缓存,而是直接转发给用户


② 重启服务

[root@squid squid-3.5.27]# service squid restart
正在关闭Squid...
正在启动Squid...
[root@squid squid-3.5.27]#

③ 修改防火墙规则

[root@squid squid-3.5.27]# systemctl start firewalld.service
[root@squid squid-3.5.27]# iptables -F												#清空规则
[root@squid squid-3.5.27]# iptables -I INPUT -p tcp --dport 3128 -j ACCEPT			#允许3128端口进入

(2)web2服务器配置

[root@web2 ~]# yum -y install httpd

[root@web2 ~]# systemctl start httpd

[root@web2 ~]# netstat -antp | grep 80
tcp6       0      0 :::80                   :::*                    LISTEN      79445/httpd

[root@web2 ~]# echo "www.uouo.com" > /var/www/html/index.html

(3)客户端win10

网关

浏览器代理设置

(4)测试

win10访问web2网页192.168.206.188

刷新网页
查看web2的访问日志

[root@web2 ~]# tail -f /var/log/httpd/access_log


可以发现源地址为Squid服务器地址192.168.206.166

2.搭建透明代理

服务器准备
squid服务器:ens33:192.168.206.166、ens37:192.168.100.1
web1服务器:192.168.206.177
web2服务器:192.168.206.188
win10客户端: 192.168.100.100,网关192.168.100.1

(1)squid服务器添加网卡并配置

[root@squid squid-3.5.27]# cd /etc/sysconfig/network-scripts/
[root@squid network-scripts]# cp ifcfg-ens33 ifcfg-ens37
[root@squid network-scripts]# vim ifcfg-ens37

(2)修改squid配置文件

[root@squid network-scripts]# vim /etc/squid.conf

重启服务

[root@squid network-scripts]# service squid restart
正在关闭Squid...
正在启动Squid...
[root@squid network-scripts]#

(3)squid服务器添加路由转发功能

[root@squid network-scripts]# echo 'net.ipv4.ip_forward = 1' >> /etc/sysctl.conf
[root@squid network-scripts]# sysctl -p
net.ipv4.ip_forward = 1

(4)squid服务器添加防火墙规则

[root@squid network-scripts]# iptables -F
[root@squid network-scripts]# iptables -t nat -F

[root@squid network-scripts]# iptables -t nat -I PREROUTING -i ens37 -s 192.168.100.0/24 -p tcp --dport 80 -j REDIRECT --to 3128
[root@squid network-scripts]# iptables -t nat -I PREROUTING -i ens37 -s 192.168.100.0/24 -p tcp --dport 443 -j REDIRECT --to 3128
[root@squid network-scripts]# iptables -I INPUT -p tcp --dport 3128 -j ACCEPT

(5)web1和web2 添加静态路由

web1和web2安装httpd服务

[root@web1 ~]# route add -net 192.168.100.0/24 gw 192.168.206.166

[root@web2 ~]# route add -net 192.168.100.0/24 gw 192.168.206.166

(6)win10客户端关闭代理,配置ip网关

(7)测试

win10 访问web1网页192.168.206.177

win10 访问web2网页192.168.206.188

刷新网页实时查看日志web1和web2日志

[root@web1 ~]# tail -f /var/log/httpd/access_log


[root@web2 ~]# tail -f /var/log/httpd/access_log

通过日志可以发现,访问192.168.206.177和192.168.206.188两个web,日志显示是通过代理服务器squid192.168.206.166获取到的

3.ACL访问控制

在配置文件/etc/squid.conf 中,ACL访问控制通过以下两个步骤来实现:

  1. 使用acl 配置项定义需要控制的条件;

  2. 通过http_access配置项对已定义的列表做“允许”或“拒绝”访问的控制。

定义访问控制列表
格式:
acl 列表名称 列表类型 列表内容

参数详解:
列表名称:名称可自定义(被http_access 调用的名称)
列表类型:必须使用squid预定义的值,对应不同类别的控制条件
列表内容:要控制的具体对象,不同类型的列表所对应的内容也不一样,可以有多个值(以空格为分隔,为“或”的关系)

代理服务器squid通过ACL规则设置拒绝192.168.100.100的来源的客户端访问web服务器

(1)修改配置文件,设置acl规则

[root@squid ~]# vim /etc/squid.conf


(2)重启服务

[root@squid ~]# service squid restart
正在关闭Squid...
正在启动Squid...

(3)访问web2验证

4.squid日志分析

sarg(Squid Analysis Report Generator),是一款squid日志分析工具,采用HTML格式,详细列出每一位用户访问Internet的站点信息、时间占用信息、排名、连接次数、访问量等

(1)安装图像处理软件包

[root@squid ~]# yum install -y gd gd-devel pcre-devel

(2)创建目录,下载安装包解压编译安装sarg工具

[root@squid ~]# mkdir /usr/local/sarg
[root@squid ~]# cd /opt
[root@squid opt]# ls
rh  sarg-2.3.7.tar.gz  squid-3.5.27  squid-3.5.27.tar.gz
[root@squid opt]# tar zxvf sarg-2.3.7.tar.gz

[root@squid opt]# ls
rh  sarg-2.3.7  sarg-2.3.7.tar.gz  squid-3.5.27  squid-3.5.27.tar.gz
[root@squid opt]# cd sarg-2.3.7/
[root@squid sarg-2.3.7]# ./configure --prefix=/usr/local/sarg --sysconfdir=/etc/sarg --enable-extraprotection

[root@squid sarg-2.3.7]# make && make install

(3)修改配置文件

[root@squid sarg-2.3.7]# vim /etc/sarg/sarg.conf

--7--取消注释
access_log /usr/local/squid/var/logs/access.log  	#指定访问日志文件
--25--取消注释
title "Squid User Access Reports"					#网页标题
--120--取消注释,修改
output_dir /var/www/html/sarg      					#报告输出目录
--178--取消注释
user_ip no           								#使用用户名显示
--184--取消注释,修改
topuser_sort_field connect reverse     				#top排序中,指定连接次数采用降序排列,升序是normal
--190--取消注释,修改
user_sort_field connect reverse      				#对于用户访问记录,连接次数按降序排序
--206--取消注释,修改
exclude_hosts /usr/local/sarg/noreport				#指定不计入排序的站点列表的文件
--257--取消注释
overwrite_report no         						#同名同日期的日志是否覆盖
--289--取消注释,修改
mail_utility mailq.postfix							#发送邮件报告命令
--434--取消注释,修改
charset UTF-8										#指定字符集UTF-8
--518--取消注释
weekdays 0-6										#top排行的星期周期
--525--取消注释
hours 0-23											#top排行的时间周期
--633--取消注释
www_document_root /var/www/html						#指定网页根目录

(4)添加不计入站点文件,添加的域名将不被显示在排序中,创建软链接优化,启动工具

[root@squid sarg-2.3.7]# touch /usr/local/sarg/noreport
[root@squid sarg-2.3.7]# ln -s /usr/local/sarg/bin/sarg /usr/local/bin/
[root@squid sarg-2.3.7]# sarg
SARG: 纪录在文件: 31, reading: 100.00%
SARG: 成功的生成报告在 /var/www/html/sarg/2021Aug11-2021Aug11

(5)安装httpd并启动

[root@squid sarg-2.3.7]# yum install httpd -y

[root@squid sarg-2.3.7]# systemctl start httpd
[root@squid sarg]# netstat -antp |grep httpd
tcp6       0      0 :::80                   :::*                    LISTEN      26687/httpd

(6)验证访问查看报告,squid服务端查看192.168.206.166/sarg

(7)优化添加计划任务,生成周期报告

① 编写脚本

vim /usr/local/sarg/report.sh

#!/bin/bash
#Get current date
TODAY=$(date +%d/%m/%Y)
#Get one week ago today
YESTERDAY=$(date -d "1 day ago" +%d/%m/%Y)
/usr/local/sarg/bin/sarg -l /usr/local/squid/var/logs/access.log -o /var/www/html/sarg -z -d $YESTERDAY-$TODAY &> /dev/null
exit 0

② 给权限

chmod +x /usr/local/sarg/report.sh 

③ 添加周期性任务

crontab -e
0 0 * * * /usr/local/sarg/report.sh

5.反向代理

服务器准备
squid服务器:ens33:192.168.206.166
web1服务器:192.168.206.177
web2服务器:192.168.206.188
win10客户端: 192.168.206.100

如果Squid反向代理服务器中缓存了该请求的资源,则将该请求的资源直接返回给客户端;否则反向代理服务器将向后台的Web服务器请求资源,然后将请求的应答返回给客户端,同时也将该应答缓存在本地,供下一个请求者使用。

工作机制:
缓存网页对象,减少重复请求
将互联网请求轮询或按权重分配到内网web服务器
代理用户请求,避免用户直接访问Web服务器,提高安全

(1)squid服务器开启防火墙、本地关闭httpd,设置防火墙规则

[root@squid ~]# systemctl stop httpd
[root@squid ~]# iptables -F
[root@squid ~]# iptables -t nat -F
[root@squid ~]# iptables -I INPUT -p tcp --dport 3128 -j ACCEPT

(2)修改配置文件

[root@squid ~]# vim /etc/squid.conf

------ 60--修改,插入-------
http_port 192.168.206.166:80 accel vhost vport
cache_peer 192.168.206.177 parent 80 0 no-query originserver round-robin max_conn=30 weight=1 name=web1
cache_peer 192.168.206.188 parent 80 0 no以上是关于这里还有一款代理服务器它不香嘛!直接带你起飞!squid代理服务器!的主要内容,如果未能解决你的问题,请参考以下文章

2019.11.11 题解报告

KMM 入门在现有工程中集成 KMM

KMM 入门在现有工程中集成 KMM

KMM 入门在现有工程中集成 KMM

苦于记不住八大排序?现成的模板它不香?

IDEA Community集成TomcatWildfly开发WebSpring Boot项目