其他分享
首页 > 其他分享> > Squid缓存代理详解

Squid缓存代理详解

作者:互联网

文章目录

一、Squid

Squid是一个高性能的代理缓存服务器,Squid支持FTP、gopher、HTTPS和HTTP协议。和一般的代理缓存软件不同,Squid用一个单独的、非模块化的、I/O驱动的进程来处理所有的客户端请求。

缓存代理概述

1.1、Web代理的工作机制

作用:缓存网页对象,减少重复请求

注意:Squid代理服务器和源站服务器之间跑的就是BGP。

缓存工作流程:
1、当我们客户机通过squid代理去访问web页面时,指定的代理服务器会先检查自己的缓存,若是缓存中有我们客户机需要的页面,那么squid服务器将直接把缓存中的页面内容返回给客户机,
2、如果缓存中没有客户端请求的页面,那么squid代理服务器就会向internet发送访问请求,获得返回的web页面后,将网页的数据保存到缓存中并发送给客户机。
3、由于客户机的web访问请求实际上是squid代理服务器来代替完成的,所以隐藏了用户的真实IP地址,从而起到一定的保护作用。
另一方面,squid也可以针对要访问的目标、客户机的地址、访问的时间段进行过滤控制。

1.2、代理的基本类型

1、传统代理:需明确指定服务端
2、透明代理:客户机不需指定代理服务器的地址和端口,而是通过默认路由、防火墙策略将Web访问重定向给代理服务器处理
(区别在于需不需要客户端自己在浏览器上指定服务端)

1.3、使用代理的优势

1、提高Web访问速度
2、隐藏客户机的真实IP地址

二、部署 Squid

1、安装依赖环境

yum -y install gcc gcc-c++ make

2、编译安装Squid服务

tar zxvf squid-3.5.23.tar.gz 
cd squid-3.5.23/
./configure --prefix=/usr/local/squid \
--sysconfdir=/etc \ 	#指定配置文件位置
--enable-arp-acl \ 	#linux内核通过 netfilter 模块实现网络访问控制功能 
--enable-linux-netfilter \ #打开网络筛选
--enable-linux-tproxy \ #实现透明代理
--enable-async-io=100 \ #异步传输输入输出数量
--enable-err-language="Simplify_Chinese" \ #报错显示简体中文
--enable-underscore \ #支持下划线
--enable-poll \ #默认使用poll模式,开启epoll模式时提升性能
--enable-gnuregex #支持正则表达式
make && make install

ln -s /usr/local/squid/sbin/* /usr/local/sbin 
useradd -M -s /sbin/nologin squid	#创建不可登录的程序用户
chown -R squid.squid /usr/local/squid/var  #缓存目录

3、修改配置文件,优化启动项

vi /etc/squid.conf
cache_effective_user squid        #添加   指定程序用户
cache_effective_group squid       #添加   指定账号基本组
coredump_dir /usr/local/squid/var/cache/squid #添加 备份缓存目录
squid -k parse	#检查配置文件语法
squid -z		#初始化缓存目录
squid		#启动服务
netstat -anpt | grep squid
tcp6       0      0 :::3128                 :::*                    LISTEN      89186/(squid-1)   

4、添加服务到service管理

vi /etc/init.d/squid
#!/bin/bash
#chkconfig: 2345 90 25
PID="/usr/local/squid/var/run/squid.pid"
CONF="/etc/squid.conf"
CMD="/usr/local/squid/sbin/squid"
case "$1" in
   start)
     netstat -natp | grep squid &> /dev/null
     if [ $? -eq 0 ]
     then
       echo "squid is running"
       else
       echo "正在启动 squid..."
       $CMD
     fi
   ;;
   stop)
     $CMD -k kill &> /dev/null
     rm -rf $PID &> /dev/null
   ;;
   status)
     [ -f $PID ] &> /dev/null
        if [ $? -eq 0 ]
          then
            netstat -natp | grep squid
          else
            echo "squid is not running"
        fi
   ;;
   restart)
      $0 stop &> /dev/null
      echo "正在关闭 squid..."
         $0 start &> /dev/null
      echo "正在启动 squid..."
   ;;
   reload)
      $CMD -k reconfigure
   ;;
   check)
      $CMD -k parse
   ;;
   *)
      echo "用法:$0{start|stop|status|reload|check|restart}"
   ;;
esac

chmod +x /etc/init.d/squid
chkconfig --add squid
chkconfig --list

三、传统代理

主机IP地址
Squid代理服务器192.168.40.11
Web网站服务192.168.40.12
客户机192.168.40.13

在这里插入图片描述

1、传统代理配置

vi /etc/squid.conf
http_access allow all
http_access deny all
http_port 3128
cache_mem 64 MB              #指定缓存功能所使用的内存空间大小,便于保持访问较频繁的WEB对象,容量最好为4的倍数,单位为MB,建议设为物理内存的1/4
reply_body_max_size 10 MB    #允许用户下载的最大文件大小,以字节为单位。默认设置0表示不进行限制
maximum_object_size 4096 KB  #允许保存到缓存空间的最大对象大小,以KB为单位,超过大小限制的文件将不被缓存,而是直接转发给用户

iptables -F	
iptables -I INPUT -p tcp --dport 3128 -j ACCEPT 
systemctl stop firewalld
setenforce 0
systemctl restart squid

2、在web服务器上安装http服务

systemctl stop firewalld
setenforce 0
yum -y install httpd
echo "<h1>xhc web1</h1>" > /var/www/html/index.html
systemctl start httpd

3、看客户机能否成功访问Apache首页
在这里插入图片描述
查看日志文件,看访问的IP
在这里插入图片描述

是客户机自身IP

8、设置Squid代理,查看来访IP变化

  1. 先清除浏览器缓存

  2. 在浏览器中设置代理

  3. 在浏览器中刷新访问,再次查看日志
    在这里插入图片描述

成功变化代理IP!

四、透明代理

在这里插入图片描述

在搭建的传统代理基础上做如下修改:
(1)squid服务器修改网卡并添加一块网卡:192.168.20.11(仅主机模式);开启路由转发功能;
开启透明代理;配置防火墙规则;
(2)web服务器不变;
(3)客户端IP地址修改为192.168.10.13,网关需指向squid服务器,且浏览器关闭手动代理设置。

主机IP地址
Squid代理服务器192.168.10.11,192.168.20.11
Web网站服务192.168.20.12
客户机192.168.10.13

squid服务器配置:

1、开启路由转发功能

vi /etc/sysctl.conf
	net.ipv4.ip_forward = 1
sysctl -p
	net.ipv4.ip_forward = 1

2、修改配置文件

vi /etc/squid.conf
http_port 192.168.10.11:3128 transparent

systemctl restart squid.service

3、设置防火墙策略

iptables -F
iptables -t nat -F
iptables -t nat -I PREROUTING -i ens33 -s 192.168.10.0/24 -p tcp --dport 80 -j REDIRECT --to 3128
iptables -t nat -I PREROUTING -i ens33 -s 192.168.10.0/24 -p tcp --dport 443 -j REDIRECT --to 3128
iptables -I INPUT -p tcp --dport 3128 -j ACCEPT

web服务器设置

route add -net 192.168.10.0/24 gw 192.168.20.11	#添加一条静态路由

5、测试
修改为不使用代理
在这里插入图片描述
在这里插入图片描述

●手动配置代理∶(M)
HTTP代理∶(凶)【192.168.4011】 端口∶ 3128

在这里插入图片描述
查看Squid代理服务器日志:
在这里插入图片描述
查看Web网站服务器日志:
在这里插入图片描述
通过代理访问,成功!

五、ACL访问控制

使用acl访问控制列表,禁止客户机访问web服务器
squid 定义acl

acl 列表名称 类型 控制的对象 

squid 调用acl

http_access allow/deny列表名称

使用acl访问控制列表,禁止客户机访问web服务器
1、修改配置文件

vi /etc/squid.conf
acl client    src 192.168.10.13/32
http_access deny client	#禁止访问,注意置顶

systemctl restart squid

2、测试
在这里插入图片描述
查看squid代理服务器日志:
在这里插入图片描述
案例成功!

六、Squid日志分析

1、安装依赖环境

yum -y install gd-devel  #图像处理

2、编译安装日志分析软件

mkdir /usr/local/sarg
tar zxf sarg-2.3.7.tar.gz
cd /opt/sarg-2.3.7/
./configure \
--prefix=/usr/local/sarg \
--sysconfdir=/etc/sarg \  ###配置文件目录,默认是/usr/local/etc
--enable-extraprotection  ###添加额外的安全保护
make && make install

3、修改配置文件

[root@squid ~]# vi /etc/sarg/sarg.conf
7/ access_log /usr/local/squid/var/logs/access.log    #指定访问日志文件

25/ title "Squid User Access Reports"      #网页标题

120/ output_dir /var/www/html/squid-reports    #报告输出目录

178/ user_ip no          #使用用户名显示

206/ exclude_hosts /usr/local/sarg/noreport   #不计入排序的站点列表文件

184/ topuser_sort_field connect reverse   #top排序中有连接次数、访问字节、降序排列 升序是normal

(注释掉)190/ user_sort_field reverse    #用户访问记录 连接次数、访问字节按降序排序

257/ overwrite_report no   #同名日志是否覆盖

289/ mail_utility mailq.postfix   #发送邮件报告命令

434/ charset UTF-8   #使用字符集

518/ weekdays 0-6   #top排行的星期周期

525/ hours 0-23   #top排行的时间周期

633/ www_document_root /var/www/html  #网页根目录

4、添加不计入站点文件,添加的域名将不被显示在排序中

touch /usr/local/sarg/noreport

5、优化启动项并启动服务

[root@squid ~]# ln -s /usr/local/sarg/bin/sarg /usr/local/bin
[root@squid ~]# sarg
SARG: 纪录在文件: 2, reading: 100.00%
SARG: 成功的生成报告在 /var/www/html/squid-reports/2020Dec15-2020Dec15

6、安装并启动http服务

[root@squid ~]# yum -y install httpd
[root@squid ~]# systemctl start httpd

7、查看报告
在这里插入图片描述
在这里插入图片描述
8、做周期性计划任务crontab使其每天生成报告

[root@squid ~]# sarg -l /usr/local/squid/var/logs/access.log -o /var/www/html/squid-reports/ -z -d $(date -d "1 day ago" +%d/%m/%Y)-$(date +%d/%m/%Y)
SARG: TAG: access_log /usr/local/squid/var/logs/access.log
SARG: TAG: title "Squid User Access Reports"
SARG: TAG: output_dir /var/www/html/squid-reports
SARG: TAG: user_ip no
SARG: TAG: topuser_sort_field BYTES reverse
SARG: TAG: exclude_hosts none
SARG: TAG: overwrite_report no
SARG: TAG: mail_utility mailx
SARG: TAG: charset UTF-8
SARG: TAG: weekdays 0-6
SARG: TAG: hours 0-23
SARG: TAG: www_document_root /var/www/html
SARG: 纪录在文件: 2, reading: 100.00%
SARG: 期间被日志文件覆盖: 15/12/2020 - 15/12/2020
SARG: (info) date=15/12/2020
SARG: (info) period=2020 12月 14-2020 12月 15
SARG: (info) outdirname=/var/www/html/squid-reports//2020Dec14-2020Dec15
SARG: (info) Dansguardian report not produced because no dansguardian configuration file was provided
SARG: (info) No redirector logs provided to produce that kind of report
SARG: (info) No downloaded files to report
SARG: (info) Authentication failures report not produced because it is empty
SARG: (info) Redirector report not generated because it is empty
SARG: 成功的生成报告在 /var/www/html/squid-reports//2020Dec14-2020Dec15

[root@squid ~]# crontab -e
* 2 * * * sarg -l /usr/local/squid/var/logs/access.log -o /var/www/html/squid-reports/ -z -d $(date -d "1
day ago" +%d/%m/%Y)-$(date +%d/%m/%Y)

在浏览器输入 192.168.10.11/squid-reports/,又会出现一条新的访问记录,然后查看/var/www/html/squid-reports文件
[root@squid ~]# cd /var/www/html/squid-reports/
[root@squid squid-reports]# ls -lh
总用量 8.0K
drwxr-xr-x 3 root root  179 12月 15 23:36 2020Dec14-2020Dec15
drwxr-xr-x 3 root root  179 12月 15 23:36 2020Dec14-2020Dec15.1
drwxr-xr-x 2 root root   92 12月 15 23:20 images
-rw-r--r-- 1 root root 4.9K 12月 15 23:36 index.html

七、Squid反向代理

7.1 概念

反向代理

 如果Squid反向代理服务器中缓存了该请求的资源,则将该请求的资源直接返回给客户端;否则反向代理服务器将向后台的WEB服务器请求资源,然后将请求的应答返回给客户端,同时也将该应答缓存在本地,供下一个请求者使用。

在透明模式的基础上进行反向代理
因为httpd会占用80端口,所以必须关闭squid服务器中的httpd服务
在这里插入图片描述

Web1服务器配置

[root@web1 ~]# yum -y install httpd
[root@web1 ~]# echo "<h1>this is test1 web </h1>" > /var/www/html/index.html
[root@web1 ~]# systemctl start httpd
[root@web1 ~]# netstat -anpt | grep httpd
tcp6       0      0 :::80                   :::*                    LISTEN      16707/httpd     

[root@web1 ~]# route add -net 192.168.10.0/24 gw 192.168.20.11 #添加静态路由

Web2服务器配置

[root@web2 ~]# yum -y install httpd
[root@web2 ~]# echo "<h1>this is test2 web </h1>" > /var/www/html/index.html
[root@web2 ~]# systemctl start httpd
[root@web2 ~]# netstat -anpt | grep httpd
tcp6       0      0 :::80                   :::*                    LISTEN      4654/httpd          

[root@web2 ~]# route add -net 192.168.10.0/24 gw 192.168.20.11

squid代理服务器

[root@squid ~]# iptables -F
[root@squid ~]# iptables -t nat -F
[root@squid ~]# iptables -I INPUT -p tcp --dport 3128 -j ACCEPT

[root@squid ~]# vi /etc/squid.conf
# Squid normally listens to port 3128
添加
http_port 192.168.10.11:80 accel vhost vport #squid外网口IP
调度缓存对象        
cache_peer 192.168.20.12 parent 80 0 no-query originserver round-robin max_conn=30 weight=1 name=web1
cache_peer 192.168.20.13 parent 80 0 no-query originserver round-robin max_conn=30 weight=1 name=web2
cache_peer_domain web1 web2 www.yun.com

[root@squid ~]# systemctl restart squid
[root@client ~]# vi /etc/hosts
192.168.10.11 www.yun.com

测试

轮询web1和web2
在这里插入图片描述
再次刷新
在这里插入图片描述

标签:缓存,--,root,Squid,SARG,192.168,详解,squid
来源: https://blog.csdn.net/Mr_XHC/article/details/111208093