其他分享
首页 > 其他分享> > Squid代理服务器应用

Squid代理服务器应用

作者：互联网

Squid代理服务器应用

目录

一、Squid的脚本概念

1. Squid的作用

Squid主要提供缓存加速、应用层过滤控制的功能。

2. Web代理的工作机制

缓存网页对象，减少重复请求

  1. 代理客户机向网站请求数据，从而可以隐藏用户的真实IP地址。
  2. 将获得的网页数据（静态Web元素）保存到缓存中并发送给客户机，以便下次请求相同的数据时快速响应。

3. 代理服务器的概念

代理服务器是一个位于客户端和原始（资源）服务器之间的服务器，为了从原始服务器取得内容，客户端向代理服务器发送一个请求并指定原始服务器，然后代理服务器向原始服务器转交请求并将获得的内容返回给客户端。

4. 代理服务器的作用

资源获取：代替客户端实现从原始服务器的资源获取。
加速访问：代理服务器可能离原始服务器更近，从而起到一定的加速作用。
缓存作用：代理服务器保存从原始服务器所获取的资源，从而实现客户端快速的获取。
隐藏真实地址：代理服务器代替客户端去获取原始服务器资源，从而隐藏客户端真实信息。

5. 代理的基本类型

传统代理：适用于Internet，需在客户机指定代理服务器的地址和端口。

透明代理：客户机不需指定代理服务器的地址和端口，而是通过默认路由、防火墙策略将Web访问重定向给代理服务器处理。

反向代理：如果Squid反向代理服务器中缓存了该请求的资源，则将该请求的资源直接返回给客户端；否则反向代理服务器将向后台的Web服务器请求资源，然后将请求的应答返回给客户端，同时也将该应答缓存在本地，供下一个请求者使用。

6. 使用代理的好处

提高Web访问速度
隐藏客户机的真实IP地址

二、Squid的安装及配置

1. 各服务器的环境部署

systemctl stop firewalld
systemctl disable firewalld
setenforce 0

2. 安装Squid服务

2.1 编译安装Squid

[root@squid_server ~]# yum install -y gcc gcc++ make
[root@squid_server ~]# cd /opt
[root@squid_server opt]# rz -E
#传入Squid安装包
rz waiting to receive.
[root@squid_server opt]# tar zxvf squid-3.5.28.tar.gz -C /opt
[root@squid_server opt]# cd squid-3.5.28/
[root@squid_server squid-3.5.28]# ./configure \
> --prefix=/usr/local/squid \                #指定安装目录路径
> --sysconfdir=/etc \                        #指定配置文件路径
> --enable-arp-acl \                         #MAC地址管控，防止客户端使用IP欺骗
> --enable-linux-netfilter \                 #使用内核过滤
> --enable-linux-tproxy \                    #支持透明模式
> --enable-async-io=100 \                    #异步IO，提升存储性能
> --enable-err-language="Simplify_Chinese" \ #错误信息的显示语言
> --enable-underscore \                      #允许URL中有下划线
> --disable-poll \                           #关闭默认使用poll模式
> --enable-epoll \                           #开启epoll模式提升性能
> --enable-gnuregex                          #使用GNU正则表达式
[root@squid_server squid-3.5.28]# make -j 2 && make install 
[root@squid_server squid-3.5.28]# ln -s /usr/local/squid/sbin/* /usr/local/sbin
[root@squid_server squid-3.5.28]# useradd -M -s /sbin/nologin squid
[root@squid_server squid-3.5.28]# chown -R squid:squid /usr/local/squid/var
#此目录用于存放缓存文件，不修改权限或属主属组，squid将无法存储缓存

2.2 修改Squid的配置文件

[root@squid_server squid-3.5.28]# vim /etc/squid.conf

# And finally deny all other access to this proxy
##56行插入
http_access allow all         ##放在http_access deny all之前，允许任意客户机使用代理服务，控制规则自上而下匹配
http_access deny all

# Squid normally listens to port 3128
http_port 3128                ##用来指定代理服务监听的地址和端口（默认的端口号为3128）
##61行插入
cache_effective_user squid    ##添加，指定程序用户，用来设置初始化、运行时缓存的账户，否则启动不成功
cache_effective_group squid   ##添加，指定账号基本组

##68行，缓存文件目录，默认为/usr/local/squid/var/cache/squid，这里不做修改
coredump_dir /usr/local/squid/var/cache/squid

2.3 Squid的运行控制

2.3.1 检查配置文件语法是否正确
[root@squid_server squid-3.5.28]# squid -k parse
2.3.2 启动Squid，第一次启动Squid服务时，会自动初始化缓存目录
[root@squid_server squid-3.5.28]# squid -z   #-z选项用来初始化缓存目录
[root@squid_server squid-3.5.28]# squid      #启动squid服务
2.3.3 查看Squid服务端口号
[root@squid_server squid-3.5.28]# netstat -natp | grep 'squid'
tcp6       0      0 :::3128                 :::*                    LISTEN      9142/(squid-1)
2.3.4 定期清理swap.state内无效数据
[root@squid_server squid-3.5.28]# squid -k rotate -f /etc/squid.conf

当squid应用运行了一段时间之后，cache_dir对应的swap.state文件就会变得越来越大，里面的无效接口数据越来越多，这可能影响squid的响应时间，因此需要使用squid清理swap.state里面的无效数据，减少swap.state的大小。

2.4 创建Squid服务脚本

[root@squid_server squid-3.5.28]# vim /etc/init.d/squid

#!/bin/bas
##解释器
#chkconfig: 2345 90 25
##2345为默认自启动级别，如是-代表任何级别都不自启动；90为启动优先级，25为停止优先级，优先级范围是0-100，数字越大，优先级越低。
PID="/usr/local/squid/var/run/squid.pid"
##指定进程文件路径
CONF="/etc/squid.conf"
##指定配置文件路径
CMD="/usr/local/squid/sbin/squid"
##指定程序文件路径

case "$1" in
   start)
     netstat -natp | grep squid &> /dev/null
     if [ $? -eq 0 ]
     then
       echo "squid is running"
     else
       echo "正在启动 squid..."
       $CMD
     fi
   ;;
   stop)
     $CMD -k kill &> /dev/null
     rm -rf $PID &> /dev/null
   ;;
   status)
     [ -f $PID ] &> /dev/null
        if [ $? -eq 0 ]
          then
            netstat -natp | grep squid
          else
            echo "squid is not running"
        fi
   ;;
   restart)
      $0 stop &> /dev/null
      echo "正在关闭 squid..."
      $0 start &> /dev/null
      echo "正在启动 squid..."
   ;;
   reload)
      $CMD -k reconfigure
   ;;
   check)
      $CMD -k parse
   ;;
   *)
      echo "用法：$0{start|stop|status|reload|check|restart}"
   ;;
esac

[root@squid_server squid-3.5.28]# chmod +x /etc/init.d/squid 
##添加可执行权限
[root@squid_server squid-3.5.28]# chkconfig --add squid
##添加到系统管理程序
[root@squid_server squid-3.5.28]# chkconfig --level 35 squid on
##设置squid启动级别，脚本中已定义

三、构建传统代理服务器

1. 服务器配置

服务器 主机名 IP地址 主要软件
Squid服务器 squid_server 192.168.122.10 squid
Web服务器 web_server 192.168.122.11 apache
Win10客户端 192.168.122.222 edge浏览器

2. 修改Squid配置文件

[root@squid_server squid-3.5.28]# vim /etc/squid.conf

# And finally deny all other access to this proxy
http_access allow all
http_access deny all

# Squid normally listens to port 3128
http_port 3128
cache_effective_user squid
cache_effective_group squid
##63行插入
cache_mem 64 MB
##指定缓存功能所使用的内存空间大小，便于保持访问较频繁的WEB对象，容量最好为4的倍数，单位为MB，建议设为物理内存的1/4
reply_body_max_size 10 MB
##允许用户下载的最大文件大小，默认以字节为单位，当下载超过指定大小的Web对象时，浏览器的报错页面中会出现“请求或访问太大”的提示默认设置0表示不进行限制
maximum_object_size 4096 KB
##允许保存到缓存空间的最大对象大小，以KB为单位，超过大小限制的文件将不被缓存，而是直接转发给用户

[root@squid_server squid-3.5.28]# systemctl restart squid

3. 常用的配置选项

http_port 3128                              #监听端口 (还可以只监听一个IP http_port 192.168.0.1:3128)
cache_mem 64MB                              #缓存占内存大小
maximum_object_size 4096KB                  #最大缓存块
reply_body_max_size  1024000 allow all      #限定下载文件大小
access_log /var/log/squid/access.log        #访问日志存放的地方
visible_hostname    proxy.test.xom          #可见的主机名
cache_dir ufs /var/spool/squid  100 16 256 
#ufs:缓存数据的存储格式
#/var/spool/squid    缓存目录
#100：缓存目录占磁盘空间大小（M）
#16：缓存空间一级子目录个数
#256：缓存空间二级子目录个数
cache_mgr webmaster@test.com                #定义管理员邮箱
http_access deny all                        #访问控制

4. 生产环境中还需要修改防火墙规则

[root@squid_server squid-3.5.28]# iptables -F
#清空原防火墙规则
[root@squid_server squid-3.5.28]# iptables -I INPUT -p tcp --dport 3128 -j ACCEPT
#不指定表将默认配置filter表，设置INPUT链规则，指定协议为tcp，指定端口3128，目标动作为ACCEPT接受

5. 客户机的代理配置

win7:

  1. 打开浏览器
  2. 工具
  3. Internet选项
  4. 连接
  5. 局域网设置
  6. 开启代理服务器
  7. 输入地址：Squid服务器的IP地址，端口：3128

win10:

  1. 打开浏览器
  2. 设置
  3. 系统
  4. 打开计算机的代理设置
  5. 手动设置代理，打开使用代理服务器
  6. 输入地址：Squid服务器的IP地址，端口：3128
  7. 访问测试

6. 查看Squid访问日志的新增记录

第一次访问：

[root@squid_server squid-3.5.28]# tail -f /usr/local/squid/var/logs/access.log

1631140806.233      4 192.168.122.222 TCP_MISS/200 410 GET http://192.168.122.11/test.html - HIER_DIRECT/192.168.122.11 text/html
1631140806.267      2 192.168.122.222 TCP_MISS/200 73839 GET http://192.168.122.11/jobs.jpg - HIER_DIRECT/192.168.122.11 image/jpeg

第二次访问：

[root@squid_server squid-3.5.28]# tail -f /usr/local/squid/var/logs/access.log

1631140979.429      1 192.168.122.222 TCP_REFRESH_UNMODIFIED/200 417 GET http://192.168.122.11/test.html - HIER_DIRECT/192.168.122.11 text/html
1631140979.447      0 192.168.122.222 TCP_MEM_HIT/200 73848 GET http://192.168.122.11/jobs.jpg - HIER_NONE/- image/jpeg

来自客户端192.168.122.222前往web服务器192.168.122.11的访问请求。
第一次访问TCP_MISS表示Squid没有请求资源的cache拷贝。HIER_DIRECT将请求转发至web服务器。
第二次访问文字TCP_REFRESH_UNMODIFIED表示Squid发现请求资源的貌似陈旧的拷贝，并发送确认请求到原始服务器。原始服务器响应新的内容，指示这个cache拷贝确实是陈旧的。因此HIER_DIRECT将请求转发至web服务器。
访问图片TCP_MEM_HIT表示Squid在内存cache里发现请求资源的有效拷贝，并将其立即发送到客户端。注意这点并非精确的呈现了所有从内存服务的响应。因此后面HIER_NONE/-将不再转发到web服务器。

7. 查看Web访问日志的新增记录

[root@web_server html]# tail -f /var/log/httpd/access_log

192.168.122.10 - - [09/Sep/2021:06:40:06 +0800] "GET /test.html HTTP/1.1" 200 74 "-" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/93.0.4577.63 Safari/537.36 Edg/93.0.961.38"
192.168.122.10 - - [09/Sep/2021:06:40:06 +0800] "GET /jobs.jpg HTTP/1.1" 200 73511 "http://192.168.122.11/test.html" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/93.0.4577.63 Safari/537.36 Edg/93.0.961.38"

访问记录来自于squid代理服务器。

将代理关闭后访问，查看访问记录

[root@web_server html]# tail -f /var/log/httpd/access_log

192.168.122.222 - - [09/Sep/2021:07:04:27 +0800] "GET /test.html HTTP/1.1" 200 74 "-" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/93.0.4577.63 Safari/537.36 Edg/93.0.961.38"
192.168.122.222 - - [09/Sep/2021:07:04:27 +0800] "GET /jobs.jpg HTTP/1.1" 200 73511 "http://192.168.122.11/test.html" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/93.0.4577.63 Safari/537.36 Edg/93.0.961.38"

访问记录来自于客户端本身。

四、构建透明代理服务器

1. 服务器配置

服务器 主机名 IP地址 主要软件
Squid服务器 squid_server 内网ens33：192.168.122.10
外网ens36:12.0.0.1		 squid
Web服务器 web_server 12.0.0.12 apache
Win10客户端 192.168.122.222 edge浏览器

2. Squid服务器部署

2.1 修改Squid配置文件

[root@squid_server ~]# vim /etc/squid.conf

# And finally deny all other access to this proxy
http_access allow all
http_access deny all

# Squid normally listens to port 3128
##60行，修改，添加提供内网服务的网卡IP地址，和支持透明代理选项transparent
http_port 192.168.122.10:3128 transparent
cache_effective_user squid
cache_effective_group squid
cache_mem 64 MB
reply_body_max_size 10 MB
maximum_object_size 4096 KB

[root@squid_server ~]# systemctl restart squid

2.2 开启路由转发，实现本机中不同网段的地址转发

[root@squid_server ~]# echo 'net.ipv4.ip_forward = 1' >> /etc/sysctl.conf 
[root@squid_server ~]# sysctl -p
net.ipv4.ip_forward = 1

2.3 修改防火墙规则

[root@squid_server ~]# iptables -F
[root@squid_server ~]# iptables -t nat -F
[root@squid_server ~]# iptables -t nat -I PREROUTING -i ens33 -s 192.168.122.0/24 -p tcp --dport 80 -j REDIRECT --to 3128
#用于转发http协议，将访问端口重定向到3128
[root@squid_server ~]# iptables -t nat -I PREROUTING -i ens33 -s 192.168.122.0/24 -p tcp --dport 443 -j REDIRECT --to 3128
#用于转发https协议，将访问端口重定向到3128
[root@squid_server ~]# iptables -I INPUT -p tcp --dport 3128 -j ACCEPT
#定义防火墙入站规则，允许3128的连接请求

3. 客户端访问测试

3.1 查看Squid访问日志的新增记录

第一次访问：

[root@squid_server ~]# tail -f /usr/local/squid/var/logs/access.log

1631145090.410   5412 192.168.122.222 TCP_MISS/200 410 GET http://12.0.0.12/test.html - ORIGINAL_DST/12.0.0.12 text/html
1631145090.556     29 192.168.122.222 TCP_MISS/200 73839 GET http://12.0.0.12/jobs.jpg - ORIGINAL_DST/12.0.0.12 image/jpeg
1631145090.613      1 192.168.122.222 TCP_MISS/404 464 GET http://12.0.0.12/favicon.ico - ORIGINAL_DST/12.0.0.12 text/html

第二次访问：

[root@squid_server ~]# tail -f /usr/local/squid/var/logs/access.log

1631145233.875      0 192.168.122.222 TCP_MEM_HIT/200 419 GET http://12.0.0.12/test.html - HIER_NONE/- text/html
1631145233.924      1 192.168.122.222 TCP_MEM_HIT/200 73848 GET http://12.0.0.12/jobs.jpg - HIER_NONE/- image/jpeg

来自客户端192.168.122.222前往web服务器12.0.0.12的访问请求。
第一次访问缓存后，第二次访问直接返回的squid服务器中的缓存数据，客户端的响应速度得到了很大的提升。

3.2 查看Web访问日志的新增记录

第一次访问：

[root@web_server ~]# tail -f /var/log/httpd/access_log

12.0.0.1 - - [09/Sep/2021:07:51:30 +0800] "GET /test.html HTTP/1.1" 200 74 "-" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/93.0.4577.63 Safari/537.36 Edg/93.0.961.38"
12.0.0.1 - - [09/Sep/2021:07:51:30 +0800] "GET /jobs.jpg HTTP/1.1" 200 73511 "http://12.0.0.12/test.html" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/93.0.4577.63 Safari/537.36 Edg/93.0.961.38"
12.0.0.1 - - [09/Sep/2021:07:51:30 +0800] "GET /favicon.ico HTTP/1.1" 404 209 "http://12.0.0.12/test.html" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/93.0.4577.63 Safari/537.36 Edg/93.0.961.38"

第二次访问：

[root@web_server ~]# tail -f /var/log/httpd/access_log

12.0.0.1 - - [09/Sep/2021:08:00:13 +0800] "GET /test.html HTTP/1.1" 304 - "-" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/93.0.4577.63 Safari/537.36 Edg/93.0.961.38"

访问记录来自于squid代理服务器，使得服务端无法得知客户的真实IP。

标签：squid,Squid,代理服务器,server,192.168,应用,root
来源： https://www.cnblogs.com/dingcong1201/p/15245334.html