Squid基础与配置
一、squid入门
1.squid是什么?
squid是一种用来缓冲internet数据的软件。它是这样实现其功能的,接受来自人们需要下载的目标(object)的请求并适当地处理这些请求。也就是说,如果一个人想下载一web页面,他请求squid为他取得这个页面。squid随之连接到远程服务器(比如:http://squid.nlanr.net/)并向这个页面发出请求。然后,squid显式地聚集数据到客户端机器,而且同时复制一份。当下一次有人需要同一页面时,squid可以简单地从磁盘中读到它,那样数据迅即就会传输到客户机上。当前的squid可以处理http,ftp,gopher,ssl和wais等协议。但它不能处理如pop,nntp,realaudio以及其它类型的东西。
2.internet缓冲的一些概念
你可能会想到一些问题:缓冲有多大的用处?什么时候目标(object)应该或者不应该被缓冲?例如,缓冲信用卡号码是完全不适合的,脚本文件的执行结果在远程服务器端,站点经常更新(象www.cnn.com)或者甚至站点不允许缓冲,这些情况也都是不适合缓冲的。
squid处理各种情况是不错的(当然,这需要远程站点按标准形式工作)。
可执行的cgi-bin脚本文件不被缓冲,返回正确页眉的页面是在一段限制了的时间内被缓冲,而且你可以规定特殊的规则以确定什么是可以或不可以被缓冲的,还有缓冲的时间为多长。
谈到缓冲的用处有多大,这要看internet的容量大小,各有不同。对于小型的缓冲区(几转磁盘空间)来说,返回值非常高(达到25%)。这个空间缓冲经常访问的站点,如netscape,cnn和其它一些类似情况的站点。如果你增加一倍缓冲的磁盘空间,但你不会成倍增加你的命中率。这是因为你开始缓冲网络中剩余部分时,这些通常时很大的而且很少被访问。一个非常大的高速缓冲区,有20转左右,可能返回值仍小于50%,除非你对保存数据的时间长短经常改变(一般地你不要分配20转的磁盘空间,因为页面很快就会过时,应该被删除掉)。
我们在这里说的目标(object)指的是可保存的web页面或其它类似的可下载页面(ftp文件或目录内容也称为目标(object))。
3.squid运行在什么系统上?
squid可运行在大多数unix和os/2版本的系统之上,已知的可工作的有:
aix,digital unix,freebsd,hp-ux,irix,linux,netbsd,nextstep,sco,solaris
二、编译安装squid
1.squid的未编译版本
我不能保证你能发现所有的squid的未编译版本。在ftp:squid.nlanr.net上你可以找到一些未编译的版本,尽管它们可能不是最新的版本。
squid一般很容易编译,这是因为它本身可以自动配置。唯一真正的问题是是否在你的机器上有一个编译器。这可能发生在:你购买了商业os但是它未包括标准的开发选项。你可能考虑在这种情况下装一个gnu的编译器,如果你在/usr/include下有必需的文件的话。你另外一个选择可能是请求别人的帮助。你也许需要查看“tracker database”以找到在你附近运行squid的某人。假定他们有适合的硬件,他们很可能会帮助你的。
1. 开始编译之前
运行squid的最好方法(在我看来)是创建一个特定的用户和组来运行它。我用相同的名字创建了一个squid用户和一个squid组,并设置用户的home目录为/usr/local/squid。然后我用su 转到squid用户,这样文件就都由squid以及squid组所有(squid用户主组必须为squid)。随后我下载squid源文件到/usr/local/squid/src并解包。
这可能不是最好的安装squid到你的系统上的方法,但是,如果多个用户将使用squid,你可以把他们都放在squid组中。(当然,如果你不理解我所说的,尽可以用你自己的名义去安装,不要以root方式,否则,你将给你的机器带来安全上的危险。)
2. 获得源码
squid的源始站点是squid.nlanr.net。这里还有许多其它的镜像站点,你可以考虑从你本地的镜像站点获得它,或者在archie服务器上搜索。一旦你已经下载了(一般放在/usr/local/squid/src/下),你可以用以下命令解压:
gzip -cd squid-tar.gz-fil | tar xv 或者 tar zxvf squid-tar.gz-fil
这将创建类似于以下行的目录:/usr/local/squid/src/squid-1.1.13/(依版本而定)。
3. 编译squid
以下是编译squid的一般指令。你可能还要做其它的事以编译squid到你的系统上。通常你可以运行一个配置脚本文件,它指明了你的系统设置和你机器上的标题文件。这样,在解压和解包文件后。cd 到/usr/local/squid/src/squid-version/下并输入:
./configure
这里假定你准备安装squid到/usr/local/squid下。你也可以用下面的方法修改你的安装目录:
./configure -prefix=/some/other/directory
然后你可能要敲入:make 以及 如果编译一切正常时,输入make install。这将生成在后面将要描述的目录并安装文件到目录下。
三、squid的基本配置
1. 目录结构
squid通常创建几个目录。它们一般如下:
/usr/local/squid
/bin
/cache
/etc
/logs/
/src (这是我们早些时候创建的)
/bin包括squid本身的程序,以及其它程序如ftpget,它可以被squid用来执行各种功能。
/cache/目录是实际缓冲数据的存放区。你可能要考虑把剩余缓冲放到不同分区去,或甚至是不同的磁盘。它包含的目录如以下行的形式:/00/ /01/ /02/ 和/03/ 这些又包括更多的子目录,最终是缓冲的实际数据。存储数据在多个目录下意味着从大的缓冲区取数据仍然很快,因为你的操作系统要读一个包含10000个文件的目录会需要很长的时间。
/etc/包含squid.conf文件,它是唯一的squid配置文件。
/logs/目录可能会很大,特别是如果你包含同属时,它们会查询你每一次连接,这可以使你的log文件双倍增加。注意在cache目录下也有一个/log/文件,但是你不能删除或移动它。它是上面讨论的/usr/local/squid/cache/目录的一个索引。(这与ie的cache有些相似。)
/src/一般包括你运行squid版本的源文件。
2. 基本配置
所有的squid配置集中到一个文件----squid.conf。下面将详细讨论仅作为一个缓冲代理服务器的squid的配置,而不是把它作为一个http加速器。
以下是一个最基本的配置文件:
#squid.conf - a very basic config file for squid
#turn logging to it's lowest level
debug_options all,1
#defines a group (or access control list) that includes all ip
#addresses
acl all src 0.0.0.0/0.0.0.0
#allow all sites to use connect to us via http
http_access allow all
#allow all sites to use us as a sibling
icp_access allow all
#test the following sites to check that we are connected
dns_testnames internic.net usc.edu cs.colorado.edu mit.edu yale.edu
#run as the squid user
cache_effective_user squid squid
#otherwise, you can uncomment the below line and comment the one out.
# this will run as use "nobody" with the group "nogrtoup"
cache_effective_user nobody nogroup
这个配置允许所有的人访问缓冲区,并创建一个100m的缓冲区,使用8m的内存,保持最小型的logs,而且存储所有文件到默认区域,这一般指的是所有文件将以squid用户,squid组的名义存储到“/usr/local/squid/cache”中。所有客户请求将来自于3128端口,并且所有“内部缓冲(inter-cache)”流量将走udp端口3130。注意这个配置文件允许所有人访问你的缓冲机器,这可能不是你所希望的,但是至少它可以正常工作。
3. 运行squid
squid由一个脚本正常运行,这个脚本在它的进程死掉后重启squid。这里有脚本的两种版本:/usr/local/squid/bin/runcache 和 /usr/local/squid/bin/runaccel 。
runcache脚本一般在前台运行,所以启动squid,输入以下内容:
% /usr/local/squid/bin/runcache& %
然后用以下命令查看主squid log文件/usr/local/squid/logs/cache.log
% more /usr/local/squid/logs/cache.log
你将看到squid启动的相关信息,如下行所示:
97/02/24 19:34:52| starting squid cache version 1.1.10 for i586-pc-linux-gnu...
97/02/24 19:34:52| with 256 file descriptors available
97/02/24 19:34:52| initializing ip cache...
如果你没有看见任何关于fatal错误的信息,squid现在就可以很高兴地在你的机器上运行了。
下面将配置你的浏览器,你可以好好地试一下哦!
4. 客户端软件的基本配置
以下是针对浏览器的基本配置:
netscape(4.5以上版本):
从edit菜单项中选择preferences项。在advanced中proxies页,点击按钮进入proxy配置手册,然后再点击view按钮。对每项你的squid服务器支持的协议项(默认有http,ftp和gopher等)中填入squid服务器的主机名或ip地址,同时在port栏中填入squid服务器的http端口号(默认为3128)。对你的squid不支持的协议,可以让这些栏空着。
ie(5.0以上中文版本):
在工具菜单项中选择internet选项,然后点击连接页,再按局域网设置按钮选择使用代理服务器选项,进入高级项目编辑。然后可以看到与netscape代理服务器设置类似的界面,按照前面所述的方法分别填入相应项即可。
一般unix下配置:
如果你使用可以允许你访问web的unix程序(包括wget,lynx和mosaic等),你可以设置shell变量,通过这些变量可以配置好代理。
如果你使用的shell是tcsh或csh,命令如下:
% setenv http_proxy http://mycache.example.com:3128/
% setenv gopher_proxy http://mycache.example.com:3128/
% setenv ftp_proxy http://mycache.example.com:3128/
现在你就可以使用你的浏览器与缓冲连接以下载页面了。为了检查通过缓冲是否工作正常,可以查看/usr/local/squid/logs/access.log文件的内容,使用命令如下:more /usr/local/squid/logs/access.log。你可以看到所有你进行的访问信息都显示在该文件中。