编译squid之文件描述符

文件描述符是一个简单的整数,用以标明每一个被进程所打开的文件和socket。第一个打开的文件是0,第二个是1,依此类推。Unix操作系统通常给每个进程能打开的文件数量强加一个限制。更甚的是,unix通常有一个系统级的限制。

因为squid的工作方式,文件描述符的限制可能会极大的影响性能。当squid用完所有的文件描述符后,它不能接收用户新的连接。也就是说,用完文件描述符导致拒绝服务。直到一部分当前请求完成,相应的文件和socket被关闭,squid不能接收新请求。当squid发现文件描述符短缺时,它会发布警告。

在运行./configure之前,检查你的系统的文件描述符限制是否合适,能给你避免一些麻烦。大多数情况下,1024个文件描述符足够了。非常忙的cache可能需要4096或更多。在配置文件描述符限制时,推荐设置系统级限制的数量为每个进程限制的2倍。

通常在Unix shell中能找到系统的文件描述符限制。所有的C shell及其类似的shell有内建的limit命令。Bourne   shell及其类似的shell有一条叫做ulimit的命令。为了发现你的系统的文件描述符限制,试运行如下命令:

shell> ulimit -n

1024

 

如果你不能确认文件描述符限制,squid的./configure脚本能替你做到。当你运行./configure时,观察末尾这样的输出:

checking Maximum number of file descriptors we can open... 1024

假如其他的limit,ulimit,或者./configure报告这个值少于1024,你不得不在编译squid之前,花费时间来增加这个限制值的大小。否则,squid在高负载时执行性能将很低。

 

 

在编译squid之前,你必须编辑系统include文件中的一个,然后执行一些shell命令。

1.首先编辑/usr/include/bits/typesizes.h文件,改变 __FD_SETSIZE 的值:

#define   __FD_SETSIZE            1024

2.使用这个命令增加内核文件描述符的限制:

echo big-number > /proc/sys/fs/file-max     ///big-number是个大数字

3.增加进程文件描述符的限制,在你即将编译squid的同一个shell里执行:

ulimit -Hn 4096

该命令必须以root运行,仅仅运行在bash shell。不必重启机器。使用这个技术,你必须在每一次系统启动后执行上述echo和ulimit命令,或者至少在squid启动之前。假如你使用某个rc.d脚本来启动squid,那是一个放置这些命令的好地方。

关于limits.conf配置,可以详见笔者以前做的小实验,可以发现某些区别!

另外,如果想了解更多相关ulimit的使用,可以查看kumu博客对ulimit对nproc的限制的研究!

 

最后,修改了文件描述符,如果想根据业务的要求,在编译squid的时候,最新版squid-3.2.5中有如此选项“--with-filedescriptors=NUMBER”,强制squid支持更多的文件描述符!

另外,如果不加此编译选项,也可以编辑squid源码包include中的头文件,修改autoconf.h里面对DEFAULT_FD_SETSIZE的宏定义!squid-3.2.5设置的是1024!

 

上一篇:jQuery调用RESTful WCF示例(GET方法/POST方法)


下一篇:阿里云上部署开源PaaS平台Cloud Foundry实战