免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 8686 | 回复: 17
打印 上一主题 下一主题

[proxy] 搭建性能比squid高很多的varnish服务器 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2007-09-03 11:23 |只看该作者 |倒序浏览
[文章作者:jackbillow  转载请注明出处:http://www.discuz.net ]

arnish是一款高性能的开源HTTP加速器,挪威最大的在线报纸 Verdens Gang (http://www.vg.no) 使用3台Varnish代替了原来的12台squid,

性能比以前更好。
varnish的作者Poul-Henning Kamp是FreeBSD的内核开发者之一,他认为现在的计算机比起1975年已经复杂许多。在1975年时,储存媒介只有两

种:内存与硬盘。但现在计算机系统的内存除了主存外,还包括了cpu内的L1、L2,甚至有L3快取。硬盘上也有自己的快取装置,因此squid

cache自行处理物件替换的架构不可能得知这些情况而做到最佳化,但操作系统可以得知这些情况,所以这部份的工作应该交给操作系统处理,

这就是 Varnish cache设计架构。


1.下载源码包编译安装:

cd /usr/local/src && wget http://nchc.dl.sourceforge.net/s ... arnish-1.1.1.tar.gz
tar zxvf /usr/local/src/varnish-1.1.1.tar.gz
cd /usr/local/src/varnish-1.1.1
./autogen.sh
./configure --enable-debugging-symbols --enable-developer-warnings --enable-dependency-tracking
注:如果你的gcc版本是4.2.0或更高的版本,可以加上--enable-extra-warnings编译参数,在出错时,得到附加的警告信息。
我这里是用源码包安装的,如果你是redhat或centos可以用rpm包来安装(rpm下载位置:http: //sourceforge.net/project/showfiles.php?

group_id=155816&package_id=173643&release_id=533569).



2. 建立cache目录:
mkdir -p /cache/varnish/V  && chown -R nobody:nobody /cache



3.编写启动文件:

cd /usr/local/varnish/sbin
vi start.sh
内容如下:
#!/bin/sh
# file: start.sh
date -u
/usr/local/varnish/sbin/varnishd \
-a 10.0.0.129:80 \
-s file,/cache/varnish/V,1024m \
-f /usr/local/varnish/sbin/vg.vcl.default \
-p thread_pool_max=1500 \
-p thread_pools=5 \
-p listen_depth=512 \
-p client_http11=on \
注:-a 是指定后端服务器的ip或hostname,就象squid做revese proxy时的originserver.
不过这个也可以在vcl里面写。
-f 是指定所用的vcl的文件。
-s 指定cache目录的存储类型,文件位置和大小。
-p 是指定varnish的启动的一些启动参数,可以根据自己的机器配置来优化varnish的性能。
其他参数已经参数的具体含义可以用varnishd --help 来查看。



4.编写vcl:
我的vcl如下:

backend default {
        set backend.host = "127.0.0.1";
        set backend.port = "http";
}

#我用的是一台机器做测试,使用的backend用的是127.0.0.1:80.如果varnish机器和后台的机器分开的。
写上对应的机器的ip或hostname就可以了。

sub vcl_recv {

        if (req.request != "GET" && req.request != "HEAD") {
                pipe;
        }

        if (req.http.Expect) {
                pipe;
        }

        if (req.http.Authenticate || req.http.Cookie) {
                pass;
        }

        if (req.request == "GET" && req.url ~ "\.(gif|jpg|swf|css|js)$") {
                lookup;
        }
                lookup;
        }


sub vcl_pipe {
        pipe;
        }


sub vcl_pass {
        pass;
        }

sub vcl_hash {
             hash;
         }

sub vcl_hit {
        if (!obj.cacheable) {
                pass;
        }
                deliver;
        }

sub vcl_timeout {
        discard;
}

sub vcl_discard {
        discard;
}


如果是多个站点在不同的originserver时,可以使用下面配置:

backend www {
       set backend.host = "www.jackbillow.com";
       set backend.port = "80";
         }

backend images {
      set backend.host = "images.jackbillow.com";
      set backend.port = "80";
         }

sub vcl_recv {
      if (req.http.host ~ "^(www.)?jackbillow.com$") {
            set req.http.host = "www.jackbillow.com";
            set req.backend = www;
      } elsif (req.http.host ~ "^images.jackbillow.com$") {
            set req.backend = images;
      } else {
            error 404 "Unknown virtual host";
}



5.启动varnish:
chmod a+x /usr/local/varnish/sbin/start.sh
/usr/local/varnish/sbin/start.sh

Mon Sep  3 03:13:19 UTC 2007
file /cache/varnish/V/varnish.tEKXXx (unlinked) size 1073741824 bytes (262144 fs-blocks, 262144 pages)
Using old SHMFILE

ps waux | grep varnish
root     16254  0.0  0.0 11200  708 ? Ss   10:43   0:00 /usr/local/varnish/sbin/varnishd -a 10.0.0.129:80 -s /varnish/V,1024m

-f /usr/local/varnish/sbin/vg.vcl.default -p thread_pool_max 1500 -p thread_pools 5 -p listen_depth 512 -p client_http11 on
nobody   16255  0.0  0.1 1152552 1808 ?      Sl   10:43   0:00 /usr/local/varnish/sbin/varnishd -a 10.0.0.129:80 -s

file,/cache/varnish/V,1024m -f /usr/local/varnish/sbin/vg.vcl.default -p thread_pool_max 1500 -p thread_pools 5 -p

listen_depth 512 -p client_http11 on

看到上面信息说明varnish正确启动,恭喜你,你已经配置成功了。:)

[ 本帖最后由 jackbillow 于 2007-9-4 13:46 编辑 ]

论坛徽章:
0
2 [报告]
发表于 2007-09-03 14:55 |只看该作者
不错,有空研究一下。

论坛徽章:
0
3 [报告]
发表于 2007-09-03 23:38 |只看该作者
能不能更详细点,GOOGLE找了点资料,有个繁体站打不开,英文的对我是来说比较折磨。

论坛徽章:
0
4 [报告]
发表于 2007-09-04 05:46 |只看该作者
按照上面的配置,运行/usr/local/varnish/sbin/start.sh说权限不够?哪里出错了?我除了cache目录修改外,没其他变动。用root操作的。

论坛徽章:
0
5 [报告]
发表于 2007-09-04 13:44 |只看该作者
原帖由 powerv 于 2007-9-4 05:46 发表
按照上面的配置,运行/usr/local/varnish/sbin/start.sh说权限不够?哪里出错了?我除了cache目录修改外,没其他变动。用root操作的。


是不是没有设置那个文件可执行:
chmod a+x start.sh

论坛徽章:
0
6 [报告]
发表于 2007-09-04 15:10 |只看该作者
搂主如果能把这个软件和squid做一个压力对比测试就更好了

论坛徽章:
0
7 [报告]
发表于 2007-09-04 16:30 |只看该作者

回复 #5 jackbillow 的帖子

设置过了,我通过另外的方法启动,也是出错。提示1500行的地方,好象是,凌晨5点多,没继续看下去。等晚上再测试。您能不能提供更详细的资料?配置方面的。

论坛徽章:
0
8 [报告]
发表于 2007-09-05 09:57 |只看该作者
其他更详细的东西,我也在研究:)
你可以看看他的man,里面很详细。

论坛徽章:
0
9 [报告]
发表于 2007-09-05 10:24 |只看该作者
原帖由 powerv 于 2007-9-4 16:30 发表
设置过了,我通过另外的方法启动,也是出错。提示1500行的地方,好象是,凌晨5点多,没继续看下去。等晚上再测试。您能不能提供更详细的资料?配置方面的。


你可以使用:nroff -man 来查看/usr/local/varnish/man/man7/vcl 文件内容。看里面的详细配置。

论坛徽章:
0
10 [报告]
发表于 2007-09-05 12:48 |只看该作者
原帖由 suran007 于 2007-9-4 15:10 发表
搂主如果能把这个软件和squid做一个压力对比测试就更好了


兄弟有空了,可以用autobench+httpref做个比较
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP