常用文件下载地址

官方论坛产品帮助刷图视频问题反馈

Nginx做静态缓存的简单配置文件

发表于 2011 年 03 月 27 日 由 秦海传媒

Nginx做静态缓存的简单配置文件
公司最近正在配置CDN加速器。需要对动态页面 静态页面分别缓存。做个详细记录备忘

继续阅读 →

行业门户网站CDN加速解决方案和配置过程（安装配置边界服务器）

发表于 2011 年 03 月 27 日 由 秦海传媒

边界服务器运行NGINX和Varnish，这里讲这两个服务器的安装和配置
Nginx安装MAKE

# ./configure –prefix=/usr/local/nginx –with-http_realip_module
　　# make
　　# make install

Debian 安装Nginx

#apt-get install nginx

配置nginx.cong

　　http {
　　include mime.types;
　　default_type application/octet-stream;
　　sendfile on;
　　keepalive_timeout 65;
　　upstream dynamic_node {
　　server 1.1.1.1:80; # 1.1.1.1 是主DNS节点的IP地址
　　}
　　server {
　　listen 8080;
　　server_name cdn.xianglei.net;
　　location ~* \.(gif|jpg|jpeg|png|wmv|avi|mpg|mpeg|mp4|htm|html|js|css|mp3|swf|ico|flv)$ {
　　proxy_set_header X-Real-IP $remote_addr;
　　proxy_pass http://dynamic_node;
　　proxy_store /var/www/cache$uri;
　　proxy_store_access user:rw group:rw all:r;
　　}

安装Varnish（make）

　　# tar -xzvf varnish-2.1.2.tar.gz
　　# ./configure –prefix=/usr/local/varnish
　　# make
　　# make install

配置varnish

　　backend default {
　　.host = “127.0.0.1″;
　　.port = “8080″;
　　}
　　sub vcl_recv {
　　if (req.url ~ “\.(js|css|jpg|jpeg|png|gif|gz|tgz|bz2|tbz|mp3|ogg|swf)$”) {
　　return (lookup);
　　}
　　}
　　sub vcl_fetch {
　　if (req.url ~ “\.(js|css|jpg|jpeg|png|gif|gz|tgz|bz2|tbz|mp3|ogg|swf)$”) {
　　unset obj.http.set-cookie;
　　}
　　}

详细安装过程

  1. 创建www用户和组，以及Varnish缓存文件存放目录（/var/vcache）：

    /usr/sbin/groupadd www -g 48
    /usr/sbin/useradd -u 48 -g www www
    mkdir -p /var/vcache
    chmod +w /var/vcache
    chown -R www:www /var/vcache
  2. 创建Varnish日志目录（/var/logs/）：

    mkdir -p /var/logs
    chmod +w /var/logs
    chown -R www:www /var/logs
  3. 编译安装varnish：

    wget http://blog.s135.com/soft/linux/varnish/varnish-1.1.2.tar.gz
    tar zxvf varnish-1.1.2.tar.gz
    cd varnish-1.1.2
    ./configure --prefix=/usr/local/varnish
    make && make install
  4. 创建Varnish配置文件：

    vi /usr/local/varnish/vcl.conf

    添加下面的内容：

    backend myblogserver {
    set backend.host = "192.168.0.5";
    set backend.port = "80";
    }

    acl purge {
    "localhost";
    "127.0.0.1";
    "192.168.1.0"/24;
    }

    sub vcl_recv {
    if (req.request == "PURGE") {
    if (!client.ip ~ purge) {
    error 405 "Not allowed.";
    }
    lookup;
    }

    if (req.http.host ~ "^blog.s135.com") {
    set req.backend = myblogserver;
    if (req.request != "GET" && req.request != "HEAD") {
    pipe;
    }
    else {
    lookup;
    }
    }
    else {
    error 404 "Zhang Yan Cache Server";
    lookup;
    }
    }

    sub vcl_hit {
    if (req.request == "PURGE") {
    set obj.ttl = 0s;
    error 200 "Purged.";
    }
    }

    sub vcl_miss {
    if (req.request == "PURGE") {
    error 404 "Not in cache.";
    }
    }

    sub vcl_fetch {
    if (req.request == "GET" && req.url ~ "\.(txt|js)$") {
    set obj.ttl = 3600s;
    }
    else {
    set obj.ttl = 30d;
    }
    }

    这段配置的意思：

    　　(1)、Varnish通过反向代理请求后端IP为192.168.0.5，端口为80的web服务器；
    　　(2)、Varnish允许localhost、127.0.0.1、192.168.0.***三个来源IP通过PURGE方法清除缓存；
    　　(3)、Varnish对域名为blog.s135.com的请求进行处理，非blog.s135.com域名的请求则返回“Zhang Yan Cache Server”；
    　　(4)、Varnish对HTTP协议中的GET、HEAD请求进行缓存，对POST请求透过，让其直接访问后端Web服务器。之所以这样配置，是因为POST请求一般是发送数据给服务器的，需要服务器接收、处理，所以不缓存；
    　　(5)、Varnish对以.txt和.js结尾的URL缓存时间设置1小时，对其他的URL缓存时间设置为30天。

    特别注意：这里对PHP也进行了代理。 需要不代理的部分PHP

    if (req.request != "GET" && req.request != "HEAD") {
    pipe;
    }
    elseif(req.url ~ "\.(php|cgi)($|\?)") {
    pass;
    }
    else {
    lookup;
    }

  5. 5、启动Varnish

    ulimit -SHn 51200
    /usr/local/varnish/sbin/varnishd -n /var/vcache -f /usr/local/varnish/vcl.conf -a 0.0.0.0:80 -s file,/var/vcache/varnish_cache.data,1G -g www -u www -w 30000,51200,10 -T 127.0.0.1:3500 -p client_http11=on
  6. 简单管理-查看命中：

    /usr/local/varnish/bin/varnishstat

好了，整体的配置就是这样的一个过程。

行业门户网站CDN加速解决方案和配置过程（安装配置一）

发表于 2011 年 03 月 27 日 由 秦海传媒

编译和安装bind9和geoip

　　# tar -xzvf bind-9.2.4.tar.gz
　　# tar -xzvf GeoIP-1.4.6.tar.gz
　　# cd GeoIP-1.4.6
　　# ./configure –prefix=/usr/local/geoip
　　# make
　　# make install
　　# cd ..
　　# patch -p0 < bind-9.2.4-geodns-patch/patch.diff //给bind9打补丁，让bind9直接支持geoip库 　　# cd bind-9.2.4 　　# CFLAGS=”-I/usr/local/geoip/include” LDFLAGS=”-L/usr/local/geoip/lib -lGeoIP” ./configure –prefix=/usr/local/bind 　　# make 　　# make install
Debian 安装 bind9和geoip

#apt-get install bind9 bind9-host dnsutils

配置文件说明

配置文件族：
# ls /etc/bind/ -l
total 44
-rw-r--r-- 1 root root 237 Jan 16 2006 db.0
-rw-r--r-- 1 root root 271 Jan 16 2006 db.127
-rw-r--r-- 1 root root 237 Jan 16 2006 db.255
-rw-r--r-- 1 root root 353 Jan 16 2006 db.empty
-rw-r--r-- 1 root root 256 Jan 16 2006 db.local
-rw-r--r-- 1 root root 1507 Jan 16 2006 db.root
-rw-r--r-- 1 root bind 1611 Jan 16 2006 named.conf
-rw-r--r-- 1 root bind 165 Jan 16 2006 named.conf.local
-rw-r--r-- 1 root bind 672 Jan 16 2006 named.conf.options
-rw-r----- 1 bind bind 77 Aug 4 08:41 rndc.key
-rw-r--r-- 1 root root 1317 Jan 16 2006 zones.rfc1918
配置文件说明：
named.conf
设置一般的named参数，指向该服务器使用的域数据库的信息源
named.conf.options
全局选项
db.root
根服务器指向文件， 由Internet NIC创建和维护， 无需修改， 但是需要定期更新
db.local
localhost正向区文件，用于将名字localhost转换为本地回送IP地址 (127.0.0.1)
db.127
localhost反向区文件，用于将本地回送IP地址(127.0.0.1)转换为名字localhost
其中，主配置文件/etc/named.conf的配置语句
　命令 用法
　acl 定义IP地址的访问控制清单
　control 定义ndc使用的控制通道
　include 把其他文件包含到配置文件中
　key 定义授权的安全密钥
　logging 定义日志写什么，写到哪
opitons 定义全局配置选项和缺省值　
　server 定义远程服务器的特征
　trunsted-keys 为服务器定义DNSSEC加密密钥
　zone 定义一个区
默认情况下， 内容如下：
include "/etc/bind/named.conf.options";
zone "." {
type hint;
file "/etc/bind/db.root";
};
zone "localhost" {
type master;
file "/etc/bind/db.local";
};
zone "127.in-addr.arpa" {
type master;
file "/etc/bind/db.127";
};
zone "0.in-addr.arpa" {
type master;
file "/etc/bind/db.0";
};
zone "255.in-addr.arpa" {
type master;
file "/etc/bind/db.255";
};
include "/etc/bind/named.conf.local";
其中type项的值：
master:表示定义的是主域名服务器
slave :表示定义的是辅助域名服务器
hint:表示是互联网中根域名服务器
在Debian环境中，options语句的配置内容， 被移至named.conf.options文件中：
options {
directory "/var/cache/bind";
// If there is a firewall between you and nameservers you want
// to talk to, you might need to uncomment the query-source
// directive below. Previous versions of BIND always asked
// questions using port 53, but BIND 8.1 and later use an unprivileged
// port by default.
// query-source address * port 53;
// If your ISP provided one or more IP addresses for stable
// nameservers, you probably want to use them as forwarders.
// Uncomment the following block, and insert the addresses replacing
// the all-0's placeholder.
// forwarders {
// 0.0.0.0;
// };
auth-nxdomain no; # conform to RFC1035
};

制作匹配的name.conf文件

　　view “us” {
　　// 匹配北美的客户端 US & Canada
　　match-clients { country_US; country_CA; };
　　// Provide recursive service to internal clients only.
　　recursion no;
　　zone “cdn.xianglei.com” {
　　type master;
　　file “pri/xianglei-us.db”;
　　};
　　zone “.” IN {
　　type hint;
　　file “named.ca”;
　　};
　　};
　　view “latin” {
　　// 匹配到南美国家
　　match-clients { country_AR; country_CL; country_BR; };
　　recursion no;
　　zone “cdn.xianglei.com” {
　　type master;
　　file “pri/xianglei-latin.db”;
　　};
　　zone “.” IN {
　　type hint;
　　file “named.ca”;
　　};
　　};

行业门户网站CDN加速解决方案和配置过程（基础）

发表于 2011 年 03 月 27 日 由 秦海传媒

被系统需要用到的软件为：BIND, GeoIP, Nginx, Varnish
软件介绍
BIND

　　BIND是一种开源的DNS（Domain Name System）协议的实现，包含对域名的查询和响应所需的所有软件。它是互联网上最广泛使用的一种DNS服务器，对于类UNIX系统来说，已经成为事实上的标准。
Varnish

　　Varnish是一款高性能的开源HTTP加速器，挪威最大的在线报纸 Verdens Gang 使用3台Varnish代替了原来的12台Squid，性能比以前更好。
　　1、Varnish采用了“Visual Page Cache”技术，在内存的利用上，Varnish比Squid具有优势，它避免了Squid频繁在内存、磁盘中交换文件，性能要比Squid高。
　　2、Varnish的稳定性还不错，我管理的一台图片服务器运行Varnish已经有一个月，没有发生过故障，而进行相同工作的Squid服务器就倒过几次。
　　3、通过Varnish管理端口，可以使用正则表达式快速、批量地清除部分缓存，这一点是Squid不能具备的。

CDN

　　CDN，意思是Content Distrubtion Network，意思是内容分发网络，简单的说，就是全地域范围内的负载均衡，全地域的概念可以是全国，也可以是全世界。由统一的DNS服务器进行地址转发，选择离用户最近的地区服务器进行负载均衡。本质上是从一个机房内的负载均衡扩展到了全世界范围内的负载均衡。同时可以将本地化的内容，由当地的服务器实现。做浏览器的地区自动选择。

简要解决说明

将nginx配置在8080端口，缓存所有的静态文件。Varnish配置在80端口负责转发和缓存动态请求。BIND9负责解析IP并转发到边界服务器，GetIP获取来源用户的真实IP。
主服务器，域名转发和NGINX+FastCGI(PHP)动态页面解析。

美国主机推介

high performance ssd vps 推荐：【稳定快速】256M/90G/1TB/西雅图/可选SSD！TWOYEAR(五八折)

Google ADs

除非另有声明，本站文章遵循知识共享署名-非商业性使用 2.5 中国大陆许可协议。 Copyright © 2008-2012 99288.NET.CN.