Varnish Cache Installation For WordPress

Orjinal Döküman: http://www.netkolik.org/rehberler/varnish-cache-kurulumu-ve-wordpress-ayarlari.html

Varnish Cache web sunucunuz önünde çalışarak, önbelleğine aldığı dosyaları/sayfaları, bir daha web sunucunuza istek yapmadan kendi üzerinden kullanıcıya sunan bir önbellekleme sistemidir. Varnish cache hali hazırda kullanılan her türlü web sunucsu ile sorunsu olarak çalışan bir açık kaynak kodlu yazılımdır.

Varnish statik dosyalarınızı (html, css, jpg,png) önbelleklediği gibi, özellikle WordPress gibi dinamik içeriğe sahip sitelerinizi de önbellekleme kabiliyetine sahiptir. Asıl amacı sunucu kaynaklarını en verimli şekilde kullanmaya yöneliktir.

Yaptığım  denemeler sonucu WordPress için en uygun ayarları Varnish 3.x sürümü ile elde ettim. Bu yazımda sizlere Varnish 3.x kurulumu ve WordPress için VCL ayarlarından bahsedeceğim.

VARNİSH 3 KURULUMU

CentOS 5/6, Debian 7/8 ve Ubuntu 12.04/14.04 için ayrı ayrı kurulum ve depo kaynakları olsa da, tüm ayarlamalar tüm işletim sistemleri için ortaktır.

Öncelikle kullandığınız işletim sistemine uygun olan paketi seçtiğinizdem emin olunuz.

 

CentOS 5.x

  1. rpm –nosignature -i https://repo.varnish-cache.org/redhat/varnish-3.0.el5.rpm
  2. yum install varnish

CentOS 6.x

  1. rpm –nosignature -i https://repo.varnish-cache.org/redhat/varnish-3.0.el6.rpm
  2. yum install varnish

Debian ve Ubuntu için /etc/apt/sources.list dosyasını düzenleyerek uygun olan repo kodunu en sona ekleyin.

  1. nano /etc/apt/sources.list

Debian 7.x

  1. deb http://repo.varnish-cache.org/debian/ wheezy varnish-3.0

Debian 8.x

  1. deb http://repo.varnish-cache.org/debian/ jessie varnish-3.0

Ubuntu 12.02

  1. deb http://repo.varnish-cache.org/ubuntu/ precise varnish-3.0

Ubuntu 14.04

  1. deb http://repo.varnish-cache.org/ubuntu/ trusty varnish-3.0

Debian ve Ubuntu için depo anahtarını ekleyip, depo listesini güncelleyip kurulumu yapalım.

  1. curl https://repo.varnish-cache.org/debian/GPG-key.txt | apt-key add –
  2. apt-get update
  3. apt-get install apt-transport-https varnish -y

Kurulum tamanlandığında aşağıdaki gibi bir mesaj göreceksiniz.

Setting up libvarnishapi1 (3.0.6-1~wheezy) ...
Setting up manpages-dev (3.44-1) ...
Setting up varnish (3.0.6-1~wheezy) ...
Starting HTTP accelerator: varnishd.
root@deneme:~#

VARNİSH DEFAULT VE DEFAULT.VCL AYARLARI

default dosyamızı düzenleyelim.

 

Debian ve Ubuntu için

  1. nano /etc/default/varnish

CentOS için

  1. nano /etc/sysconfig/varnish

İçerğini aşağıdaki gibi değiştirelim.

  1. # Configuration file for varnish
  2. #
  3. # /etc/init.d/varnish expects the variable $DAEMON_OPTS to be set from this
  4. # shell script fragment.
  5. #
  6. START=yes
  7. #
  8. # Maximum number of open files (for ulimit -n)
  9. NFILES=131072
  10. #
  11. # Locked shared memory (for ulimit -l)
  12. # Default log size is 82MB + header
  13. MEMLOCK=82000
  14. #
  15. # Maximum size of corefile (for ulimit -c). Default in Fedora is 0
  16. # DAEMON_COREFILE_LIMIT=”unlimited”
  17. #
  18. # Set this to 1 to make init script reload try to switch vcl without restart.
  19. # To make this work, you need to set the following variables
  20. # explicit: VARNISH_VCL_CONF, VARNISH_ADMIN_LISTEN_ADDRESS,
  21. # VARNISH_ADMIN_LISTEN_PORT, VARNISH_SECRET_FILE
  22. RELOAD_VCL=1
  23. #
  24. ## Advanced configuration
  25. #
  26. # # Main configuration file.
  27. VARNISH_VCL_CONF=/etc/varnish/default.vcl
  28. #
  29. # # Default address and port to bind to
  30. # # Blank address means all IPv4 and IPv6 interfaces, otherwise specify
  31. # # a host name, an IPv4 dotted quad, or an IPv6 address in brackets.
  32. # VARNISH_LISTEN_ADDRESS=
  33. VARNISH_LISTEN_PORT=80
  34. #
  35. # # Telnet admin interface listen address and port
  36. VARNISH_ADMIN_LISTEN_ADDRESS=127.0.0.1
  37. VARNISH_ADMIN_LISTEN_PORT=6082
  38. #
  39. # # Shared secret file for admin interface
  40. VARNISH_SECRET_FILE=/etc/varnish/secret
  41. #
  42. # # The minimum number of worker threads to start
  43. VARNISH_MIN_THREADS=1
  44. #
  45. # # The Maximum number of worker threads to start
  46. VARNISH_MAX_THREADS=1000
  47. #
  48. # # Idle timeout for worker threads
  49. VARNISH_THREAD_TIMEOUT=120
  50. #
  51. # # Cache file location if using file cache
  52. #VARNISH_STORAGE_FILE=/var/lib/varnish/varnish_storage.bin
  53. #
  54. # # Cache size: in bytes, optionally using k / M / G / T suffix,
  55. # # or in percentage of available disk space using the % suffix.
  56. VARNISH_STORAGE_SIZE=1G
  57. #
  58. # # Backend storage specification
  59. # malloc runs from RAM, file from file
  60. VARNISH_STORAGE=“malloc,${VARNISH_STORAGE_SIZE}”
  61. #VARNISH_STORAGE=”file,${VARNISH_STORAGE_FILE},${VARNISH_STORAGE_SIZE}”
  62. #
  63. # # Default TTL used when the backend does not specify one
  64. VARNISH_TTL=120
  65. #
  66. # # DAEMON_OPTS is used by the init script. If you add or remove options,
  67. # # be sure you update this section, too.
  68. DAEMON_OPTS=”-a ${VARNISH_LISTEN_ADDRESS}:${VARNISH_LISTEN_PORT} \
  69. -f ${VARNISH_VCL_CONF} \
  70. -T ${VARNISH_ADMIN_LISTEN_ADDRESS}:${VARNISH_ADMIN_LISTEN_PORT} \
  71. -t ${VARNISH_TTL} \
  72. -w ${VARNISH_MIN_THREADS},${VARNISH_MAX_THREADS},${VARNISH_THREAD_TIMEOUT} \
  73. -u varnish -g varnish \
  74. -S ${VARNISH_SECRET_FILE} \
  75. -s ${VARNISH_STORAGE}”
  76. #

Burada Varnish 80 portunda çalışmasına ayarladık.

 

Şimdi de default.vcl dosyasını düzenleyelim. Bu düzenlemenin WordPress için özelleştirilmiş olduğunu, diğer çalışan sistemlerde sorun çıkarma ihtimalinin olduğunu belirtmek istiyorum.

 

Debian, Ubuntu  ve CentOS için

  1. nano /etc/varnish/default.vcl

 

İçeriği aşağıdaki gibi değiştirin.

  1. backend origin {
  2. .host = “127.0.0.1”;
  3. .port = “8080”;
  4. .connect_timeout = 60s;
  5. .first_byte_timeout = 60s;
  6. .between_bytes_timeout = 60s;
  7. }
  8. #
  9. sub vcl_recv {
  10. # only using one backend
  11. set req.backend = origin;
  12. #
  13. # set standard proxied ip header for getting original remote address
  14. set req.http.X-Forwarded-For = client.ip;
  15. #
  16. # logged in users must always pass
  17. if( req.url ~ “^/wp-(login|admin)” || req.http.Cookie ~ “wordpress_logged_in_” ){
  18. return (pass);
  19. }
  20. # accept purges from w3tc and varnish http purge
  21. if (req.request == “PURGE”) {
  22. return (lookup);
  23. }
  24. #
  25. # don’t cache search results
  26. if( req.url ~ “\?s=” ){
  27. return (pass);
  28. }
  29. #
  30. # always pass through posted requests and those with basic auth
  31. if ( req.request == “POST” || req.http.Authorization ) {
  32. return (pass);
  33. }
  34. #
  35. # else ok to fetch a cached page
  36. unset req.http.Cookie;
  37. return (lookup);
  38. }
  39. #
  40. # accept purges from w3tc and varnish http purge
  41. sub vcl_hit {
  42. if (req.request == “PURGE”) { purge; }
  43. return (deliver);
  44. }
  45. #
  46. # accept purges from w3tc and varnish http purge
  47. sub vcl_miss {
  48. if (req.request == “PURGE”) { purge; }
  49. return (fetch);
  50. }
  51. #
  52. sub vcl_fetch {
  53. #
  54. # remove some headers we never want to see
  55. unset beresp.http.Server;
  56. unset beresp.http.X-Powered-By;
  57. #
  58. # only allow cookies to be set if we’re in admin area – i.e. commenters stay logged out
  59. if( beresp.http.Set-Cookie && req.url !~ “^/wp-(login|admin)” ){
  60. unset beresp.http.Set-Cookie;
  61. }
  62. #
  63. # don’t cache response to posted requests or those with basic auth
  64. if ( req.request == “POST” || req.http.Authorization ) {
  65. return (hit_for_pass);
  66. }
  67. #
  68. # only cache status ok
  69. if ( beresp.status != 200 ) {
  70. return (hit_for_pass);
  71. }
  72. #
  73. # don’t cache search results
  74. if( req.url ~ “\?s=” ){
  75. return (hit_for_pass);
  76. }
  77. #
  78. # else ok to cache the response
  79. set beresp.ttl = 24h;
  80. return (deliver);
  81. }
  82. #
  83. sub vcl_deliver {
  84. # add debugging headers, so we can see what’s cached
  85. if (obj.hits > 0) {
  86. set resp.http.X-Cache = “HIT”;
  87. }
  88. else {
  89. set resp.http.X-Cache = “MISS”;
  90. }
  91. # remove some headers added by varnish
  92. unset resp.http.Via;
  93. unset resp.http.X-Varnish;
  94. }
  95. #
  96. sub vcl_hash {
  97. hash_data( req.url );
  98. # altering hash so subdomains are ignored.
  99. # don’t do this if you actually run different sites on different subdomains
  100. if ( req.http.host ) {
  101. hash_data( regsub( req.http.host, “^([^\.]+\.)+([a-z]+)$”, “\1\2″ ) );
  102. } else {
  103. hash_data( server.ip );
  104. }
  105. # ensure separate cache for mobile clients (WPTouch workaround)
  106. if( req.http.User-Agent ~ “(iPod|iPhone|incognito|webmate|dream|CUPCAKE|WebOS|blackberry9\d\d\d)” ){
  107. hash_data(“touch”);
  108. }
  109. return (hash);
  110. }

 

default.vcl dosyasını düzenleyerek de, Varnish’in 80 portuna gelen istekleri alıp, arkaplanda 8080 portunda çalışan web sunucusuna iletmesini sağladık. Ayrıca WordPress için özelleştirilmiş olduğundan, WordPress siteniz üzerinde giriş yapmamış ziyaretçiler için web sunucunuz yerine Varnish üzerinden gösterim yapılacaktır. Üye girişi yapmış kullanıcılar ise Varnish cache sistemini atlayıp, onlar için websunucusu üzerinden gösterim yapılacaktır.

 

Şimdi ise websunucunuzun 80 portunu 8080 olarak değiştirmeye geldi. Bu düzenleme kullandığınız işletim sistemi, hosting paneli ve web sunucusuna göre değişiklik gösterdiğinden, kesin bir dosya yolu belirtemiyorum. Genel anlamı ile söylemek gerekirse Apache için httpd.confiçinde VirtualHost ayarlarını, Nginx için de nginx.conf içinde listen ayarını değiştirmeniz gerekiyor. Nano ile ayar dosyasını açtıktan sonra,

  1. server {
  2. listen 80;
  3. server_name netkolik.org
  1. <VirtualHost *:80>
  2. ServerAdmin webmaster@

kısmını

  1. server {
  2. listen 8080;
  3. server_name netkolik.org
  1. <VirtualHost *:8080>
  2. ServerAdmin webmaster@

olarak değiştirin.

 

Websuncusu ve Varnish yeniden başlatalım.

  1. service httpd restart – CentOS için (Apache)
  2. service apache2 restart – Debian/Ubuntu için (Apache)
  3. service nginx restart – Nginx için
  4. service varnish restart

 

Servisleri yeniden başlattıktan sonra Varnish 80 portunda Web sunucumuz 8080 portunda çalışır hale geldiler. Bu durumda Varnish 80 portuna gelen istekleri okuyup, eğer kendi bünyesinde önbelleğe aldı ise kendi üzerinden, eğer gelen istek önbellekte yok ise, 8080 portundaki web sunucusuna istekte bulunup, kendi önbelleğine alıp, aynı isteği diğer defa kendi önbelleğinden görüntüleyecektir.

 

VARNİSH CACHE İSTATİSTİKLERİ

SSH üzerinden varnishstat komutu ile Varnish istatistiklerini anlık olarak görüntüleyebilirsiniz.

  1. varnishstat

 

Karşınızda top komutuna benzer bir ekran görüntüsü çıkacaktır.

  1. 0+18:05:19
  2. Hitrate ratio: 6 6 6
  3. Hitrate avg: 0.9968 0.9968 0.9968
  5. 6972 0.00 0.11 client_conn – Client connections accepted
  6. 48089 0.00 0.74 client_req – Client requests received
  7. 44664 0.00 0.69 cache_hit – Cache hits
  8. 15 0.00 0.00 cache_hitpass – Cache hits for pass
  9. 862 0.00 0.01 cache_miss – Cache misses

Sol üstte görünen 0+18:05:19 ibaresi Varnish sunucumuzun 18 saat süre ile çalıştığını göstermektedir.
Hitrate ratio kısmı ise son 6 dakika içerisindeki Hitrate avg değerlerini vermektedir. 0.9968 değeri ise son 6 dakika içinde cache_miss/cache_hit değerlerinin oranıdır.
Sıralı şekilde görülen üç sütun ise; ilki toplam istek sayısı, anlık istek sayısı ve ratio oranlarıdır.
client_conn değeri, Varnish’in çalıştığı süre boyunca karşıladığı bağlantı sayısıdır.
client_req değeri, Varnish’in çalıştığı süre boyunca karşıladığı istek sayısıdır.
client_hit değeri, Varnish’in çalıştığı süre boyunca önbellekten gösterdiği istek sayısıdır.
client_hitpass değeri, Varnish’in çalıştığı süre boyunca doğrudan websunucusu üzerinden karşıladığı istek sayısıdır.
client_miss değeri, Varnish’in çalıştığı süre boyunca önbelleğe aldığı istek sayısıdır.

WORDPRESS İÇİN VARNİSH AYARLARI

WordPress için hali hazırda W3 Total Cache kullanıyorsanız, Varnish sunucunuzu tanıtarak, Cache üzerindeki Page Cache ayarlarınız değiştikçe, Varnish Cache önbelleğinin değişmesini de ayarlayabilirsiniz. Bunun için, WordPress admin menüsünden, Performance > General Settings >Varnish yolunu takip ederek, Varnish sunucu IP adresini W3 Total Cache ile uyumlu olması için ayarlayabilirsiniz.

wordpress varnish

W3 Total Cache içinde bu ayarı aktif ederek, Page Cache ayarları doğrultusunda Varnish Cache ayarlarıyla entegre çalışmasını sağladık. Purge cache seçeneğine tıklayarak da önbelleği kendimiz de temizleyebiliriz.

W3 Total Cache kullanmıyorsanız da Varnish HTTP Purge adlı eklenti ile de aynı işi gerçekleştirebilirsiniz. (https://wordpress.org/plugins/varnish-http-purge/)

varnish http purge

default.vcl dosyamız, sadece WordPress ile uyumlu ayarlandığı için, çeşitli sitelerden sayfanızın header dosyasını görüntülediğinizde Varnish kullanılmıyor olarak gösterecektir.http://www.isvarnishworking.com/ adresinden sitenizi kontrol edebilirsiniz. Dosya özelleştirilmiş olduğundan Varnish header silinmiştir. Ama görebildiğiniz gibi Age ve X-Cache değişkenleri, Varnish’in çalıştığının göstergesidir.

Vary:    Accept-Encoding
X-CF-Powered-By:    WP 1.3.16
X-Pingback:    http://www.netkolik.org/xmlrpc.php
Age:    7466
X-Cache:    HIT
Server:    cloudflare-nginx

(default.vcl dosyamızda Varnish headeri yerine X-Cache değeri HIT olarak döndürülmektedir)

Varnish özelliklerini sunucunuzdan anlık olarak varnishstat vevarnishtop komutları ile gözlemleyebilirsiniz.

Leave a Reply

Your email address will not be published. Required fields are marked *

You may use these HTML tags and attributes: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <s> <strike> <strong>