 |
|
|
|
Кэшируем динамический контент
Кэшируем динамический контент Продолжая цикл статей, я расскажу, как можно создавать кэширующие сервера для динамического контента. (Первую статью цикла «Создаем распределенную сеть доставки контента» см. в №2 за 2008 г.) Немного о кэшировании Сейчас на рынке работают несколько компаний, предоставляющих услуги по кэшированию и доставке контента. Но все они, насколько мне известно, имеют один существенный недостаток – неумение достоверно кэшировать динамический контент. Часть из них вообще не может кэшировать динамический контент, а часть обновляют локальный кэш страниц только периодически, что непригодно для страниц социальных сетей. И, как я подозреваю, причина одна – для того чтобы построить акселератор, который бы хранил достоверную копию динамической страницы, необходима плотная интеграция с оригинальным сайтом. Технология кэширования динамических страниц Здесь я не изобрету ничего нового, лишь применю стандартные средства протокола HTTP для построения акселератора. В целом вся система состоит из сервера-акселератора и оригинального сайта и работает по следующей схеме:
Компоненты системы Для построения такой системы я использовал модуль mod_accel Игоря Сысоева [2]. На данный момент идет активная разработка такого же модуля для nginx, но на момент написания этой статьи он еще не был готов. Установка и настройка В свой работе я использую CentOS семейства Redhat, поэтому описание процедуры устоновки и настройки будет ориентировано на этот дистрибутив. Первым делом необходимо получить библиотеку EAPI, которая нужна для компиляции модуля mod_accel. Ее можно скачать с сайта [3]. Библиотеку устанавливать не нужно. tar -xzvf mod_ssl-2.8.4-1.3.20.tar.gz cd mod_ssl-2.8.4-1.3.20 ./configure —with-apache=../apache-1.3.20 make Далее получаем версию Apache 1.3.20 c cайта [4] и раскрываем архив: tar -xzvf apache_1.3.20.tar.gz Также нужна библиотека MM, которая доступна на сайте [5]. tar zxf mm-1.2.1.tar.gz cd mm-1.2.1 ./configure make make install Получаем модуль mod_accel и запускаем процесс обновления исходных кодов Apache: tar -xzvf mod_accel-1.0.34.tar.gz cd ./configure \ --with-apache=../apache_1.3.20 \ --with-eapi=../mode_ssl-2.8.4-1.3.20/pkg.eapi make # накладывает патчи Далее собираем Apache и устанавливаем: cd apache_1.3.20 EAPI_MM=../mm-1.2.1 ./configure —enable-rule=EAPI \ --activate-module=src/modules/accel/libaccel.a make make install Настройка Apache Затем настраиваем Apache для кэширования нашего сайта. Сосредоточимся на основных моментах конфигурационного файла сервера Apache: # Путь, где будут храниться закэшированнные файлы. Уровень иерархии каталогов — 1 AccelCacheRoot /home/dcache 1
# Включить кэширование AccelNoCache off
# Начальный URL и адрес оригинального сайта AccelPass / http://10.10.10.11:80/
# Отключить удаление файлов из кэша AccelUnlinkNoCached off
# Передавать в переменной X-Host переменную среды Host, пришедшей на акселератор. AccelSetXHost on
# Включить передачу IP-адреса посетителя через переменную X-Real-IP нашему сайту AccelSetXRealIP on
# Включить передачу оригинального URL нашему сайту через переменную X-URL AccelSetXURL on Перед запуском сервера Apache необходимо создать каталог для хранения страниц кэша и поменять владельца и группу, чтобы процесс apache мог записывать кэш в этот каталог: mkdir /home/dcache chown -R apache.apache /home/dcache Если процесс apache работает под другим именами пользователя и группы, то нужно соответственно поменять параметры команды chown. Включение запуска сервера Apache в процедуру начальной загрузки сервера состоит в создании файла /etc/init.d/apache со следующим содержимым: #!/bin/sh# chkconfig: 2345 55 25 case "$1" in start) echo -n "Starting: apache" /usr/local/apache/bin/apachectl start echo "." ;; stop) echo -n "Stopping service: apache" killall httpd echo "." ;; restart) $0 stop sleep 2 $0 start ;; *) echo "Usage: /etc/init.d/apache {start|stop|restart}" >&2 exit 1 ;; esac exit 0 Запускаем наш акселератор: /etc/init.d/apache start Интеграция динамической части сайта с акселератором Статические элементы сайта будут успешно кэшироваться и без специальных настроек. Для того чтобы динамические страницы нашего сайта могли быть закэшированы, необходимо ввести проверку даты последней модификации страниц в кэше с датами последней модификации страниц. Для этого я модифицировал наш сайт таким образом, что каждая страница имеет дату последней модификации, хранимой в базе данных. Когда на сайт передается запрос из акселератора на какую-то страницу, сайт сравнивает дату из заголовка if-modified-since с датой последнего обновления страницы, и в зависимости от результатов проверки скрипт на сайте возвращает или полную версию страницы с кодом HTTP, равным 200, или пустую страницу с кодом 304. Также обязательно нужно обратить внимание на страницы, которые никогда не должны быть кэшированы. Например, страницы авторизации, обновления учетных записей пользователей и так далее. К сожалению, такая плотная интеграция зависит от программного обеспечения на сайте, поэтому в качестве примера целесообразно привести упрощенный пример скрипта сайта, проинтегрированного с акселератором: Листинг 1. Пример программы сайта <?php$cache=1; # Проверяем, пришел ли к нам запрос из акселератора с заголовком If-modified-since. # Если такой заголовок существует, это означает, что акселератор имеет локальную копию # этой страницы if ($_SERVER['HTTP_IF_MODIFIED_SINCE']) { $txt = "cache"; $len = strlen($txt); # print 304 code header("Status: 304",false,304); header("Content-Type: text/html",false,304); # Печатаем длину контента, иначе акселератор решит что контент — динамический # и не закэширует страницу header("Content-Length: $len",false,304); # Печатаем дату последней модификации страницы header("Last-Modified: Tue, 16 Oct 2007 12:45:26 GMT",false,304); header("Pragma: cache", false,304); header("Cache-Control: cache",false,304); header("Content-Length: $len",false,304); # Дата, когда документ считается устаревшим, должна быть будущей, # иначе акселератор не сохранит страницу $dt=time(); $dt+=1; header("Expires: " . gmdate("D, d M Y H:i:s",$dt) . " GMT"); echo $txt; exit; } else { # В этой секции мы будем генерировать некэшируемый контент или контент, # который еще не закэширован в акселераторе $content = get_some_content(); # Вычисляем длину содержимого, иначе акселератор # решит, что это – динамический контент $len = strlen($content); header("Status: 200"); header("Content-Type: text/html"); header("Content-Length: $len"); # Печатаем дату последней модификации страницы header("Last-Modified: Tue, 16 Oct 2007 12:45:26 GMT"); # Также у нас есть глобальная переменная. При генерации страниц # для некэшируемых страниц нужно выставить эту переменную равной нулю if($cache>0) { # Указываем акселератору, что нужно кэшировать контент header("Pragma: cache"); header("Cache-Control: cache"); } else{ # Указываем акселератору что не нужно кэшировать контент header("Pragma: no-cache"); header("Cache-Control: no-cache"); } # Как и раньше, устанавливаем дату устаревания документа $dt=time(); $dt+=1; header("Expires: " . gmdate("D, d M Y H:i:s",$dt) . " GMT"); # Печатаем контент echo $content; exit;} ?> Схема работы приложения может быть построена следующим образом:
Заключение В этой статье я рассмотрел основные принципы построения акселератора для кэширования динамического контента. За рамками статьи остался способ, позволяющий дополнительно ускорить систему кэширования через хранение дат последней модификации страниц в одной из наиболее быстрых систем хранения данных – memcached.
|
Виталий БанковскийКомментарии отсутствуют
| Добавить комментарий |
|
Комментарии могут оставлять только зарегистрированные пользователи |
|
