Георепликация с помощью GlusterFS::Журнал СА 12.2014
www.samag.ru
Журнал «БИТ. Бизнес&Информационные технологии»      
Поиск   
              
 www.samag.ru    Web  0 товаров , сумма 0 руб.
E-mail
Пароль  
 Запомнить меня
Регистрация | Забыли пароль?
Журнал "Системный администратор"
Журнал «БИТ»
Подписка
Архив номеров
Где купить
Наука и технологии
Авторам
Рекламодателям
Контакты
   

  Опросы
1001 и 1 книга  
19.03.2018г.
Просмотров: 6828
Комментарии: 0
Машинное обучение с использованием библиотеки Н2О

 Читать далее...

12.03.2018г.
Просмотров: 7360
Комментарии: 0
Особенности киберпреступлений в России: инструменты нападения и защита информации

 Читать далее...

12.03.2018г.
Просмотров: 4609
Комментарии: 0
Глубокое обучение с точки зрения практика

 Читать далее...

12.03.2018г.
Просмотров: 3159
Комментарии: 0
Изучаем pandas

 Читать далее...

12.03.2018г.
Просмотров: 3964
Комментарии: 0
Программирование на языке Rust (Цветное издание)

 Читать далее...

19.12.2017г.
Просмотров: 3966
Комментарии: 0
Глубокое обучение

 Читать далее...

19.12.2017г.
Просмотров: 6469
Комментарии: 0
Анализ социальных медиа на Python

 Читать далее...

19.12.2017г.
Просмотров: 3311
Комментарии: 0
Основы блокчейна

 Читать далее...

19.12.2017г.
Просмотров: 3591
Комментарии: 0
Java 9. Полный обзор нововведений

 Читать далее...

16.02.2017г.
Просмотров: 7450
Комментарии: 0
Опоздавших не бывает, или книга о стеке

 Читать далее...

17.05.2016г.
Просмотров: 10814
Комментарии: 0
Теория вычислений для программистов

 Читать далее...

30.03.2015г.
Просмотров: 12525
Комментарии: 0
От математики к обобщенному программированию

 Читать далее...

18.02.2014г.
Просмотров: 14231
Комментарии: 0
Рецензия на книгу «Читаем Тьюринга»

 Читать далее...

13.02.2014г.
Просмотров: 9263
Комментарии: 0
Читайте, размышляйте, действуйте

 Читать далее...

12.02.2014г.
Просмотров: 7210
Комментарии: 0
Рисуем наши мысли

 Читать далее...

10.02.2014г.
Просмотров: 5518
Комментарии: 3
Страна в цифрах

 Читать далее...

18.12.2013г.
Просмотров: 4749
Комментарии: 0
Большие данные меняют нашу жизнь

 Читать далее...

18.12.2013г.
Просмотров: 3567
Комментарии: 0
Компьютерные технологии – корень зла для точки роста

 Читать далее...

04.12.2013г.
Просмотров: 3275
Комментарии: 0
Паутина в облаках

 Читать далее...

03.12.2013г.
Просмотров: 3507
Комментарии: 1
Рецензия на книгу «MongoDB в действии»

 Читать далее...

02.12.2013г.
Просмотров: 3160
Комментарии: 0
Не думай о минутах свысока

 Читать далее...

Друзья сайта  

 Георепликация с помощью GlusterFS

Архив номеров / 2014 / Выпуск №12 (145) / Георепликация с помощью GlusterFS

Рубрика: Администрирование /  Бэкап

Александр Руденко АЛЕКСАНДР РУДЕНКО, ЗАО «Молдавская ГРЭС», Администратор информационной безопасности, a.rudikk@gmail.com

Георепликация с помощью GlusterFS

Рассмотрим возможности георепликации, реализованные в распределенной файловой системе GlusterFS, с помощью которой можно строить систему катастрофоустойчивого резевного копирования

В предыдущем номере [1] была опубликована статья, посвященная техническим и практическим особенностям распределенной параллельной файловой системы GlusterFS. Разработкой данного продукта занимается Red Hat при активном участии сообщества разработчиков. С помощью этой ФС можно строить практически «бездонные» отказоустойчивые распределенные тома на базе недорогого оборудования. Подобное решение может быть использовано в качестве надежного файлового сервера или хранилища дисков виртуальных машин.

Сегодня рассмотрим еще одну дополнительную возможность GlusterFS – встроенный механизм асинхронной гео-репликации. Данная технология позволяет иметь одну или множество реплик тома на географически удаленных площадках. Единственное техническое требование – наличие между площадками IP-связи. В результате с помощью данного механизма можно строить надежные сети доставки и дистрибьюции контента (CDN) [2] или организовать систему катастрофоустойчивого резервного копирования, используя бюджетное оборудование.

Здесь важно понимать, что из-за интервалов между репликами в случае восстановления из такой резервной копии изменения, произведенные в момент перед аварией, скорее всего будут потеряны.

Архитектура

Архитектура механизма георепликации GlusterFS построена по классической модели. Есть некий главный том (master volume) и один или несколько ведомых (slave volume). Мастер-том может состоять из произвольного количества подтомов, размещенных на множестве серверов. Запись новых данных производится только на мастер-том. Там же (на каждом из узлов мастер-тома) ведется журнал изменений, производимых с данными (changelog xlator). По умолчанию каждую минуту измененные или новые данные отправляются на ведомые тома.

Здесь есть несколько очень важных особенностей:

  • Во-первых, репликация производится только в одну сторону, с главного тома на ведомый. Иными словами, данные, записанные на ведомый том, не будут перенесены на мастер-том.
  • Во-вторых, такие изменения, как удаление файлов или их переименование, не будут выполнены на ведомом узле. Удаленный файл останется нетронутым, а переименованный будет скопирован еще раз, но уже с новым именем, то есть аналога Dropbox вы не получите. Такая система необходима прежде всего для гарантированной сохранности данных.

Для синхронизации используется rsync через ssh. Кроме этого, в последних версиях добавлен новый метод синхронизации tar+ssh, который эффективен при большом количестве мелких файлов.

Схема репликации может быть простой (см. рис. 1), а может иметь древовидную структуру (см. рис. 2), в которой данные с одного мастер-сервера будут распространяться на десятки географически разнесенных серверов.

Рисунок 1. Простая схема репликации

Рисунок 1. Простая схема репликации

Рисунок 2. Древовидная схема репликации данных

Рисунок 2. Древовидная схема репликации данных

Примечание. Нужно учитывать, что репликация – это дополнительная нагрузка на каналы связи, и, возможно, стоит предоставить для этой задачи отдельный интерфейс/канал.

Установка и настройка

В предыдущей статье [1], посвященной GlusterFS, была продемонстрирована ее установка, даны описание возможных типов томов и примеры их конфигурирования. По этой причине описание этих моментов в текущей статье не приводится. Предполагается, что все необходимые репозитории подключены, пакеты установлены и система готова к работе и, возможно, даже эксплуатируется.

Во всех примерах я использовал CentOS 7 и GlusterFS 3.5.2. Эта версия, последняя на момент написания, доступна в официальном репозитории.

Примечание. Очень важно, чтобы на всех узлах, обслуживающих главный и ведомый тома, была настроена синхронизация времени [3], так как могут быть проблемы с актуальностью данных.

Статью целиком читайте в журнале «Системный администратор», №12 за 2014 г. на страницах 10-13.

PDF-версию данного номера можно приобрести в нашем магазине.


Комментарии отсутствуют

Добавить комментарий

Комментарии могут оставлять только зарегистрированные пользователи

               Copyright © Системный администратор

Яндекс.Метрика
Tel.: (499) 277-12-45
E-mail: sa@samag.ru