Выпуск распределенной системы хранения конфигурации etcd 2.0

30.01.2015 21:58

Проект CoreOS, развивающий основанное на идеях контейнерной изоляции серверное окружение, представил первый стабильный релиз проекта etcd, в рамках которого развивается высоконадёжное распределённое хранилище параметров конфигурации, задаваемых в форме ключ/значение. Код etcd написан на языке Go и распространяется под лицензией Apache.

Etcd позволяет организовать единое хранилище конфигурации для группы серверов, которое реплицируются на все узлы и поддерживается в синхронизированном состоянии с использованием протокола Raft. Наличие копии данных на всех хостах позволяет исключить потерю конфигурации при выходе из строя отдельного узла. Основным назначением etcd является предоставление унифицированного механизма хранения конфигурации и информации о работающих сервисах для изолированных контейнеров с типовой начинкой. В etcd также могут сохраняться временные данные, для которых предусмотрена возможность определения времени жизни записи. Отдельно развивается надстройка etcd-lock для обеспечения блокировки записей.

Для доступа к конфигурации предоставляется простой интерфейс, основанный на использовании HTTP и JSON. Для доступа к базе можно использовать утилиту etcdctl или любой http-клиент, такой как сurl или wget (например, для запроса ключа можно использовать команду "curl -L http://127.0.0.1:4001/v2/keys/mykey"). Для наглядного управления базой данных и внесения изменений в ручном режиме предусмотрен web-интерфейс etcd-browser. Аутентификация выполняется на основе SSL-ключей. При помощи FUSE-модуля etcd-fs возможен доступ к хранилищу в виде файловой системы.

Основные новшества выпуска etcd 2.0:

Внутренний протокол улучшен в направлении защиты от случайной неправильной настройки;
Добавлена команда "etcdctl backup", предназначенная для создания резервной копии хранилища;
Добавлены команды "etcdctl member list/add/remove" для упрощения управления кластером etcd;
Повышена надёжность хранения данных на диске. Добавлен контроль целостности по контрольным суммам и хранение в форме дополняемого лога.
Улучшен алгоритм достижения консенсуса при определении актуального состояния данных после выхода из строя отдельных узлов хранилища;
Ускорено проведение тестирования состояния узлов;
Задействованы официально закреплённые организацией IANA за etcd номера портов TCP 2379/2380.

исправить +7 +/–

Лицензия: CC BY 3.0

Короткая ссылка: https://opennet.ru/41575-etcd

Ключевые слова: etcd

При перепечатке указание ссылки на opennet.ru обязательно

Обсуждение (28)

1.1, Аноним (-), 23:10, 30/01/2015 [ответить] [﹢﹢﹢] [ · · · ] [↓] [к модератору]	–7 +/–
Круто! Интересно, а виндовый реестр умеет такое (распределенность)?

2.18, tensor (?), 19:28, 31/01/2015 [^] [^^] [^^^] [ответить] [к модератору]	+1 +/–
Active Directory? И то, с натяжкой.

3.19, nnoname (?), 20:00, 31/01/2015 [^] [^^] [^^^] [ответить] [к модератору]	–7 +/–
умеет с превосходством, имхо конечно.

3.22, Аноним (-), 22:39, 31/01/2015 [^] [^^] [^^^] [ответить] [к модератору]	+4 +/–
Ад - аналог не etcd, а x500 (openldap, 389ds, opends, apacheds и т.д.). Это разные области и один другим не заменишь.

1.3, Crazy Alex (ok), 23:43, 30/01/2015 [ответить] [﹢﹢﹢] [ · · · ] [↓] [↑] [к модератору]	+1 +/–
Что-то я из новости не понял, какие у этой штуки отличительные особенности и почему для этой цели использовать какую-нибудь готовую распределённую key-value хранилку. Уж этого добра наплодили массу.

2.13, cmp (ok), 12:30, 31/01/2015 [^] [^^] [^^^] [ответить] [↓] [к модератору]	+/–
Потому что адепты go, ждем когда запилят его поддержку в ядре))

3.14, Аноним (-), 13:42, 31/01/2015 [^] [^^] [^^^] [ответить] [к модератору]	+/–
...на Go ;)

2.23, Аноним (-), 22:45, 31/01/2015 [^] [^^] [^^^] [ответить] [↓] [↑] [к модератору]	+/–
> Что-то я из новости не понял, какие у этой штуки отличительные особенности > и почему для этой цели использовать какую-нибудь готовую распределённую key-value хранилку. > Уж этого добра наплодили массу. Если кратко, то etcd и ему подобные легковеснее и удобнее для эксплуатации, но при этом не подходят для хранения огромных объемов инфы. Т.е. самое то для хранения настроек (единицы -десятки мегабайт) в больших часто меняющихся гридах (сотни и тысячи узлов).

3.25, Crazy Alex (ok), 00:13, 01/02/2015 [^] [^^] [^^^] [ответить] [к модератору]	–2 +/–
Когда у тебя сотни и тысячи узлов - какая, на фиг,легковесность? Берём что-нибудь вроде Project Voldemort - да и всё.

3.33, Аноним (-), 12:57, 09/06/2016 [^] [^^] [^^^] [ответить] [к модератору]	+/–
А давно известный Network Information Services (NIS) для этого плохо подходит? http://www.freebsd.org/doc/ru_RU.KOI8-R/books/handbook/network-nis.html

2.29, анон (?), 22:59, 01/02/2015 [^] [^^] [^^^] [ответить] [↑] [к модератору]	+/–
А перечислите весь список, пжалуста? Их не так много на самом деле. Точнее даже напротив, примерно 0.7: etcd не может в acl, consul писали какие-то упорыши, да kv там дополнительный, а не основной функционал. Кто ещё? Зукипер скорее мертв.

1.5, Аноним (-), 00:15, 31/01/2015 [ответить] [﹢﹢﹢] [ · · · ] [↓] [↑] [к модератору]	+2 +/–
Что у нас по плану идёт после контрейнеризации?

2.12, Andrey Mitrofanov (?), 10:49, 31/01/2015 [^] [^^] [^^^] [ответить] [к модератору]	+4 +/–
> Что у нас по плану идёт после контрейнеризации? Монетизация следующего баз-ворда, Пинки.

1.6, Аноним (-), 00:21, 31/01/2015 [ответить] [﹢﹢﹢] [ · · · ] [↓] [↑] [к модератору]	–8 +/–
Мммда... Писать данную штуку минут 20 ... Даже на новость не тянет.

2.7, Нанобот (ok), 00:39, 31/01/2015 [^] [^^] [^^^] [ответить] [↓] [к модератору]	+4 +/–
там полтора мегабайта кода. чтобы написать такое за 20 минут, нужно нажимать кнопики со скоростью ~1300 символов в секунду.

3.16, Аноним (-), 17:12, 31/01/2015 [^] [^^] [^^^] [ответить] [к модератору]

–1 +/–

> чтобы написать такое за 20 минут, нужно нажимать кнопики со скоростью ~1300 символов в секунду.

Откойте для себя мир копипаста, сэр.

Искренне ваш, Кэп

2.31, Led (ok), 21:21, 03/06/2016 [^] [^^] [^^^] [ответить] [↑] [к модератору]	+/–
> Писать данную штуку минут 20 За 20 минут можно не только пописать, но и покакать. А ну освобождай горшок - там полгуппы в очереди!

1.9, ano (??), 08:31, 31/01/2015 [ответить] [﹢﹢﹢] [ · · · ] [↓] [↑] [к модератору]	–1 +/–
Да ну, просто хранилка же. Я поначалу возбудился, думал, можно /etc примонтировать и сделать распределёнку конфигурации.

2.10, Аноним (-), 09:13, 31/01/2015 [^] [^^] [^^^] [ответить] [↓] [к модератору]	+3 +/–
Тебе мало AD яйца надавил?

3.26, gaga (ok), 11:25, 01/02/2015 [^] [^^] [^^^] [ответить] [к модератору]	–1 +/–
а что не так с ад? по-моему, очень удобная штука, особенно по сравнению с openLdap.

4.32, Led (ok), 21:23, 03/06/2016 [^] [^^] [^^^] [ответить] [к модератору]	+/–
Твое вендовозное "мнение" никого не интересует.

2.27, epicfile (?), 15:20, 01/02/2015 [^] [^^] [^^^] [ответить] [↑] [к модератору]	+/–
Вообще-то можно, см. https://github.com/xetorthio/etcd-fs Но вряд ли это решение можно назвать production ready

1.11, Аноним (-), 09:28, 31/01/2015 [ответить] [﹢﹢﹢] [ · · · ] [↑] [к модератору]

+/–

> Поддерживается в синхронизированном состоянии с использованием протокола Raft.
> NOTE: This project is unmaintained. If you are using goraft in a project and want to carry the project forward please file an issue with your ideas and intentions. The original project authors have created new raft implementations now used in etcd and InfluxDB.

...при этом ссылка "new raft implementations" выдаёт 404.

Глобально, надёжно.

1.17, Аноним (-), 19:26, 31/01/2015 [ответить] [﹢﹢﹢] [ · · · ] [↓] [к модератору]	–1 +/–
д3билам выше поясняю: etcd - аналог ZooKeeper

2.21, Аноним 2.0 (?), 22:21, 31/01/2015 [^] [^^] [^^^] [ответить] [к модератору]	+/–
Отдельно развивается надстройка etcd-lock для обеспечения блокировки записей.

3.24, Crazy Alex (ok), 00:11, 01/02/2015 [^] [^^] [^^^] [ответить] [к модератору]	–1 +/–
Чудесно, оно ещё и аналог вполне живого и матёрого проекта.

1.20, Аноним 2.0 (?), 22:20, 31/01/2015 [ответить] [﹢﹢﹢] [ · · · ] [↑] [к модератору]	+/–
Отдельно развивается надстройка etcd-lock для обеспечения блокировки записей.

2.28, Аноним (-), 22:39, 01/02/2015 [^] [^^] [^^^] [ответить] [к модератору]	+/–
> Отдельно развивается надстройка etcd-lock для обеспечения блокировки записей. Осталось поженить это с системды. :)))))))

игнорирование участников | лог модерирования

Добавить комментарий

Имя:

E-Mail:

Текст: