The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]



Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы [ Отслеживать ]

Оглавление

Ошибка при настройке BGP привела к 27-минутному сбою в работе Cloudflare, opennews (??), 18-Июл-20, (0) [смотреть все]

Сообщения [Сортировка по времени | RSS]


10. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от Аноним (10), 18-Июл-20, 11:14 
Отлично сработали. Оперативно починили. Молодцы ребята.
Ответить | Правка | Наверх | Cообщить модератору

17. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  –4 +/
Сообщение от Андрей (??), 18-Июл-20, 11:55 
Поддерживаю и не поддерживаю.

1. Накосячили - факт. Таков бизнес - экономим на всём: чтоб инженеры были в перегруз по работе, ни секунды чтоб не было свободной! Чья вина?

2. 27 минут для устранения - это для сложной сети не много.
Вопрос в деталях: 27 минут разобрался и устранил сам инженер или звал на помощь кого-то?
Если "звал", то это вопрос кадров и опять к построению бизнеса.
Если "не звал", то 27 минут - долго.

3. Исходно было не продумано, то, что теперь будут внедрять для "неповторения" - это косяк, детские болячки. Вина архитектора? или тоже не было свободной минуты подумать?


Итог: Проблема в современной логике: бежим - не думаем - авось + экономим на всём ? Пробуем приложить к себе для начала ...

Ответить | Правка | Наверх | Cообщить модератору

22. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +1 +/
Сообщение от пох. (?), 18-Июл-20, 12:01 
> Вопрос в деталях: 27 минут разобрался и устранил сам инженер или звал на помощь кого-то?

помощь в виде ведра на голову обычно приходит от коллег из другой точки, обнаруживших в мониторинге, что возник перекос траффика и посмотревших, почему он туда уехал - им-то это сразу видно.

Им и оттраблшутить легче, чем виновнику торжества, у которого возможно вообще консоль отвалилась - во-первых, потому что oob-маршрута в его бангалорский пригород не предусмотрено дизайном сети, во-вторых потому что процессор тоже подох и даже при прямом управлении консоль почти неживая.

Ответить | Правка | Наверх | Cообщить модератору

30. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от Наноним (?), 18-Июл-20, 12:47 
С чего вдруг процессор подох?
Ответить | Правка | Наверх | Cообщить модератору

115. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +2 +/
Сообщение от Гость (??), 19-Июл-20, 17:01 
Сразу понятно ты цисок никогда не видел.
От перегрева.
Ответить | Правка | Наверх | Cообщить модератору

129. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от Онаним (?), 20-Июл-20, 12:57 
Ахах, да, отлетающие радиаторы на платах 76xx - та ещё трагикомедия.
Ответить | Правка | Наверх | Cообщить модератору

130. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +1 +/
Сообщение от Michael Shigorinemail (ok), 20-Июл-20, 15:16 
Видел разве что сбоку, но судя по "почти" -- имелась в виду логическая перегрузка, а не термическая (пусть они и связаны, порой даже двусторонне).
Ответить | Правка | К родителю #115 | Наверх | Cообщить модератору

134. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от Наноним (?), 20-Июл-20, 17:43 
Сразу понятно ты джунов никогда не видел.
Не будет там "перегрева", как и собстенно особой нагрузки на РЕ.
Ответить | Правка | К родителю #115 | Наверх | Cообщить модератору

32. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от Онаним (?), 18-Июл-20, 12:49 
> было не продумано, то, что теперь будут внедрять для "неповторения"

Да ничего. Ну реально. Затраты на "неповторение" в данном случае легко превышают потери от повторения.

Ответить | Правка | К родителю #17 | Наверх | Cообщить модератору

46. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +2 +/
Сообщение от пох. (?), 18-Июл-20, 15:37 
Да бросьте, одна хорошая порка так дорого не должна стоить.

Тем более в странах, где подобные способы воздействия в порядке вещей.

Ответить | Правка | Наверх | Cообщить модератору

78. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +3 +/
Сообщение от Онаним (?), 18-Июл-20, 20:54 
Не поможет. И даже полная автоматизация не поможет, человеческий фактор всё равно будет рулить.
Более того - чем больше автоматизация, тем страшнее будут последствия.
Ответить | Правка | Наверх | Cообщить модератору

89. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  –2 +/
Сообщение от пох. (?), 18-Июл-20, 21:48 
> Не поможет. И даже полная автоматизация не поможет

конечно нет - чего робота-то пороть, только кнут портить!

Если вот наоборот, ты еще и commit набрать не успел, а робот-экзекьютор уже летит к тебе, замахиваясь кнутом - но это пока сложновато.

> человеческий фактор всё равно будет рулить.

человеческий фактор можно и должно устранять с помощью человеческих же решений. Есть сети, вполне себе соблюдающие жуткие sla с кучей девяток. Просто это не про "бесплатную" клаудфлерь.

Ответить | Правка | Наверх | Cообщить модератору

104. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +1 +/
Сообщение от Онаним (?), 19-Июл-20, 08:12 
> человеческий фактор можно и должно устранять с помощью человеческих же решений

Там проблема в том, что если само это решение пойдёт вразнос (а ошибки в таковых не новость), оно положит уже не один маршрут, и не один узел (по конфигурации), а много и сразу - всё, до чего успеет дотянуться. И чем выше вовлечённость решения, тем выше цена ошибки. Одна из причин, по которой в 99% EULA ещё со времён царя Гороха явно прописан отказ об ответственности за последствия ошибок в коде. Так что местами проще (и дешевле) мириться с разовыми человеческими ошибками, чем иметь систему, которая потенциально может одним махом сложить всё.

Ответить | Правка | Наверх | Cообщить модератору

40. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от Аноним (40), 18-Июл-20, 14:14 
А простите, господин Андрей, вы случаем не из яндекса, где сайт яндексру начал ложится на полчаса и более после развала команд в 2012-2015гг? Каково вам теперь, когда есть золотая акция? Вы-то никогда не спешите, все делаете четко и правильно, угу-угу.

И то, что человек, который все делал по факту человек и у него в это тяжелое время могла быть сложная жизненная ситуация вас не колышит. Угу-угу. Ну, что ж, желаю вам и вашим близким здоровья, а то не дай бог вы, оказавшись в плохой ситуации "уроните" всю страну. Хотя нет, не уроните, искперты опеннета обычно могут уронить только мороженное и мама вас точно так же как и вы отругает, яблоко от яблони...

Ответить | Правка | К родителю #17 | Наверх | Cообщить модератору

47. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +2 +/
Сообщение от пох. (?), 18-Июл-20, 15:43 
> человек и у него в это тяжелое время могла быть сложная жизненная ситуация

в следующий раз человек в тяжелое время в сложной жизненной ситуации просто поведет ваш автобус - и угробит не какой-то там "траффик", а вас и еще сорок обгадившихся от страха пассажиров. Основная тяжесть его жизненной ситуации при этом будет в том, что права он купил.

Это вопрос менеджмента. Почему этот человек работал с критичной частью инфраструктуры один, почему изменения вносились на живую, без контроля и так далее.

Ответить | Правка | Наверх | Cообщить модератору

98. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  –1 +/
Сообщение от Аноним (40), 19-Июл-20, 00:49 
>просто поведет ваш автобус
>права он купил

Ты делаешь из мухи слона раз. А во-вторых, ну иди в CloudFlare и покажи какой ты неепаца крутой сетевик. В-третьих, доставай свои CCNA, CCNP, CCIE и покажи всем, что ты разбираешь кто покупает права.

>Это вопрос менеджмента.

Ты упоротый перфекционист. Человеческий фактор неизбежен. Хоть ты 100500 раз все продумай, что-нибудь да упустишь. В тебе уже заложен изъян. Как и в любом другом человеке.

Вот вопрос. Ты себе замену нашел, когда у тебя будет тяжкая жизненная ситуация? Кресло готов подвинуть на месяц-другой? Нет? А че ж ты? Ты-то естественно считаешь, что только ты -- единственный и незаменимый!

Ответить | Правка | Наверх | Cообщить модератору

106. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от n00by (ok), 19-Июл-20, 10:56 
Не всё так плохо, встречаются и весёлые*) серванты https://vk.com/video-33847957_456239489

*) если с такого серванта не обновляешь ОС.

Ответить | Правка | К родителю #47 | Наверх | Cообщить модератору

112. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  –1 +/
Сообщение от An0n (?), 19-Июл-20, 15:29 
> Почему этот человек работал с критичной частью инфраструктуры один, почему изменения вносились на живую, без контроля и так далее.

Дешевле же. Меньше платить работнику - больше прибыли. Капитализм.

Ответить | Правка | К родителю #47 | Наверх | Cообщить модератору

113. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  –1 +/
Сообщение от Michael Shigorinemail (ok), 19-Июл-20, 15:40 
> Дешевле же. Меньше платить работнику - больше прибыли. Капитализм.

За что "люблю" младокоммунистов, так это за полное неумение мыслить.

Когда тырили платиновые каталитические сетки с производства на дверцы для домашних крольчатников ("не ржавеет") или молибденовый пруток для укрепления ворот гаража ("крепкий, зараза") -- это что было на дворе, не подскажете?

Ответить | Правка | Наверх | Cообщить модератору

116. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от Гость (??), 19-Июл-20, 17:06 
Государственный социализм.

А теперь не стесняйся, продемонстрируй своё умение мыслить.

Ответить | Правка | Наверх | Cообщить модератору

118. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +3 +/
Сообщение от n00by (ok), 19-Июл-20, 17:18 
Что бы продемонстрировать умение мыслить, надо было указать правильный ответ: "рас...во", к политическому строю ортогональный.
Ответить | Правка | Наверх | Cообщить модератору

131. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  –1 +/
Сообщение от Michael Shigorinemail (ok), 20-Июл-20, 15:18 
"Садись, два".

Бесхозяйственность это была.  Вне зависимости от того, что на заборе написано.

Ответить | Правка | К родителю #116 | Наверх | Cообщить модератору

137. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от www2 (??), 21-Июл-20, 09:02 
Это при любом строе называется кражей.

А такие люди, как ты, при любом строе будут называться манипуляторами, потому что занимаются подменой понятий.

Ответить | Правка | К родителю #113 | Наверх | Cообщить модератору

117. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +1 +/
Сообщение от n00by (ok), 19-Июл-20, 17:15 
>> Почему этот человек работал с критичной частью инфраструктуры один, почему изменения вносились на живую, без контроля и так далее.
> Дешевле же. Меньше платить работнику - больше прибыли. Капитализм.

Платить работнику 0 - вырожденная форма капитализма. Коммунизм.

Ответить | Правка | К родителю #112 | Наверх | Cообщить модератору

138. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от www2 (??), 21-Июл-20, 09:17 
Если работник не может уйти от такого капиталиста к другому капиталисту работать за большую зарплату, то это тогда не коммунизм, а рабовладение.

Если может уйти, но не хочет, то скорее всего он удовлетворяет все свои материальные потребности каким-то другим способом, а на этой бесплатной работе удовлетворяет свои нематериальные потребности: любопытство, уважении, потребность в труде и т.д. Тогда может быть это коммунизм, а может быть он просто очень богат и может себе позволить иногда работать не за деньги или не работать вовсе.

Ответить | Правка | Наверх | Cообщить модератору

139. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от n00by (ok), 21-Июл-20, 10:01 
> Если работник не может уйти от такого капиталиста к другому капиталисту работать
> за большую зарплату, то это тогда не коммунизм, а рабовладение.

При коммунизме "зарплата" повсеместно равно 0.


Ответить | Правка | Наверх | Cообщить модератору

108. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от rshadow (ok), 19-Июл-20, 14:00 
> Проблема в современной логике

Вы видать инженер, и не понимаете что cf вылез из 100500 таких же компаний. Вылез потому что влили дофига бабла и он побежал.
Здесь, как и во всем остальном, вопрос баланса. И бежать надо как можно быстрее, и думать надо сильнее. В одни ворота это не работает. И по факту остаются наибелее "правильные". С кучей внутренних проблем, но все же...

По сабжу. Вроде бы стандартная ситуация (вывод части сети), могли бы и инструкцию написать/админку/скрипт (ansimble?) сделать. Нахрена вручную вот это вот все огребать.

Ответить | Правка | К родителю #17 | Наверх | Cообщить модератору

135. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +/
Сообщение от SoulMasteremail (??), 20-Июл-20, 18:00 
А время на траблшутинг ?
пока поймешь в чем проблема может и 10 минут пройти и 30
Ответить | Правка | К родителю #17 | Наверх | Cообщить модератору

144. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +1 +/
Сообщение от Аноним (144), 22-Июл-20, 13:31 
Дождь идет, а мы скирдуем.
Тфьу ты. То есть, сеть лежит, а мы траблшутим.

Хотя у ынжынера могла консоль отвалиться, и вернуть все взад было невозможно.

Ответить | Правка | Наверх | Cообщить модератору

43. "Ошибка при настройке BGP привела к 27-минутному сбою в работ..."  +1 +/
Сообщение от Аноним (43), 18-Июл-20, 14:50 
Отлично – это когда сеть лежит не более минуты за весь год.
Ответить | Правка | К родителю #10 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру