Общение на окологентушные темы - Вторник, 8 декабря 2015

Общение на окологентушные темы

gentoo@conference.gentoo.ru

Вторник, 8 декабря 2015< ^ >

Pinkbyte установил(а) тему: Gentoo Linux || FAQ: http://www.gentoo.ru/faq || Вставки более 3 строк → app-text/wgetpaste || Логи: http://gentoo.ru/jabber/logs/ || Языками чешут в talks@conference.gentoo.ru || Фортунки http://fortunes.gentoo.ru || Дерево portage Gentoo официально переехало на git!

Конфигурация комнаты

Участники комнаты

GMT+3
[00:04:40] Night Nord вышел(а) из комнаты
[00:40:01] trupanka вышел(а) из комнаты
[00:49:07] Civilian вышел(а) из комнаты
[00:52:52] CarelessChaser вышел(а) из комнаты
[00:58:00] nis вышел(а) из комнаты
[00:58:52] evadim вышел(а) из комнаты
[01:47:08] slepnoga вышел(а) из комнаты
[02:57:09] maxggxam вышел(а) из комнаты: Replaced by new connection
[02:57:19] maxggxam вошёл(а) в комнату
[03:01:45] Лёха вышел(а) из комнаты: Replaced by new connection
[03:01:55] Лёха вошёл(а) в комнату
[03:04:50] mva вышел(а) из комнаты
[03:06:58] GoodWin вошёл(а) в комнату
[03:44:26] maxggxam вышел(а) из комнаты
[03:45:16] maxggxam вошёл(а) в комнату
[04:08:51] Sun][ вышел(а) из комнаты
[04:39:14] meow вышел(а) из комнаты
[06:20:20] edgbla вышел(а) из комнаты
[06:36:17] eegorov вошёл(а) в комнату
[06:42:50] Ёж вышел(а) из комнаты
[06:57:35] intellect вошёл(а) в комнату
[07:09:31] hitecnologys вышел(а) из комнаты: Replaced by new connection
[07:09:41] hitecnologys вошёл(а) в комнату
[07:09:41] hitecnologys вышел(а) из комнаты
[07:15:59] mva вошёл(а) в комнату
[09:33:48] eegorov вышел(а) из комнаты
[09:34:17] slepnoga вошёл(а) в комнату
[09:35:58] eegorov вошёл(а) в комнату
[09:46:21] slepnoga вышел(а) из комнаты
[09:53:08] Sun][ вошёл(а) в комнату
[09:54:03] Sun][ вышел(а) из комнаты
[10:00:49] trupanka вошёл(а) в комнату
[10:02:33] bober2000 вошёл(а) в комнату
[10:23:20] Pinkbyte вошёл(а) в комнату
[10:34:43] slepnoga вошёл(а) в комнату
[11:03:17] bober2000 вышел(а) из комнаты: Replaced by new connection
[11:03:27] bober2000 вошёл(а) в комнату
[11:04:47] Civilian вошёл(а) в комнату
[11:08:36] WiseLord вышел(а) из комнаты
[11:09:51] evadim вошёл(а) в комнату
[11:59:21] meow вошёл(а) в комнату
[12:10:07] WiseLord вошёл(а) в комнату
[12:14:58] <Magistr> Civilian: утра! опять мега вопрос по графиту
[12:15:33] <Civilian> Magistr: м?
[12:15:44] <Magistr> если я делаю 5 серверов с карбон-демонами которые пишут, как отдать эти данные в графану ?
[12:16:03] <Civilian> Magistr: оххххх
[12:16:06] <Magistr> или надо будет 5 источников данных прописывать по каждому серверу/графит апи
[12:16:14] <Civilian> есть два способа
[12:23:16] <Magistr> Civilian: мм какие?
[12:26:14] <Civilian> Magistr: официальный графитный
[12:26:22] <Civilian> это ставим на каждую ноду с виспером graphite-web
[12:26:41] <Civilian> и отдельную ноду с graphite-web у которого все графит-вебы указаны как CLUSTER_NODE
[12:27:18] <Civilian> Magistr: напомни, ты что под сторадж используешь?
[12:27:27] <Magistr> ceres
[12:27:27] <Civilian> в смысле whisper,ceres,cassandra?
[12:27:36] <Magistr> касандра печальна
[12:27:38] <Civilian> ок, тогда второй вариант к сожалению написать что-то свое будет
[12:27:49] <Civilian> но оба плохие
[12:28:18] <Magistr> а с каким хранилищем, графит нормально шардиться ?
[12:28:41] <Civilian> Magistr: cassandra :)_
[12:28:50] <Civilian> на самом деле там везде свои проблемы
[12:29:00] <Civilian> с whisper'ом есть букинговый подход к шардингу
[12:29:04] <Civilian> но это мега лисапед
[12:29:12] <Civilian> с шипастыми костылями вместо колес
[12:29:15] <Civilian> но работает
[12:29:27] <Magistr> касандра + что ? цианит тупо жрал проц, кайросдб мы его неможно поломали тоже
[12:29:34] <Civilian> на хранилищах ставится carbonserver - программа на го которая по протобуфу умеет отдавать данные
[12:29:52] <Civilian> на фронтэндах ставится carbonzipper - который умеет по протобуфу читать данные со множества carbonserver'ов
[12:30:32] <Civilian> ставится carbonapi - это такая штука написанная на Го, которая может ходить по протобуфу в carbonzipper и реализует кусок API graphite-web'а и может отдавать сырые данные в виде json
[12:30:46] <Civilian> и ставится graphite-web который смотрит как в кластер в carbonapi (один)
[12:30:51] <Civilian> вот такой вот костыль
[12:31:00] <Civilian> минус в том что все шардирование и прочее - руками
[12:31:12] <Civilian> любые изменения этой схемы - боль и унижение
[12:31:30] <Civilian> плюс в том что оно почти линейно масштабируется до пары сотен серверов с данными
[12:32:22] <Magistr> эхх
[12:32:38] <Civilian> Magistr: да, там все боль
[12:32:40] <Civilian> увы
[12:32:51] <Magistr> а альтернативы есть ? типа прометеус
[12:33:05] <Civilian> Magistr: у них у всех свои проблемы
[12:33:41] <Magistr> эххх
[12:34:15] <Magistr> а к касандре какой драйвер порекомендуешь ?
[12:34:35] <Civilian> Magistr: ваще цианит должен работать
[12:34:46] <Civilian> автор вроде у него отзывчивый и если есть проблемы можно найти автора и пнуть
[12:34:50] <Magistr> хмм
[12:35:04] <Civilian> Magistr: у меня при виде всего этого возникает желание запилить все правильно ) пока борюсь
[12:36:46] <Magistr> :wallbash: хоть забивай на это и шли метрики в клаудватч
[12:37:22] <evadim> Civilian: я тут как бы сбоку читаю: то плохо, это плохо, это не то, это не так, а так не работает. А потом ты такой - есть желание "запилить правильно" O_o
[12:37:38] <Civilian> evadim: и?
[12:37:58] <evadim> или ты в смысле - написать своё что-то?
[12:38:36] <evadim> ну, из твоих слов я понял что "правильно" нету, у всего есть какие-то бока.
[12:38:47] <Civilian> evadim: написать свое
[12:38:55] <Civilian> чуть более правильное чем то что есть
[12:39:09] <evadim> =)
[12:43:23] <Pinkbyte> Господа модераторы, перетяните человека по голове банхаммером. Нежно. http://www.gentoo.ru/node/28849
[12:43:38] <Pinkbyte> а, извините, не заметил что тема уехала в аффтара
[13:04:08] meow вышел(а) из комнаты
[13:33:02] <Magistr> Civilian: в котором смысле шардирование руками ?
[13:37:15] <Civilian> Magistr: т.е. ты сам должен думать как у тебя улетят данные
[13:37:29] <Civilian> Magistr: точнее в букинге используется carbon-c-relay и fnv хэш
[13:37:34] <Civilian> на это все завязано
[13:37:41] <Civilian> и replication factor для репликации
[13:37:45] <Magistr> ну вот это да тоже будем юзать
[13:38:05] <Magistr> а изменение схемы в смысле другой софт ?
[13:39:14] <Civilian> Magistr: не, скорее апгрейды железок - некоторая проблема
[13:39:25] <Civilian> перетаскивание данных между железками тоже
[13:39:33] <Civilian> они все будут примерно одинаково забиты
[13:39:50] <Magistr> ага понятно
[13:39:51] <Civilian> т.е. нужно новые железки поставить - значит часть данных прийдется смигрировать (вероятно)
[13:40:02] <Magistr> у нас амазон )
[13:40:06] <Civilian> Magistr: т.е. ты поставил 10 серверов, потом решил еще 10 серверов воткнуть
[13:40:10] <Civilian> вот тут начнутся проблемы
[13:40:18] <Civilian> т.к. нужно будет часть данных с первых 10 утащить на новые 10
[13:40:33] <Magistr> а хм а как ?
[13:40:36] <Civilian> Magistr: на амазоне это все пипец скока дорого будет
[13:40:48] <Civilian> Magistr: вычислять кто по новому конфигу должен уехать
[13:41:26] <Magistr> понятно, это да адок
[14:10:30] CarelessChaser вошёл(а) в комнату
[15:03:23] WiseLord вышел(а) из комнаты
[15:06:28] 0xd34df00d вошёл(а) в комнату
[15:07:20] WiseLord вошёл(а) в комнату
[15:18:35] intellect вышел(а) из комнаты
[15:36:33] 0xd34df00d вышел(а) из комнаты
[16:04:55] Pinkbyte вышел(а) из комнаты
[16:57:40] 0xd34df00d вошёл(а) в комнату
[17:05:20] edgbla вошёл(а) в комнату
[17:08:26] 0xd34df00d вошёл(а) в комнату
[17:34:28] 0xd34df00d вышел(а) из комнаты: Disconnected: Replaced by new connection
[17:34:38] 0xd34df00d вошёл(а) в комнату
[17:42:07] medvedko вошёл(а) в комнату
[17:48:58] hitecnologys вошёл(а) в комнату
[17:54:14] medvedko вышел(а) из комнаты
[17:57:34] nis вошёл(а) в комнату
[18:20:42] medvedko вошёл(а) в комнату
[18:28:17] medvedko вышел(а) из комнаты
[19:04:54] Civilian вышел(а) из комнаты
[19:07:01] evadim вышел(а) из комнаты: Replaced by new connection
[19:07:11] evadim вошёл(а) в комнату
[19:34:26] 0xd34df00d вышел(а) из комнаты
[19:34:26] 0xd34df00d вышел(а) из комнаты
[20:51:49] Night Nord вошёл(а) в комнату
[21:01:28] Лёха вышел(а) из комнаты
[21:02:03] Лёха вошёл(а) в комнату
[21:46:02] Civilian вошёл(а) в комнату
[22:03:16] Лёха вышел(а) из комнаты
[22:03:31] Лёха вошёл(а) в комнату
[23:32:28] beelzebubbie вышел(а) из комнаты
[23:36:05] meow вошёл(а) в комнату
[23:43:44] CarelessChaser вышел(а) из комнаты
[23:53:10] Лёха вышел(а) из комнаты
[23:53:25] Лёха вошёл(а) в комнату
[23:57:20] Лёха вышел(а) из комнаты
[23:57:31] Лёха вошёл(а) в комнату