Почему не Filebeat? Вроде 2017 год, logstash прекрасно прячется за haproxy на одельных серверах с возможностью отдельного скейлинга, filebeat перебрасывает стрим логов через ha. С наличием persisted queues logstash ещё даёт отдельный буффер для пиковой нагрузки (можно и file->filebeat->kafka->logstash->elasticsearch если совсем терять ничего нельзя) Еще странно, что кластер эластики один. Почему не tribe nodes (deprecated) или cross cluster search (remote nodes) и плюс набор маштабируемых кластеров, которые легче и быстрее скейлить и мэйнтэйнить. Спасибо за презентацию, кстати. :)
Я не понял про: "Странного захотелось, разработчики хотят писать лог в JSON?" Это что, шутка такая? Когда journald отдает тебе JSON - это оргазм. Всем рекомендую!
пунты Real-time, а особенно "Фильтрация данных on-the-fly".... народ, вы рехнулись совсем...вы прогрызли всем мозг за оптимальный код, хотя сами оптимально говорить не научились... + это просто бред. даже не бесит - соболезную, очень скорблю
Шикарный рассказчик! Спасибо за доклад!
Почему не Filebeat? Вроде 2017 год, logstash прекрасно прячется за haproxy на одельных серверах с возможностью отдельного скейлинга, filebeat перебрасывает стрим логов через ha. С наличием persisted queues logstash ещё даёт отдельный буффер для пиковой нагрузки (можно и file->filebeat->kafka->logstash->elasticsearch если совсем терять ничего нельзя)
Еще странно, что кластер эластики один. Почему не tribe nodes (deprecated) или cross cluster search (remote nodes) и плюс набор маштабируемых кластеров, которые легче и быстрее скейлить и мэйнтэйнить.
Спасибо за презентацию, кстати. :)
Доклад отличный! Спасибо!
Только начал погружение в тему HiLoad. И доклад понравился, и вопросы заполнили пробелы в понимании. Очень познавательно.
Я не понял про: "Странного захотелось, разработчики хотят писать лог в JSON?" Это что, шутка такая? Когда journald отдает тебе JSON - это оргазм. Всем рекомендую!
+
Эммм. Наоборот кибана - говнище.
Там университет надо оканчивать чтоб понять куда кликнуть
8:00 Почему парень в зале сидит с парашютом и мороженым?
пунты Real-time, а особенно "Фильтрация данных on-the-fly".... народ, вы рехнулись совсем...вы прогрызли всем мозг за оптимальный код, хотя сами оптимально говорить не научились... + это просто бред. даже не бесит - соболезную, очень скорблю