SP
дальше одно и то же
это ж по вкусу.
Size: a a a
2018 April 24
DN
это ж по вкусу.
да там и без вкуса - реально одно и тоже
2018 June 15
AS
нашел такую вот пипятку. https://www.altinity.com/blog/2017/12/18/logstash-with-clickhouse
AS
как думаете есть смысл морочится ? может можно проще ?
SP
зависит от твоих запросов
SP
в rsyslog есть RainerScript-функция http_request (https://www.rsyslog.com/doc/master/rainerscript/functions/mo-http_request.html)
AS
я хочу аналитику по таймингам.
SP
то есть это небольшие объёмы?
AS
исходные данные такие вот
2018-06-14 14:39:05,692 [script] [Huawei.VRP.get_interface_status_ex|172.16.17.80] Complete (1074.27ms)
2018-06-14 14:39:05,702 [script] [Huawei.VRP.get_interface_status_ex|172.16.12.63] Complete (2346.66ms)
2018-06-14 14:39:05,729 [script] [DLink.DxS.get_interface_status_ex|172.16.62.106] Complete (296.42ms)
2018-06-14 14:39:05,746 [script] [Huawei.VRP.get_interface_status_ex|172.16.5.31] Complete (2336.86ms)
2018-06-14 14:39:05,753 [script] [DLink.DxS.get_uptime|172.16.39.43] Complete (36.62ms)
2018-06-14 14:39:05,692 [script] [Huawei.VRP.get_interface_status_ex|172.16.17.80] Complete (1074.27ms)
2018-06-14 14:39:05,702 [script] [Huawei.VRP.get_interface_status_ex|172.16.12.63] Complete (2346.66ms)
2018-06-14 14:39:05,729 [script] [DLink.DxS.get_interface_status_ex|172.16.62.106] Complete (296.42ms)
2018-06-14 14:39:05,746 [script] [Huawei.VRP.get_interface_status_ex|172.16.5.31] Complete (2336.86ms)
2018-06-14 14:39:05,753 [script] [DLink.DxS.get_uptime|172.16.39.43] Complete (36.62ms)
SP
AS
то есть это небольшие объёмы?
3,5к записей в секунду. это небольшие ?
SP
скорее всего, большие
SP
я наткнулся на разное на тему "а существует ли omhttprequest". модуля на данынй момент действительно не существует, Rainer написал функцию эту в качестве примера/образца, в ней не решены проблемы типа "будем устанавливать каждый раз соединение вместо персистентных"
2018 July 24
SP
Занятно. Кажется, складывается маленькая компания людей, реально работающих на реальных проектах 😊
2018 September 14
SP
Лёш, поможешь, если что, с админством?
rd
Я думаю, что это подходит к тематике чата =)
http://www.opennet.ru/opennews/art.shtml?num=49264
Facebook перевёл в разряд отрытых продуктов LogDevice, распределённую систему хранения последовательно поступающих наборов данных, таких как логи, данные мониторинга, сведения об изменении конфигурации и потоки информации о событиях. Система ориентирована на надёжное и отказоустойчивое хранение логов, обеспечивает сохранение порядка поступления записей и может масштабироваться для обработки миллионов разных логов в одном кластере хранения с интенсивностью поступления данных в несколько гигабайт в секунду. Код написан на языке С++ и опубликован под лицензией BSD.
http://www.opennet.ru/opennews/art.shtml?num=49264
SP
Я думаю, что это подходит к тематике чата =)
http://www.opennet.ru/opennews/art.shtml?num=49264
Facebook перевёл в разряд отрытых продуктов LogDevice, распределённую систему хранения последовательно поступающих наборов данных, таких как логи, данные мониторинга, сведения об изменении конфигурации и потоки информации о событиях. Система ориентирована на надёжное и отказоустойчивое хранение логов, обеспечивает сохранение порядка поступления записей и может масштабироваться для обработки миллионов разных логов в одном кластере хранения с интенсивностью поступления данных в несколько гигабайт в секунду. Код написан на языке С++ и опубликован под лицензией BSD.
http://www.opennet.ru/opennews/art.shtml?num=49264
Ещё один бинарный формат хранения. Молодцы 😊
N
Это типа их аналог Кафки