- Судя по неоднократному упоминанию структурированных данных , основной формат хр,
Аноним, 02-Мрт-12, 14:25 (1)
//
- А чем бинарный формат принципиально лучше текстового Индексы и по текстовым стр,
Аноним, 02-Мрт-12, 14:34 (6)
//
- Основных причины две 1 Недостаточная компактность Особенно неприятно отсутстви,
Аноним, 02-Мрт-12, 14:53 (18)
//
- Это попытка переизобрести gzip Феерический бред ,
anonymous, 02-Мрт-12, 15:05 (30)
- В какой-то степени Но только такой gzip, который позволяет работать сразу со сж,
Аноним, 02-Мрт-12, 15:11 (37)
- Кто мешает пожать и проиндексировать текстовый файл Где ты увидел стабильный API,
anonymous, 02-Мрт-12, 15:22 (46)
- Если поля не удаляются, а только добавляются новые, то, по идее, старые анализат,
Аноним, 02-Мрт-12, 15:45 (50)
- Ага, щаз Ты представление-то имеешь, как парсеры работают ,
Аноним, 02-Мрт-12, 16:16 (58)
- Нет Речь шла о структурированном логе со специальным API для работы с ним Есл,
Аноним, 02-Мрт-12, 16:37 (68)
- Структурированные данные, индексируемые данные, множества данных Если кто не п,
Wolfis, 02-Мрт-12, 16:38 (69)
- Ну допустим я имею, ламерок Для тех кто в танке что сломается в SQL при добавл,
Аноним, 02-Мрт-12, 19:24 (102)
- В этой теме про него лучше не вспоминать А то, знаете как помянешь черта и он,
XoRe, 02-Мрт-12, 22:07 (107)
- Это типа каждый раз альтер тейбл, который, конечно же, вовсе не накладная операц,
Имя и код, 03-Мрт-12, 06:07 (148)
- а что сломается в парзере, например, 171 по строке на запись, поля поделены од,
arisu, 06-Мрт-12, 04:43 (233)
- хорошо работают, если писались руками и изначально формат нормальный 171 перв,
arisu, 06-Мрт-12, 04:40 (232)
- Современный текстовый лог представляет собой текстовую кашу, которую индексирова,
Аноним, 02-Мрт-12, 17:20 (76)
- А индекс образуется сам собой, причём совершенно задаром ,
anonimous, 03-Мрт-12, 00:14 (115)
- Gzip не позволяет доступ на ходу А 20 гиговую портянку сам, пожалуйста, декомпр,
Аноним, 02-Мрт-12, 17:40 (86)
- Против 20гиговых логов есть ротация Кто не настроил, тот - На средненагружен,
XoRe, 02-Мрт-12, 22:11 (109)
- Угу, что однако не отменяет факта что логи могут быть большими даже с ротацией ,
Аноним, 03-Мрт-12, 03:12 (124)
- Пожалуйста, давайте об устрицах -- емши Локальное хранение логов нередко весьма ,
Michael Shigorin, 03-Мрт-12, 03:38 (129)
- А чем проблемы с синхронной записью там - лучше чем с синхронной записью где-то ,
Аноним, 03-Мрт-12, 04:06 (138)
- Выделенный коллектор логов обслуживает исключительно логи, а не целевой сервис ,
anonimous, 03-Мрт-12, 07:57 (158)
- Целевой сервис не обязан интенсивно писать на диск, если что Более того, не у в,
zzz, 03-Мрт-12, 12:34 (163)
- fsync очень даже бьёт и по чтению Если же сервис со всем нужным помещается в,
Michael Shigorin, 03-Мрт-12, 19:24 (189)
- Может, но насколько именно - весьма зависит от А еще можно логи хранить на отдел,
Аноним, 04-Мрт-12, 17:35 (218)
- Дядьку, я Вам это по куче систем с самым разным стораджем говорю Это и упомянул ,
Michael Shigorin, 04-Мрт-12, 20:47 (220)
- Тем, что подсистема I O может быть к ним лучше готова Даже локально отделить акт,
Michael Shigorin, 03-Мрт-12, 19:01 (187)
- могут быть - это предположение факт - это бл , вот это логи отожрали А с фак,
XoRe, 03-Мрт-12, 05:59 (147)
- Ну ётыдь, ну шо за вьюные разжижения мозгофекалий Воопще-то построение скалейбл,
Имя и код, 03-Мрт-12, 06:29 (151)
- Логи в продакшене отключают только идиоты Вменяемые админы, если дисковое и о и,
nobody, 02-Мрт-12, 22:19 (111)
- Мне пытаются впарить мысль, что DB будет быстрее, чем plain-file на одном ,
anonimous, 03-Мрт-12, 00:18 (116)
- работа с БД в большинстве случаев быстрее plain-file начиная с того, что нормал,
VoDA, 03-Мрт-12, 02:58 (122)
- Пытаются впарить мысль что запись эвента в минимальном бинарном виде без повторя,
Аноним, 03-Мрт-12, 03:16 (126)
- Ну иоптыдь, Опенстриты, они читают на порядки чаще, нежели пишут ,
Имя и код, 03-Мрт-12, 04:57 (140)
- Пишут его тоже часто и много И работать с 250Г чушкой в XML попросту не приколь
, Аноним, 03-Мрт-12, 06:31 (152)
- ну и какой идиот изначально додумался базу с необходимым по дизайну random acces,
arisu, 06-Мрт-12, 05:00 (237)
- Дедупликация подразумевает сложную структуру хранения, подобную реляционной или ,
gaga, 02-Мрт-12, 15:21 (45)
- Анализировать быстро и на автомате и ловить потенциально интересные эвенты довол,
Аноним, 02-Мрт-12, 16:17 (59)
//
- Заметим, что идея грепа лога сама по себе порочна Добавление в строку нового по,
Аноним, 02-Мрт-12, 17:25 (78)
- Я бы сказал 50 50, потому что гибкость - хорошая, да И позволяет завернуть очен,
Аноним, 02-Мрт-12, 17:34 (83)
- Хм Вы когда-нибудь с SQL работали Скажу по секрету там возможностей для хитро,
Аноним, 02-Мрт-12, 17:41 (87)
- Practical Extraction and Report Language На SQL-е - умахаешься Впрочем поЦеринг,
Anonymouse, 03-Мрт-12, 03:13 (125)
- 1 Я не считаю что для анализа логов мне надо бросить все и стать DBA2 Я не счи,
Аноним, 03-Мрт-12, 03:50 (130)
- Т е вы хотите сказать, что DSL, коим является SQL имеет больше возможностей, че,
cosmonaut, 04-Мрт-12, 12:09 (213)
- Да, вспоминается, как аккуратненько добавил разок дополнительное поле в конец ло,
Аноним, 02-Мрт-12, 18:38 (99)
- Узкое место --- не в чтении парсинге поиске, в записи поиск --- значительно бо,
anonimous, 03-Мрт-12, 00:26 (117)
- Не-а, бинарь в принципе не удобен Эт раз Для первичного анализа берутся не сам,
Имя и код, 03-Мрт-12, 05:16 (142)
- Итак, давайте обдумаем Допустим что syslog действительно устарела устаревание ,
Аноним, 02-Мрт-12, 15:18 (44)
//
- Слишком много букв Но что делать, если утилита посчитает бинарный лог испорченн,
anonymous, 02-Мрт-12, 15:30 (48)
//
- Снова на второстепенные вещи отвлекаетесь 1 Много букв потому то в тексте подро,
Аноним, 02-Мрт-12, 15:47 (51)
- Это важный вопрос, но не первой важности, т к он не определяет архитектуру и во,
Аноним, 02-Мрт-12, 15:52 (53)
- Об этом и речь была Цитирую разница между бинарными и текстовымы форматами хр,
Аноним, 02-Мрт-12, 16:01 (57)
- Разница между текстовым и бинарным форматом - логическое следствие разницы между,
Аноним, 02-Мрт-12, 17:46 (90)
- Вы не врубаетесь в самую суть формат хранения логов это второстепенные вещи и н,
Аноним, 02-Мрт-12, 19:17 (100)
- Поддреживаю Собершенно непонятно вокруг чего проблема, если нужны структурирован,
Deffic, 03-Мрт-12, 01:59 (119)
- Проблема сделать логи структурированными Решение этой задачи попутно решит ряд ,
VoDA, 03-Мрт-12, 03:09 (123)
- Она УЖЕ структурирована, в эрэфсях это чётко прописано это свежий The syslog m,
Имя и код, 03-Мрт-12, 06:44 (153)
- Ему раскидали то что он уткнулся лишь в поверхностные, второстепенные вещи, но о,
Аноним, 03-Мрт-12, 10:23 (159)
- Ну так перцы тоже решили реализовать стандарт А то что он бинарный - ну и болт ,
Аноним, 03-Мрт-12, 13:37 (170)
- Вы просто передёргиваете gzip, cat, EDITOR -- универсальные, в отличие от ,
Michael Shigorin, 03-Мрт-12, 19:30 (190)
- А что мешает сделать прозрачную развертку этого формата в текст как gzip это дел,
Аноним, 04-Мрт-12, 01:34 (194)
- Вот Вы как понимаю в 193 описали сворачивание по IP Попробуйте набросать ст,
Michael Shigorin, 04-Мрт-12, 02:08 (197)
- gt оверквотинг удален Вы правы - это тайный набор знаний Его специально выдел,
VoDA, 06-Мрт-12, 00:54 (228)
- Я и подводил пишущего к мысли, что мы, скорее всего, попадаем на мини-DB и мини-,
Michael Shigorin, 06-Мрт-12, 01:17 (230)
- Сам MSG не структурирован Как по вашему задаются обязательные и дополнительные ,
VoDA, 03-Мрт-12, 15:23 (185)
- Тогда с ним делать то же что и с испорченным текстовым логом Открыли вы текстар,
Аноним, 03-Мрт-12, 03:52 (131)
- А вы подумали о том, что старый API взаимодействия приложений с syslog не предна,
Аноним, 02-Мрт-12, 17:34 (82)
//
- В чем-то вы правы В своем посте я немножечко пожертвовал логичностью ради пров,
Аноним, 02-Мрт-12, 18:25 (93)
//
- А мне вот не нравится идея бинарных логов И бинарных конфигов Просто - не нрав,
Куяврик, 03-Мрт-12, 02:40 (121)
- Вот, если бы вы знали, что такое cat,grep,sed и другие умные слова для работы с ,
cosmonaut, 04-Мрт-12, 12:37 (214)
- На 100 выпускник какого-нибудь ВУЗа типа Мэждународного Университета Соломона,
Имя и код, 03-Мрт-12, 05:30 (143)
//
- Я так понимаю - очепятка В UNIX syslog, и он пишет текстовые логи Я так понима,
R, 02-Мрт-12, 16:34 (67)
//
- А еще в UNIX auditd который гораздо важнее syslog , и он пишет бинарные логи ,
Аноним, 02-Мрт-12, 17:36 (84)
//
- Я так понимаю - вы просто не знакомы с юниксом Действительного, когда в мире ест,
Аноним, 02-Мрт-12, 18:30 (95)
//
- rfc3164 достаточно свежая хреннь Ну Это неуспешно скрыто за зарослями бинарно,
Имя и код, 03-Мрт-12, 05:37 (144)
//
- Наверное, стоило особо отметить, что к поддержке проекта уже присоединились комп,
Аноним, 02-Мрт-12, 14:28 (2)
//
- Надеюсь, в линуксе наконец появится нормальный механизм удаленной репликации лог,
Аноним, 02-Мрт-12, 14:32 (3)
- Таки тролль man rsyslog-mysql,
anonymous, 02-Мрт-12, 15:57 (55)
- А об ng-syslog никто из анонов, судя по всему, даже не слыхал никогда ,
Аноним, 02-Мрт-12, 16:21 (63)
- А ты сам-то читал, что там написано Особенно в части репликации логов с поддержк,
Аноним, 02-Мрт-12, 17:37 (85)
- Вы предлагаете конвертировать лог в бинарный формат, а потом реплицировать его с,
Аноним, 02-Мрт-12, 17:44 (89)
- Репликация средствами мускула Лол С тем же успехом можно текстовые логи через s,
Аноним, 02-Мрт-12, 18:27 (94)
- Разнообразие форматов журналов следует из разнообразия решаемых задач и разнообр,
Аноним, 02-Мрт-12, 14:32 (4)
- Лучшее враг хорошего ,
Аноним, 02-Мрт-12, 14:32 (5)
- а почему сислог они считают устаревшим чем аргументируют ,
Аноним, 02-Мрт-12, 14:46 (12)
//
- Так что теперь будет с journald ,
Аноним, 02-Мрт-12, 14:55 (22)
//
- А ничего не будет Он часть systemd и останется Сделают пересылку в другой журн,
anonymous, 02-Мрт-12, 14:58 (25)
- К нему кроме его текущего API добавят ELAPT А возможно ELAPI будет единственным,
VoDA, 02-Мрт-12, 15:05 (29)
//
- Судя по всем, Lamberjack - это и есть journald, с небольшими косметическими изме,
Аноним, 02-Мрт-12, 15:05 (31)
- Радует то, что постарались обсудить, а не переть своим умом удачи ,
Michael Shigorin, 02-Мрт-12, 15:15 (41)
//
- Чё они х ей занимаются Нужно структурированные, ну прилепи ты syslog2sql и ра,
pavlinux, 02-Мрт-12, 22:17 (110)
//
- бинарное хранение это следствие, а не причина причина же в API для структурирова,
VoDA, 03-Мрт-12, 03:16 (127)
- всяким там возможным SQL-иньекциям И да, как sql база обеспечит защиту от,
Аноним, 03-Мрт-12, 03:59 (134)
//
- А зачем SQL запросы, когда есть NoSQL решения С хранением данных чисто в операти,
XoRe, 03-Мрт-12, 06:15 (150)
- Сколько же воплей в этом треде Никаких lumberjack и journald не будет ближайш,
Аноним, 02-Мрт-12, 22:46 (113)
//
- Название - игра слов log - бревно Lumberjack - дровосек Т е логоруб Нам предлаг,
XoRe, 03-Мрт-12, 06:13 (149)
//
- ну скажем так если требуется для каких-то целей строить по логам статистику - п,
Аноним, 03-Мрт-12, 17:05 (186)
//
- Похоже кто то хочет подзаработать на неграмотности админов Что ж, флаг им в руки,
vi, 04-Мрт-12, 02:12 (198)
- Линуксоиды воистину неизлечимы Вместо того что бы механизировать ручной труд,
Piter_Ring, 04-Мрт-12, 05:06 (212)
//
|
Версия для распечатки
