forum.opennet.ru

"Обновление кластерной файловой системы LizardFS 3.13.0-rc2"

Форум Разговоры, обсуждение новостей
Версия для распечатки	Пред. тема \| След. тема

Исходное сообщение

[ Отслеживать ]

Есть идеи по улучшению форума и сайта ? Пишите.

. "Обновление кластерной файловой системы LizardFS 3.13.0-rc2"	+/–
Сообщение от пох. (?), 20-Июн-20, 13:41
> а что вообще стоит посмотреть? если это у тебя за деньги - не вижу проблем ни с gluster, ни с moose. Тупо сравнить производительность на твоих задачах, и остановиться на первой приемлемой. distributed тебе при этом не надо, так что gluster ближе всего к искомому. Но, опять же - если это за деньги, смотреть скорее в репликацию а не в ec. > я что-то потерял нить… это текущая проблема lizard лично для меня. Существует в v3.12.0 (поскольку более новые даже в костюме химзащиты нельзя ставить) - в external/crcutil-1.0 лежит кусок гуглового навоза. Это даже не соберется на неправильной платформе (традиционный гуглокодинг стайл). Еще одно нехорошее место - src/common/galois_field_encode.cc - это собирается (единственноверным компилятором, конечно), но оптимизации есть только для x86 где про эту муть вообще почитать, и отдельно - про neon ?
Ответить \| Правка \| Наверх \| Cообщить модератору

Оглавление

Обновление кластерной файловой системы LizardFS 3.13.0-rc2, opennews, 10-Ноя-19, 12:04 [смотреть все]

Ух ты, дажен не знал о существовании данной ФС, спасибо за информацию, буду разб, Иван, 10-Ноя-19, 12:04 (1) //
- если до сих пор счастье этого знания тебя миновало - не торопись разбираться По, пох., 10-Ноя-19, 14:51 (15) //
  - Спасибо за развернутый ответ , Иван, 10-Ноя-19, 15:05 (18) //
    - Сначала работал на гластере, глюкавое еще то было свыше 10 лет назад , потом пе, Аноним, 11-Ноя-19, 14:08 (45)
      - традиционный вопрос - расскажите подробностей - версии, настройки redundancy goa, пох., 11-Ноя-19, 14:58 (50)
        
        так у moose, кажется, тоже стагнация, edo, 20-Июн-20, 11:49 (64)
        
        у moose живое комьюнити и живые продажи Там тоже полтора поляка в разработке, п, пох., 20-Июн-20, 12:43 (66)
  - что-то релиза нет, таки не шмогла , edo, 20-Июн-20, 11:47 (63) //
    - таки не Нет не то что релиза, а rc3 с закрытием назойливого бага - который долж, пох., 20-Июн-20, 12:38 (65)
      - а что вообще стоит посмотреть примерно 10kk файлов, под 150 8239 Tb основная з, edo, 20-Июн-20, 13:02 (67)
        
        если это у тебя за деньги - не вижу проблем ни с gluster, ни с moose Тупо сравни , пох., 20-Июн-20, 13:41 (68)
        
        нет, хочется бесплатно 171 тупо сравнить 187 на объёме 100 8239 Tb не та, edo, 21-Июн-20, 00:55 (69)
        
        сравни на части объема Они не требуют переформатировать диски если там не ntfs,, пох., 21-Июн-20, 10:34 (70)
        результаты теста винды на слабом процессоре оказались довольно предсказуемы - , пох., 21-Июн-20, 18:17 (71)
- а, блин, вдогонку lightweight снапшоты и trashcan У gluster первого технически , пох., 10-Ноя-19, 14:56 (16) //
  - У гластера в trashcan превращается всё хранилище после первого же серьёзного сбо, Онаним, 10-Ноя-19, 19:00 (27) //
    - расскажите, как вы это делаете Учитывая что сбой репликации у него вообще в к, пох., 10-Ноя-19, 20:49 (29)
      - Ну у меня там просто не полторы виртуалки лежало Я туда пытался рабочий набор с, Онаним, 10-Ноя-19, 22:28 (33)
        
        С Ceph кстати тоже не пошло, упёрлись в latency на геораспределённой хранилке С, Онаним, 10-Ноя-19, 22:31 (34)
        
        Shared LUN - не совсем то, что хотелось, хотелось распределённо данные выкорябыв, Онаним, 10-Ноя-19, 22:32 (35)
        Поищите запись тезисы доклада Евгения Полякова на первом LinuxPiter, очень толко, Michael Shigorin, 10-Ноя-19, 22:44 (36)
        
        хорошенький стресс-тест вам бы с этим в тестировщики в редхат наняться до их по, пох., 10-Ноя-19, 23:13 (37)
        
        Да обычная реплика шарды Хорошо хоть страйп не сделал, из страйпа вообще упал, Онаним, 11-Ноя-19, 14:16 (47)
        
        в смысле, distributed-replicated, то есть эн реплик по 2 N не 2, надеюсь Уби, пох., 11-Ноя-19, 15:01 (51)
Как там с POSIX-совместимостью и гарантированностью блокировок , Онаним, 10-Ноя-19, 12:29 (3) //
- Почитал С блокировками всё относительно нормально, а вот с когерентностью кеша , Онаним, 10-Ноя-19, 12:37 (4) //
  - Производительность, как обычно, упрётся в мастер-сервер, он один В общем, ещё о, Онаним, 10-Ноя-19, 12:39 (5) //
    - Емнип сервеов с метаданными там может быть несколько, Аноним, 10-Ноя-19, 13:36 (7)
      - это бэкап, он не может использоваться пока жив master И не может, а должно, есл, пох., 10-Ноя-19, 14:27 (10)
      - Да standby Активный один , Онаним, 10-Ноя-19, 14:27 (11)
    - ох уж эти хперты опеннет производительность не упрется ни в какой мастер-сервер,, пох., 10-Ноя-19, 14:23 (8)
      - metadata node внезапно используется при каждом обращении к каждому файлу То ест, Онаним, 10-Ноя-19, 14:27 (9)
        
        и передает исключительно метаданные ЧТО такое надо построить, чтобы упереться в, пох., 10-Ноя-19, 14:43 (13)
        
        Yes , Онаним, 10-Ноя-19, 16:22 (20)
        Да ничего особенного, достаточно просто ls -l на каталог с 10000-100000 файлов , Онаним, 10-Ноя-19, 16:23 (21)
        
        Когда метаданные шардятся - оно хотя бы слегка распараллелится NFS тоже не понр, Онаним, 10-Ноя-19, 16:26 (23)
        доктор, я когда чешу левой пяткой правое ухо через левое плечо - у меня где-то в, пох., 10-Ноя-19, 16:44 (25)
        
        Эксты нормально OCFS2 тяжело, но справляется NFS 4 1 тоже справляется, но ещё , Онаним, 10-Ноя-19, 18:58 (26)
        может и не создаться 10млн - зависит от длины имени Да и скорость create looku, Аноним, 11-Ноя-19, 10:53 (42)
        
        ext4-only Берите под такое xfs если внизу не deb Под RH OLE-образное у меня в, PnDx, 11-Ноя-19, 13:02 (44)
        
        у xfs cвои сюрпризы - достаточно посмотреть груды патчей которые вливает шапка в, Аноним, 11-Ноя-19, 16:33 (52)
        
        ну на вас не угодишь - два года нет патчей - аааа, проект мертв, убегаем, убега, пох., 11-Ноя-19, 23:12 (54)
        
        Есть какой-то сравнительный обзор Ceph, Gluster и Moose Lizard , macfaq, 10-Ноя-19, 16:24 (22)
        
        Ну вот глустеръ вообще сбоку, а с Ceph интересно бы было , Онаним, 10-Ноя-19, 16:27 (24)
        Лови https sysadmin libhunt com compare-ceph-vs-moosefs, SysA, 14-Ноя-19, 12:43 (61)
        
        э А ты само то надеешься на их подписку И чем поможет тебе очередной Мьяньма, Аноним, 10-Ноя-19, 22:01 (31)
        
        ну можешь сам все чинить, под бодрые вопли бегающих вокруг начальников начальник, пох., 10-Ноя-19, 23:25 (38)
        
        Согласен, поддержка красной ненависти - хороший громоотвод, возможно Хотя нет, Аноним, 11-Ноя-19, 08:09 (41)
        
        ну у меня прошлый раз ушло полтора месяца с параллельным сованием костылей и по, пох., 11-Ноя-19, 10:54 (43)
        
        daos , Аноним, 11-Ноя-19, 07:25 (40)
- POSIX-совместимость в кластерной ФС - гарантия хреновой производительности, Аноним, 11-Ноя-19, 20:18 (53) //
  - Увы да А несовместимость пригодность разве что для файлопомойки, или надо гор, Онаним, 12-Ноя-19, 09:26 (59)
Из того, что написано в интернетах - никак не могу понять случайная мелкая пере, vitalif, 10-Ноя-19, 13:00 (6) //
- без ec - да Были прецеденты использования этой штуки для раздачи томов под kvm , пох., 10-Ноя-19, 14:59 (17) //
  - Тома под KVM можно и с гластеров раздавать, и с цефа Тормозно только, и то, и д, Онаним, 10-Ноя-19, 19:02 (28) //
    - вообще-то - штатное решение проксмоксы При наличии вообще говоря отсутствия в н, пох., 10-Ноя-19, 20:55 (30)
      - С проксмоксом гластер можно Птицы одного помёта А вот с адекватными системами , Онаним, 10-Ноя-19, 22:24 (32)
        
        и вот совсем не ссыкотно правильный san - он FC FCoE, а не iSCSI есть возможнос, пох., 10-Ноя-19, 23:45 (39)
        
        FC FCoE - ну хз С моей т з де факто полутруп, так-то, вытесняется iSCSI Друго, Онаним, 11-Ноя-19, 14:13 (46)
        
        вообще уже давно есть NVMe over fabric а iSCSI даже over IB это прошлый век, Аноним, 12-Ноя-19, 08:11 (56)
        
        Ну давай, построй мне распределённую между ДЦ хранилку на NVMe , Онаним, 12-Ноя-19, 09:24 (57)
        
        Зря Вы так Если не выёживаться с thin-provisioning и прочими RAID, он внутри пр, PnDx, 11-Ноя-19, 14:19 (48)
        
        IB FDR стоит сейчас как грязь 500 баксов свич 200 карта Так что FC можно хоро, Аноним, 12-Ноя-19, 08:09 (55)
        
        Ну вот кстати да, если есть недоверие к эзеру, проще иб взять , Онаним, 12-Ноя-19, 09:25 (58)
        
        не, не проще - то что стоит как грязь, оно и работает как грязь И драйверы у не, пох., 12-Ноя-19, 10:25 (60)
Распределённое блочное хранилище от ноунеймов Это будет предсказуемо , abi, 10-Ноя-19, 14:50 (14) //
- unix-like система от какого-то финского студиозуса Это будет предсказуемо P S , разработчик SCO из 1993го года, 10-Ноя-19, 15:46 (19)
Туда же омичи из bitblaze собирались открывать kfs, насколько знаю вот что гол, Michael Shigorin, 29-Ноя-19, 19:46 (62) //
- а там есть что открывать из https bitblaze ru wp-content uploads 2020 08 ru_pr, edo, 19-Сен-20, 01:39 (72)

Форумы | Темы | Пред. тема | След. тема

Партнёры:

Хостинг:

Закладки на сайте
Проследить за страницей

Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру