░░░██╔╝██╔════╝██╔══██╗██║░░░██║
░░██╔╝░╚█████╗░██████╔╝╚██╗░██╔╝
░██╔╝░░░╚═══██╗██╔══██╗░╚████╔╝░
██╔╝░░░██████╔╝██║░░██║░░╚██╔╝░░
╚═╝░░░░╚═════╝░╚═╝░░╚═╝░░░╚═╝░░░
Имеешь идеальную серверную? В серверном шкафу ни пылинки? Каждый патч подогнан в размер? Боюсь, тебе не сюда.
Собираем сервер мечты из того что есть, гоним ссаными тряпками буржуев, хвастаемся билдами, бугуртим, делимся с ньюфагами лютыми костылями, смекалкой и спичечножелудёвой мудростью.
В свете последних событий активно переходим на железо с помойки складских запасов Xi. Твёрдый камень, много нить, сильная работа. Удар!
Прошлый >>7325487 (OP)
Для ценителей прошлой портянки https://rentry.co/uchymuce
>>7344709 →
Мне надоело что мой толкан постоянно в шапке светит, так что когда я перекатываю его там не будет
> Мне надоело что мой толкан постоянно в шапке светит
Только в серверотреде, дамы и господа
несколько тредов назад я восстанавливал бэкап со скоростью триста вставьте шутку про тракториста мегабит в секунду
мегаБИТ, Карл!
сейчас восстанавливаю другой сервер, идёт последовательное чтение больших файлов
воздуха в грудь
три дцать мегаБИТ
три ДЦАТЬ БЛЯДЬ мегаБИТ в секунду
ёбаный рот этого зфс
при этом запись стабильно 3 гигабита по оптике, 300+ мегаБАЙТ в секунду, с другого сервера подключённого через гигабитный свич запись идёт ровно 1 гигабит. и чтение триДЦАТЬ мегаБИТ мать ебал этой зфс
echo 'alias rm="rm -i";' >> ~/.bashrc
смарт смотрел? Мб приходится контрольные суммы пересчитывать.
Оптимизоны типа дедупликации случаем не повключал?
да хуй знает, в чём дело. 4 хдд 7200 рпм в raid-1z, все кэши выключены.
А сколько у тебя памяти на сервачке с Z-своих не бросаемFSом? Алсоу, может там один из дисков посыпался и одновременно происходит селфзахил?
Хз что с твоими сетапами не так. 8 wide z2 пикрил.
Была сильная деградация только когда заменил один хард (старый сыпаться начал) и он всегда долбился в сотку по busy, а остальные 7 его ждали, свапнул ещё раз на другой, всё снова ок
Переход на куб в твоих масштабах каких-то волшебных фич по бесперебойности не принесёт.
Там те же механизмы, что и в кубе, докеровский движок до недавнего времени там был основной.
И ансиблом докер раскатывать удобнее.
Ну мамке или на форуме похвалиться, да. Но лучше бы подебажил проблемы отвалов, вангую они у тебя и в кубе будут.
Докер стартует минут 5-10 на 50+ подах при этом вообще никак не отвечая ни на что, может правила nft похерить, может логи побить. Заебало уже что нет нормального игресса, серт менеджера, обсервабилити, апи, csi и прочих фич/тулинга по типу хелма.
На работе то я уже пару лет кубы дрочу, но не как девопс, а как макака в клетке неймспейса
>минут 5-10 на 50+ подах
Да вроде не какие-то сверхцифры для него. Готовил сворм, на ноде за сотни подов.
>может правила nft похерить
Ну и куб прокси тоже не на святом духе работает, если что.
>может логи побить
Чьи?
>Заебало уже что нет нормального игресса, серт менеджера, обсервабилити, апи, csi и прочих фич/тулинга по типу хелма.
А, ну понятно откуда тебе аппетит разъели.
csi-то тебе зачем? Ему в домашних условиях сложно места придумать, хранилку прикупил что ли.
> Чьи?
Сервисов
> хранилку прикупил что ли
Всегда была и шарила луны, нфс, самбу. Сейчас всё костылём с простым маунтом через фстаб в виртуалки. С кси просто берёшь и абстрагируешься до быстрого и обычного сторадж класса
Докер это просто тупик в сравнении с кубами, всё в нём нужно костылями подпирать и конфигурить в разных местах. По началу да всё заебок с компоузом, но потом всё больнее и больнее это сопровождать когда нет единого способа описания ресурсов
В кластеризации вообще не шарю, знаю только линух и игрался чуть с докером
Если нет поддержки в софте то никак. А так обычно это докер сварм/кубы с операторами
Проорал с 990 в переходнике. Любой pci-e3 норм залетит а то и m2 sata в скорость usb упрется.
>Для ценителей прошлой портянки https://rentry.co/uchymuce
ебло, не открывается ссылка
вот нормальная шапка коротко и по делу https://pastebin.com/j2gmZ4C6
переделывай
> вот нормальная шапка коротко и по делу https://pastebin.com/j2gmZ4C6
забейте, удаляю за ненадобностью
> не открывается ссылка
Мы вроде не в треде детского сада, пора бы уже принять что в рф всё побанено
Вопрос что по рандомному доступу. А сата гарантированно медленнее усб 3.2 ген 2 и в упор к ген 1
>распараллеливании одной таски типа компиляции
openmp
>коммутатор на 100 Мбит
не-а, не прокатит. Только если раскидывать сами задачи компиляции, а линковщик будет собирать всё это на основной ноде.
Нет таких. Две в рейд ставь, любые не дешман Netac/Kingston/Samsung, но все равно надежность хуеватая
Уже ставшая народной rd450x сейчас по 4200
https://www.exegate.ru/catalogue/lanadapter/ex296226.html
Такая игрушка, но я понял, спасибо.
ты тот чел, который закупался говной на таобао? напиши мануал для шапки пж
>можно подробный гайд как с табао заказывать?
1. регаешь загран нового типа
2. регаешь китайский алипэй (нужен загран и телефон с nfc)
3. регаешь таобао акк (сразу через настройки поставь пароль т.к. не всегда приходят смс)
4. регаешь акк на youcanbuy (или у другого пересыла, но я юзаю его)
5. на тао забиваешь адрес по инструкции с юкб
6. наваливаешь чего нужно в корзину
7. пополняешь алипэй через кого то (через мужика с форума юкб делаю, 300+к уже через него провёл)
8. заказываешь на тао
9. когда всё пришло на юкб там собираешь посылку (не забудь выбрать наложенный платёж а то придётся в саппорт писать, карточки то отвалились)
10. ждёшь
Редакция от 12.04.2024, больше инфы можно найти в /pvc
С одним цпу будет, с двумя нет. Опыт из интеловской мамки под 2011. Спаяй двойник или купи, хотя слоило бы вообще задуматься о том что бы такой бп выкинуть
> такой бп
Там всё равно все провода из одной точки растут.
По вечерам порой садился за это дело когда вайбы были. В итоге вроде что то слепил.
- traefik
- metallb
- vm operator (single + agent + alert + alertmanager)
- node exporter
- kube state metrics
- csi nfs
- cert manager
- grafana + pg
Нужно харбор ещё затащить и что то с логами придумать, эластик не хочется, м.б. signoz попробую
На днях буду заселять в кластер на одной физической тачке уже полезную нагрузку
На удивление ни разу не убил кластер. Пару раз насрал лишними манифестами, но просто подчистил вилочкой и дальше поехал
Эти инструменты адекватный дрилдаун поддерживают?
Я не тот анон, но тоже ищу решение для логов, отличное от ELK.
Была мысль слать логи в Vector, там преобразовывать в нужный формат, пересылать в CH, после чего уже из CH вынимать в графане, но в этом варианте нет особо интерактивности. Нужно заранее думать над тем, что тебе нужно, строить запросы и все вот это вот.
А хочется чего-то более ELK подобного с нормальными фильтрами, без заранее заготовленных запросов и т.п.
Как раз в signoz внутри ch, но в реальной эксплуатации не гонял
Это один и тот же инструмент, просто переименовали проект.
Там сверху прикручивается графана, а курин типа её локи-компатибл датасорс.
Дрилдаун от взятой версии графаны зависит, а не от датасорса.
См недавнюю конфу яндекс инфра, там кто-то как раз рассказывал про продуктовый опыт внедрения.
Хотелки обычные, вроде бэкапов.
Но для домашней лабы хочется поддержку s3.
Дошли руки параллельно кубам продолжить трогать и фильтратор от арбузеров.
Примерно такой результат если долбить сайтами которые делают внешние проверки.
ipinfo раскалывает как орешки тех кто пролезает с iplocate.io, но платить за первый я конечно же не буду.
Сама табличка с "кэшем" проверок выглядит примерно как пик 2, а рулы пик 3 с интеграцией в кубы пик 4
так падажи ёбана, то есть при каждом входящем соединении твой сервер лезет в интернет и спрашивает у стороннего сервиса чё это за айпи подключается?
бля фпесду даже объяснять лень
Ну вот и мне лень объяснять что это не так иначе 10-15к рпс было бы не выжать
Можно ещё захотеть kube-vip вместо keepalived (если речь про control plane)
И помечтать про l3 only с анонсами control plane и LB сервисов по BGP
>>7329531 →
Как-то так. Уродск, но и смотреть никто не будет - лишь бы не пожароопасно.
1) Как себя ведут железки IBM в плане дружбы со сторонними PCI адаптерами? Нет лютой проприетарщины, как у одной конторы хрено-плакательной?
2) Вопрос по HBA контроллеру (внешнему), у него указана скорость передачи данных: 4800 мбайт/с, грубо говоря, если к нему можно подключить 16 SATA дисков, то с каждого, одновременно, можно читать по 300 мбайт/с? Или я ошибся?
9300-16i если чё
>>7416455
Это чё за ИБП? Экзегейт? Как себя ведёт?
1 нет, перепрошивают под прошивки других оемов и оно даже работает
https://www.truenas.com/community/resources/detailed-newcomers-guide-to-crossflashing-lsi-9211-9300-9305-9311-9400-94xx-hba-and-variants.54/
https://github.com/EverLand1/9300-8i_IT-Mode
2 железка качается до 2млн иопс, иопс не гарантирует утилизацию пропускной способности вплоть до физической
гг бля
>>7417644
у меня вопрос именно "можно ли подружить 9300-16i и x3630 M4", то же самое с PCI-SSD адаптерами.
Хочу сервак Б/У взять, под файлопомойку, и RAID мне в нём нахуй не нужОн.
Да и 9300-16i, нагугленный на алике по запросу "HBA адаптер" одним из первых вылетел, думаю что он и так в этом режиме находится.
Подружится ли он именно с серваком этим?
Обидно, что гугл на эту тему выдаёт приблизительно нихуя, как и сайт леновы.
>x3630 M4
2430? DMA в контроллере конечно много что сгладит, но вряд ли проц вытянет твои мрии про 4800мбайт/с.
>2430?
Пик
>но вряд ли проц вытянет
Да похуй даже если половину выдаст, уже радость будет.
Просто продавец там меня на панику посадил, что оно может "не подружиться", а желания покупать сервак, покупать карточку, а потом это всё возвращать, в случае неработоспособности, меня вообще не радует.
> Хочу сервак Б/У взять
в проёбанной шапке было "не бери айбиэм и прочую копрокорпорастию"
леново ещё куда ни шло
всё правильно он тебя посадил, покупай супермикру и не еби мозги
Ну понятная позиция продавца, не хочет связываться с возвратами из-за того что юзер обнаружил что биос что-то лочит.
Типа на свой страх и риск.
Посмотри там по ссылкам, есть ли возможность прошить рейд под ибм, это должно снять твою тряску. Будет такой крайний вариант если биос железку проигнорит при инициализации.
Так IBM отдалось на откуп Ленове. Документаха и описание продуктов IBM лежит на сайте последних.
>>7417664
Вот тоже сюда уже думаю.
>>7417665
Там M5100, вроде и не шьётся.
Спасибо чуваки, услышал вас, там у них супермикра завалялась, буду на неё смотреть.
Тряски с HBA отложу до лучших времён...
>Там M5100, вроде и не шьётся.
>
https://support.lenovo.com/ru/ru/downloads/ds111217-serveraid-m5100-series-sassata-controller-firmware-update-lenovo-x86-servers
Ага, из UNL*, 2кВА 1.2кВт. Родные батарейки 2x 9Ач были, 2x 2x 15Ач поприятнее.
Ну, оно работает. Из заметно натирающего:
- кнопка включения без фиксации: нажал-запала-вкл, повозил-выпала-выкл - самое странное, наверное
- serial протокол не работает с NUT (запатчить руки не дошли)
- нет теста батарей по кнопке, мб есть по serial
Холодный старт есть, уже хорошо
>>7418039
Крутиляторов нет, что с температурой внутри - не смотрел, но за весну / начало лета в серверной при +30~35 не помер
Ну сборка внутри не супер аккуратная, места на плате немного, кое-где компоненты близковато наклонены друг к другу / кабели близковато к катушке. Не уверен, что в APCях не так же.
если будет возможность - сфоткай внутрянку.
У APC 1100 большая проблема - у них трансформатор вплотную к аккумулятору находится, что приводит к очень быстрому выходу из строя последнего.
Спасибо, дядюшка Си, за открытую истину.
Шлём коммунистический привет, любим, целуем.
да. на сколько мне известно на самом деле это тоже бу, только ты покупаешь не потребительский проц хуёвого уровня (в своё время) купленный 5 лет назад, а серверный топ (в своё время) который просот меняют на что то более современное и сбагривают китацам за копейки старое
Тут разнесены лево-право как раз
Но крутиляторов нет, но хотя бы в левой части (где трансформатор) перфорация по фронту и сзади
Пик 1/2 после/до снятия аккумов
я слышал что у китайских материнок только с бивосом проблемы, а в они остальном топ
Там полная рулетка со всем, от биоса до контроллеров на плате т.к. собирается это всё из того что есть здесь и сейчас
Но линк каждую секунду циклически появляется и пропадает. Патч на intel x520 установился но не помог.
Что с этим хламом теперь делать? Обратно на озон не сдать.
лол, после 1100 здесь будто пусто. У APC как-будто схема более наполнена.
Но плюс в заменяемости аккумов.
>>7419114
выставь скорость принудительно, а не по автосогласованию
пару перекатов назад у анона перестал работать второй проц из-за сгоревших VRM
> Купил x520
про это тоже было в шапке, кто удалил тот хуй
Я бы может поверил что с ними что-то не так если бы у меня не стояло их 2 штуки замиксовано с ноунейм аоками и другими сетевухами
ну в принципе с ними всё так, я сам их несколько лет юзал ещё с echo 'options ixgbe allow_unsupported_sfp=1' > /etc/modprobe.d/ixgbe.conf до того как изобрели патчинг, но потом узнал, что есть сетевухи с которыми всё ещё более так, чем с интелами, теперь я хуй когда куплю их сетевуху.
>>7419364 И патч тоже. Хотя установился без проблем, нашёл нужные биты и поправил.
>>7419312 А какие там ещё есть нюансы?
Жить можно
А чего куб на бареметал не поставишь, если гонишься за бенчами?
Не гонюсь, но нужно же знать на что рассчитывать. Даже конфиги не подбирал, что выдал pgtune то и забросил. Если бы хотелось выжать максимум то отдельная вм под пг, без nfs, больше рамы, глубже тюн.
Условно это то что можно легко получить при всех отягощающих
>то отдельная вм
На виртуализации есть потери, если поставишь пг даже в обычный куб - будет производительнее.
Дак что ты, в итоге-то, разобрался, почему это происходило?
нет, мне некуда переместить 50тб данных чтобы пересоздать зфс.
так подожди, тебе разве не 10 и нужно было?
И в свитче посмотри скорости, там тоже ручками надо.
У меня в микроте, например, можно выбрать 10, 2,5, но нельзя 5.
Хз почему.
Со стороны NAS единственный поддерживаемый режим это 10G, меньше не дает установить.
>На свитче выбор есть только для rj45. Для SFP+ нет.
странная какая-то хуета, не должно быть так.
в серваке бекплейн с SAS разъёмом, но на материнку основную бекплейн подключается через SATA провод/разъёмы, собственно, вопросик таков: SAS диск не заведётся, верно?
Просто потому что на материнку оно воткнуто в SATA порты?
Разъём-то на материнке в итоге чей, от бекплейна или какого-то встроенного контроллера?
Нет, только в обратную сторону можно (сата диск в сас контроллер). Провода те же.
Вроде только выиграл. Энергопотребление сервака упало с 60Вт до 54Вт (старый БП если и имел сертификат 80 Plus, то в лучшем случае Bronze, а у сисоника Platinum), десктоп все еще работает бесшумно, плюс появился запас по мощности на случай если вдруг ебанусь и решу поставить топовую печь от хуанга.
О хоспаде, да что же это, наверное ботнеты, наверное сканируют. Это очень необычно для 2025, нужно вызывать знакомого хакира.
До прибытия - сервант забинтовать, залить бетоном, отрезать ножницами инторнет.
Ирония не засчитана, пока предупреждение, но в следующий раз старайтесь тоньше
Если хочешь попердолиться - попробуй донастроить nginx чтобы ботам зип-бомба отдавалась.
расскажи, интересно, а то мне тоже на сервак китайские боты коннектятся
мимо
Вычитываешь из /dev/zero 8тб, через пайп их в tgz/bz2 c максимальным размером блока, интригующее название архива, всё.
Интереснее хэдерами забивать всё. Боди боты обычно не вычитывают, а вот не засасывать хэдеры варианта у них нет
Интересная мысль, почему-то сам не додумался.
Из рандома, или готовый файл хедерами отдавать? Хм, походу второе, чтобы нагрузку самому себе не создавать.
Говорят, если поискать то можно найти vps сервера без ограничений по трафику
Обычно лимиты что-то в районе 32 Тб, т.е. столько, что хуй выберешь за месяц.
Хочу на виндузятном серваке сделать PXE с возможностью выбора всякого говна:
типа
1 - обычная загрузка винды
2 - установочный образ
3 - мемтест
4 - ???
Может кто реализовал подобное? Гугел чёт жмотит на инфу.
Пиздец, в гугле по первым ссылкам впски без ограничения за пару баксов
Напишите плиз гайд, как эту тему на серваке сделать. А то я че-то думаю, что меня где-то боты ебут, но я не пойму где
Раз в два-три месяца какой-то ебаный майнер появляется на серверах, хотя все порты закрыты кроме ssh и нескольких маршрутов в tailscale
глянь ventoy, оно вроде умеет в pxe
>>7434542
> майнер появляется
это значит, что тебя ебут школьники автоматическими школьными скриптами. а это в свою очередь значит, что у тебя зияющая дырень вместо сервера, рутовый пароль уровня 12345 или что-то подобное.
ЧСХ отлетели только серваки с установленной амнезией впн - единственное значимое отличие от других серваков, которые не ломались ни разу.
>>7434623
Там жеские пароли были, сейчас перешел на ключи.
инб4: бери серверную супермикро и не выябуйся
intel AMT, есть только на "бизнес" сериях материнок.
или внешняя PCIe плата
>плане управления куда в биосе смотреть?
Никак, wol это всё что есть.
Есть материнки для рабочих станций у асуса, там свой разъём под отдельно приобретаемый ipmi.
Антивирус на тачке у админа. Виндоадмины обычно тащат с торентов всё подряд, а потом у них видите ли ключи с паролями куда-то утекают.
Тоже не так уж далеко ушло. Ты же приложения не ставишь строго из апстора.
Пришлось ещё писать тулзу управления оборотами через ipmi рд450х. Пока умеет только в два сорса:
- статичное значение
- на базе хождения в /metrics у скраперов (amd exporter, node exporter)
Можно легко прикручивать любые сорсы и на них вешать кривую оборотов. Поработало неделю и даже ничего не отрыгнуло. Вышло жирновато (80мб рамы), но сейчас не до изучения условного го/раст
Давайте поможем Даше правильно расположить кулеры в корпусе!
Не надо, пусть Даша учится на собственных ошибках.
Даша сейчас на драйве - метрики, экспортеры, ии, она никого в таком состоянии слушать не способна.
Какое то китайское поделие по 1к купленое 7 лет назад, но хватает с головой даже при таком странном направлении
За то что б я его утащил мне ещё доплатить должны. 50тб 20тб мусора. Сейчас один жёсткий диск имеет больший объём.
4гб ddr2 800mhz
4 hdd sata диска
Хочу raid 5 или 6
Подводные? Проц потянет так нагрузку?
Заведётся, но будет медленно. Насколько - выяснишь на практике.
Имей совесть, корка на авито триста рублей стоит, а ты прескотиной собираешься квартиру обогревать
> Хочу raid 5 или 6
Нахуя? Возьми два больших диска и сделай зеркало.
Другое дело если тебе для себя поиграться. Тогда делай что хочешь.
> два больших диска
Пиздец как недооценённый тейк. Как же меня заебало дрочиться с пачкой 6тб винтов, а выкидывать их жалко
>недооценённый тейк.
для r5 и зеркала в одном магазине:
а) 6х4тб = 20тб за 54к + корыто за 6к с лохиты = 60к
б) 2х20 = 20тб за 70к + корыто за 2к с лохиты = 72к
еще раз:
а) 4х6 = 18тб за 48к +6к = 54
б) 2х18 = 18тб за 62к + 2к = 64
и еще раз:
а) 6х6тб = 30тб за 72 + 64к
б) 2х16+2х16 = 32 за 112кк +6к = 118.
?
быстрофикс последнего:
>а) 6х6тб = 30тб за 72к + 6к = 78
>б) 2х16+2х16 = 32 за 112кк +6к = 118.
В чём тейк? Что за кратное уменьшение дисков нужно доплатить не кратно? Да я уже понял, собирал бы не 5 лет назад так бы и сделал. Сейчас уже только на ссдшки по 10тб перекатываться
>Да я уже понял, собирал бы не 5 лет назад так бы и сделал
можешь в трех словах объяснить любителю причину?
а то попаболь назрела >>7433104 →
О нихуя, я его за 3к на авито взял. У тебя этот перехожник в м2 не греется? Я вставил туда ссдшник самый простой, 60+ градусов в простое при 0 операций с ним. Пришлось колхозить корпус с радиаторами и обдувом.
>>7438091
Внешний БП конечно же
Меньше дисков, меньше нагрева, выше скорости потому что меньше шансов что из пачки кто-то решит потупить в стену (опыт есть, хватило).
Сейчас 30тб из 8х6тб в з2, но мне и 18-20 хватит (или сразу страйп из двух зеркал). Найти бы кому кинуть условную коробочку с парой дисков, бэкапить в другую локацию и красота
При этом, если в командной строке прописать \\сервернейм то он без проблем находится.
На четырех компах две винды 11 и две винды 10.
Никакие настройки не трогал.
Везде включено автообновление винды.
С андроид устройств тот же смб сервак виден и доступен как и раньше.
Сервак перезагружал, хардрезтал, все по прежнему.
Есть мысли, анон?
Версию самбы в конфиге самбы пропиши конкретную, шифрование отключи, пердоль конфиг короче. Попробуй добавить в локальную интрасеть в винде сервер
тебе нужно задать имя рабочей группы одинаковое и включить мастер браузер + на винде сделать сеть приватной
Из проводов бп совпал только 24pin, остальное придется паять.
Вместо процессора селерон, сделать воздуховод из кабель канала и скотча от кулера и сойдет.
Отверстия под usb3 и eth совпали, нужно только вырезать несколько ячеек в решетке под hdmi.
Главный косяк это 2 sata порта. Они угловые и не лезут в мамку. А от корзин их не отстегнуть. Нужно переходники искать.
В дц чтобы платить подешевле за размещение.
А дома таки да, никакого смысла, любой древний фул атх инвин за 500р с авито холоднее и тише.