RN3DCX Posted January 18, 2023 Author Posted January 18, 2023 Планирую пользовать raid50, диски кстати SAS 12G 15000 rpm - тут по смыслу механика по производительности должна быть "практически" не хуже SSD. Цитата образуя виртуальные каналы на период обмена Т.е. по сути каналы могут быть заняты всегда, если информация пишется еже-миллисекундо? И в случае, если уже сам линк/контролер не справляется, а диски еще могут, то тут вступают в силу прерывания и кэш контроллера? ЕЩЕ вопрос: Имеется экспандер RES2SV240NC. Когда у контроллера есть два и более порта? Как правильно подключаться к экспандеру? Одним кабелем от контроллера или двумя? Вставить ник Quote
jffulcrum Posted January 18, 2023 Posted January 18, 2023 18 минут назад, RN3DCX сказал: И в случае, если уже сам линк/контролер не справляется, а диски еще могут, то тут вступают в силу прерывания и кэш контроллера? Обмен всегда между инициатором - хостом и целью - диском. Инициатор, владея обстановкой, просто не будет инициировать обмен в ситуации исчерпания - очередь. 20 минут назад, RN3DCX сказал: Как правильно подключаться к экспандеру? Одним кабелем от контроллера или двумя? Надо читать документацию к конкретным контроллеру и экспандеру, умеют ли они в MPIO и надо ли для этого как-то особенно подпрыгивать (вплоть до установки джамперов на экспандере). Есть, конечно, варианты, когда у контроллера flat адресация, и он всем портам представляется как одно целое. Обычно же каждая группа портов = свой инициатор. Вставить ник Quote
RN3DCX Posted January 18, 2023 Author Posted January 18, 2023 13 минут назад, jffulcrum сказал: умеют ли они в MPIO Пасиб, загуглил - контроллер не умеет. Вставить ник Quote
alibek Posted January 18, 2023 Posted January 18, 2023 39 минут назад, RN3DCX сказал: SAS 12G 15000 rpm Фигасе. Где вы такое достали? И почем, если не секрет? Вставить ник Quote
jffulcrum Posted January 18, 2023 Posted January 18, 2023 1 час назад, RN3DCX сказал: тут по смыслу механика по производительности должна быть "практически" не хуже SSD. У меня в прошлом бывали кейсы, когда переход на SSD сказывался отрицательно, и заказчика возвращали на SAS 15K диски. Но было это до распространения NVME. Сейчас уже в целом наработаны ориентиры, тот же DWPD, да и сами SSD стали менее волатильными в плане реакций на различные профили нагрузки, так что теперь для high-rotate SAS применений почти нет. Обычно проще гибридное хранилище с SSD кешами/tiering сделать. Те же СтораджПейсы у MS себя хорошо показывают. Вставить ник Quote
RN3DCX Posted January 18, 2023 Author Posted January 18, 2023 В 18.01.2023 в 16:02, alibek сказал: Где вы такое достали? Авито в помощь: sas 15K - с ценой тут как повезёт. Лично использую: HPE 600Gb SAS 15K 12G 2.5 EH000600JWKTP HPE 900Gb SAS 15K 12G 2.5 EH000900JWHPP Вставить ник Quote
sdy_moscow Posted January 18, 2023 Posted January 18, 2023 Кто-то может мне объяснить экономику применения SAS в век недорогих SSD? Вставить ник Quote
st_re Posted January 18, 2023 Posted January 18, 2023 20 минут назад, sdy_moscow сказал: Кто-то может мне объяснить экономику применения SAS в век недорогих SSD? ССД на некоторых задачах быстро вытираются... есть железки, где за время жизни сервера все диски по кругу третий раз заменили.. для снижения скорости вытирании при активной мелкой записи надо покупать с большим запасом по объёму. что несколько увеличивает бюджет. и всё равно вытрутся и всё равно менять, что снова плюс в бюджет.. ну и не через все контроллеры ТРИМ проходит, и чтобы там не пели производители, на потоке мелкой записи деградация после записывания 100% объёма (итого) заметна. да и увеличение заметное даёт скорее на чтении чем на записи (и чем мельче записываемые порции, тем больше). а бывает надо именно запись, а чтения немного и не страшно подождать. Вставить ник Quote
alibek Posted January 18, 2023 Posted January 18, 2023 В каких-то задачах SAS будет более надежен и предсказуем. А может быть даже и производительнее, если это 15000 RPM. Вставить ник Quote
sdy_moscow Posted January 18, 2023 Posted January 18, 2023 Честно, я сомневаюсь, что сейчас SAS проживет дольше чем SSD c 1200 TBW на 1 Тб емкости... Разве только есть смысл на дисках с объемами больше 10Гб... Вставить ник Quote
jffulcrum Posted January 18, 2023 Posted January 18, 2023 Должен заметить, что массивы SAS в целом лучше держат "выкидные" удары по нагрузке. Да, растет очередь, можно получить таймаут, но потери работоспособности не происходит. Ну и там контроллеры начнут тупить раньше, чем всё станет совсем плохо. SSD же очень оптимистичны насчет своих возможностей, особенно NVME - и честно пытаются сначала прожевать 50К+ IOPS на диск, и, в большинстве случаев, в итоге уходят в какую-то внутреннюю нирвану, вплоть до исчезновения из списка устройств. DC от Intel, к их чести, в итоге из неё выходят без сбросов серверов по питанию, но о валидности записанного при этом остается только гадать... Да и "Ляли больше нет" ©. Вставить ник Quote
sdy_moscow Posted January 18, 2023 Posted January 18, 2023 Интересный материальчик в тему: Вставить ник Quote
Saab95 Posted January 19, 2023 Posted January 19, 2023 Цитата ССД на некоторых задачах быстро вытираются... есть железки, где за время жизни сервера все диски по кругу третий раз заменили.. для снижения скорости вытирании при активной мелкой записи надо покупать с большим запасом по объёму. что несколько увеличивает бюджет. и всё равно вытрутся и всё равно менять, что снова плюс в бюджет.. У ССД в характеристиках пишут по 1000 раз перезапись всего объема. А как быть с SD картами памяти, например в авто видео регистраторе, которая в сутки 2 раза весь объем карты памяти записывает и в год получается 500 перезаписей всего объема, а за 6 лет 3000 почти. И до сих пор работают. Был случай, когда на чипы NVME приклеили радиаторы, установили обдув, что бы снизить нагрев, а они все равно пришли в негодность за 6 месяцев работы в высоконагруженном сервере баз данных. Спасло лишь то, что данные за прошлый день сохранялись на жесткий диск и потери составили лишь дневной объем работ. Вставить ник Quote
naves Posted January 19, 2023 Posted January 19, 2023 9 hours ago, Saab95 said: Спасло лишь то, что данные за прошлый день сохранялись на жесткий диск и потери составили лишь дневной объем работ. А на резервный сервер для репликации денег пожалели как обычно? Сервер для репликации можно иногда и на обычных HDD поднимать, если не будет нагрузки по чтению. Статья с описаниями проблем SSD в отдельной взятой системе хранения, есть довольно интересные наблюдения про всякие fsync и пробития кешей https://yourcmc.ru/wiki/Производительность_Ceph#.D0.9A.D0.BE.D0.BD.D0.B4.D0.B5.D0.BD.D1.81.D0.B0.D1.82.D0.BE.D1.80.D1.8B Вставить ник Quote
alex_001 Posted January 22, 2023 Posted January 22, 2023 Кстати , еще вопрос возник - в случае софтового рэйда / zfs при вылете диска можно ли зажечь FAULT на салазках диска? Сходу не нашел решения (по крайней мере для HP серваков). В принципе не то чтоб очень надо , но если посылать кого-то менять диск всеже очень удобно когда видно какой именно. Вставить ник Quote
roma33rus Posted January 22, 2023 Posted January 22, 2023 1 час назад, alex_001 сказал: Кстати , еще вопрос возник - в случае софтового рэйда / zfs при вылете диска можно ли зажечь FAULT на салазках диска? Сходу не нашел решения (по крайней мере для HP серваков). В принципе не то чтоб очень надо , но если посылать кого-то менять диск всеже очень удобно когда видно какой именно. На серверах hp диодами можно управлять через утилиту hpacucli (сейчас ее вроде переименовали) https://www.thegeekstuff.com/2014/07/hpacucli-examples/ Вставить ник Quote
naves Posted January 23, 2023 Posted January 23, 2023 (edited) пишите /sbin/zpool status -c model,serial далее в утилите от контроллера ищете свой диск для megacli очень удобна обертка megaclisas-status потом соответственно мигаете нужным диском Edited January 23, 2023 by naves Вставить ник Quote
jffulcrum Posted January 24, 2023 Posted January 24, 2023 Ledctl /locate=/dev/sda Можно также в {} скобках несколько дисков сразу указать. Можно также засунуть ledmon в cron - сама будет зажигать свет на зафейленных, гипотетически Работа, однако, не гарантирована на всем железе. Вставить ник Quote
Recommended Posts
Join the conversation
You can post now and register later. If you have an account, sign in now to post with your account.