Вопрос по дискам на сер вер с ZFS root

Дмитрий Долженко написал(а) к All в Jun 15 17:41:26 по местному времени:

From: Дмитрий Долженко <dol@mig.phys.msu.ru>

Привет!

Как я понимаю сейчас есть тенденция на сокращение ресурса у
десктопных дисков - seagate например объявляет что их десктопные диски
для работы по 8 часов 5 дней в неделю.
И реально в серверах года через 3 у них лезут Relocated sectors в SMART
стаями.

Выходит для сервера лучше брать диски для NAS или RAID для
круглосуточной работы.
Я лучше ориентируюсь в WD - это красные для NAS или RE для raid.
Верно?

И если на них делать zfs им видимо стоит SCT таймаут ошибки ставить в 0
как для десктопного диска?
По умолчанию он около 7 секунд, как для raid.

D.
--- ifmail v.2.15dev5.4

Alex Korchmar написал(а) к Дмитрий Долженко в Jun 15 10:08:41 по местному времени:

From: Alex Korchmar <noreply@linux.e-moe.ru>

Дмитрий Долженко <dol@mig.phys.msu.ru> wrote:

> Как я понимаю сейчас есть тенденция на сокращение ресурса у
скорее сейчас есть тенденция делать все из говна. Диски тоже.
Десктопные или нет - похрен.
Что там зоявляют pr-манагеры - похрен.
Во всяком случае на фоне последних "достижений" сигейта в области очевидного
брака и фатальных ошибок в прошивках.

> И реально в серверах года через 3 у них лезут Relocated sectors в SMART
> стаями.
через три года современный сервер обычно выводят из эксплуатации. Поэтому
гораздо важнее, чтобы через три месяца в нем не полетели два диска из четырех.

> Выходит для сервера лучше брать диски для NAS или RAID для
нет, для сервера лучше брать диски для сервера. В случае WD это RE серия,
только я бы сейчас вообще побрезговал с wd для этих целей связываться.

диски из говна имеет смысл брать для говносервера - которых пятьдесят штук
в стойке, и вылет одного-пяти не слишком фатален для сервиса. Вот тут WD
вполне себе в тренде - от velociraptor до, как ни странно, green
(разумеется, не забывая отключать им лишний "ум")
Следующий, что характерно - самовсунь. (надо заметить, что у меня
наворачивались именно wd, а стоявшие с ними в паре самовсуни
продолжают работать, но это не показатель)
Последний в списке - hgst, из-за повышенной цены и противного свойства
вставать колом без предупреждающих симптомов (само по себе было бы безобидно
с учетом этого применения, но за эти деньги?)

> И если на них делать zfs им видимо стоит SCT таймаут ошибки ставить в 0
> как для десктопного диска?
стоит поставить его в 2 секунды.
Для нагруженных систем таймаут больше секунды очевиднейшим образом означает,
что диск надо выкинуть или поставить в десктоп админу или еще какому-нибудь
совсем ненужному персонажу. Вторая секунда - во избежание глюков прошивок.

Пичалька заключается в том, что на рынке уже лет пять как НЕТ десктопных
дисков, у которых эта фича выключается. Насколько я понял, последние
wd red в том числе.

> По умолчанию он около 7 секунд, как для raid.
как ты думаешь, что происходит с сервером эти семь секунд, если он мало-мальски
нагруженный?

А главное - ну что хорошего может делать диск в течении такого времени?
Запиливать уже поврежденную поверхность, разьве что?

В результате, если он таки допилится до кое-как считавшегося сектора - ты
имеешь "непонятный сбой сервера", вдруг переставшего отвечать на запросы.
Без записей в логах, без информации в смарте, без каких-либо следов,
позволяющих это понять. А если через семь секунд вернет ошибку - то
у тебя сервер целых семь секунд не реагировал на внешне раздражители,
а диск все равно менять.


> Alex

--- ifmail v.2.15dev5.4

Дмитрий Долженко написал(а) к Alex Korchmar в Jun 15 13:41:28 по местному времени:

From: Дмитрий Долженко <dol@mig.phys.msu.ru>

26.06.2015 10:08, Alex Korchmar пишет:
> Дмитрий Долженко <dol@mig.phys.msu.ru> wrote:

>> По умолчанию он около 7 секунд, как для raid.
> как ты думаешь, что происходит с сервером эти семь секунд, если он мало-мальски
> нагруженный?
>
> А главное - ну что хорошего может делать диск в течении такого времени?
> Запиливать уже поврежденную поверхность, разьве что?

Действительно интересно что он это время делает.
Пытается считать, или ремапит что что обсыпалось?

D.



--- ifmail v.2.15dev5.4

Eugene Grosbein написал(а) к =?UTF-8?Q?=D0=94=D0=BC=D0=B8=D1=82= в Jun 15 18:05:49 по местному времени:

30 июн 2015, вторник, в 12:41 NOVT, Дмитрий Долженко написал(а):

>> А главное - ну что хорошего может делать диск в течении такого времени?
>> Запиливать уже поврежденную поверхность, разьве что?
ДД> Действительно интересно что он это время делает.
ДД> Пытается считать, или ремапит что что обсыпалось?

Ремап выполняется только при попытке записи в pending (сбойный) sector.

Eugene
--
Поэты - страшные люди. У них все святое.
--- slrn/1.0.1 (FreeBSD)

Дмитрий Долженко написал(а) к Eugene Grosbein в Jun 15 17:00:36 по местному времени:

From: Дмитрий Долженко <dol@mig.phys.msu.ru>

30.06.2015 18:05, Eugene Grosbein пишет:
> 30 июн 2015, вторник, в 12:41 NOVT, Дмитрий Долженко написал(а):
>
> >> А главное - ну что хорошего может делать диск в течении такого времени?
> >> Запиливать уже поврежденную поверхность, разьве что?
> ДД> Действительно интересно что он это время делает.
> ДД> Пытается считать, или ремапит что что обсыпалось?
>
> Ремап выполняется только при попытке записи в pending (сбойный) sector.
>

Забавно. Т.е. если сектор сбойный контроллер при каждом считывании по
нему будет до SCT timeout елозить?

D.

--- ifmail v.2.15dev5.4

Eugene Grosbein написал(а) к =?UTF-8?Q?=D0=94=D0=BC=D0=B8=D1=82= в Jul 15 12:48:38 по местному времени:

30 июн 2015, вторник, в 16:00 NOVT, Дмитрий Долженко написал(а):

>>> А главное - ну что хорошего может делать диск в течении такого времени?
>>> Запиливать уже поврежденную поверхность, разьве что?
>> Действительно интересно что он это время делает.
>> Пытается считать, или ремапит что что обсыпалось?
>> Ремап выполняется только при попытке записи в pending (сбойный) sector.
ДД> Забавно. Т.е. если сектор сбойный контроллер при каждом считывании по
ДД> нему будет до SCT timeout елозить?

Да.

Eugene
--
Поэты - страшные люди. У них все святое.
--- slrn/1.0.1 (FreeBSD)