Странности с дисками в Linux
Всем привет! Клиент арендовал тазик в ЦОД. И я на нем обнаружил такую вот странность с дисками. # hdparm -tT /dev/sda /dev/sda: Timing cached reads: 11054 MB in 2.00 seconds = 5532.70 MB/sec Timing buffered disk reads: 44 MB in 3.12 seconds = 14.11 MB/sec # hdparm -tT /dev/sdb /dev/sdb: Timing cached reads: 11634 MB in 2.00 seconds = 5823.44 MB/sec Timing buffered disk reads: 200 MB in 3.02 seconds = 66.23 MB/sec Т.е. два идентичных диска, но один (sda) стабильно и заметно притормаживает (14 vs 66 MB/sec). Диски вполне живые, если верить выхлопу smartctl. Тазик: MB: TYAN S5375G2NR-1U Disk controller: 82801IR/IO/IH (ICH9R/DO/DH) 4 port SATA IDE Controller Disks: 2 x Hitachi HDE72101 Linux kernel: 2.6.32-38-server Не подскажете, куда копать или чего от хостинг-провайдера хотеть ? TIA :) -- Regards, Michael Bochkaryov www.rattler.kiev.ua
2012/4/3 Michael Bochkaryov
Всем привет!
Клиент арендовал тазик в ЦОД. И я на нем обнаружил такую вот странность с дисками.
# hdparm -tT /dev/sda /dev/sda: Timing cached reads: 11054 MB in 2.00 seconds = 5532.70 MB/sec Timing buffered disk reads: 44 MB in 3.12 seconds = 14.11 MB/sec
# hdparm -tT /dev/sdb /dev/sdb: Timing cached reads: 11634 MB in 2.00 seconds = 5823.44 MB/sec Timing buffered disk reads: 200 MB in 3.02 seconds = 66.23 MB/sec
Т.е. два идентичных диска, но один (sda) стабильно и заметно притормаживает (14 vs 66 MB/sec). Диски вполне живые, если верить выхлопу smartctl.
Тазик: MB: TYAN S5375G2NR-1U Disk controller: 82801IR/IO/IH (ICH9R/DO/DH) 4 port SATA IDE Controller Disks: 2 x Hitachi HDE72101
Linux kernel: 2.6.32-38-server
Не подскажете, куда копать или чего от хостинг-провайдера хотеть ? Могу предположить, что стоит глянуть, где swap живет, ну и версию FW винтов, на вскидку.
TIA :)
-- Regards, Michael Bochkaryov www.rattler.kiev.ua
-- ~~~ WBR, Vitaliy Turovets Systems Administrator Corebug.Net +38(093)265-70-55 VITU-RIPE
4/3/2012 9:21 PM, Виталий Туровец wrote:
2012/4/3 Michael Bochkaryov
: Всем привет!
Клиент арендовал тазик в ЦОД. И я на нем обнаружил такую вот странность с дисками.
# hdparm -tT /dev/sda /dev/sda: Timing cached reads: 11054 MB in 2.00 seconds = 5532.70 MB/sec Timing buffered disk reads: 44 MB in 3.12 seconds = 14.11 MB/sec
# hdparm -tT /dev/sdb /dev/sdb: Timing cached reads: 11634 MB in 2.00 seconds = 5823.44 MB/sec Timing buffered disk reads: 200 MB in 3.02 seconds = 66.23 MB/sec
Т.е. два идентичных диска, но один (sda) стабильно и заметно притормаживает (14 vs 66 MB/sec). Диски вполне живые, если верить выхлопу smartctl.
Тазик: MB: TYAN S5375G2NR-1U Disk controller: 82801IR/IO/IH (ICH9R/DO/DH) 4 port SATA IDE Controller Disks: 2 x Hitachi HDE72101
Linux kernel: 2.6.32-38-server
Не подскажете, куда копать или чего от хостинг-провайдера хотеть ? Могу предположить, что стоит глянуть, где swap живет, ну и версию FW винтов, на вскидку.
Сервер сейчас не нагружен, а swap-разделы - на обоих винтах имеются. FW - одинаковая: Device Model: Hitachi HDE721010SLA330 Serial Number: STR6L7MS3AYHPS Firmware Version: ST6OA3AA Device Model: Hitachi HDE721010SLA330 Serial Number: STR6L7MS3AA4LS Firmware Version: ST6OA3AA Есть подозрение, что проблема где-то ближе к контроллеру SATA или кабелям. Но как быстро продиагностировать - непонятно :( -- Regards, Michael Bochkaryov www.rattler.kiev.ua
3 апреля 2012 г. 21:31 пользователь Michael Bochkaryov < misha@rattler.kiev.ua> написал:
2012/4/3 Michael Bochkaryov
: Т.е. два идентичных диска, но один (sda) стабильно и заметно притормаживает (14 vs 66 MB/sec). Диски вполне живые, если верить выхлопу smartctl.
Есть подозрение, что проблема где-то ближе к контроллеру SATA или кабелям. Но как быстро продиагностировать - непонятно :(
Не всегда аппаратные проблемы можно диагностировать программно. Для начала, попробовать заменить SATA кабель на более медленном диске. Если не поможет, тогда поменять диски местами. Станет понятно - диск или контроллер. Если сервер арендован - даже совсем плохой сапорт должен такие операции уметь. Если же свой - тут да, придется ехать. Хотя и тут часто можно договориться с техподдержкой.
Hi! 3 апр. 2012, в 21:04, Michael Bochkaryov написал(а):
Всем привет!
Клиент арендовал тазик в ЦОД. И я на нем обнаружил такую вот странность с дисками.
# hdparm -tT /dev/sda /dev/sda: Timing cached reads: 11054 MB in 2.00 seconds = 5532.70 MB/sec Timing buffered disk reads: 44 MB in 3.12 seconds = 14.11 MB/sec
# hdparm -tT /dev/sdb /dev/sdb: Timing cached reads: 11634 MB in 2.00 seconds = 5823.44 MB/sec Timing buffered disk reads: 200 MB in 3.02 seconds = 66.23 MB/sec
Т.е. два идентичных диска, но один (sda) стабильно и заметно притормаживает (14 vs 66 MB/sec). Диски вполне живые, если верить выхлопу smartctl.
Тазик: MB: TYAN S5375G2NR-1U Disk controller: 82801IR/IO/IH (ICH9R/DO/DH) 4 port SATA IDE Controller Disks: 2 x Hitachi HDE72101
Linux kernel: 2.6.32-38-server
Можно поменять диски местами (кабеля переткнуть) и понять, что вопрос не в контроллере. Можно предположить, что у того диска который тормозит много ремапленных секторов в той зоне где hdparm его тестирует, кол-во ремапленных секторов молжно увидеть по smartctl -A /dev/sdb но там не покажут где они. -- Victor Cheburkin VC319-RIPE, VC1-UANIC
4/4/2012 9:10 AM, Victor Cheburkin wrote:
Hi!
3 апр. 2012, в 21:04, Michael Bochkaryov написал(а):
Всем привет!
Клиент арендовал тазик в ЦОД. И я на нем обнаружил такую вот странность с дисками.
# hdparm -tT /dev/sda /dev/sda: Timing cached reads: 11054 MB in 2.00 seconds = 5532.70 MB/sec Timing buffered disk reads: 44 MB in 3.12 seconds = 14.11 MB/sec
# hdparm -tT /dev/sdb /dev/sdb: Timing cached reads: 11634 MB in 2.00 seconds = 5823.44 MB/sec Timing buffered disk reads: 200 MB in 3.02 seconds = 66.23 MB/sec
Т.е. два идентичных диска, но один (sda) стабильно и заметно притормаживает (14 vs 66 MB/sec). Диски вполне живые, если верить выхлопу smartctl.
Тазик: MB: TYAN S5375G2NR-1U Disk controller: 82801IR/IO/IH (ICH9R/DO/DH) 4 port SATA IDE Controller Disks: 2 x Hitachi HDE72101
Linux kernel: 2.6.32-38-server Можно поменять диски местами (кабеля переткнуть) и понять, что вопрос не в контроллере.
Не спасло. Характер проблемы не поменялся, хотя циферки несколько изменились (44 vs 19 MS/sec).
Можно предположить, что у того диска который тормозит много ремапленных секторов в той зоне где hdparm его тестирует, кол-во ремапленных секторов молжно увидеть по smartctl -A /dev/sdb но там не покажут где они.
Там все слишком чисто на обоих дисках - видимо, вполне свежие. Спасибо за советы, придется менять железку :) -- Regards, Michael Bochkaryov www.rattler.kiev.ua
On Tue, Apr 03, 2012 at 09:04:19PM +0300, Michael Bochkaryov wrote:
Всем привет!
Клиент арендовал тазик в ЦОД. И я на нем обнаружил такую вот странность с дисками.
# hdparm -tT /dev/sda /dev/sda: Timing cached reads: 11054 MB in 2.00 seconds = 5532.70 MB/sec Timing buffered disk reads: 44 MB in 3.12 seconds = 14.11 MB/sec
# hdparm -tT /dev/sdb /dev/sdb: Timing cached reads: 11634 MB in 2.00 seconds = 5823.44 MB/sec Timing buffered disk reads: 200 MB in 3.02 seconds = 66.23 MB/sec
Сколько отпахали? (в смарте оч удивитесь... наверно тыщ 40 часов?) Если это не странность контроллера (типа очень криво что-то поднялось, legacy ide mode или что-то такое) - скорее всего, замена светит. dd if=/dev/sda of=/dev/null bs=131072 count=10000 - чего будет? -- Best regards, Paul Arakelyan.
Сколько отпахали? (в смарте оч удивитесь... наверно тыщ 40 часов?) Если это не странность контроллера (типа очень криво что-то поднялось, legacy ide mode или что-то такое) - скорее всего, замена светит.
да меня очень часто удивляет отношение к ситуации: есть винт, с ним что-то непонятное происходит. Лучше поменять от греха подальше, ибо отвечать потом придется самому. Вопрос - нафига экономить на спичках.
dd if=/dev/sda of=/dev/null bs=131072 count=10000 - чего будет?
-- Best regards, Paul Arakelyan.
-- ------------------------------------------------------------------------------- Vasiliy P. Melnik VPM-UANIC
On Thu, Apr 05, 2012 at 08:10:09PM +0300, Vasiliy P. Melnik wrote:
Сколько отпахали? (в смарте оч удивитесь... наверно тыщ 40 часов?) Если это не странность контроллера (типа очень криво что-то поднялось, legacy ide mode или что-то такое) - скорее всего, замена светит.
да меня очень часто удивляет отношение к ситуации: есть винт, с ним что-то непонятное происходит. Лучше поменять от греха подальше, ибо отвечать потом придется самому.
Вопрос - нафига экономить на спичках.
Если ты арендуешь тазик - очень нередко там могут не въехать в чем грабли, начнется "тянулово времени", "мы попробовали а, б, и в, а вы за это нам денег". А уж на всякие "странности" не решаемые никак - я насмотрелся :( -- Best regards, Paul Arakelyan.
4/5/2012 8:10 PM, Vasiliy P. Melnik wrote:
Сколько отпахали? (в смарте оч удивитесь... наверно тыщ 40 часов?) Если это не странность контроллера (типа очень криво что-то поднялось, legacy ide mode или что-то такое) - скорее всего, замена светит. да меня очень часто удивляет отношение к ситуации: есть винт, с ним что-то непонятное происходит. Лучше поменять от греха подальше, ибо отвечать потом придется самому.
Вопрос - нафига экономить на спичках.
Вопрос в том, чтобы идентифицировать, что именно за проблема. В моем случае проблема оказалась несколько в другом месте. Кстати, интересно, из наших ЦОД кто-нибудь предоставляет оборудование, прошедшее адекватную проверку работоспособности? А то такое впечатление, что сервер собрали из загадочной комплектухи и сразу отдали клиенту на вылавливание багов. -- Regards, Michael Bochkaryov www.rattler.kiev.ua
2012/4/5 Michael Bochkaryov
Кстати, интересно, из наших ЦОД кто-нибудь предоставляет оборудование, прошедшее адекватную проверку работоспособности? А то такое впечатление, что сервер собрали из загадочной комплектухи и сразу отдали клиенту на вылавливание багов.
It is not f..ing surprise. Це така совкова бізнес-модель. Бо "дєньгі сільно нужни" /(С)/ Я знаю таких, що VDS-сервера віддають клієнтам відразу після інсталяції ОС із стандартного інсталяційного ISO'шного образу.
-- Regards, Michael Bochkaryovwww.rattler.kiev.ua
-- Regards, /oleh hrynchuk
On Thu, Apr 05, 2012 at 08:56:21PM +0300, Michael Bochkaryov wrote:
4/5/2012 8:10 PM, Vasiliy P. Melnik wrote:
Сколько отпахали? (в смарте оч удивитесь... наверно тыщ 40 часов?) Если это не странность контроллера (типа очень криво что-то поднялось, legacy ide mode или что-то такое) - скорее всего, замена светит. да меня очень часто удивляет отношение к ситуации: есть винт, с ним что-то непонятное происходит. Лучше поменять от греха подальше, ибо отвечать потом придется самому.
Вопрос - нафига экономить на спичках.
Вопрос в том, чтобы идентифицировать, что именно за проблема. В моем случае проблема оказалась несколько в другом месте.
Кстати, интересно, из наших ЦОД кто-нибудь предоставляет оборудование, прошедшее адекватную проверку работоспособности? А то такое впечатление, что сервер собрали из загадочной комплектухи и сразу отдали клиенту на вылавливание багов.
Из наших - я поверю, что кто-то есть, но в штатах - очень часто так и есть, особенно в бюджетном сегменте. И конечно, никто не горит желанием раскручивать-закручивать что-либо "для проверить". -- Best regards, Paul Arakelyan.
On Fri, Apr 06, 2012 at 06:10:11AM +0300, Oleh Hrynchuk wrote:
2012/4/5 Michael Bochkaryov
[dd] Кстати, интересно, из наших ЦОД кто-нибудь предоставляет оборудование, прошедшее
It is not f..ing surprise. Це така совкова бізнес-модель. Бо "дєньгі сільно нужни" /(С)/
Я знаю таких, що VDS-сервера віддають клієнтам відразу після інсталяції ОС із стандартного інсталяційного ISO'шного образу.
По-моему это нормально. Только очень продвинутые конторы будут что-то свое/преднастроенное тулить - и на это тоже будут плеваться. Если мне ставят фрю - то по жизни от них требуется только диск разбить "как охота" (это, оказывается многим не по силам :) ) и минимальный инсталл - но нередко народ склонен наворотить хз что - и ядро свое, и фаервол покрутить, и даже cvsup устроить чему не лень - "дорвались". VDS вообще б могли давать с консолькой и кучкой исошников - "ставьте-нехочу". А в одной голландской конторке - сервера по сети автосетапятся, меняй ОС по 5 раз на дню. -- Best regards, Paul Arakelyan.
4/6/2012 10:59 PM, Paul Arakelyan wrote:
Кстати, интересно, из наших ЦОД кто-нибудь предоставляет оборудование, прошедшее адекватную проверку работоспособности? А то такое впечатление, что сервер собрали из загадочной комплектухи и сразу отдали клиенту на вылавливание багов. Из наших - я поверю, что кто-то есть, но в штатах - очень часто так и есть, особенно в бюджетном сегменте. И конечно, никто не горит желанием раскручивать-закручивать что-либо "для проверить".
Как раз такое централизовано можно и нужно автоматизировать. И обойдется это дешевле, чем выяснять с клиентом в рукопашно-наколенном режиме, с заменой дисков, карточек и т.д. Сделать мини-дистр, который загрузится по PXE и автоматом протестирует железяку с последующим отчетом - вполне реально. А количество ручной работы для суппорта и негативного опыта клиентов уменьшит значительно. -- Regards, Michael Bochkaryov www.rattler.kiev.ua
4/6/2012 6:10 AM, Oleh Hrynchuk wrote:
2012/4/5 Michael Bochkaryov
mailto:misha@rattler.kiev.ua> [dd] Кстати, интересно, из наших ЦОД кто-нибудь предоставляет оборудование, прошедшее адекватную проверку работоспособности? А то такое впечатление, что сервер собрали из загадочной комплектухи и сразу отдали клиенту на вылавливание багов.
It is not f..ing surprise. Це така совкова бізнес-модель. Бо "дєньгі сільно нужни" /(С)/
Но ведь оно нафиг никому не выгодно %-) Придется ведь выловить эти же самые баги, только с каждым клиентом индивидуально, подстраиваясь под квалификацию и инструментарий, применяемый клиентом.
Я знаю таких, що VDS-сервера віддають клієнтам відразу після інсталяції ОС із стандартного інсталяційного ISO'шного образу.
Ну, это я склонен считать вполне допустимым вариантом. Как минимум, он очень предсказуем по результатам, что уже хорошо. -- Regards, Michael Bochkaryov www.rattler.kiev.ua
Колокол собирает стандартные и проверенные конфигурации. На мало-мальском потоке это должно быть выгодно - во-первых, дешевле по капексу, а во-вторых, как правильно заметил Миша, по опексу. On 4/8/12 3:26 PM, Michael Bochkaryov wrote:
4/6/2012 6:10 AM, Oleh Hrynchuk wrote:
2012/4/5 Michael Bochkaryov
mailto:misha@rattler.kiev.ua> [dd] Кстати, интересно, из наших ЦОД кто-нибудь предоставляет оборудование, прошедшее адекватную проверку работоспособности? А то такое впечатление, что сервер собрали из загадочной комплектухи и сразу отдали клиенту на вылавливание багов.
It is not f..ing surprise. Це така совкова бізнес-модель. Бо "дєньгі сільно нужни" /(С)/
Но ведь оно нафиг никому не выгодно %-)
Придется ведь выловить эти же самые баги, только с каждым клиентом индивидуально, подстраиваясь под квалификацию и инструментарий, применяемый клиентом.
Я знаю таких, що VDS-сервера віддають клієнтам відразу після інсталяції ОС із стандартного інсталяційного ISO'шного образу.
Ну, это я склонен считать вполне допустимым вариантом. Как минимум, он очень предсказуем по результатам, что уже хорошо.
-- Regards, Michael Bochkaryov www.rattler.kiev.ua
-- /doka ~~~~~~~~ http://doka-ua.blogspot.com/ http://omar-ha-em.blogspot.com/ "Справа не в церкві і не в наркотиках. Справа у відповідальності та вдячності. Якщо в тебе це є, маєш шанс померти не останньою скотиною." (с) С.Жадан, "Ворошиловград"
participants (9)
-
Michael Bochkaryov
-
Mike Petrusha
-
Oleh Hrynchuk
-
Paul Arakelyan
-
Serge Negodyuck
-
Vasiliy P. Melnik
-
Victor Cheburkin
-
Vladimir Litovka
-
Виталий Туровец