Welcome! Log In Create A New Profile

Advanced

Еще раз о дисковой подсистеме

Anton Kuznetsov
August 17, 2011 10:28AM
Добрый день!

Случилось у меня радость долгожданная - разжился большим пузатым сервером
под свои фильмы. 80ГБ оперативки, да дисков 12х2ТБ, да рейд-контроллеры
Adaptec ... Ну, думаю, заживу теперь как белый человек! Соберу все в
большие, надежные, быстрые рейды и будет мне удобно и комфортно. Но как
давно известно - выбери любые два из трех и заходи. :( Хотелось-то малого -
устал я жить размазав свой архив по 10 дискам и собирая все в один каталог
симлинками.
В новом сервере все диски подключены через два контроллера Adaptec 3805.
Сделал два рейда, один "железный" RAID5 на контроллере из 5 дисков, другие
диски объявил single volume и во фре собрал еще один массив так же из 5
дисков ZFS->raidz.
Полная грусть.
raidz работает близко к нулевой нагрузке, пока потоков штук 200 и мегабит
примерно 200-300. А потом, в какой-то момент gstat резко краснеет, все диски
100%, скорость падает с 300 до 200 и так все ровнехонько и тащится, все
nginx-ы в состоянии zio->. Никакие тюнинги внятного эффекта не дали.
Железный RAID5 по утвеждению gstat всегда читает блоками по 1М независимо от
значения kern.ipc.sfreadahead, нагрузку держит более линейно, но так же
плохо. Nginx начинает заваливаться в biord при 300-400 мегабитах.

Мои предыдущие достижения на тех же SATA дисках - до 200 мегабит с диска
(всем плохо конечно, но 6 дисков дают гигабит в полку) или 150 в
качественной отдаче, т.е. я наделся получить с этих рейдов качественные 750
мегабит, а реальный результат в разы хуже. Честно говоря связываться с
железным рейдом и не хочется - гибкости никакой. Можно ли потюнить ZFS для
высокопроизводительной отдачи больших файлов под nginx? Или возвращаться к
старой схеме одиночных дисков и опять забыть про надежность?


--
Best regards,
Anton Kuznetsov.
_______________________________________________
nginx-ru mailing list
nginx-ru@nginx.org
http://mailman.nginx.org/mailman/listinfo/nginx-ru
Subject Author Posted

Еще раз о дисковой подсистеме

Anton Kuznetsov August 17, 2011 10:28AM

Re: Еще раз о дисковой подсистеме

Alexander Petrovsky August 17, 2011 10:46AM

Re: Еще раз о дисковой подсистеме

Илья Винокуров August 17, 2011 10:54AM

Re: Еще раз о дисковой подсистеме

Anton Kuznetsov August 17, 2011 11:06AM

Re: Еще раз о дисковой подсистеме

Gena Makhomed August 20, 2011 08:28AM

Re: Еще раз о дисковой подсистеме

Михаил Монашёв August 17, 2011 03:06PM

Re: Еще раз о дисковой подсистеме

Anton Yuzhaninov August 17, 2011 03:10PM

Re: Еще раз о дисковой подсистеме

Андрей Василишин August 17, 2011 03:18PM

RE: Еще раз о дисковой подсистеме

Савельев Александр August 18, 2011 12:06AM

Re: Еще раз о дисковой подсистеме

Igor Sysoev August 18, 2011 12:40AM

Re: Еще раз о дисковой подсистеме

Anton Gorlov August 18, 2011 01:42AM

Re: Еще раз о дисковой подсистеме

Daniel Podolsky August 18, 2011 03:04AM

Re: Еще раз о дисковой подсистеме

Gena Makhomed August 18, 2011 04:14AM

Re[2]: Еще раз о дисковой подсистеме

Илья Винокуров August 18, 2011 04:50AM

Re: Еще раз о дисковой подсистеме

Андрей Василишин August 18, 2011 04:58AM

Re: Еще раз о дисковой подсистеме

Igor Sysoev August 18, 2011 05:02AM

Re[2]: Еще раз о дисковой подсистеме

Илья Винокуров August 18, 2011 09:50AM

Re: Еще раз о дисковой подсистеме

Igor Sysoev August 18, 2011 10:26AM

Re[2]: Еще раз о дисковой подсистеме

Илья Винокуров August 18, 2011 11:34AM

Re: Еще раз о дисковой подсистеме

Konstantin Gerasimenko August 19, 2011 10:04AM

Re: Еще раз о дисковой подсистеме

Gena Makhomed August 18, 2011 11:02AM

RE: Re[2]: Еще раз о дисковой подсистеме

Савельев Александр August 19, 2011 08:42AM

Re: Еще раз о дисковой подсистеме

Gena Makhomed August 18, 2011 10:42AM

Re[2]: Еще раз о дисковой подсистеме

Михаил Монашёв August 18, 2011 12:50PM

Re: Re[2]: Еще раз о дисковой подсистеме

Anton Kuznetsov August 19, 2011 08:30AM

Re: Еще раз о дисковой подсистеме

Андрей Василишин August 19, 2011 09:30AM

RE: Еще раз о дисковой подсистеме

Савельев Александр August 18, 2011 02:08AM

Re: Еще раз о дисковой подсистеме

Gena Makhomed August 20, 2011 08:52AM

Re: Еще раз о дисковой подсистеме

Andrey N. Oktyabrski August 20, 2011 02:26PM

Re: Еще раз о дисковой подсистеме

Daniel Podolsky August 20, 2011 02:50PM

Re[2]: Еще раз о дисковой подсистеме

Михаил Монашёв August 21, 2011 04:44AM

Re: Re[2]: Еще раз о дисковой подсистеме

Daniel Podolsky August 21, 2011 05:36AM

Re: Еще раз о дисковой подсистеме

Vladislav V. Prodan August 21, 2011 10:40AM

Re: Еще раз о дисковой подсистеме

squirl August 21, 2011 12:46PM

Re: Еще раз о дисковой подсистеме

Vladislav V. Prodan August 21, 2011 01:06PM

Re: Еще раз о дисковой подсистеме

squirl August 21, 2011 01:36PM

Re: Еще раз о дисковой подсистеме

Vladislav V. Prodan August 21, 2011 03:34PM

Re: Еще раз о дисковой подсистеме

Den Ivanov August 21, 2011 11:30PM

Re: Еще раз о дисковой подсистеме

Igor V. Fatkulin August 21, 2011 11:52PM

Re: Еще раз о дисковой подсистеме

Den Ivanov August 22, 2011 12:42AM

Re: Еще раз о дисковой подсистеме

Anton Kuznetsov August 23, 2011 06:50AM

Re[2]: Еще раз о дисковой подсистеме

Михаил Монашёв August 24, 2011 05:36AM

Re: Еще раз о дисковой подсистеме

Gena Makhomed August 20, 2011 04:42PM

Re: Еще раз о дисковой подсистеме

Daniel Podolsky August 24, 2011 05:26AM

Re: Еще раз о дисковой подсистеме

Andrey N. Oktyabrski August 24, 2011 05:40AM

Re: Еще раз о дисковой подсистеме

Igor Sysoev August 24, 2011 06:28AM

Re: Еще раз о дисковой подсистеме

Andrey N. Oktyabrski August 24, 2011 07:42AM

Re: Еще раз о дисковой подсистеме

Dmitry Ishutkin October 07, 2011 06:20AM

Re: Еще раз о дисковой подсистеме

arty777 October 07, 2011 08:46AM



Sorry, only registered users may post in this forum.

Click here to login

Online Users

Guests: 216
Record Number of Users: 8 on April 13, 2023
Record Number of Guests: 421 on December 02, 2018
Powered by nginx      Powered by FreeBSD      PHP Powered      Powered by MariaDB      ipv6 ready