Привет.

Не совсем про PHP, но про базу данных...

Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
RAID10+spare или RAID5 ?

Я обычно пользовался RAID5, но вот тут его сильно ругают
http://www.miracleas.com/BAARF/RAID5_versus_RAID10.txt


--
Regards,
Oleg

я выбрал 10, дисков как раз 4 шт было, но вот сейчас присматриваюсь к
SSD, дали потестировать на 64гб. закинул на него базу баннерокрутилки
(около 2мл показов в сутки) и саму баннерокрутилку. при копировании
1гб файла в /dev/null с sata диска (не в рейде) выдает макс 10мб/с, а
с SSD 50мб/с. при том, что SSD под нагрузкой, а sata практически нет.

Denis Kot




23 октября 2010 г. 14:41 пользователь Oleg Motienko
<motienko@gmail.com> написал:
> Привет.
>
> Не совсем про PHP, но про базу данных...
>
> Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
> RAID10+spare или RAID5 ?
>
> Я обычно пользовался RAID5, но вот тут его сильно ругают
> http://www.miracleas.com/BAARF/RAID5_versus_RAID10.txt
>
>
> --
> Regards,
> Oleg
>

10мб/с как-то совсем мало...
у меня на ноуте винчестер выдаёт 40-45...

2010/10/23 Denis Kot <denis.kot@gmail.com>

> я выбрал 10, дисков как раз 4 шт было, но вот сейчас присматриваюсь к
> SSD, дали потестировать на 64гб. закинул на него базу баннерокрутилки
> (около 2мл показов в сутки) и саму баннерокрутилку. при копировании
> 1гб файла в /dev/null с sata диска (не в рейде) выдает макс 10мб/с, а
> с SSD 50мб/с. при том, что SSD под нагрузкой, а sata практически нет.
>
> Denis Kot
>
>
>
>
> 23 октября 2010 г. 14:41 пользователь Oleg Motienko
> <motienko@gmail.com> написал:
> > Привет.
> >
> > Не совсем про PHP, но про базу данных...
> >
> > Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
> > RAID10+spare или RAID5 ?
> >
> > Я обычно пользовался RAID5, но вот тут его сильно ругают
> > http://www.miracleas.com/BAARF/RAID5_versus_RAID10.txt
> >
> >
> > --
> > Regards,
> > Oleg
> >
>

У меня SATA на 2Тб производства WD модель WD20EARS с 64Мб кэша и
скоростью вращения шпинделя 5400, так и он за 25-30Мб/с отдает. 10
как-то слабовато

23 октября 2010 г. 16:45 пользователь Oleg Motienko
<motienko@gmail.com> написал:
> 10мб/с как-то совсем мало...
> у меня на ноуте винчестер выдаёт 40-45...
>
> 2010/10/23 Denis Kot <denis.kot@gmail.com>
>>
>> я выбрал 10, дисков как раз 4 шт было, но вот сейчас присматриваюсь к
>> SSD, дали потестировать на 64гб. закинул на него базу баннерокрутилки
>> (около 2мл показов в сутки) и саму баннерокрутилку. при копировании
>> 1гб файла в /dev/null с sata диска (не в рейде) выдает макс 10мб/с, а
>> с SSD 50мб/с. при том, что SSD под нагрузкой, а sata практически нет.
>>
>> Denis Kot
>>
>>
>>
>>
>> 23 октября 2010 г. 14:41 пользователь Oleg Motienko
>> <motienko@gmail.com> написал:
>> > Привет.
>> >
>> > Не совсем про PHP, но про базу данных...
>> >
>> > Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
>> > RAID10+spare или RAID5 ?
>> >
>> > Я обычно пользовался RAID5, но вот тут его сильно ругают
>> > http://www.miracleas.com/BAARF/RAID5_versus_RAID10.txt
>> >
>> >
>> > --
>> > Regards,
>> > Oleg
>> >
>
>

Ну это пишет mc в Linux. hdparm -t выдает около 70мб/с для sata и
около 110мб/с для ssd. так что не знаю кому верить. чем потестить?

Denis Kot




23 октября 2010 г. 15:45 пользователь Oleg Motienko
<motienko@gmail.com> написал:
> 10мб/с как-то совсем мало...
> у меня на ноуте винчестер выдаёт 40-45...
>
> 2010/10/23 Denis Kot <denis.kot@gmail.com>
>>
>> я выбрал 10, дисков как раз 4 шт было, но вот сейчас присматриваюсь к
>> SSD, дали потестировать на 64гб. закинул на него базу баннерокрутилки
>> (около 2мл показов в сутки) и саму баннерокрутилку. при копировании
>> 1гб файла в /dev/null с sata диска (не в рейде) выдает макс 10мб/с, а
>> с SSD 50мб/с. при том, что SSD под нагрузкой, а sata практически нет.
>>
>> Denis Kot
>>
>>
>>
>>
>> 23 октября 2010 г. 14:41 пользователь Oleg Motienko
>> <motienko@gmail.com> написал:
>> > Привет.
>> >
>> > Не совсем про PHP, но про базу данных...
>> >
>> > Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
>> > RAID10+spare или RAID5 ?
>> >
>> > Я обычно пользовался RAID5, но вот тут его сильно ругают
>> > http://www.miracleas.com/BAARF/RAID5_versus_RAID10.txt
>> >
>> >
>> > --
>> > Regards,
>> > Oleg
>> >
>
>

23.10.2010 14:41, Oleg Motienko пишет:
> Привет.
>
> Не совсем про PHP, но про базу данных...
>
> Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
> RAID10+spare или RAID5 ?
RAID10
и для мускула, возможно, зеркало SSD
у SSD важно бОльшее количество операций IO
ну и зависит от реализации RAID'a - программный, аппаратный на какой Оси...

--
Vladislav V. Prodan
VVP24-UANIC
+38[067]4584408
vlad11@jabber.ru

4x320Gb SATA RAID10 @ Adaptec 5405

по scp льется 60 Мбайт\сек
локально на сервере из файла в файл:

db1# iostat -w1 -d aacd0
aacd0
KB/t tps MB/s
14.75 83 1.19
14.54 81 1.16
25.74 197 4.94
11.70 526 6.01
13.70 383 5.13
21.83 514 10.96
15.55 245 3.72
57.38 1058 59.26
61.86 2202 132.99
60.70 2235 132.51
60.99 2115 125.98
59.55 1944 113.06




23 октября 2010 г. 15:53 пользователь Denis Kot <denis.kot@gmail.com>написал:

> Ну это пишет mc в Linux. hdparm -t выдает около 70мб/с для sata и
> около 110мб/с для ssd. так что не знаю кому верить. чем потестить?
>
> Denis Kot
>
>
>
>
> 23 октября 2010 г. 15:45 пользователь Oleg Motienko
> <motienko@gmail.com> написал:
> > 10мб/с как-то совсем мало...
> > у меня на ноуте винчестер выдаёт 40-45...
> >
> > 2010/10/23 Denis Kot <denis.kot@gmail.com>
> >>
> >> я выбрал 10, дисков как раз 4 шт было, но вот сейчас присматриваюсь к
> >> SSD, дали потестировать на 64гб. закинул на него базу баннерокрутилки
> >> (около 2мл показов в сутки) и саму баннерокрутилку. при копировании
> >> 1гб файла в /dev/null с sata диска (не в рейде) выдает макс 10мб/с, а
> >> с SSD 50мб/с. при том, что SSD под нагрузкой, а sata практически нет.
> >>
> >> Denis Kot
> >>
> >>
> >>
> >>
> >> 23 октября 2010 г. 14:41 пользователь Oleg Motienko
> >> <motienko@gmail.com> написал:
> >> > Привет.
> >> >
> >> > Не совсем про PHP, но про базу данных...
> >> >
> >> > Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
> >> > RAID10+spare или RAID5 ?
> >> >
> >> > Я обычно пользовался RAID5, но вот тут его сильно ругают
> >> > http://www.miracleas.com/BAARF/RAID5_versus_RAID10.txt
> >> >
> >> >
> >> > --
> >> > Regards,
> >> > Oleg
> >> >
> >
> >
>



--
Think before you print.
Best regards, Alexey Bobok.

Потести через dd, посмотри в это время iostat/dstat и знаешь где потолок.

2010/10/23 Denis Kot <denis.kot@gmail.com>

> Ну это пишет mc в Linux. hdparm -t выдает около 70мб/с для sata и
> около 110мб/с для ssd. так что не знаю кому верить. чем потестить?
>
> Denis Kot
>
>
>
>
> 23 октября 2010 г. 15:45 пользователь Oleg Motienko
> <motienko@gmail.com> написал:
> > 10мб/с как-то совсем мало...
> > у меня на ноуте винчестер выдаёт 40-45...
> >
> > 2010/10/23 Denis Kot <denis.kot@gmail.com>
> >>
> >> я выбрал 10, дисков как раз 4 шт было, но вот сейчас присматриваюсь к
> >> SSD, дали потестировать на 64гб. закинул на него базу баннерокрутилки
> >> (около 2мл показов в сутки) и саму баннерокрутилку. при копировании
> >> 1гб файла в /dev/null с sata диска (не в рейде) выдает макс 10мб/с, а
> >> с SSD 50мб/с. при том, что SSD под нагрузкой, а sata практически нет.
> >>
> >> Denis Kot
> >>
> >>
> >>
> >>
> >> 23 октября 2010 г. 14:41 пользователь Oleg Motienko
> >> <motienko@gmail.com> написал:
> >> > Привет.
> >> >
> >> > Не совсем про PHP, но про базу данных...
> >> >
> >> > Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
> >> > RAID10+spare или RAID5 ?
> >> >
> >> > Я обычно пользовался RAID5, но вот тут его сильно ругают
> >> > http://www.miracleas.com/BAARF/RAID5_versus_RAID10.txt
> >> >
> >> >
> >> > --
> >> > Regards,
> >> > Oleg
> >> >
> >
> >
>



--
Serg Smirnov
email/xmpp: Sergey.A.Smirnov@Gmail.com
skype: serg-smirnoff

mc конечно программа полезная )) но я просто рассчитал перезаливая
видеоархив с одного 2Тб на другой такой же. Учел некоторую огрешность.
Всего фалов боло около 1400 штук, суммарный объем составил около
1600Гб. Мне кажется самый правильный способ тестирования и оценки -
использование ))

23 октября 2010 г. 16:53 пользователь Denis Kot <denis.kot@gmail.com> написал:
> Ну это пишет mc в Linux. hdparm -t выдает около 70мб/с для sata и
> около 110мб/с для ssd. так что не знаю кому верить. чем потестить?
>
> Denis Kot
>
>
>
>
> 23 октября 2010 г. 15:45 пользователь Oleg Motienko
> <motienko@gmail.com> написал:
>> 10мб/с как-то совсем мало...
>> у меня на ноуте винчестер выдаёт 40-45...
>>
>> 2010/10/23 Denis Kot <denis.kot@gmail.com>
>>>
>>> я выбрал 10, дисков как раз 4 шт было, но вот сейчас присматриваюсь к
>>> SSD, дали потестировать на 64гб. закинул на него базу баннерокрутилки
>>> (около 2мл показов в сутки) и саму баннерокрутилку. при копировании
>>> 1гб файла в /dev/null с sata диска (не в рейде) выдает макс 10мб/с, а
>>> с SSD 50мб/с. при том, что SSD под нагрузкой, а sata практически нет.
>>>
>>> Denis Kot
>>>
>>>
>>>
>>>
>>> 23 октября 2010 г. 14:41 пользователь Oleg Motienko
>>> <motienko@gmail.com> написал:
>>> > Привет.
>>> >
>>> > Не совсем про PHP, но про базу данных...
>>> >
>>> > Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
>>> > RAID10+spare или RAID5 ?
>>> >
>>> > Я обычно пользовался RAID5, но вот тут его сильно ругают
>>> > http://www.miracleas.com/BAARF/RAID5_versus_RAID10.txt
>>> >
>>> >
>>> > --
>>> > Regards,
>>> > Oleg
>>> >
>>
>>
>

Потестил в вариантах с RAID5 и RAID10 на одной и той же корзине


=========================================
=========================================

raid5 из 4 дисков +1 спар

Линейная запись (lvm+файловая система ext4)


# dd if=/dev/zero of=/mnt3/dfwftest5.bin bs=64k count=512k
524288+0 records in
524288+0 records out
34359738368 bytes (34 GB) copied, 99.5473 s, 345 MB/s


Линейное чтение

# dd if=/mnt3/dfwftest5.bin of=/dev/null bs=64k count=512k
524288+0 records in
524288+0 records out
34359738368 bytes (34 GB) copied, 85.4812 s, 402 MB/s

=========================================
=========================================

raid10 из 4 дисков +1 спар

запись

# dd if=/dev/zero of=/mnt3/dfwftest10.bin bs=64k count=512k
524288+0 records in
524288+0 records out
34359738368 bytes (34 GB) copied, 151.27 s, 227 MB/s


Чтение с RAID10

# dd if=/mnt3/dfwftest10.bin of=/dev/null bs=64k count=512k
524288+0 records in
524288+0 records out
34359738368 bytes (34 GB) copied, 86.8828 s, 395 MB/s


=========================================
=========================================

В режиме ребилда скорость падает где-то до 150MB/s у RAID10 и 170MB/s у RAID5.


А теперь вопрос: почему же так ругают RAID5, вроде бы он по скоростным
параметрам лучше?


2010/10/23 Serg Smirnov <sergey.a.smirnov@gmail.com>
>
> Потести через dd, посмотри в это время iostat/dstat и знаешь где потолок.
>

On 23.10.2010, at 18:56, Oleg Motienko wrote:

> Потестил в вариантах с RAID5 и RAID10 на одной и той же корзине

> А теперь вопрос: почему же так ругают RAID5, вроде бы он по скоростным
> параметрам лучше?

Вопрос ровно в том, зачем тебе синтетические тесты на линейную запись / чтение (в один поток!).

--
Алексей Бещёков
+7 495 7853149
proforg@gmail.com

Наверное, правильнее сделать тесты через fio в несколько потоков?
Почитал examples, но не совсем понял, как писать конфиг и как анализировать
данные.

У кого-нибудь есть опыт и примеры?

2010/10/23 Алексей Бещёков <proforg@gmail.com>

>
> Вопрос ровно в том, зачем тебе синтетические тесты на линейную запись /
> чтение (в один поток!).
>
>

для этого нужно использовать sysbench или bonnie++

24 октября 2010 г. 17:06 пользователь Oleg Motienko <motienko@gmail.com>написал:

> Наверное, правильнее сделать тесты через fio в несколько потоков?
> Почитал examples, но не совсем понял, как писать конфиг и как анализировать
> данные.
>
> У кого-нибудь есть опыт и примеры?
>
> 2010/10/23 Алексей Бещёков <proforg@gmail.com>
>
>
>> Вопрос ровно в том, зачем тебе синтетические тесты на линейную запись /
>> чтение (в один поток!).
>>
>>

а еще лучше iometer

> для этого нужно использовать sysbench или bonnie++

а он без иксов работает?

25 октября 2010 г. 13:51 пользователь si <sitnikov@gmail.com> написал:

> а еще лучше iometer
>
> > для этого нужно использовать sysbench или bonnie++
>

Vladislav V. Prodan wrote:
> 23.10.2010 14:41, Oleg Motienko пишет:
>
>> Привет.
>>
>> Не совсем про PHP, но про базу данных...
>>
>> Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
>> RAID10+spare или RAID5 ?
>>
> RAID10
> и для мускула, возможно, зеркало SSD
> у SSD важно бОльшее количество операций IO
>

Я помню когдато в nginx-ru народ сетовал на SSD,
чтобы быстро дохнет(может сдохнуть) при интенсивных записях (в DВ на
нем, например)...




> ну и зависит от реализации RAID'a - программный, аппаратный на какой Оси...
>
>

24.10.2010 11:38, Sergej Kandyla пишет:
> Vladislav V. Prodan wrote:
>> 23.10.2010 14:41, Oleg Motienko пишет:
>>
>>> Привет.
>>>
>>> Не совсем про PHP, но про базу данных...
>>>
>>> Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
>>> RAID10+spare или RAID5 ?
>>>
>> RAID10
>> и для мускула, возможно, зеркало SSD
>> у SSD важно бОльшее количество операций IO
>>
>
> Я помню когдато в nginx-ru народ сетовал на SSD,
> чтобы быстро дохнет(может сдохнуть) при интенсивных записях (в DВ на
> нем, например)...
>

поэтому и миррор.
Один сдохнет - заменят на другой :)

--
Vladislav V. Prodan
VVP24-UANIC
+38[067]4584408
vlad11@jabber.ru

ну на сколько я знаю он не сразу дохнент, а уменьшается в размере
закрывая недоступные на запись блоки.

Denis Kot




25 октября 2010 г. 13:51 пользователь Vladislav V. Prodan
<universite@ukr.net> написал:
> 24.10.2010 11:38, Sergej Kandyla пишет:
>> Vladislav V. Prodan wrote:
>>> 23.10.2010 14:41, Oleg Motienko пишет:
>>>
>>>> Привет.
>>>>
>>>> Не совсем про PHP, но про базу данных...
>>>>
>>>> Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
>>>> RAID10+spare или RAID5 ?
>>>>
>>> RAID10
>>> и для мускула, возможно, зеркало SSD
>>> у SSD важно бОльшее количество операций IO
>>>
>>
>> Я помню когдато в nginx-ru народ сетовал на SSD,
>> чтобы быстро дохнет(может сдохнуть) при интенсивных записях (в DВ на
>> нем, например)...
>>
>
> поэтому и миррор.
> Один сдохнет - заменят на другой :)
>
> --
> Vladislav V. Prodan
> VVP24-UANIC
> +38[067]4584408
> vlad11@jabber.ru
>

не доверяю райдам на декстопніх хардах для єтого юзаю ACHI (SATA+NCQ)
для серверов можно и SAS

On 25 окт, 12:55, Denis Kot <denis....@gmail.com> wrote:
> ну на сколько я знаю он не сразу дохнент, а уменьшается в размере
> закрывая недоступные на запись блоки.
>
> Denis Kot
>
> 25 октября 2010 г. 13:51 пользователь Vladislav V. Prodan
> <univers...@ukr.net> написал:
>
>
>
> > 24.10.2010 11:38, Sergej Kandyla пишет:
> >> Vladislav V. Prodan wrote:
> >>> 23.10.2010 14:41, Oleg Motienko пишет:
>
> >>>> Привет.
>
> >>>> Не совсем про PHP, но про базу данных...
>
> >>>> Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
> >>>> RAID10+spare или RAID5 ?
>
> >>> RAID10
> >>> и для мускула, возможно, зеркало SSD
> >>> у SSD важно бОльшее количество операций IO
>
> >> Я помню когдато в nginx-ru народ сетовал на SSD,
> >> чтобы быстро дохнет(может сдохнуть) при интенсивных записях (в DВ на
> >> нем, например)...
>
> > поэтому и миррор.
> > Один сдохнет - заменят на другой :)
>
> > --
> > Vladislav V. Prodan
> > VVP24-UANIC
> > +38[067]4584408
> > vla...@jabber.ru

дохнуть под нагрузкой однозначно.
недавно вот че нашел
http://www.mysqlperformanceblog.com/2009/05/01/raid-vs-ssd-vs-fusionio/

31 октября 2010 г. 17:00 пользователь PandoraBox2007 <
pandorabox2007@gmail.com> написал:

> не доверяю райдам на декстопніх хардах для єтого юзаю ACHI (SATA+NCQ)
> для серверов можно и SAS
>
> On 25 окт, 12:55, Denis Kot <denis....@gmail.com> wrote:
> > ну на сколько я знаю он не сразу дохнент, а уменьшается в размере
> > закрывая недоступные на запись блоки.
> >
> > Denis Kot
> >
> > 25 октября 2010 г. 13:51 пользователь Vladislav V. Prodan
> > <univers...@ukr.net> написал:
> >
> >
> >
> > > 24.10.2010 11:38, Sergej Kandyla пишет:
> > >> Vladislav V. Prodan wrote:
> > >>> 23.10.2010 14:41, Oleg Motienko пишет:
> >
> > >>>> Привет.
> >
> > >>>> Не совсем про PHP, но про базу данных...
> >
> > >>>> Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
> > >>>> RAID10+spare или RAID5 ?
> >
> > >>> RAID10
> > >>> и для мускула, возможно, зеркало SSD
> > >>> у SSD важно бОльшее количество операций IO
> >
> > >> Я помню когдато в nginx-ru народ сетовал на SSD,
> > >> чтобы быстро дохнет(может сдохнуть) при интенсивных записях (в DВ на
> > >> нем, например)...
> >
> > > поэтому и миррор.
> > > Один сдохнет - заменят на другой :)
> >
> > > --
> > > Vladislav V. Prodan
> > > VVP24-UANIC
> > > +38[067]4584408
> > > vla...@jabber.ru

ssd дохнет действительно быстро ее можно юзать только как дешёвую
оперативку 32/64гб а вообще хранить данные лучше на проверенных
временем HDD

On 1 ноя, 09:59, "-=HaRius=-" <r...@nobrend.ru> wrote:
> дохнуть под нагрузкой однозначно.
> недавно вот че нашелhttp://www.mysqlperformanceblog.com/2009/05/01/raid-vs-ssd-vs-fusionio/
>
> 31 октября 2010 г. 17:00 пользователь PandoraBox2007 <
> pandorabox2...@gmail.com> написал:
>
>
>
> > не доверяю райдам на декстопніх хардах для єтого юзаю ACHI (SATA+NCQ)
> > для серверов можно и SAS
>
> > On 25 окт, 12:55, Denis Kot <denis....@gmail.com> wrote:
> > > ну на сколько я знаю он не сразу дохнент, а уменьшается в размере
> > > закрывая недоступные на запись блоки.
>
> > > Denis Kot
>
> > > 25 октября 2010 г. 13:51 пользователь Vladislav V. Prodan
> > > <univers...@ukr.net> написал:
>
> > > > 24.10.2010 11:38, Sergej Kandyla пишет:
> > > >> Vladislav V. Prodan wrote:
> > > >>> 23.10.2010 14:41, Oleg Motienko пишет:
>
> > > >>>> Привет.
>
> > > >>>> Не совсем про PHP, но про базу данных...
>
> > > >>>> Есть корзина на 5 дисков, что бы вы выбрали для хранилища MySQL -
> > > >>>> RAID10+spare или RAID5 ?
>
> > > >>> RAID10
> > > >>> и для мускула, возможно, зеркало SSD
> > > >>> у SSD важно бОльшее количество операций IO
>
> > > >> Я помню когдато в nginx-ru народ сетовал на SSD,
> > > >> чтобы быстро дохнет(может сдохнуть) при интенсивных записях (в DВ на
> > > >> нем, например)...
>
> > > > поэтому и миррор.
> > > > Один сдохнет - заменят на другой :)
>
> > > > --
> > > > Vladislav V. Prodan
> > > > VVP24-UANIC
> > > > +38[067]4584408
> > > > vla...@jabber.ru