Создание отказоустойчивого сетевого хранилища ГИС данных

Обсуждение материалов сайта: вопросы, замечания, предложения
Аватара пользователя
Дмитрий Барышников
Гуру
Сообщения: 2572
Зарегистрирован: 17 ноя 2009, 19:17
Репутация: 261
Откуда: Москва

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение Дмитрий Барышников » 24 сен 2012, 20:12

Konstantin Tokar писал(а): А кстати. Вам зачем NAS, если, как я понял, доступ только с одного компьютера??? Тривиальное решение - к одному из рабочих компьютеров прикрепить DAS, и расшарить его стандартными средствами, если нужно изредка по сети раздавать.
Собирал не для себя. По просьбе. Честно говоря я DAS даже и не рассматривал. То что вы привели - интересные модели.
В моем варианте, на всякий случай, заложил возможность серверной обработки хранящейся информации (я как раз wxGIS пилю в этом направлении). Пока в режиме байтомолотилки без особой оптимизации по железу (хотя, в перспективе, можно и процессор по-мощнее поставить).
К DAS нужен компьютер, а я сейчас с ноутом, который с собой таскаю. Т.е. все равно комп брать пришлось бы. А так он стоит в углу и по-тихоньку растры обрабатывает.

Аватара пользователя
Дмитрий Барышников
Гуру
Сообщения: 2572
Зарегистрирован: 17 ноя 2009, 19:17
Репутация: 261
Откуда: Москва

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение Дмитрий Барышников » 24 сен 2012, 20:53

jerry_maori писал(а):спасибо за статью.
если есть возможность, то не могли бы провести замеры производительности по следующим сценариям:
1. Одновременный доступ 3-4 пользователей к разным (локализованным на разных участках дискового массива) наборам мелких файлов?
2. Одновременный доступ 3-4 пользователей к разным (локализованным на разных участках дискового массива) наборам больших по объёму файлов (типа растр и т.п.)?

И ОЧЕНЬ интересует температурный режим винчестеров при работе.
Как и обещал провел тестирование. Даже реанимировал старый ноутбук. Вот результаты.

Аватара пользователя
jerry-maori
Гуру
Сообщения: 585
Зарегистрирован: 22 авг 2012, 17:02
Репутация: 143
Откуда: Нижний Новгород

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение jerry-maori » 24 сен 2012, 21:35

ну тащемта результаты тестов нам говорят, что с своей базовой функцией полученный кадаврик справляется... с чем автора можно и поздравить...

P.S.: а зачем гиговый свитч на 16 портов?
http://www.citilink.ru/catalog/servers_ ... hes/55908/ вот такой у меня стоит на работе. в прицнипе при одновременном логине 10 машин на домен с перемещаемыми профилями не захлёбывается. но брался тогда самый дешёвый... а так бы взял простенький HP неуправляемый.

Аватара пользователя
Дмитрий Барышников
Гуру
Сообщения: 2572
Зарегистрирован: 17 ноя 2009, 19:17
Репутация: 261
Откуда: Москва

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение Дмитрий Барышников » 24 сен 2012, 21:53

Делаю ремонт. Запланировал 12 розеток сетевых в стены вмонтировать - хочу завести на хаб. Одновременно дай бог 3-4 устройства будут работать. D-LINK DGS-1016D тоже на работе. Через 3 года начали визжать вентиляторы. У вас такого не было? А HP какой - скинте ссылку.

Konstantin Tokar
Активный участник
Сообщения: 178
Зарегистрирован: 16 июл 2008, 09:56
Репутация: 1
Откуда: Москва

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение Konstantin Tokar » 24 сен 2012, 23:12

Bishop писал(а):Делаю ремонт. Запланировал 12 розеток сетевых в стены вмонтировать - хочу завести на хаб. Одновременно дай бог 3-4 устройства будут работать. D-LINK DGS-1016D тоже на работе. Через 3 года начали визжать вентиляторы. У вас такого не было? А HP какой - скинте ссылку.
Вентиляторы по любому долго не живут. Если на производительность смотреть, то имеет смысл смотреть на отзывы в обсуждениях выбора свича под iSCSI - это сейчас становится модным, и не все свичи и сетевые карты хорошо работают на повышенных нагрузках, как оказалось. И смотреть надо перед покупкой, так как цены могут упасть очень сильно.

Аватара пользователя
jerry-maori
Гуру
Сообщения: 585
Зарегистрирован: 22 авг 2012, 17:02
Репутация: 143
Откуда: Нижний Новгород

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение jerry-maori » 25 сен 2012, 06:47

Bishop писал(а):Делаю ремонт. Запланировал 12 розеток сетевых в стены вмонтировать - хочу завести на хаб. Одновременно дай бог 3-4 устройства будут работать. D-LINK DGS-1016D тоже на работе. Через 3 года начали визжать вентиляторы. У вас такого не было? А HP какой - скинте ссылку.
http://h10010.www1.hp.com/wwpc/ru/ru/sm ... html?dnr=1 вот такой у коллег стоит... очень они ему радуются...
по вентилятору -- х.з... у меня ему пока год.

Аватара пользователя
novia
Гуру
Сообщения: 2261
Зарегистрирован: 29 апр 2011, 15:06
Репутация: 489
Откуда: Тель-Авив

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение novia » 25 сен 2012, 08:48

Bishop писал(а): Как и обещал провел тестирование. Даже реанимировал старый ноутбук. Вот результаты.
а на совсем мелких до 500кб не пробовали? что в целом имитировало бы работу, например, по заливке файловой БГД
понравилось? жми палец вверх :!:

Аватара пользователя
Дмитрий Барышников
Гуру
Сообщения: 2572
Зарегистрирован: 17 ноя 2009, 19:17
Репутация: 261
Откуда: Москва

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение Дмитрий Барышников » 25 сен 2012, 10:05

jerry_maori писал(а): http://h10010.www1.hp.com/wwpc/ru/ru/sm ... html?dnr=1 вот такой у коллег стоит... очень они ему радуются...
Хорошее предложение.

Аватара пользователя
Дмитрий Барышников
Гуру
Сообщения: 2572
Зарегистрирован: 17 ноя 2009, 19:17
Репутация: 261
Откуда: Москва

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение Дмитрий Барышников » 25 сен 2012, 10:07

novia писал(а): а на совсем мелких до 500кб не пробовали? что в целом имитировало бы работу, например, по заливке файловой БГД
Я попробую. В каком режиме? По сети или локально, с нескольких компов или с одного?

Аватара пользователя
novia
Гуру
Сообщения: 2261
Зарегистрирован: 29 апр 2011, 15:06
Репутация: 489
Откуда: Тель-Авив

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение novia » 25 сен 2012, 12:35

Bishop писал(а):
novia писал(а): а на совсем мелких до 500кб не пробовали? что в целом имитировало бы работу, например, по заливке файловой БГД
Я попробую. В каком режиме? По сети или локально, с нескольких компов или с одного?
по сети. с одного, а потом, например, с двух (где один пишет файлы, а другой скачивает записанные в первый раз).
последний тест - это условия "близкие к боевым", на мой взгляд)
понравилось? жми палец вверх :!:

Аватара пользователя
Дмитрий Барышников
Гуру
Сообщения: 2572
Зарегистрирован: 17 ноя 2009, 19:17
Репутация: 261
Откуда: Москва

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение Дмитрий Барышников » 25 сен 2012, 22:19

Прогнал тест. 291 МБ директория из ~1КБ файлов (1380 файлов).
Скорость чтения для Linux 30-35 МБ/с, при записи Windows - 6-8 МБ/с.
Скорость чтения для Windows 10-12 МБ/с, при записи Linux - 8-9 МБ/с.

Странно скачет скорость и Linux-Linux все быстрее.

Konstantin Tokar
Активный участник
Сообщения: 178
Зарегистрирован: 16 июл 2008, 09:56
Репутация: 1
Откуда: Москва

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение Konstantin Tokar » 25 сен 2012, 22:50

Bishop писал(а):Прогнал тест. 291 МБ директория из ~1КБ файлов (1380 файлов).
1024*1380 = 1 мегабайт, не 291. Где-то ошибка.

Аватара пользователя
Дмитрий Барышников
Гуру
Сообщения: 2572
Зарегистрирован: 17 ноя 2009, 19:17
Репутация: 261
Откуда: Москва

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение Дмитрий Барышников » 26 сен 2012, 00:22

Да не, все правильно. См. вложение.
dir.txt
(125.37 КБ) 729 скачиваний

Аватара пользователя
novia
Гуру
Сообщения: 2261
Зарегистрирован: 29 апр 2011, 15:06
Репутация: 489
Откуда: Тель-Авив

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение novia » 10 янв 2013, 10:58

недавно на хабре вышла интересная статья про отказоустойчивость и raid.
понравилось? жми палец вверх :!:

Аватара пользователя
Дмитрий Барышников
Гуру
Сообщения: 2572
Зарегистрирован: 17 ноя 2009, 19:17
Репутация: 261
Откуда: Москва

Re: Создание отказоустойчивого сетевого хранилища ГИС данных

Сообщение Дмитрий Барышников » 10 янв 2013, 12:58

Я бы сказал, что статья про бэкапы. Это несколько из другой оперы.

[ Сообщение с мобильного устройства ]

Ответить

Вернуться в «Материалы сайта»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 78 гостей