The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]




Версия для распечатки Пред. тема | След. тема
Новые ответы [ Отслеживать ]
SAS контроллеры в схемах N+1 + ОС, !*! 2ihi, 11-Апр-12, 07:50  [смотреть все]
Коллеги, после кучи разных тестов, прикидок, анализа решений и цены качества пришли к выводу что ZFS в качестве хранилки очень достойный конкурент САН системам, скорость взрывная, надежность хранения на высоте, гибкость, фичавость - все супер, встал вопрос резервирования железа.

И так, имеем набор сата дисков в количестве 24шт под пулы RAIDZ 8+8+8, пару подхватных винтов, 4 SSD в качестве кеширующих девайса, подрубается все это дело к LSIному контроллеру и дальше идет в сервер HP. Собственно на конце провода корзин начинается нерезервный сервис - сервер и контроллер. Вопрос - кто сталкивался с резервированием контроллеров и серверов в связках с хранилками? Нужно получить 2 независимых сервера которые будут иметь доступы к карзинам с винтами и обеспечивать резервирование. Ну и желательно поддержка FreeBSDой.

  • SAS контроллеры в схемах N+1 + ОС, !*! sdog, 09:25 , 11-Апр-12 (1)
    • SAS контроллеры в схемах N+1 + ОС, !*! 2ihi, 10:15 , 11-Апр-12 (2)
      > может не совсем в тему, но всё же:
      > http://www.dataonstorage.com/

      это законченное решение, у меня есть подобные - ЕМС, скорость так себе и цена огого.. 12 терабайт с линейной скоростью в 256 мегабайт обойдутся в 400к рублей, при их иопсах просто смешно смотрится. Хотя надежность на высоте, ничего не сказать..

      • SAS контроллеры в схемах N+1 + ОС, !*! sdog, 10:43 , 11-Апр-12 (3)
        • SAS контроллеры в схемах N+1 + ОС, !*! 2ihi, 15:33 , 11-Апр-12 (10)
          >>> может не совсем в тему, но всё же:
          >>> http://www.dataonstorage.com/
          >> это законченное решение, у меня есть подобные - ЕМС, скорость так себе
          >> и цена огого.. 12 терабайт с линейной скоростью в 256 мегабайт
          >> обойдутся в 400к рублей, при их иопсах просто смешно смотрится. Хотя
          >> надежность на высоте, ничего не сказать..
          > в решениях dataon используется стандартное доступное железо, решение расписано, можно
          > посмотреть на то что они используют и собрать свою версию по
          > аналогии.

          Верно, порылся и нашел у них на сайте переходник который дает возможность делать простые САТА винты в двухканальный САС. Пока сайт у них с ошибкой мускуля, жду, как оживет - буду дальше ковырять, спасибо.

  • SAS контроллеры в схемах N+1 + ОС, !*! Аноним, 11:34 , 11-Апр-12 (4)
    • SAS контроллеры в схемах N+1 + ОС, !*! Клыкастый2, 13:15 , 11-Апр-12 (5)
    • SAS контроллеры в схемах N+1 + ОС, !*! 2ihi, 13:53 , 11-Апр-12 (6)
      > т.е. вы хотите сделать один и тот же набор винтов на два
      > сервера и что бы сервера переключались и похватывали винты?

      В принципе да, только чтоб сервера НЕ переключались, а одновременно видели один и тот же набор дисков.

      > Могу конечно
      > ошибаться - но не получится. Если нужно резервирование, то я бы
      > смотрел в сторону hast+carp, у меня работает хорошо, правда свои скрипты
      > пришлось написать для нормального переключения серверов, ну и минус в том,
      > что должно быть два набора винтов (корзинок), а не только два
      > сервера.

      Вот этого и хочется избежать :) Нужно на 1 набор дисков иметь 2 сервера.


      >>пулы RAIDZ 8+8+8
      > вам нужно raidz2 применять, если не желаете потери данных.

      На это хранилище не возлагается грандиозных требований, на ней нужна скорость и объем. Да и эксперименты на ней ставим. Ну и на случай падения хардов есть вроде 3 подхватных винта.


      по теме, я где-то читал что есть контроллер у ХП (настоящего производителя не знаю) который вроде как и рассчитан на использование в качестве резервирующего, но что-то не могу найти название.


      ну и в догонку - есть в свободной продаже САС винты которые изначально имеют 2 коннектора через (наверное) хитрый кабель. и у меня есть ЕМС которая и реализует редундантность контроллеров на одном дисковом пуле - это что касаемо возможности реализации затеи. Кстати у ЕМС это работает под управлением виндофса :)

      • SAS контроллеры в схемах N+1 + ОС, !*! sdog, 14:33 , 11-Апр-12 (7)
        • SAS контроллеры в схемах N+1 + ОС, !*! 2ihi, 15:42 , 11-Апр-12 (11)
          > если "На это хранилище не возлагается грандиозных требований" зачем вообще вся эта
          > эпопея?

          появилась задача, которая требует повышения уровня отказоустойчивости дисковой системы.

          > контроллер можно использовать один, второй можно купить и оставить в известном месте
          > недалеко от сервера.

          24*7, обрывы приведут к катастрофе.

          > возможно и есть диски с 2 коннекторами, хотя в моей практике я
          > сталкивался только со случаями когда доступ 2-х контроллеров к одной группе
          > дисков организовывался только средствами дискового бэкплейна.

          я наверное не так выразился, на диске не требуется присутствие 2х разъемов сас, сам интерфейс сас подразумевает возможность работы по 2м каналам. Есть у LSI переходник на сата диски который дает сата диску функционал саса.

          > у EMC windows в основном только для управления и настройки используется, не
          > думаете же что там идиоты или что винда способна на такие
          > вещи которые реализует сторидж EMC.

          очень сомневаюсь, ибо изучения ЕМС через консоли показало что кроме как виндовса там ничего более нет, контроллеры там самые что нинаесть простые, или вернее чипы на контроллерах. Одна проблема - диски прошиты на 520 байтные блоки вместе с контроллерами и возможно еще что-то есть до чего я не доколупался.

          • SAS контроллеры в схемах N+1 + ОС, !*! sdog, 17:29 , 11-Апр-12 (13)
            • SAS контроллеры в схемах N+1 + ОС, !*! 2ihi, 08:58 , 12-Апр-12 (17)
              >> появилась задача, которая требует повышения уровня отказоустойчивости дисковой системы.
              > можно поинтересоваться что, в таком случае, в вашем представлении "грандиозные требования"?
              > так для общего развития :)

              я уже писал, что есть хранилка, которую сейчас использую для тестов, проделывание манипуляций с ней всего лишь набивание шишек, как только она примет маломальски законченный вид будет поднята либо вторая полностью редундантная система, либо (если скорость нас устроит) переведем текущую до полностью зарезервленной.


              ну а грандиозные требования - требования по всем составляющим системы выполнения условия N+1, включая БП, УПСы, дизеля, фидеры, микроклимат, каналы связи итд.

              Да, полки у меня уже умеют раздавать каждый диск в ней на 2 сас контроллера.

            • SAS контроллеры в схемах N+1 + ОС, !*! 2ihi, 09:12 , 12-Апр-12 (18)
              > по поводу операционок в продуктах EMC
              > http://blog.kudosvenue.com/2011/03/25/emc-operating-systems-.../
              > http://en.wikipedia.org/wiki/CLARiiON

              что касаемо ЕМСшных ОС, давайте тогда говорить что в моем десктопе работает штуки 4 ОС, а виндомс всего лишь дает мне графморду для удобства, ибо винт имеет свою ОС, сетевая карта свою, рейд свою... а виндомс всего лишь предоставляет мне менеджмент для управления разными ОС и собственно управляет апаратными ОС по средствам драйверов. Естественно я в контроллеры не лазал ЕМСшные и не изучал их принципы согласования. Более того, не секрет что те же самые клариионы не собственная разработка ЕМС, а всего лишь выкупленая технология, и вроде купили они её у нека (уже точно не припомню, давно я забил на идею подсунуть ей простые винты с магазина. Кстати нек изначально не ребилдил винты), который в свою очередь многое берет у LSI.

              к чему я заговорил про нек
              по приведенным ссылкам прослеживается что Flare работает на единичных экземплярах железа, что указывает на то что сама ось и емс ничего общего не имеют.

      • SAS контроллеры в схемах N+1 + ОС, !*! Аноним, 14:49 , 11-Апр-12 (9)
        • SAS контроллеры в схемах N+1 + ОС, !*! 2ihi, 15:45 , 11-Апр-12 (12)
          > А тут уже вопрос возникает: как должна работать ОС с дисками (ФС),
          > если она не подозревает, что есть еще одна ОС, работающая с
          > этими же дисками и с этой же ФС. т.е., по идее,
          > о каких-либо изменениях данных на дисках в одной ОС должно быть
          > сказано второй ОС (чего в вашем хотении даже не представляю как
          > реализовать), так же должны быть локи на какие-то операции, что бы
          > не получить в итоге кашу.

          я тут еще порылся, у солярки есть какое-то решение по моей проблеме. чую завтра буду более конкретно изучать, а пока начитываюсь.

          решения такие уже есть, и я их уже 3ий год как использую, но вопрос встал за КПД денег к отдаче, то что нужно выльется в миллионы, а руками это сделать если не на порядок то в раз в 7-8 будет дешевле, да и комплектуха вся есть.

  • SAS контроллеры в схемах N+1 + ОС, !*! 2ihi, 14:18 , 25-Апр-12 (22)
    >[оверквотинг удален]
    > системам, скорость взрывная, надежность хранения на высоте, гибкость, фичавость - все
    > супер, встал вопрос резервирования железа.
    > И так, имеем набор сата дисков в количестве 24шт под пулы RAIDZ
    > 8+8+8, пару подхватных винтов, 4 SSD в качестве кеширующих девайса, подрубается
    > все это дело к LSIному контроллеру и дальше идет в сервер
    > HP. Собственно на конце провода корзин начинается нерезервный сервис - сервер
    > и контроллер. Вопрос - кто сталкивался с резервированием контроллеров и серверов
    > в связках с хранилками? Нужно получить 2 независимых сервера которые будут
    > иметь доступы к карзинам с винтами и обеспечивать резервирование. Ну и
    > желательно поддержка FreeBSDой.

    Вроде что-то проясняется:

    http://citforum.ru/news/27767/

    второй абзац как раз про то что ищу. Чуть позже отпишу о результатах.




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру