Ржевский Дмитрий Rzhevskiy Dmitry

понедельник окт 03, 2011

glusterfs

На выходные наконце то я дома установил распределённую файловую систему glusterfs.

У меня дома 3 стационарнык компьютера(десктоп и 2 сервера), больше 2 ТБ  дискового пространства, а на десктоповом компьютере нехватало места..

сделал 2 хранилща:

1) одно без дублирования данных - сохранять фильмы музыку и фильмы из интернета - в случае если компьютер выйдет из строя часть файлов может потеряться.

2) с дублированием данных, высоконадёжное хранилище  - если полетит диск на одном компьютере - второй и третий будет хранить копии.

Файловая система мне очень понравилась:

-все компьютере в кластере одинаковые -нет сервера метаданных как hdfs

-возможна синхронная и асинхронное реплицирование файлов

-простое добавление удаление компьютеров в кластер

Недостатки (для моих целей) мною пока не замечены :)



Комментарии:

Кстати клёвая система мы её на работе рассматривали. Пожалуй лучшая из распредлелённых.

Правда есть заморочки с переименованием файлов. И удалить ноду увы нельзя. Только переместить.

Советую также взглянуть на ceph. Он встроен в ядро.

опубликовал Андюха Октябрь 31, 2011 at 07:02 AM MSK #

в ceph не все узлы эквивалентны - есть сервер метаданных - несколько сложнее администрировать получается

но попробовать стоит. как попробую - напишу.

опубликовал Дима Ноябрь 01, 2011 at 12:37 AM MSK #

как кстати жизнь у тебя идёт?

опубликовал Дима Ноябрь 01, 2011 at 12:39 AM MSK #

Да у меня в целом всё ништяк. Напряжно правда кое- в каких вещах. С банями вот здесь проблема )

опубликовал Андюха Ноябрь 03, 2011 at 08:06 AM MSK #

а что пишете? для чего фам распределённая ФС?

опубликовал Дима Ноябрь 04, 2011 at 07:24 PM MSK #

Да у нас щас чисто обработка дынных пока. Данных куча вот и сделали самопальный кластер.
Скажем, обработать каждое из 200000 изображений по специальному алгоритму.

опубликовал Андюха Ноябрь 08, 2011 at 10:49 AM MSK #

Ну как результаты текстирования?

опубликовал Андюха Декабрь 12, 2011 at 06:45 AM MSK #

Всё работает я подмонтировал к рабочему компу как nfs и даже не замечаю что это распределённая система.
Фильмы и фотки там лежат.

опубликовал Дима Декабрь 13, 2011 at 12:06 PM MSK #

Опубликовать комментарий:
  • HTML Syntax: Подключен
Дмитрий Ржевский

Тэги:
c3350 cloud experiments hadoop jelastic jelastic.com livejournal phone samsung samsung_c3350 xcover вычисления облако облачные телефон

Calendar



Google Friend Connect.
Возможно через несколько лет не будет отдельных социальных сетей.
Они объединятся в одну открытую и распределённую систему.
Друзья Нравится

Feeds

Search

Links

Navigation


  • Я в ЖЖ    
  • MirTesen.ru
  • Я в "Linked In"

  • Мои друзья
  • Алекслёха
  • Latron

  • Links:
    log4j.ru
    Apache Maven
    моё родовое имение
    Виндсёрфинг


    Моё резюме
    My resume


    XFN Friendly

    Поиск