Кластер для ресурсоемких вычислений
komnac 17 апреля, 2009 - 11:16
Здравствуйте, уважаемые форумчане.
Подскажите пожалуйста, в каком направлении двигаться. Есть компьютерный класс (30 машин) с Dual Core, на них на всех может быть установлена Gentoo (в ближайшее время так и будет), так же есть программа для расчета внутренней энергии простых веществ, которая делает очень много вычислений. Хочется сделать так, чтобы компьютеры, которые есть в классе помогли со счетом. Я так понимаю нужно создать кластер. Вот только проблема, я еще очень не опытный и не знаю что мне посмотреть. Хотел сделать на OpenMosix, но проект прикрыли. Подскажите, пожалуйста, аналоги или другие варианты
Заранее благодарен.
»
- Для комментирования войдите или зарегистрируйтесь
http://parallel.ru/ keyword
http://parallel.ru/ keyword openMP MPI
Если ваш алгоритм не не распалеливается, то никакои кластер вам не поможет
Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)
Как программа называется?
Как программа называется?
Если она параллельная то все ок. Вообще мозикс для кластеров нафиг не нужен =)
вообще ставиться базовая система.
накатывается openmpi torque
делается общая распределенная фс для /home
настраивается глобальная авторизация через лдап
и получается нормальный кластер из рабочих станций
___________________________________________
Working on Gentoo for iPAQ hx4700 and Openmoko Neo Freerunner :-)
Если у вас компьютер с Windows, есть два выхода: выбросить компьютер в форточку или выбросить форточки с компьютера
ldap для кластера
а можно ссылку на то как ldap для кластера настроить?
а то как-то без него грустно.
ещё вопрос. переход с lam на openmpi. столкнулся с проблемой ^C процесс вышиб не до конца (тестировал на одном узле)
mpirun, (вроде бы или какой-то потомок его) завис и стал есть 100% цпу. сам расчётный процесс завершился.
есть какие принципиальные различия в lam и openmpi? вроде как пишут что openmpi это дальнейшее развитие.
.
Имеется в виду авторизация через LDAP.
В принципе опыт решения такой задачи имеется, могу рассказать.
:wq
--
Live free or die
Расскажите
Расскажите
Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)
.
Извини, сейчас Время...
С этим вопросом предлагаю стучаться в понедельник ко мне в Джаббер (с последующей публикацией откорректированного лога).
Мне рассказать не жалко :)
:wq
--
Live free or die
ок.
постараюсь не забыть в понедельник стукнуться в жаббер :-)
Я правильно понял, что
Я правильно понял, что интересующихся вопросом более одного?
По этому поводу предложение: не замутить ли нам конференцию? :)
:wq
--
Live free or die
Можно сделать конфу типа
Можно сделать конфу типа
=)
думаю многим сие будет полезно =)
___________________________________________
Working on Gentoo for iPAQ hx4700 and Openmoko Neo Freerunner :-)
Если у вас компьютер с Windows, есть два выхода: выбросить компьютер в форточку или выбросить форточки с компьютера
Командир, ты немного не туда думаешь
В теме кластеров лично я ни дум-дум и она для меня сейчас практического интереса не представляет.
Раскрывать я буду тему системной авторизации в OpenLDAP (да простит меня вопрошающий, в объёме типовых задач, т.е. несколько выходящем за пределы его вопроса).
После переработки материала под платформу Gentoo Linux предполагается [как минимум] публикация в виде статьи в окрестностях ru.gentoo-wiki.com.
С учётом стабильности работы оного я бы предпочёл резервную копию в окрестностях gentoo.ru (собственно под публикации материалов типа лога данного рассказа я и просил блог, ибо конференция --- штука суть кратковременная).
:wq
--
Live free or die
Создал комнату
Создал комнату
ldap_authWelcome :)
ЗЫ: Сейчас я на обед --- и начну рассказывать.
:wq
--
Live free or die
Вчера что знал рассказал, но
Вчера что знал рассказал, но собрать работоспособную конфигурацию не получилось.
Потому продолжаем. Планы на сегодня: диагностика ошибок.
:wq
--
Live free or die
Здорово, я есть лог ваших
Здорово, я есть лог ваших разговоров?
Где ваше повествование можно посмотреть?
.
Лог есть.
Заходи в конференцию ldap_auth
Правда, начальный рассказ в текущей действительности там не показан. Но лог есть (должен быть, его не может не есть). По поводу доступности этой (самой интересной) части лога обращайся к администрации. Чьих именно прав не хватает --- ?
В принципе могу опубликовать из своей истории...
:wq
--
Live free or die
Во-первых, на gentoo.org есть
Во-первых, на gentoo.org есть очень неплохая (но увы далеко не исчерпывающая) дока: http://www.gentoo.org/doc/en/ldap-howto.xml
Не сделать ли нам расширенный неофициальный перевод этого руководства для http://www.gentoo.org/doc/ru/ ? :)
Из чуждого и поплошее (но полностью не покрываемого указанным документом) должно отметить:
http://www.cultdeadsheep.org/FreeBSD/docs/Quick_and_dirty_FreeBSD_5_x_and_nss_ldap_mini-HOWTO.html
http://www.freebsd.org/doc/en/articles/ldap-auth/article.html
(по последним двум предупреждаю: там целая стопка ахтунгов, впрочем, мотивационную и теоретическую часть первой тоже было бы неплохо расширить).
:wq
--
Live free or die
gentoo.org
я думаю, что его надо бы обязательно скорректировать, учитавая ldap_auth т.к. там некоторые моменты не освещены.
такие как зависание udev на запросах к LDAP и т.д.
.
Ну сколько можно повторять: в общем случае проблема звучит шире --- модификация механизма инициализации с учётом реалий (в случае системной авторизации на локальном LDAP-сервере).
:wq
--
Live free or die