Редактирование: ВОВКнОUС, 01 лекция (от 15 февраля)
Материал из eSyr's wiki.
Внимание: Вы не представились системе. Ваш IP-адрес будет записан в историю изменений этой страницы.
Правка может быть отменена. Пожалуйста, просмотрите сравнение версий, чтобы убедиться, что это именно те изменения, которые вас интересуют, и нажмите «Записать страницу», чтобы изменения вступили в силу.
Текущая версия | Ваш текст | ||
Строка 4: | Строка 4: | ||
Вопросы организации вычислительных кластеров на основе UNIX-серверов | Вопросы организации вычислительных кластеров на основе UNIX-серверов | ||
- | |||
- | =общие вопросы= | ||
Что еcть вычислительный кластер? Чем он отличается от всех прочих кластеров. Кластер --- сборище компьютеров, которые работают над решением одной и той же, точнее, одной задачи. Под решением задач можно понимать разные вещи, например, есть кластеры, которые занимаются задачей балансировки нагрузки на БД. | Что еcть вычислительный кластер? Чем он отличается от всех прочих кластеров. Кластер --- сборище компьютеров, которые работают над решением одной и той же, точнее, одной задачи. Под решением задач можно понимать разные вещи, например, есть кластеры, которые занимаются задачей балансировки нагрузки на БД. | ||
Строка 16: | Строка 14: | ||
Какие ещё бывают кластеры. задачи, которые возникают вот здесь и которые касаются вычислительных кластеров могут быть одни и те же. Только в случае кластера он не территориально разделён и число компьютеров нам известно и считается, что коммуникации надёжны. В отличие от GRID, где каждый узел --- персоналка пользователя, с которой может случиться что угодно. | Какие ещё бывают кластеры. задачи, которые возникают вот здесь и которые касаются вычислительных кластеров могут быть одни и те же. Только в случае кластера он не территориально разделён и число компьютеров нам известно и считается, что коммуникации надёжны. В отличие от GRID, где каждый узел --- персоналка пользователя, с которой может случиться что угодно. | ||
- | |||
- | ==Задачи решаемые кластерами== | ||
Спектр задач, решаемых кластерами: | Спектр задач, решаемых кластерами: | ||
Строка 30: | Строка 26: | ||
Кластеры,которые перераспределяют нагрузку --- кластеры перераспределения нагрузки, а кластеры, которые хранят большое количество информации --- кластеры для хранения большого количества информации. | Кластеры,которые перераспределяют нагрузку --- кластеры перераспределения нагрузки, а кластеры, которые хранят большое количество информации --- кластеры для хранения большого количества информации. | ||
- | |||
- | =организация вычислительного центра= | ||
[[Image:Clustebuilding_01_03.png|800px|Структура кластера]] | [[Image:Clustebuilding_01_03.png|800px|Структура кластера]] | ||
Строка 41: | Строка 35: | ||
Кластеров в ВЦ может быть несколько, и могут они быть не кластерами, а довольно мощной машиной. | Кластеров в ВЦ может быть несколько, и могут они быть не кластерами, а довольно мощной машиной. | ||
- | С точки зрения сетевых соединений. Обычно сеть, которая торчит наружу и внутренняя сеть разделены практически физически, чтобы снаружи можно что-то было сотворить вот с этим явлением. Поэтому вот тут бывает какая-то своя внутренняя сеть, лаже несколько сетей. Одна довольно тормознутая, она предназначена для управления всем этим безобразием. Но между файловым хранилищем и файловым сервером, ещё обычно между файловым хранилищем и вычислительными серверами и интерфейсной машиной, той машиной, куда активно стучатся пользователи, | + | С точки зрения сетевых соединений. Обычно сеть, которая торчит наружу и внутренняя сеть разделены практически физически, чтобы снаружи можно что-то было сотворить вот с этим явлением. Поэтому вот тут бывает какая-то своя внутренняя сеть, лаже несколько сетей. Одна довольно тормознутая, она предназначена для управления всем этим безобразием. Но между файловым хранилищем и файловым сервером, ещё обычно между файловым хранилищем и вычислительными серверами и интерфейсной машиной, той машиной, куда активно стучатся пользователи, проложана специальная сеть, которая работает значительно более быстро, чем сеть, предназначенная для управления всем этим безобразием. |
- | Плюс ещё почти всегда в организации | + | Плюс ещё почти всегда в организации присуттствуют люди, которые хотят сидеть откуда-то не издалека, а изнутри, почти всегда рядом с этим счастьем находятся клиентские рабочие места, и в общем всё вот это вот, это всё обычно находится на территории некоей организации. |
С точки зрения организации ВЦ и разграничения доступа пользователей к выч. ресурсам абсолютно всё равно, откуда они стучатся --- отсюда или внутри организации, в любом случае они это делают через интерфейсную машину. | С точки зрения организации ВЦ и разграничения доступа пользователей к выч. ресурсам абсолютно всё равно, откуда они стучатся --- отсюда или внутри организации, в любом случае они это делают через интерфейсную машину. | ||
Строка 55: | Строка 49: | ||
Третья функция --- информирование пользователей о состоянии систем и очередей. | Третья функция --- информирование пользователей о состоянии систем и очередей. | ||
- | + | Фаерфолл нужен для фильтрации трафика. Обычно на вход жёстко разрешают только ссх. | |
Кроме веб- есть ещё почтовый сервер. Он обычно нужен для того, чтобы информировать о завершении задач, а также, для того, чтобы бить по башке. | Кроме веб- есть ещё почтовый сервер. Он обычно нужен для того, чтобы информировать о завершении задач, а также, для того, чтобы бить по башке. | ||
Строка 77: | Строка 71: | ||
Допустим, здесь есть тысяча процессоров, каждый из которых хранит, и каждому из которых доступно 100ГБ. В результате использования этой ФС в такую ФС можно сохранить файл размером 100ГБ * число процессоров, и ещё что хорошо, ежели у нас файл находится где-то далеко, то ежели мы пишем свой кусок данных с каждого процессора, и вынуждены писать не в свой кусок, а далеко и блокировать весь файл. Распред. ФС позволяют писать у себя, а потом просто дампать(?). | Допустим, здесь есть тысяча процессоров, каждый из которых хранит, и каждому из которых доступно 100ГБ. В результате использования этой ФС в такую ФС можно сохранить файл размером 100ГБ * число процессоров, и ещё что хорошо, ежели у нас файл находится где-то далеко, то ежели мы пишем свой кусок данных с каждого процессора, и вынуждены писать не в свой кусок, а далеко и блокировать весь файл. Распред. ФС позволяют писать у себя, а потом просто дампать(?). | ||
- | |||
- | =сопутствующее= | ||
О чём лектор будет говорить дальше: | О чём лектор будет говорить дальше: |