Работа с вычислительным кластером Воронежского государственного университета Основные понятия
Что такое вычислительный кластер?
В общем случае, вычислительный кластер - это набор компьютеров (вычислительных узлов), объединенных некоторой коммуникационной сетью. Каждый вычислительный узел имеет свою оперативную память и работает под управлением своей операционной системы.
Как запускаются программы на кластере?
Для каждого кластера имеется выделенный компьютер - головная машина (front-end). На этой машине установлено программное обеспечение, которое управляет запуском программ на кластере. Собственно вычислительные процессы пользователей запускаются на вычислительных узлах, причем они распределяются так, что на каждый процессор приходится не более одного вычислительного процесса. Запускать вычислительные процессы на головной машине кластера нельзя.
Пользователи заходит на головную машину кластера через интернет, а входить на узлы кластера для них нет необходимости. Запуск программ на кластере осуществляется в так называемом "пакетном" режиме - это значит, что пользователь не имеет непосредственного, "интерактивного" взаимодействия с программой, программа не может ожидать ввода данных с клавиатуры и выводить непосредственно на экран. Более того, программа пользователя может работать тогда, когда пользователь не подключен к кластеру.
Для удобной единовременной работы на кластере большого количества людей, а также для оптимизации загруженности кластера существует набор программ - системы очередей заданий. Все расчеты осуществляются только через эту систему, которая позволяет ставить вычислительные задачи в очередь и автоматически запускать их, когда необходимые вычислительные ресурсы освободились.
Существуют программы для удаленного доступа к кластеру, работающие под различными операционными системами (Windows, Linux, MacOS, Android). Таким образом, использовать ресурсы кластера можно из любой точки мира, с любого компьютера и смартфона.
Что такое терминальный доступ и как его осуществлять?
Терминальный доступ - это доступ в режиме командной строки. То есть вы можете набирать различные команды, которые выводят результаты своей работы в текстовом виде. С помощью командной строки можно выполнять огромный набор действий, в том числе копирование, редактирование, удаление файлов, а главное, можно запускать расчеты и следить за результатами их выполнения. Работа командной строкой осуществляется через интернет с помощью специальных программ. Для Windows это Putty и др.
Как хранятся данные пользователей?
Для каждого пользователя на кластере создается отдельная папка, в которой он может хранить все свои файлы, копировать их на свой компьютер и наоборот. Доступ к ней осуществляется через интернет с помощью специальных программ. Для Windows это WinSCP и др.
Настройка и использование программы WinScp
WinSCP — свободный графический клиент протоколов SFTP и SCP, предназначенный для Windows. Обеспечивает защищённое копирование файлов между компьютером и серверами, поддерживающими эти протоколы. Можно скачать с официального сайта https://winscp.net/eng/download.php
Настройка
При запуске программы нас приветствует следующее окно Session (рис.1), которое просит ввести информацию, необходимую для подключения к серверу:
Рис. 1
В настройках следует указать:
Host name: hpc.cs.vsu.ru
Port number: 22
User name: логин, который Вы получите по почте
Password: пароль, который Вы получите по почте
Использование
Теперь выбираем вкладку Stored sessions и два раза кликаем на название сессии, которую Вы только что сохранили, после чего Вы должны увидеть что-то вроде показанного на рис. 3
Рис. 3
Это основное рабочее окно программы. С левой стороны - это Ваш компьютер, с правой - файлы, сохраненные на кластере. Обратите внимание, что для работы Вам доступна только Ваша домашняя дирректория /common/home/<имя_пользователя>
Теперь Вы можете свободно копировать файлы из своего компьютера на кластер и наоборот.
Более подробную информацию можно получить:
http://parallel.uran.ru/node/65
https://tuning-soft.ru/articles/soft/install-and-configure-winscp-and-putty.html