ЦИВК ЛИТ ОИЯИ
О ЦИВК
О работе на ресурсах ЦИВК ЛИТ ОИЯИ:
Регистрация
Правила работы
Базовое программное обеспечение ЦИВК
Работа с файловой системой AFS ( ps )
Перечень и краткое описание основных команд
Некоторые средства разработки
Руководство пользователя dCache
| |
Основные правила работы на кластере
Регистрация пользователей: |
- все пользователи кластера должны быть зарегистрированы
в afs
- все пользователи, зарегистрированные в afs
в других лабораториях, должны быть зарегистрированы и в локальных базах
(/etc/passwd) на кластере, для получения возможности реальной работы
в интерактиве или с пакетными заданиями
- afs пароль можно поменять на любой
из машин кластера командой kapasswd (passwd), сразу после изменения
AFS пароля, введите также комаду "pbspwstore" для работы с batch
(PBS) в AFS
|
|
Правила входа в машины кластера
|
- во всех случаях при входе будет запрашиваться AFS пароль
- интерактивная работа разрешена только на машинах lxpub01 -:- lxpub04
- интерактивный вход пользователей запрещен на все вычислительные фермы и серверы
- при наличии возможности, следует использовать ssh/scp/sftp
- входить на кластер можно по ssh, xdm (с X-терминалов, или своих рабочих станций),
telnet, rsh - для интерактивной работы
- для перекачки файлов можно использовать scp, sftp, ftp
- для входа по ssh/scp/sftp желательно использовать RSA или host идентификацию без пароля, с помощью файлов .ssh/authorized_keys, или .shost
|
|
Интерактивная работа: |
- рекомендуется использовать локальный xterm
и запускать ssh из этого локального xterm'а на машины cv.jinr.ru: xterm
-e ssh cv.jinr.ru
- под интерактивной работой понимается любая
работа пользователя, при которой запускаемые им процессы потребляют не
более 100% мощности одного процесса не более 15 минут непрерывно
- рекомендуется запускать трасляции больших
(учитывая предыдущий пункт) пакетов программ в пакетном режиме
- если пользователь не выполняет вышеперечисленных
требований, то процессы запущенные от него на интерактивном кластере будут
остановлены
|
|
Пакетная обработка (batch): |
- пользователи не будут иметь возможности интерактивного входа на вычислительных фермах
- основное дисковое пространство является общим
для всех машин интерактивного кластера и всех машин вычислительных ферм
- /tmp, /var/tmp, /scr директории являются локальными на каждой отдельной машине
- при изменении своего AFS пароля, не забудьте
внести эти изменния и для batch командой pbspwstore
- большинство пользователей кластера должны
запускать задание в пакетную обработку командой:
qsub script-file
- пользователи из коллабораций БАК должны запускать задание в пакетную обработку командой:
qsub -q prod -l nodes=1:prod
- для запуска заданий с параллельными вычислениями, используйте команду:
qsub -q para -l nodes=<n>:para
|
|
Почтовые сервисы (e-mail): |
- почтовая служба настроена и работает таким
образом, что отправка писем производится непосредственно с любой
из машин интерактивного кластера
- почтовая служба настроена и работает таким
образом, что все внешние письма приходят только на один из серверов
кластера
- для чтения и отправки электронной почты на
интерактивном кластере используйте программу "pine"
- "pine" настроен на автоматическое получение
почты по imap с заданного сервера, если настройки pine случайно потерялись,
то можно удалить файл .pinerc для правильной их установки при следующем
запуске pine
- для чтения почты, приходящей на кластер,
на своей рабочей станции рекомендуется использовать netscape (mozilla),
определив IMAP сервер - lxmx00.jinr.ru
- после закрытия машины "cv.jinr.ru" ее адреса,
в том числе и почтовый, перейдут к интерактивному кластеру, таким образом,
что, если пользователь зарегистрировался на кластере, этот переход будет
для него практически не заметен
|
|
Дисковое пространство: |
- для большинства пользователей кластера доступны
следующие виды дискового пространства:
его домашняя директория в AFS, scratch (/scrr), общие для всех машин
и интерактивного кластера и вычислительных ферм;
локальные директории /tmp, /scr для хранения промежуточных данных задачи
или сеанса работы
- для пользователей крупных коллабораций обычно
доступно специально выделенное дисковое пространство, также общее для всех
машин кластера
- AFS имеет специфическую систему квот
- квоты в scratch дисковом пространстве
имеют 2 категории:
жесткую (обычно несколько GB), и мягкую - до 1GB,
превышение мягкой квоты до размеров жесткой возможно, но только в пределах
ограниченного времени (2 недели), после чего запись в scratch блокируется
- /tmp, /scr директории очищаются полностью
при любой перезагрузке машины, а также регулярно очищаются от старых файлов
- системные службы ЛИТ будут вести регулярное
резервное копирование AFS дискового пространства, и директорий, выделенных
для ПО коллабораций
- проводятся работы по подключению ленточного
робота (~5TB) к кластеру и установке ПО Castor для работы с ним
- по запросу пользователей возможна перепись
лент формата DLT-4000
|
|
|