LSF简易使用手册_lsf简易使用手册

其他范文 时间:2020-02-27 14:56:37 收藏本文下载本文
【www.daodoc.com - 其他范文】

LSF简易使用手册由刀豆文库小编整理,希望给你工作、学习、生活带来方便,猜你可能喜欢“lsf简易使用手册”。

LSF简易使用手册

(2011-02-22 14:28:19)

LSF(Load Sharing Facility)是由platform公司开发的分布资源管理工具。它用来调度、监视、分析联网计算机的负载,可以对Cluster机群的资源统一调度和监控。

一 LSF使用方法

1、设置环境变量:

用户使用LSF前,应设置相应的环境变量:

csh用户,登录系统后执行

source /export/lsf/conf/cshrc.lsf

bash用户,登录系统后执行

./export/lsf/conf/profile.lsf

用户也可写入.cshrc或.bashrc,则登录后就能设置相应的环境变量。

2、提交作业

LSF 使用bsub命令来提交作业。

bsub命令常见用法如下:

bsub –n z –q QUEUENAME –iinputfile –o outputfile COMMAND

其中z代表了提交作业需要的cpu数,–q指定作业提交到的队列,创建时间:2006-12-12 15:54:00 1

如果不采用–q选项,系统把作业提交到默认作业队列(作业队列详细介绍请看下一节)。inputfile代表程序需要读入的文件名(例如namelist等),outputfile代表一个文件,作业提交后标准输出的信息将会保存到这个文件中。COMMAND是用户要运行的程序。

(1)对于串行程序COMMAND可以直接使用用户的程序名

例如,对一个运行时间12小时内完成的串行作业mytest,提交方式为: bsub –n 1 –q QS_Norm –o mytest.out./mytest

(2)对于并行作业COMMAND为“–a mpich_gmmpirun.lsf程序名”

因为并行作业必须用到MyriNET库,所以提交的时候必须使用

–a mpich_gmmpirun.lsf

例如对于一个12个小时内完成,使用16个cpu的并行作业mytest,提交方式为: bsub –n 16 –q QN_Norm –o mytest.out –a mpich_gmmpirun.lsf./mytest 目前,系统规定每个用户最多只能使用16个cpu。

3、使用脚本提交作业

bsub命令可以使用输入脚本多次提交具有相同参数的作业,格式为:创建时间:2006-12-12 15:54:00 2

#BSUB –n Z #BSUB –q QUEUENAME #BSUB –o OUTPUTFILE COMMAND

该脚本的参数与命令行

“ bsub –n Z –q QUEUENAME –o outputfile COMMAND”参数相同。

提交时为bsub

例如要提交一个12小时内完成,需要16个cpu的并行作业mytest,可以编写作业脚本bsub.scriptfile

#BSUB –n 16

#BSUB –q QN_Norm

#BSUB –o mytest.out

–a mpich_gmmpirun.lsf./mytest

作业提交方法为:bsub

二、LSF队列状况

LSF分了如下几个作业组:

1、长时间并行作业组(LSF管理)

(1)QL_Norm队列创建时间:2006-12-12 15:54:00 3

该队列用于运行长时间并行作业,作业不限执行时间。作业规模限制为:最多使用16个CPU。

2、串行作业组(LSF管理)

(1)QS_Norm队列该队列用于串行短时间作业,最长作业执行时间为 12小时。

(2)QS_Long该队列专用于长时间串行作业,作业不限执行时间。

3、短时间并行作业组(LSF管理)

(1)QN_Norm队列该队列用于运行短时间并行作业,最长作业执行时间为12小时。

(2)QN_Debug队列

该队列用于调试或试算,最长作业执行时间为5分钟。

请用户根据自己的需求,选择适当的作业组进行作业提交。

附:队列命名潜规则

新的队列命名遵循一定的潜规则,下面详细解释队列名中各字母的含义:

QL_Norm:Q代表queues;L代表long,表示该队列运行长时间并行作业;

QN_Norm:Q代表queues;N代表normal,表示该队列运行短时间

并行作业;

QS_Norm:Q代表queues;S代表serial,表示该队列运行短时间串行作业;

QS_Long:Q代表queues;S代表serial,表示该队列运行串行作业;Long表示长时间运行;(同中科院网络中心深腾6800)

三查看作业状态和删除作业等

几个常用的指令:

bjobs检查提交作业状态

bjobs

bjobs-w

bjobs –r 显示正在运行的作业

bjobs –a 显示正在运行的和最近完成的作业

bjobs-p 显示等待运行的作业和等待原因

bjobs –s 显示正在挂起的作业和挂起的原因

bjobs-l 显示该作业的所有信息

bhist显示最近完成作业或正在运行作业的历史情况

bhist

bkill删除不需要的作业

bkill

bkill –r

bpeek当作业正在运行时显示它的标准输出,监视作业运行

bpeek

bqueues显示队列信息

bqueues

bqueues –l

bhosts显示各节点作业相关情况

bhosts

bhosts

lsload显示各节点负载信息

lsload

lsload

lshosts处理各节点静态资源信息

lshosts

lshosts

作业提交(命令行方式)

l队列设置(bqueues命令查看):

Parallel:此队列有64个节点,计算网络是infiniband(40G),每个节点有12个计算核心,24G内存;适合跨节点并行计算。

smp_high:此队列有40个节点,计算网络是以太网,每个节点有12个计算核心,24G内存;适合单节点内并行,或少量节点间通信的跨节点并行计算。

smp:此队列有48个节点,计算网络是以太网,每个节点有8个计算核心,24G内存;适合单节点内并行,或少量节点间通信的跨节点并行计算。

l应用设置(bapp命令查看):

amber

g03

gauian(g09)

gromacs

ms

l脚本范例

Amber(把下面内容编写成脚本)

#BSUB-q smp(选择队列)

#BSUB-app amber(应用)

#BSUB-o %J.out(结果输出文件,以作业号为文件名)

#BSUB-o %J.err(错误输出文件,以作业号为文件名)

#BSUB-a openmpi(编译器)

#BSUB-n 8(计算核心的数量)

mpirun.lsfsander.MPI-O-i min_2ojn.in-o min_2ojn.out-p 2ojn.top-c 2ojn.crd

-r min_2ojn.rst-inf min_2ojn.inf

G03(把下面内容编写成脚本)

#BSUB-q smp(选择队列)

#BSUB-app g03(应用)

#BSUB-k“/lustre/home/wangxj 60”(保存断点,作业停了可以继续运行)

#BSUB-o %J.out(结果输出文件,以作业号为文件名)

#BSUB-n 8(计算核心的数量)

g031reo6T-3.gjf

G09(把下面内容编写成脚本)

#BSUB-q smp_high(选择队列)

#BSUB-app gauian(应用)

#BSUB-o %J.out(结果输出文件,以作业号为文件名)#BSUB-e %J.err(错误输出文件,以作业号为文件名)#BSUB-n 12(计算核心的数量)

#BSUB-R “span[hosts=1]”(12个计算核心在一台机器上)g09 TS3-4_3.com

Gromacs(把下面内容编写成脚本)

#BSUB-q parallel(选择队列)

#BSUB-app gromacs(应用)

#BSUB-a intelmpi(MPI)

#BSUB-o %J.out(结果输出文件,以作业号为文件名)#BSUB-e %J.err(错误输出文件,以作业号为文件名)#BSUB-n 12(计算核心的数量)

#BSUB-R “span[ptile=6]”(每个节点用6个计算核心)

mpirun.lsfmdrun-v-s md.tpr-c md.gro-e md.edr-o md.trr-g md.log

MS5.5(把下面内容编写成脚本)

#!/bin/sh

#BSUB-q parallel

#BSUB-app ms

#BSUB-o %J.out

#BSUB-e %J.err

#BSUB-n 12

#BSUB-R “span[ptile=6]”

#BSUB-R “rusage[mslic=1]”(判断模块license是否被占用)

/home/msi/Accelrys/MS55_IB/etc/DMol3/bin/RunDMol3.sh-np 2 A或者

/home/MS55/Accelrys/etc/DMol3/bin/RunDMol3.sh-np 2 A

Fluent(把下面内容编写成脚本)

#!/bin/sh

#BSUB-q parallel

#BSUB-app fluent

#BSUB-o %J.out

#BSUB-e %J.err

#BSUB-n 12

fluent 3d-itest.jou-t8-g IB网络)((不限网络)

Matlab(把下面内容编写成脚本)

#!/bin/sh

#BSUB-q parallel

#BSUB-app matlab

#BSUB-o %J.out

#BSUB-e %J.err

#BSUB-n 1

matlab-nodisplay-r example(example--->example.m文件)

并行程序(自编)

自己编写程序提交方式,在配置文件中添加:

source /home/apps/intel/ictce/4.0.0.020/ictvars.sh

脚本样例:

#BSUB-q smp

#BSUB-n 8

#BSUB-o %J.out

#BSUB-e %J.err

#BSUB-a intelmpi

mpirun.lsf./并行可执行文件

作业提交

bsub

下载LSF简易使用手册word格式文档
下载LSF简易使用手册.doc
将本文档下载到自己电脑,方便修改和收藏。
点此处下载文档

文档为doc格式

    热门文章
      整站推荐
        点击下载本文