Lustre lfs quota u afsusername workfs lfs quota

  • Slides: 35
Download presentation

查询配额 • 可以从登录结点上运行如下命令,查询 Lustre文件系统中公共/个人存储目录的个人 文件数目的限额。 – lfs quota -u afs_user_name /workfs – lfs quota

查询配额 • 可以从登录结点上运行如下命令,查询 Lustre文件系统中公共/个人存储目录的个人 文件数目的限额。 – lfs quota -u afs_user_name /workfs – lfs quota -u afs_user_name /scratchfs – lfs quota -u afs_user_name /publicfs • 组的配额 --lfs df -h -p pubfs. cmspool /publicfs

CMS Tier 2

CMS Tier 2

Tier 2 作业提交 • UI: lxslc 6, lxslc 5, cmsui 01以及任何支持 CMS VO的登录结点 •

Tier 2 作业提交 • UI: lxslc 6, lxslc 5, cmsui 01以及任何支持 CMS VO的登录结点 • Voms-proxy-init –voms cms • source $VO_CMS_SW_DIR/cmsset_default. sh • source /cvmfs/cms. cern. ch/crab. (c)sh • crab submit [-c <CRAB-configurationfile> 登陆 UI 网格证书初始化 CMSSW环境初始化 Crab命令作业提交 具体的CMSSW的配置和crab命令可参考: https: //twiki. cern. ch/twiki/bin/view/CMSPublic/Work. Book. CRAB 3 Tutorial

Tier 2的传输使用 • 传输申请 – https: //cmsweb. cern. ch/phedex/prod/Request: : Create? type=xfer – Data

Tier 2的传输使用 • 传输申请 – https: //cmsweb. cern. ch/phedex/prod/Request: : Create? type=xfer – Data Item: 所需要传输的数据集 – Destination:所需要传输到的目的地(T 2_CN_Beijing) • 查看传输状态 – https: //cmsweb. cern. ch/phedex/prod/Data: : Subscriptions#state=crea te_since%3 D 1441783541%3 Bnode%3 DT 2_CN_Beijing • 删除申请 – 网格数据包含了在DBS注册的元数据以及存储SE的物理数据,因此 删除的时候 – https: //cmsweb. cern. ch/phedex/prod/Request: : Create? type=delete – Data Item: 所要删除的数据集 – Destination:所要删除的数据集所在的站点

Tier 3 计算资源 ATLAS�列中一共有 576个核,其中atlass 6 q与atlasl 6 q共享 504个核

Tier 3 计算资源 ATLAS�列中一共有 576个核,其中atlass 6 q与atlasl 6 q共享 504个核

查询个人配额 • 可以从登录结点上运行如下命令,查询 Lustre文件系统中公共/个人存储目录的个人 文件数目的限额。 – lfs quota -u afs_user_name /workfs – lfs quota

查询个人配额 • 可以从登录结点上运行如下命令,查询 Lustre文件系统中公共/个人存储目录的个人 文件数目的限额。 – lfs quota -u afs_user_name /workfs – lfs quota -u afs_user_name /scratchfs – lfs quota -u afs_user_name /publicfs

Tier 3 软件 • Tier 3 ATLAS软件: • /cvmfs/atlas. cern. ch/repo/sw/software (从 所有的登录/计算节点都可以访问)

Tier 3 软件 • Tier 3 ATLAS软件: • /cvmfs/atlas. cern. ch/repo/sw/software (从 所有的登录/计算节点都可以访问)

Tier 2 数据下载 • DQ 2数据下载(使用DQ 2 具将数据直接下载到Tier 3存 储资源上) – 在登录结点上使用如下命令进行DQ 2的初始化 •

Tier 2 数据下载 • DQ 2数据下载(使用DQ 2 具将数据直接下载到Tier 3存 储资源上) – 在登录结点上使用如下命令进行DQ 2的初始化 • source /cvmfs/atlas. cern. ch/repo/sw/ddm/latest/setup. sh • export DQ 2_LOCAL_SITE_ID=BEIJING-LCG 2_LOCALGROUPDISK • DATRI数据下载 – 可以通过DATRI接口,订阅数据到本地Tier 2,这种方式适合 大批量的数据传输。DATRI会根据用户订阅的数据,选择最 佳的源数据,使得数据下载速度加快。 – DATRI的访问地址: http: //panda. cern. ch: 25980/server/pandamon/query? mode=dd m_req – 在Destination中选择BEIJING-LCG 2_LOCALGROUPDISK (8 TB存 储空间)

DATRI

DATRI

参考材料 • 与ATLAS计算相关的资源 – ATLAS Computing twiki: http: //twiki. ihep. ac. cn/twiki/bin/view/ATLAS/ATL ASComputing –

参考材料 • 与ATLAS计算相关的资源 – ATLAS Computing twiki: http: //twiki. ihep. ac. cn/twiki/bin/view/ATLAS/ATL ASComputing – BEIJING_LCG 2 ATLAS Site Monitoring: http: //casbak. ihep. ac. cn/cgi-bin/ATLASMON/atlas