2. TSUBAME3での利用方法¶
2.1. LS-DYNAの実行¶
2.1.1. インタラクティブノードでのLS-DYNAの起動/実行¶
ログイン方法を参考にログインノードにログイン後、インタラクティブノードを利用したX転送を参考にノードをX転送付きで確保して下さい。
以下以降の例では、全て計算ノードにログインした状態で行います。
以下のコマンドで計算ノードに接続します。
$ qrsh -g [TSUBAMEグループ] -l s_core=1 -l h_rt=2:00:00
CUIの場合は以下のコマンドを実行してください。
コマンドは下表をご確認ください。
$ cd <利用したいディレクトリ>
$ . /etc/profile.d/modules.sh
$ module load lsdyna/R9.1.0
$ <コマンド名> i=<入力ファイル>
LS-DYNAコマンド
| プログラム | コマンド名 |
|---|---|
| SMP単精度版 | smpdynas |
| SMP倍精度版 | smpdynad |
| MPP単精度版 | mppdynas |
| MPP倍精度版 | mppdynad |
MPP実行後処理用プログラムl2aコマンド
| プログラム | コマンド名 |
|---|---|
| MPP単精度版 | l2as |
| MPP倍精度版 | l2ad |
GUIの場合は以下の方法で実施してください。
例では2時間接続で、割り当てノードとしてr0i0n0が割り当てられた場合を想定しております。
割り当てノードはコマンド実行時に空いているノードですので、明示的にノードを指定することはできません。
#qrshの実行
$ qrsh -g [TSUBAMEグループ] -l s_core=1 -l h_rt=2:00:00
Thu Sep 21 08:17:19 JST 2017
r0i0n0:~> . /etc/profile.d/modules.sh
r0i0n0:~> module load lsdyna/R9.1.0 lsprepost/4.3
r0i0n0:~> lsprepost
_____________________________________________________
| |
| Livermore Software Technology Corporation |
| |
| L S - P R E P O S T |
| |
| Advanced Pre- and Post-Processor for LS-DYNA |
| |
| LS-PrePost(R) V4.3.11 - 04Jul2017 |
| |
| LSTC Copyright (C) 1999-2014 |
| All Rights Reserved |
|___________________________________________________|
OpenGL version 1.4 (4.2.0 - Build 10.18.10.3325)
メニューバーの File > Exit をクリックすると終了します。
2.1.2. バッチジョブスケジューラーUGEによる実行¶
LS-DYNAはバッチジョブで利用する場合のスクリプト例を以下に示します。
スクリプトは、利用者の環境に合わせて変更してください。
インプットファイルは、シェルスクリプト内でINPUT=<インプットファイル名>として指定します。
2.1.2.1. スクリプト例：SMP単精度版¶
#!/bin/bash
#$ -cwd
#$ -V
#$ -l h_node=1
#$ -l h_rt=0:30:0
. /etc/profile.d/modules.sh
module load cuda/8.0.44
module load lsdyna/R9.1.0
export base_dir=/home/4/t3-test00/isv/lsdyna
cd $base_dir/smp_s
export exe=smpdynas
#export LSTC_LICENSE=network
#export LSTC_MEMORY=auto
export NCPUS=4
export OMP_NUM_THREADS=${NCPUS}
export INPUT=$base_dir/sample/airbag_deploy.k
${exe} i=${INPUT} ncpus=${NCPUS}
2.1.2.2. スクリプト例：SMP倍精度版¶
#!/bin/bash
#$ -cwd
#$ -V
#$ -l h_node=1
#$ -l h_rt=0:30:0
. /etc/profile.d/modules.sh
module load cuda/8.0.44
module load lsdyna/R9.1.0
export base_dir=/home/4/t3-test00/isv/lsdyna
cd $base_dir/smp_d
export exe=smpdynad
#export LSTC_LICENSE=network
#export LSTC_MEMORY=auto
export NCPUS=4
export OMP_NUM_THREADS=${NCPUS}
export INPUT=$base_dir/sample/airbag_deploy.k
${exe} i=${INPUT} ncpus=${NCPUS}
2.1.2.3. スクリプト例：MPP単精度版¶
#!/bin/bash
#$ -cwd
#$ -V
#$ -l h_node=1
#$ -l h_rt=0:30:0
. /etc/profile.d/modules.sh
module load cuda/8.0.44
module load lsdyna/R9.1.0 mpt/2.16
export base_dir=/home/4/t3-test00/isv/lsdyna
cd $base_dir/mpp_s
export exe=mppdynas_avx2
export dbo=l2as_avx2
#export LSTC_LICENSE=network
#export LSTC_MEMORY=auto
export NCPUS=4
export OMP_NUM_THREADS=1
export INPUT=$base_dir/sample/airbag_deploy.k
export MPI_BUFS_PER_PROC=512
export MPI_REMSH=ssh
mpiexec_mpt -v -np 4 dplace -s1 ${exe} i=${INPUT} ncpus=${NCPUS}
${dbo} binout*
Info
lsdyna モジュールでロードされるもの以外に、ANSYSに含まれるLS-DYNAも利用可能です。
利用の際には下記スクリプト例をご参照ください。
#!/bin/bash
#$ -cwd
#$ -V
#$ -l h_node=1
#$ -l h_rt=5:00:0
. /etc/profile.d/modules.sh
module load ansys intel-mpi
export dynadir=/apps/t3/sles12sp2/isv/ansys_inc/v231/ansys/bin/linx64/
export exe=$dynadir/lsdyna_sp_mpp.e
export dbo=$dynadir/lsl2a_sp.e
export LSTC_LICENSE_SERVER='(27008@lice0 27008@remote 27008@t3ldap1)'
export NCPUS=4
export INPUT=$base_dir/sample/airbag_deploy.k
mpiexec -np ${NCPUS} ${exe} i=${INPUT}
${dbo} binout*
2.1.2.4. スクリプト例：MPP倍精度版¶
#!/bin/bash
#$ -cwd
#$ -V
#$ -l h_node=1
#$ -l h_rt=0:30:0
. /etc/profile.d/modules.sh
module load cuda/8.0.44
module load lsdyna/R9.1.0 mpt/2.16
export base_dir=/home/4/t3-test00/isv/lsdyna
cd $base_dir/mpp_d
export exe=mppdynad_avx2
export dbo=l2ad_avx2
#export LSTC_LICENSE=network
#export LSTC_MEMORY=auto
export NCPUS=4
export OMP_NUM_THREADS=1
export INPUT=$base_dir/sample/airbag_deploy.k
export MPI_BUFS_PER_PROC=512
export MPI_REMSH=ssh
mpiexec_mpt -v -np 4 dplace -s1 ${exe} i=${INPUT} ncpus=${NCPUS}
${dbo} binout*
Info
lsdyna モジュールでロードされるもの以外に、ANSYSに含まれるLS-DYNAも利用可能です。
利用の際には下記スクリプト例をご参照ください。
#!/bin/bash
#$ -cwd
#$ -V
#$ -l h_node=1
#$ -l h_rt=5:00:0
. /etc/profile.d/modules.sh
module load ansys intel-mpi
export dynadir=/apps/t3/sles12sp2/isv/ansys_inc/v231/ansys/bin/linx64/
export exe=$dynadir/lsdyna_dp_mpp.e
export dbo=$dynadir/lsl2a_dp.e
export LSTC_LICENSE_SERVER='(27008@lice0 27008@remote 27008@t3ldap1)'
export NCPUS=4
export INPUT=$base_dir/sample/airbag_deploy.k
mpiexec -np ${NCPUS} ${exe} i=${INPUT}
${dbo} binout*
2.1.3. ライセンスの確認¶
LS-DYNAのライセンス利用状況を以下のコマンドで確認できます。
$ module load lsdyna
$ lstc_qrun -r
詳細な使用状況を確認する場合は以下のオプションで実行ください。
$ module load lsdyna
$ lstc_qrun -R
現在契約しているライセンス数についてはTSUBAME計算サービスのサポートされているアプリケーションのページをご確認ください。