source4/selftest/tests.sh

   1 #!/bin/sh
   2 # This script generates a list of testsuites that should be run as part of
   3 # the Samba 4 test suite.
   4
   5 # The output of this script is parsed by selftest.pl, which then decides
   6 # which of the tests to actually run. It will, for example, skip all tests
   7 # listed in samba4-skip or only run a subset during "make quicktest".
   8
   9 # The idea is that this script outputs all of the tests of Samba 4, not
  10 # just those that are known to pass, and list those that should be skipped
  11 # or are known to file in samba4-skip/samba4-knownfail. This makes it
  12 # very easy to see what functionality is still missing in Samba 4 and makes
  13 # it possible to run the testsuite against other servers, such as Samba 3 or
  14 # Windows that have a different set of features.
  15
  16 # The syntax for a testsuite is "-- TEST --" on a single line, followed
  17 # by the name of the test, the environment it needs and the command to run, all
  18 # three separated by newlines. All other lines in the output are considered
  19 # comments.
  20
  21 if [ ! -n "$PERL" ]
  22 then
  23         PERL=perl
  24 fi
  25
  26 plantest() {
  27         name=$1
  28         env=$2
  29         shift 2
  30         cmdline="$*"
  31         echo "-- TEST --"
  32         if [ "$env" = "none" ]; then
  33                 echo "samba4.$name"
  34         else
  35                 echo "samba4.$name ($env)"
  36         fi
  37         echo $env
  38         echo $cmdline
  39 }
  40
  41 normalize_testname() {
  42         name=$1
  43         shift 1
  44         echo $name | tr "A-Z-" "a-z."
  45 }
  46
  47 plansmbtorturetest() {
  48         name=$1
  49         env=$2
  50         shift 2
  51         other_args="$*"
  52         modname=`normalize_testname $name`
  53         cmdline="$VALGRIND $smb4torture $other_args $name"
  54         plantest "$modname" "$env" $cmdline
  55 }
  56
  57 bin/smbtorture -V
  58
  59 samba4srcdir=.
  60 samba4bindir=$samba4srcdir/bin
  61 SCRIPTDIR=$samba4srcdir/../testprogs/ejs
  62 smb4torture="$samba4bindir/smbtorture $TORTURE_OPTIONS"
  63
  64 plantest "js.base" dc "$SCRIPTDIR/base.js" $CONFIGURATION
  65 plantest "js.ldb" none "$SCRIPTDIR/ldb.js" `pwd` $CONFIGURATION -d 10
  66
  67 # Simple tests for LDAP and CLDAP
  68
  69 for options in "" "--option=socket:testnonblock=true" "-U\$USERNAME%\$PASSWORD --option=socket:testnonblock=true" "-U\$USERNAME%\$PASSWORD"; do
  70     plantest "ldb.ldap with options $options" dc $samba4srcdir/../testprogs/blackbox/test_ldb.sh ldap \$SERVER_IP $options
  71 done
  72 # see if we support ldaps
  73 if grep ENABLE_GNUTLS.1 include/config.h > /dev/null; then
  74     for options in "" "-U\$USERNAME%\$PASSWORD"; do
  75         plantest "ldb.ldaps with options $options" dc $samba4srcdir/../testprogs/blackbox/test_ldb.sh ldaps \$SERVER_IP $options
  76     done
  77 fi
  78 plantest "ldb.ldapi with options $options" dc $samba4srcdir/../testprogs/blackbox/test_ldb.sh ldapi \$PREFIX_ABS/dc/private/ldapi $options
  79 for t in LDAP-CLDAP LDAP-BASIC LDAP-SCHEMA LDAP-UPTODATEVECTOR
  80 do
  81         plansmbtorturetest "$t" dc "-U\$USERNAME%\$PASSWORD" //\$SERVER_IP/_none_
  82 done
  83
  84 # only do the ldb tests when not in quick mode - they are quite slow, and ldb
  85 # is now pretty well tested by the rest of the quick tests anyway
  86 LDBDIR=$samba4srcdir/lib/ldb
  87 export LDBDIR
  88 plantest "ldb" none TEST_DATA_PREFIX=\$PREFIX $LDBDIR/tests/test-tdb.sh
  89
  90 # Tests for RPC
  91
  92 # add tests to this list as they start passing, so we test
  93 # that they stay passing
  94 ncacn_np_tests="RPC-SCHANNEL RPC-JOIN RPC-LSA RPC-DSSETUP RPC-ALTERCONTEXT RPC-MULTIBIND RPC-NETLOGON RPC-HANDLES RPC-SAMSYNC RPC-SAMBA3SESSIONKEY RPC-SAMBA3-GETUSERNAME RPC-SAMBA3-LSA RPC-BINDSAMBA3 RPC-NETLOGSAMBA3 RPC-ASYNCBIND RPC-LSALOOKUP RPC-LSA-GETUSER RPC-SCHANNEL2 RPC-AUTHCONTEXT"
  95 ncalrpc_tests="RPC-SCHANNEL RPC-JOIN RPC-LSA RPC-DSSETUP RPC-ALTERCONTEXT RPC-MULTIBIND RPC-NETLOGON RPC-DRSUAPI RPC-ASYNCBIND RPC-LSALOOKUP RPC-LSA-GETUSER RPC-SCHANNEL2 RPC-AUTHCONTEXT"
  96 ncacn_ip_tcp_tests="RPC-SCHANNEL RPC-JOIN RPC-LSA RPC-DSSETUP RPC-ALTERCONTEXT RPC-MULTIBIND RPC-NETLOGON RPC-HANDLES RPC-DSSYNC RPC-ASYNCBIND RPC-LSALOOKUP RPC-LSA-GETUSER RPC-SCHANNEL2 RPC-AUTHCONTEXT"
  97 slow_ncacn_np_tests="RPC-SAMLOGON RPC-SAMR RPC-SAMR-USERS RPC-SAMR-PASSWORDS"
  98 slow_ncalrpc_tests="RPC-SAMR RPC-SAMR-PASSWORDS"
  99 slow_ncacn_ip_tcp_tests="RPC-SAMR RPC-SAMR-PASSWORDS RPC-CRACKNAMES"
 100
 101 all_tests="$ncalrpc_tests $ncacn_np_tests $ncacn_ip_tcp_tests $slow_ncalrpc_tests $slow_ncacn_np_tests $slow_ncacn_ip_tcp_tests RPC-SECRETS RPC-SAMBA3-SHARESEC"
 102
 103 # Make sure all tests get run
 104 for t in `$smb4torture --list | grep "^RPC-"`
 105 do
 106         echo $all_tests | grep $t  > /dev/null
 107         if [ $? -ne 0 ]
 108         then
 109                 auto_rpc_tests="$auto_rpc_tests $t"
 110         fi
 111 done
 112
 113 for bindoptions in seal,padcheck $VALIDATE bigendian; do
 114  for transport in ncalrpc ncacn_np ncacn_ip_tcp; do
 115      case $transport in
 116          ncalrpc) tests=$ncalrpc_tests ;;
 117          ncacn_np) tests=$ncacn_np_tests ;;
 118          ncacn_ip_tcp) tests=$ncacn_ip_tcp_tests ;;
 119      esac
 120    for t in $tests; do
 121     plantest "`normalize_testname $t` on $transport with $bindoptions" dc $VALGRIND $smb4torture $transport:"\$SERVER[$bindoptions]" -U"\$USERNAME"%"\$PASSWORD" -W \$DOMAIN $t "$*"
 122    done
 123    plantest "rpc.samba3.sharesec on $transport with $bindoptions" dc $VALGRIND $smb4torture $transport:"\$SERVER[$bindoptions]" -U"\$USERNAME"%"\$PASSWORD" -W \$DOMAIN --option=torture:share=tmp RPC-SAMBA3-SHARESEC "$*"
 124  done
 125 done
 126
 127 for bindoptions in "" $VALIDATE bigendian; do
 128  for t in $auto_rpc_tests; do
 129   plantest "`normalize_testname $t` with $bindoptions" dc $VALGRIND $smb4torture "\$SERVER[$bindoptions]" -U"\$USERNAME"%"\$PASSWORD" -W \$DOMAIN $t "$*"
 130  done
 131 done
 132
 133 for bindoptions in connect $VALIDATE ; do
 134  for transport in ncalrpc ncacn_np ncacn_ip_tcp; do
 135      case $transport in
 136          ncalrpc) tests=$slow_ncalrpc_tests ;;
 137          ncacn_np) tests=$slow_ncacn_np_tests ;;
 138          ncacn_ip_tcp) tests=$slow_ncacn_ip_tcp_tests ;;
 139      esac
 140    for t in $tests; do
 141     plantest "`normalize_testname $t` on $transport with $bindoptions" dc $VALGRIND $smb4torture $transport:"\$SERVER[$bindoptions]" -U"\$USERNAME"%"\$PASSWORD" -W \$DOMAIN $t "$*"
 142    done
 143  done
 144 done
 145
 146
 147 # Tests for the NET API
 148
 149 net=`$smb4torture --list | grep ^NET-`
 150
 151 for t in $net; do
 152     plansmbtorturetest "$t" dc "\$SERVER[$VALIDATE]" -U"\$USERNAME"%"\$PASSWORD" -W "\$DOMAIN" "$*"
 153 done
 154
 155 # Tests for session keys
 156 # FIXME: Integrate these into a single smbtorture test
 157
 158 bindoptions=""
 159 transport="ncacn_np"
 160 for ntlmoptions in \
 161         "-k no --option=usespnego=yes" \
 162         "-k no --option=usespnego=yes --option=ntlmssp_client:128bit=no" \
 163         "-k no --option=usespnego=yes --option=ntlmssp_client:56bit=yes" \
 164         "-k no --option=usespnego=yes --option=ntlmssp_client:56bit=no" \
 165         "-k no --option=usespnego=yes --option=ntlmssp_client:128bit=no --option=ntlmssp_client:56bit=yes" \
 166         "-k no --option=usespnego=yes --option=ntlmssp_client:128bit=no --option=ntlmssp_client:56bit=no" \
 167         "-k no --option=usespnego=yes --option=clientntlmv2auth=yes" \
 168         "-k no --option=usespnego=yes --option=clientntlmv2auth=yes --option=ntlmssp_client:128bit=no" \
 169         "-k no --option=usespnego=yes --option=clientntlmv2auth=yes --option=ntlmssp_client:128bit=no --option=ntlmssp_client:56bit=yes" \
 170         "-k no --option=usespnego=no --option=clientntlmv2auth=yes" \
 171         "-k no --option=gensec:spnego=no --option=clientntlmv2auth=yes" \
 172         "-k no --option=usespnego=no"; do
 173         name="rpc.secrets on $transport with $bindoptions with $ntlmoptions"
 174    plantest "$name" dc $smb4torture $transport:"\$SERVER[$bindoptions]"  $ntlmoptions -U"\$USERNAME"%"\$PASSWORD" -W \$DOMAIN --option=gensec:target_hostname=\$NETBIOSNAME RPC-SECRETS "$*"
 175 done
 176 plantest "rpc.secrets on $transport with $bindoptions with Kerberos" dc $smb4torture $transport:"\$SERVER[$bindoptions]" -k yes -U"\$USERNAME"%"\$PASSWORD" -W \$DOMAIN "--option=gensec:target_hostname=\$NETBIOSNAME" RPC-SECRETS "$*"
 177 plantest "rpc.secrets on $transport with $bindoptions with Kerberos - use target principal" dc $smb4torture $transport:"\$SERVER[$bindoptions]" -k yes -U"\$USERNAME"%"\$PASSWORD" -W \$DOMAIN "--option=clientusespnegoprincipal=yes" "--option=gensec:target_hostname=\$NETBIOSNAME" RPC-SECRETS "$*"
 178 plantest "rpc.secrets on $transport with Kerberos - use Samba3 style login" dc $smb4torture $transport:"\$SERVER" -k yes -U"\$USERNAME"%"\$PASSWORD" -W "\$DOMAIN" "--option=gensec:fake_gssapi_krb5=yes" "--option=gensec:gssapi_krb5=no" "--option=gensec:target_hostname=\$NETBIOSNAME" "RPC-SECRETS-none*" "$*"
 179 plantest "rpc.secrets on $transport with Kerberos - use Samba3 style login, use target principal" dc $smb4torture $transport:"\$SERVER" -k yes -U"\$USERNAME"%"\$PASSWORD" -W "\$DOMAIN" "--option=clientusespnegoprincipal=yes" "--option=gensec:fake_gssapi_krb5=yes" "--option=gensec:gssapi_krb5=no" "--option=gensec:target_hostname=\$NETBIOSNAME" "RPC-SECRETS-none*" "$*"
 180
 181 # Echo tests
 182 transports="ncacn_np ncacn_ip_tcp ncalrpc"
 183
 184 for transport in $transports; do
 185  for bindoptions in connect spnego spnego,sign spnego,seal $VALIDATE padcheck bigendian bigendian,seal; do
 186   for ntlmoptions in \
 187         "--option=socket:testnonblock=True --option=torture:quick=yes"; do
 188    plantest "rpc.echo on $transport with $bindoptions and $ntlmoptions" dc $smb4torture $transport:"\$SERVER[$bindoptions]" $ntlmoptions -U"\$USERNAME"%"\$PASSWORD" -W "\$DOMAIN" RPC-ECHO "$*"
 189   done
 190  done
 191 done
 192
 193 for transport in $transports; do
 194  for bindoptions in sign seal; do
 195   for ntlmoptions in \
 196         "--option=ntlmssp_client:ntlm2=yes --option=torture:quick=yes" \
 197         "--option=ntlmssp_client:ntlm2=no  --option=torture:quick=yes" \
 198         "--option=ntlmssp_client:ntlm2=yes --option=ntlmssp_client:128bit=no --option=torture:quick=yes" \
 199         "--option=ntlmssp_client:ntlm2=no  --option=ntlmssp_client:128bit=no --option=torture:quick=yes" \
 200         "--option=ntlmssp_client:ntlm2=yes --option=ntlmssp_client:keyexchange=no --option=torture:quick=yes" \
 201         "--option=ntlmssp_client:ntlm2=no  --option=ntlmssp_client:keyexchange=no  --option=torture:quick=yes" \
 202         "--option=clientntlmv2auth=yes  --option=ntlmssp_client:keyexchange=no  --option=torture:quick=yes" \
 203         "--option=clientntlmv2auth=yes  --option=ntlmssp_client:128bit=no --option=ntlmssp_client:keyexchange=yes  --option=torture:quick=yes" \
 204         "--option=clientntlmv2auth=yes  --option=ntlmssp_client:128bit=no --option=ntlmssp_client:keyexchange=no  --option=torture:quick=yes" \
 205     ; do
 206    plantest "rpc.echo on $transport with $bindoptions and $ntlmoptions" dc $smb4torture $transport:"\$SERVER[$bindoptions]" $ntlmoptions -U"\$USERNAME"%"\$PASSWORD" -W \$DOMAIN RPC-ECHO "$*"
 207   done
 208  done
 209 done
 210
 211 plantest "rpc.echo on ncacn_np over smb2" dc $smb4torture ncacn_np:"\$SERVER[smb2]" -U"\$USERNAME"%"\$PASSWORD" -W \$DOMAIN RPC-ECHO "$*"
 212
 213 # Tests against the NTVFS POSIX backend
 214 NTVFSARGS=""
 215 NTVFSARGS="${NTVFSARGS} --option=torture:sharedelay=100000"
 216 NTVFSARGS="${NTVFSARGS} --option=torture:oplocktimeout=3"
 217 NTVFSARGS="${NTVFSARGS} --option=torture:writetimeupdatedelay=500000"
 218
 219 smb2=`$smb4torture --list | grep "^SMB2-" | xargs`
 220 #The QFILEINFO-IPC test needs to be on ipc$
 221 raw=`$smb4torture --list | grep "^RAW-" | grep -v "RAW-QFILEINFO-IPC"| xargs`
 222 base=`$smb4torture --list | grep "^BASE-" | xargs`
 223
 224 for t in $base $raw $smb2; do
 225     plansmbtorturetest "$t" dc $ADDARGS //\$SERVER/tmp -U"\$USERNAME"%"\$PASSWORD" $NTVFSARGS
 226 done
 227
 228 plansmbtorturetest "RAW-QFILEINFO-IPC" dc $ADDARGS //\$SERVER/ipc$ -U"\$USERNAME"%"\$PASSWORD"
 229
 230 rap=`$smb4torture --list | grep "^RAP-" | xargs`
 231 for t in $rap; do
 232     plansmbtorturetest "$t" dc $ADDARGS //\$SERVER/IPC\\\$ -U"\$USERNAME"%"\$PASSWORD"
 233 done
 234
 235 # Tests against the NTVFS CIFS backend
 236 for t in $base $raw; do
 237     plantest "ntvfs.cifs.`normalize_testname $t`" dc $VALGRIND $smb4torture //\$NETBIOSNAME/cifs -U"\$USERNAME"%"\$PASSWORD" $NTVFSARGS $t
 238 done
 239
 240 # Local tests
 241
 242 for t in `$smb4torture --list | grep "^LOCAL-" | xargs`; do
 243         plansmbtorturetest "$t" none ncalrpc: "$*"
 244 done
 245
 246 if test -f $samba4bindir/tdbtorture
 247 then
 248         plantest "tdb.stress" none $VALGRIND $samba4bindir/tdbtorture
 249 fi
 250
 251 # Pidl tests
 252
 253 if test x"${PIDL_TESTS_SKIP}" = x"yes"; then
 254    echo "Skipping pidl tests - PIDL_TESTS_SKIP=yes"
 255 elif $PERL -e 'eval require Test::More;' > /dev/null 2>&1; then
 256   for f in $samba4srcdir/../pidl/tests/*.pl; do
 257      plantest "pidl.`basename $f .pl`" none $PERL $f "|" $samba4srcdir/script/harness2subunit.pl
 258   done
 259 else
 260    echo "Skipping pidl tests - Test::More not installed"
 261 fi
 262
 263 # Blackbox Tests:
 264 # tests that interact directly with the command-line tools rather than using
 265 # the API. These mainly test that the various command-line options of commands
 266 # work correctly.
 267
 268 bbdir=../testprogs/blackbox
 269
 270 plantest "blackbox.ndrdump" dc $samba4srcdir/librpc/tests/test_ndrdump.sh
 271 plantest "blackbox.net" dc $samba4srcdir/utils/tests/test_net.sh "\$SERVER" "\$USERNAME" "\$PASSWORD" "\$DOMAIN"
 272 plantest "blackbox.kinit" dc $bbdir/test_kinit.sh "\$SERVER" "\$USERNAME" "\$PASSWORD" "\$REALM" "\$DOMAIN" "$PREFIX" $CONFIGURATION
 273 plantest "blackbox.cifsdd" dc $samba4srcdir/client/tests/test_cifsdd.sh "\$SERVER" "\$USERNAME" "\$PASSWORD" "\$DOMAIN"
 274 plantest "blackbox.nmblookup" dc $samba4srcdir/utils/tests/test_nmblookup.sh "\$NETBIOSNAME" "\$NETBIOSALIAS" "\$SERVER" "\$SERVER_IP"
 275 plantest "blackbox.nmblookup" member $samba4srcdir/utils/tests/test_nmblookup.sh "\$NETBIOSNAME" "\$NETBIOSALIAS" "\$SERVER" "\$SERVER_IP"
 276 plantest "blackbox.locktest" dc $samba4srcdir/torture/tests/test_locktest.sh "\$SERVER" "\$USERNAME" "\$PASSWORD" "\$DOMAIN" "$PREFIX"
 277 plantest "blackbox.masktest" dc $samba4srcdir/torture/tests/test_masktest.sh "\$SERVER" "\$USERNAME" "\$PASSWORD" "\$DOMAIN" "$PREFIX"
 278 plantest "blackbox.gentest" dc $samba4srcdir/torture/tests/test_gentest.sh "\$SERVER" "\$USERNAME" "\$PASSWORD" "\$DOMAIN" "$PREFIX"
 279 plantest "blackbox.wbinfo" dc $samba4srcdir/nsswitch/tests/test_wbinfo.sh "\$DOMAIN" "\$USERNAME" "\$PASSWORD" "dc"
 280 plantest "blackbox.wbinfo" member $samba4srcdir/nsswitch/tests/test_wbinfo.sh "\$DOMAIN" "\$DC_USERNAME" "\$DC_PASSWORD" "member"
 281
 282 # Tests using the "Simple" NTVFS backend
 283
 284 for t in "BASE-RW1"; do
 285     plantest "ntvfs.simple.`normalize_testname $t`" dc $VALGRIND $smb4torture $ADDARGS //\$SERVER/simple -U"\$USERNAME"%"\$PASSWORD" $t
 286 done
 287
 288 DATADIR=$samba4srcdir/../testdata
 289
 290 plantest "js.samba3sam" none $samba4bindir/smbscript $SCRIPTDIR/samba3sam.js $CONFIGURATION `pwd` $DATADIR/samba3/
 291
 292 # Domain Member Tests
 293
 294 plantest "rpc.echo against member server with local creds" member $VALGRIND $smb4torture ncacn_np:"\$NETBIOSNAME" -U"\$NETBIOSNAME/\$USERNAME"%"\$PASSWORD" RPC-ECHO "$*"
 295 plantest "rpc.echo against member server with domain creds" member $VALGRIND $smb4torture ncacn_np:"\$NETBIOSNAME" -U"\$DOMAIN/\$DC_USERNAME"%"\$DC_PASSWORD" RPC-ECHO "$*"
 296 plantest "rpc.samr against member server with local creds" member $VALGRIND $smb4torture ncacn_np:"\$NETBIOSNAME" -U"\$NETBIOSNAME/\$USERNAME"%"\$PASSWORD" "RPC-SAMR" "$*"
 297 plantest "rpc.samr.users against member server with local creds" member $VALGRIND $smb4torture ncacn_np:"\$NETBIOSNAME" -U"\$NETBIOSNAME/\$USERNAME"%"\$PASSWORD" "RPC-SAMR-USERS" "$*"
 298 plantest "rpc.samr.passwords against member server with local creds" member $VALGRIND $smb4torture ncacn_np:"\$NETBIOSNAME" -U"\$NETBIOSNAME/\$USERNAME"%"\$PASSWORD" "RPC-SAMR-PASSWORDS" "$*"
 299 plantest "blackbox.smbclient against member server with local creds" member $samba4srcdir/client/tests/test_smbclient.sh "\$NETBIOSNAME" "\$USERNAME" "\$PASSWORD" "\$NETBIOSNAME" "$PREFIX"
 300
 301 NBT_TESTS=`$smb4torture --list | grep "^NBT-" | xargs`
 302
 303 for t in $NBT_TESTS; do
 304         plansmbtorturetest "$t" dc //\$SERVER/_none_ -U\$USERNAME%\$PASSWORD
 305 done
 306
 307 WB_OPTS="--option=\"torture:strict mode=no\""
 308 WB_OPTS="${WB_OPTS} --option=\"torture:timelimit=1\""
 309 WB_OPTS="${WB_OPTS} --option=\"torture:winbindd separator=/\""
 310 WB_OPTS="${WB_OPTS} --option=\"torture:winbindd netbios name=\$SERVER\""
 311 WB_OPTS="${WB_OPTS} --option=\"torture:winbindd netbios domain=\$DOMAIN\""
 312
 313 WINBIND_STRUCT_TESTS=`$smb4torture --list | grep "^WINBIND-STRUCT" | xargs`
 314 WINBIND_NDR_TESTS=`$smb4torture --list | grep "^WINBIND-NDR" | xargs`
 315 for env in dc member; do
 316         for t in $WINBIND_STRUCT_TESTS; do
 317                 plansmbtorturetest $t $env $WB_OPTS //_none_/_none_
 318         done
 319
 320         for t in $WINBIND_NDR_TESTS; do
 321                 plansmbtorturetest $t $env $WB_OPTS //_none_/_none_
 322         done
 323 done
 324
 325 if test -f $samba4bindir/nsstest
 326 then
 327         plantest "nss.test using winbind" member $VALGRIND $samba4bindir/nsstest $samba4bindir/shared/libnss_winbind.so
 328 fi
 329
 330 PYTHON=/usr/bin/python
 331 SUBUNITRUN="$PYTHON ./scripting/bin/subunitrun"
 332 plantest "ldb.python" none PYTHONPATH="$PYTHONPATH:lib/ldb/tests/python/" $SUBUNITRUN api
 333 plantest "credentials.python" none PYTHONPATH="$PYTHONPATH:auth/credentials/tests" $SUBUNITRUN bindings
 334 plantest "registry.python" none PYTHONPATH="$PYTHONPATH:lib/registry/tests/" $SUBUNITRUN bindings
 335 plantest "tdb.python" none PYTHONPATH="$PYTHONPATH:../lib/tdb/python/tests" $SUBUNITRUN simple
 336 plantest "auth.python" none PYTHONPATH="$PYTHONPATH:auth/tests/" $SUBUNITRUN bindings
 337 plantest "security.python" none PYTHONPATH="$PYTHONPATH:libcli/security/tests" $SUBUNITRUN bindings
 338 plantest "param.python" none PYTHONPATH="$PYTHONPATH:param/tests" $SUBUNITRUN bindings
 339 plantest "upgrade.python" none $SUBUNITRUN samba.tests.upgrade
 340 plantest "samba.python" none $SUBUNITRUN samba.tests
 341 plantest "provision.python" none $SUBUNITRUN samba.tests.provision
 342 plantest "samba3.python" none $SUBUNITRUN samba.tests.samba3
 343 plantest "samr.python" dc $SUBUNITRUN samba.tests.dcerpc.sam
 344 plantest "dcerpc.bare.python" dc $SUBUNITRUN samba.tests.dcerpc.bare
 345 plantest "unixinfo.python" dc $SUBUNITRUN samba.tests.dcerpc.unix
 346 plantest "samdb.python" none $SUBUNITRUN samba.tests.samdb
 347 plantest "events.python" none PYTHONPATH="$PYTHONPATH:lib/events" $SUBUNITRUN tests
 348 plantest "messaging.python" none PYTHONPATH="$PYTHONPATH:lib/messaging/tests" $SUBUNITRUN bindings
 349 plantest "samba3sam.python" none PYTHONPATH="$PYTHONPATH:dsdb/samdb/ldb_modules/tests" $SUBUNITRUN samba3sam
 350 plantest "rpcecho.python" dc $SUBUNITRUN samba.tests.dcerpc.rpcecho
 351 plantest "winreg.python" dc $SUBUNITRUN -U\$USERNAME%\$PASSWORD samba.tests.dcerpc.registry
 352 plantest "ldap.python" dc $PYTHON $samba4srcdir/lib/ldb/tests/python/ldap.py $CONFIGURATION \$SERVER -U\$USERNAME%\$PASSWORD -W \$DOMAIN
 353 plantest "blackbox.samba3dump" none $PYTHON scripting/bin/samba3dump $samba4srcdir/../testdata/samba3
 354 rm -rf $PREFIX/upgrade
 355 plantest "blackbox.upgrade" none $PYTHON setup/upgrade $CONFIGURATION --targetdir=$PREFIX/upgrade ../testdata/samba3 ../testdata/samba3/smb.conf
 356 rm -rf $PREFIX/provision
 357 mkdir $PREFIX/provision
 358 plantest "blackbox.provision.py" none PYTHON="$PYTHON" $samba4srcdir/setup/tests/blackbox_provision.sh "$PREFIX/provision"
 359 plantest "blackbox.provision-backend.py" none PYTHON="$PYTHON" $samba4srcdir/setup/tests/blackbox_provision-backend.sh "$PREFIX/provision"
 360 plantest "blackbox.setpassword.py" none PYTHON="$PYTHON" $samba4srcdir/setup/tests/blackbox_setpassword.sh "$PREFIX/provision"
 361 plantest "blackbox.newuser.py" none PYTHON="$PYTHON" $samba4srcdir/setup/tests/blackbox_newuser.sh "$PREFIX/provision"