web/iscsi.html

   1 <!--#set var="TITLE" value="CTDB and iSCSI" -->
   2 <!--#include virtual="header.html" -->
   3
   4 <h1>Setting up HA iSCSI with CTDB</h1>
   5
   6 <p>
   7 You can use CTDB to create a HA iSCSI Target.
   8 </p>
   9
  10 <p>
  11 Since the iSCSI Target is not
  12 clusterized nor integrated with CTDB in the same sense Samba is, this
  13 implementation will only create a HA solution for iSCSI where each public address is assinged its own iscsi target name and the LUNs that are created are only accessible through one specific target (i.e. one public address at a time).
  14
  15 </p>
  16
  17 <p>
  18 ! This feature ONLY works when public addresses are used. It is not supported, nor does it work, if you use the LVS feature to present the entire cluster as one single ip address. !
  19
  20 </p>
  21
  22 <h2>Prereqs</h2>
  23 Configure CTDB as above and set it up to use public ipaddresses.<br>
  24 Verify that the CTDB cluster works.
  25
  26 <h2>Install the iSCSI target software on all nodes</h2>
  27 On RHEL5 this package is called "scsi-target-utils" and it needs to be installed
  28 on all nodes in the cluster. The easiest way to install this package is by using :
  29
  30 <pre>
  31 onnode all yum install scsi-target-utils -y
  32 </pre>
  33
  34 Make sure that the service is not started automatically when booting, we want CTDB to start/stop this service :
  35 <pre>
  36 onnode all chkconfig tgtd off
  37 </pre>
  38
  39 <h2>/etc/sysconfig/iscsi</h2>
  40
  41 Create this file and add the following three lines to it :
  42
  43 <pre>
  44    CTDB_START_ISCSI_SCRIPTS=/gpfs/iscsi/
  45 </pre>
  46
  47 <p>
  48 CTDB_START_ISCSI_SCRIPTS=<directory on shared storage>
  49 This is a directory on shared storage where the scripts to start and configure the iscsi service are held. There is one script for each public address named <public address>.sh .
  50 </p>
  51
  52
  53 <h2>/etc/sysconfig/ctdb</h2>
  54
  55 Add the following line to /etc/sysconfig/ctdb :
  56
  57 <pre>
  58    CTDB_MANAGES_ISCSI=yes
  59 </pre>
  60
  61 <p>
  62 CTDB_MANAGES_ISCSI=yes just tells CTDB event script for iSCSI that CTDB should start and stop the iSCSI target service as required.
  63 </p>
  64
  65
  66 <h2>Example: create a LUN that will be hosted on public ip address 10.1.1.1</h2>
  67 <p>
  68 Before you cna export a LUN you must create it as a file in the shared filesystem. When doing so, make sure you create it as a real file and not a sparse file!<br />
  69 While it is much quicker to create a sparse file if you want a file with filesize 100Gb, SCSI has no concept of "disk full" so if you run out of backing space for the sparse file, the scsi initiators will be "surprised" and "unhappy".
  70 </p>
  71 <pre>
  72 dd if=/dev/zero of=/gpfs/iscsi/10.1.1.1.lun.1 bs=1024 count=102400
  73 </pre>
  74 <p>
  75 to create a 100MByte file to export as an iSCSI LUN.
  76 </p>
  77
  78 <h2>Example: 10.1.1.1.sh</h2>
  79 <p>
  80 This example shellscript is used to configure the iscsi target that is hosted onthe public address 10.1.1.1
  81 </p>
  82 <pre>
  83 #!/bin/sh
  84 # script to set up the iscsi target and luns hosted by public address
  85 # 10.1.1.1
  86
  87
  88 #create a target
  89 tgtadm --lld iscsi --op new --mode target --tid 1 -T iqn.2007-11.com.ctdb:iscsi.target.10.1.1.1
  90
  91 #attach a lun
  92 tgtadm --lld iscsi --op new --mode logicalunit --tid 1 --lun 1 -b /gpfs/iscsi/10.1.1.1.lun.1
  93
  94 # no security, allow everyone to access this lun
  95 tgtadm --lld iscsi --op bind --mode target --tid 1 -I ALL
  96 </pre>
  97
  98
  99 <p>
 100 iqn.2007-11.com.ctdb:iscsi.target.10.1.1.1 in the example above is the iscsi name that is assigned to the target. Dont use this name, pick your own name!
 101 </p>
 102
 103 <p>
 104 See the documentation for the tgtadm command for more information on how you want to set up your environment.
 105 </p>
 106
 107 <h2>Perform a ctdb recovery to start the iscsi service</h2>
 108 <pre>
 109 ctdb recover
 110 </pre>
 111
 112 <!--#include virtual="footer.html" -->
 113