finished 64 bit file offset support. Hopefully rsync can now transfer
[rsync.git] / rsync.h
1 /* 
2    Copyright (C) Andrew Tridgell 1996
3    Copyright (C) Paul Mackerras 1996
4    
5    This program is free software; you can redistribute it and/or modify
6    it under the terms of the GNU General Public License as published by
7    the Free Software Foundation; either version 2 of the License, or
8    (at your option) any later version.
9    
10    This program is distributed in the hope that it will be useful,
11    but WITHOUT ANY WARRANTY; without even the implied warranty of
12    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13    GNU General Public License for more details.
14    
15    You should have received a copy of the GNU General Public License
16    along with this program; if not, write to the Free Software
17    Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
18 */
19
20 #define BLOCK_SIZE 700
21 #define RSYNC_RSH_ENV "RSYNC_RSH"
22
23 #define RSYNC_NAME "rsync"
24 #define BACKUP_SUFFIX "~"
25
26 /* a non-zero CHAR_OFFSET makes the rolling sum stronger, but is
27    imcompatible with older versions :-( */
28 #define CHAR_OFFSET 0
29
30
31 #define FILE_VALID 1
32 #define SAME_MODE (1<<1)
33 #define SAME_RDEV (1<<2)
34 #define SAME_UID (1<<3)
35 #define SAME_GID (1<<4)
36 #define SAME_DIR (1<<5)
37 #define SAME_NAME SAME_DIR
38 #define LONG_NAME (1<<6)
39 #define SAME_TIME (1<<7)
40
41 /* update this if you make incompatible changes */
42 #define PROTOCOL_VERSION 16
43 #define MIN_PROTOCOL_VERSION 11
44 #define MAX_PROTOCOL_VERSION 20
45
46 #define SPARSE_WRITE_SIZE (4*1024)
47 #define WRITE_SIZE (32*1024)
48 #define CHUNK_SIZE (32*1024)
49 #define MAX_MAP_SIZE (4*1024*1024)
50
51 #define BLOCKING_TIMEOUT 10
52
53 #define FERROR stderr
54 #define FINFO (am_server?stderr:stdout)
55
56 #include "config.h"
57
58 #if HAVE_REMSH
59 #define RSYNC_RSH "remsh"
60 #else
61 #define RSYNC_RSH "rsh"
62 #endif
63
64 #include <sys/types.h>
65 #ifdef HAVE_UNISTD_H
66 #include <unistd.h>
67 #endif
68 #include <stdio.h>
69
70 #ifdef HAVE_SYS_PARAM_H
71 #include <sys/param.h>
72 #endif
73
74 #ifdef HAVE_STDLIB_H
75 #include <stdlib.h>
76 #endif
77
78 #ifdef HAVE_SYS_SOCKET_H
79 #include <sys/socket.h>
80 #endif
81
82 #ifdef HAVE_STRING_H
83 #include <string.h>
84 #endif
85
86 #ifdef HAVE_COMPAT_H
87 #include <compat.h>
88 #endif
89
90 #ifdef HAVE_MALLOC_H
91 #include <malloc.h>
92 #endif
93
94 #ifdef TIME_WITH_SYS_TIME
95 #include <sys/time.h>
96 #include <time.h>
97 #else
98 #ifdef HAVE_SYS_TIME_H
99 #include <sys/time.h>
100 #else
101 #include <time.h>
102 #endif
103 #endif
104
105 #ifdef HAVE_FCNTL_H
106 #include <fcntl.h>
107 #else
108 #ifdef HAVE_SYS_FCNTL_H
109 #include <sys/fcntl.h>
110 #endif
111 #endif
112
113 #include <sys/stat.h>
114
115 #ifdef HAVE_SYS_IOCTL_H
116 #include <sys/ioctl.h>
117 #endif
118
119 #ifdef HAVE_SYS_FILIO_H
120 #include <sys/filio.h>
121 #endif
122
123 #include <signal.h>
124 #ifdef HAVE_SYS_WAIT_H
125 #include <sys/wait.h>
126 #endif
127 #ifdef HAVE_CTYPE_H
128 #include <ctype.h>
129 #endif
130 #ifdef HAVE_GRP_H
131 #include <grp.h>
132 #endif
133 #include <errno.h>
134
135 #ifdef HAVE_MMAP
136 #include <sys/mman.h>
137 #endif
138
139 #ifdef HAVE_UTIME_H
140 #include <utime.h>
141 #endif
142
143 #ifdef HAVE_SYS_SELECT_H
144 #include <sys/select.h>
145 #endif
146
147 #ifdef HAVE_SYS_MODE_H
148 /* apparently AIX needs this for S_ISLNK */
149 #ifndef S_ISLNK
150 #include <sys/mode.h>
151 #endif
152 #endif
153
154 #ifdef HAVE_FNMATCH
155 #include <fnmatch.h>
156 #else
157 #include "lib/fnmatch.h"
158 #endif
159
160 #ifdef HAVE_GETOPT_LONG
161 #include <getopt.h>
162 #else
163 #include "lib/getopt.h"
164 #endif
165
166 /* these are needed for the uid/gid mapping code */
167 #include <pwd.h>
168 #include <grp.h>
169
170 #ifndef S_IFLNK
171 #define S_IFLNK  0120000
172 #endif
173
174 #ifndef S_ISLNK
175 #define S_ISLNK(mode) (((mode) & S_IFLNK) == S_IFLNK)
176 #endif
177
178 #ifndef uchar
179 #define uchar unsigned char
180 #endif
181
182 #ifndef int32
183 #if (SIZEOF_INT == 4)
184 #define int32 int
185 #elif (SIZEOF_LONG == 4)
186 #define int32 long
187 #elif (SIZEOF_SHORT == 4)
188 #define int32 short
189 #endif
190 #endif
191
192 #ifndef uint32
193 #define uint32 unsigned int32
194 #endif
195
196
197 #ifndef MIN
198 #define MIN(a,b) ((a)<(b)?(a):(b))
199 #endif
200
201 #ifndef MAX
202 #define MAX(a,b) ((a)>(b)?(a):(b))
203 #endif
204
205 /* the length of the md4 checksum */
206 #define MD4_SUM_LENGTH 16
207 #define SUM_LENGTH 16
208
209 #ifndef MAXPATHLEN
210 #define MAXPATHLEN 1024
211 #endif
212
213 struct file_struct {
214         time_t modtime;
215         off_t length;
216         mode_t mode;
217         ino_t inode;
218         dev_t dev;
219         dev_t rdev;
220         uid_t uid;
221         gid_t gid;
222         char *basename;
223         char *dirname;
224         char *basedir;
225         char *link;
226         char *sum;
227 };
228
229 struct file_list {
230   int count;
231   int malloced;
232   struct file_struct **files;
233 };
234
235 struct sum_buf {
236   off_t offset;                 /* offset in file of this chunk */
237   int len;                      /* length of chunk of file */
238   int i;                        /* index of this chunk */
239   uint32 sum1;                  /* simple checksum */
240   char sum2[SUM_LENGTH];        /* checksum  */
241 };
242
243 struct sum_struct {
244   off_t flength;                /* total file length */
245   int count;                    /* how many chunks */
246   int remainder;                /* flength % block_length */
247   int n;                        /* block_length */
248   struct sum_buf *sums;         /* points to info for each chunk */
249 };
250
251 struct map_struct {
252         char *map,*p;
253         int fd,p_size,p_len;
254         off_t size, p_offset;
255 };
256
257 /* we need this function because of the silly way in which duplicate
258    entries are handled in the file lists - we can't change this
259    without breaking existing versions */
260 static int flist_up(struct file_list *flist, int i)
261 {
262         while (!flist->files[i]->basename) i++;
263         return i;
264 }
265
266
267 #include "byteorder.h"
268 #include "version.h"
269 #include "proto.h"
270 #include "md4.h"
271
272 #if !HAVE_STRERROR
273 extern char *sys_errlist[];
274 #define strerror(i) sys_errlist[i]
275 #endif
276
277 #ifndef HAVE_STRCHR
278 # define strchr                 index
279 # define strrchr                rindex
280 #endif
281
282 #if HAVE_DIRENT_H
283 # include <dirent.h>
284 #else
285 # define dirent direct
286 # if HAVE_SYS_NDIR_H
287 #  include <sys/ndir.h>
288 # endif
289 # if HAVE_SYS_DIR_H
290 #  include <sys/dir.h>
291 # endif
292 # if HAVE_NDIR_H
293 #  include <ndir.h>
294 # endif
295 #endif
296
297 #ifndef HAVE_ERRNO_DECL
298 extern int errno;
299 #endif
300
301 #ifndef HAVE_BCOPY
302 #define bcopy(src,dest,n) memcpy(dest,src,n)
303 #endif
304
305 #ifndef HAVE_BZERO
306 #define bzero(buf,n) memset(buf,0,n)
307 #endif
308
309 #define SUPPORT_LINKS HAVE_READLINK
310 #define SUPPORT_HARD_LINKS HAVE_LINK
311
312 #ifndef HAVE_LCHOWN
313 #define lchown chown
314 #endif
315
316 #define SIGNAL_CAST (RETSIGTYPE (*)())
317
318 #ifndef EWOULDBLOCK
319 #define EWOULDBLOCK EAGAIN
320 #endif
321
322 #ifndef STDIN_FILENO
323 #define STDIN_FILENO 0
324 #endif
325
326 #ifndef STDOUT_FILENO
327 #define STDOUT_FILENO 1
328 #endif
329
330 #ifndef STDERR_FILENO
331 #define STDERR_FILENO 2
332 #endif
333
334 #ifndef S_IWUSR
335 #define S_IWUSR 0200
336 #endif
337
338 #ifndef S_ISBLK
339 #define S_ISBLK(mode) (((mode) & (_S_IFMT)) == (_S_IFBLK))
340 #endif
341
342 #ifndef S_ISCHR
343 #define S_ISCHR(mode) (((mode) & (_S_IFMT)) == (_S_IFCHR))
344 #endif
345
346 #ifndef S_ISDIR
347 #define S_ISDIR(mode) (((mode) & (_S_IFMT)) == (_S_IFDIR))
348 #endif
349
350 #ifndef S_ISREG
351 #define S_ISREG(mode) (((mode) & (_S_IFMT)) == (_S_IFREG))
352 #endif
353
354 #define IS_DEVICE(mode) (S_ISCHR(mode) || S_ISBLK(mode))
355