reduce IO_BUFFER_SIZE by 4 bytes so when then length word gets added
[rsync.git] / rsync.h
1 /* 
2    Copyright (C) Andrew Tridgell 1996
3    Copyright (C) Paul Mackerras 1996
4    
5    This program is free software; you can redistribute it and/or modify
6    it under the terms of the GNU General Public License as published by
7    the Free Software Foundation; either version 2 of the License, or
8    (at your option) any later version.
9    
10    This program is distributed in the hope that it will be useful,
11    but WITHOUT ANY WARRANTY; without even the implied warranty of
12    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13    GNU General Public License for more details.
14    
15    You should have received a copy of the GNU General Public License
16    along with this program; if not, write to the Free Software
17    Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
18 */
19
20 #define BLOCK_SIZE 700
21 #define RSYNC_RSH_ENV "RSYNC_RSH"
22
23 #define RSYNC_NAME "rsync"
24 #define RSYNCD_CONF "/etc/rsyncd.conf"
25
26 #define BACKUP_SUFFIX "~"
27
28 /* a non-zero CHAR_OFFSET makes the rolling sum stronger, but is
29    imcompatible with older versions :-( */
30 #define CHAR_OFFSET 0
31
32
33 #define FLAG_DELETE (1<<0)
34 #define SAME_MODE (1<<1)
35 #define SAME_RDEV (1<<2)
36 #define SAME_UID (1<<3)
37 #define SAME_GID (1<<4)
38 #define SAME_DIR (1<<5)
39 #define SAME_NAME SAME_DIR
40 #define LONG_NAME (1<<6)
41 #define SAME_TIME (1<<7)
42
43 /* update this if you make incompatible changes */
44 #define PROTOCOL_VERSION 19
45 #define MIN_PROTOCOL_VERSION 11
46 #define MAX_PROTOCOL_VERSION 30
47
48 #define RSYNC_PORT 873
49
50 #define SPARSE_WRITE_SIZE (1024)
51 #define WRITE_SIZE (32*1024)
52 #define CHUNK_SIZE (32*1024)
53 #define MAX_MAP_SIZE (1*1024*1024)
54 #define IO_BUFFER_SIZE (4092)
55 #define MAX_READ_BUFFER (1024*1024)
56
57 #define MAX_ARGS 1000
58
59 #define MPLEX_BASE 7
60 #define FERROR 1
61 #define FINFO 2
62
63 #include "config.h"
64
65 #if HAVE_REMSH
66 #define RSYNC_RSH "remsh"
67 #else
68 #define RSYNC_RSH "rsh"
69 #endif
70
71 #include <sys/types.h>
72 #ifdef HAVE_UNISTD_H
73 #include <unistd.h>
74 #endif
75 #include <stdio.h>
76 #include <stddef.h>
77
78 #ifdef HAVE_SYS_PARAM_H
79 #include <sys/param.h>
80 #endif
81
82 #ifdef HAVE_STDLIB_H
83 #include <stdlib.h>
84 #endif
85
86 #ifdef HAVE_SYS_SOCKET_H
87 #include <sys/socket.h>
88 #endif
89
90 #ifdef HAVE_STRING_H
91 #include <string.h>
92 #endif
93
94 #ifdef HAVE_COMPAT_H
95 #include <compat.h>
96 #endif
97
98 #ifdef HAVE_MALLOC_H
99 #include <malloc.h>
100 #endif
101
102 #ifdef TIME_WITH_SYS_TIME
103 #include <sys/time.h>
104 #include <time.h>
105 #else
106 #ifdef HAVE_SYS_TIME_H
107 #include <sys/time.h>
108 #else
109 #include <time.h>
110 #endif
111 #endif
112
113 #ifdef HAVE_FCNTL_H
114 #include <fcntl.h>
115 #else
116 #ifdef HAVE_SYS_FCNTL_H
117 #include <sys/fcntl.h>
118 #endif
119 #endif
120
121 #include <sys/stat.h>
122
123 #ifdef HAVE_SYS_IOCTL_H
124 #include <sys/ioctl.h>
125 #endif
126
127 #ifdef HAVE_SYS_FILIO_H
128 #include <sys/filio.h>
129 #endif
130
131 #include <signal.h>
132 #ifdef HAVE_SYS_WAIT_H
133 #include <sys/wait.h>
134 #endif
135 #ifdef HAVE_CTYPE_H
136 #include <ctype.h>
137 #endif
138 #ifdef HAVE_GRP_H
139 #include <grp.h>
140 #endif
141 #include <errno.h>
142
143 #if defined(HAVE_MMAP) && defined(HAVE_MUNMAP)
144 #include <sys/mman.h>
145 #define USE_MMAP 1
146 #endif
147
148 #ifdef HAVE_UTIME_H
149 #include <utime.h>
150 #endif
151
152 #ifdef HAVE_SYS_SELECT_H
153 #include <sys/select.h>
154 #endif
155
156 #ifdef HAVE_SYS_MODE_H
157 /* apparently AIX needs this for S_ISLNK */
158 #ifndef S_ISLNK
159 #include <sys/mode.h>
160 #endif
161 #endif
162
163 #ifdef HAVE_FNMATCH
164 #include <fnmatch.h>
165 #else
166 #include "lib/fnmatch.h"
167 #endif
168
169 #ifdef HAVE_GETOPT_LONG
170 #include <getopt.h>
171 #else
172 #include "lib/getopt.h"
173 #endif
174
175 #ifdef HAVE_GLOB
176 #include <glob.h>
177 #endif
178
179 /* these are needed for the uid/gid mapping code */
180 #include <pwd.h>
181 #include <grp.h>
182
183 #include <stdarg.h>
184 #include <netinet/in.h>
185 #include <arpa/inet.h>
186 #include <netdb.h>
187 #include <syslog.h>
188 #include <sys/file.h>
189
190 #ifndef S_IFLNK
191 #define S_IFLNK  0120000
192 #endif
193
194 #ifndef S_ISLNK
195 #define S_ISLNK(mode) (((mode) & S_IFLNK) == S_IFLNK)
196 #endif
197
198 #define BOOL int
199
200 #ifndef uchar
201 #define uchar unsigned char
202 #endif
203
204 #if HAVE_UNSIGNED_CHAR
205 #define schar signed char
206 #else
207 #define schar char
208 #endif
209
210 #ifndef int32
211 #if (SIZEOF_INT == 4)
212 #define int32 int
213 #elif (SIZEOF_LONG == 4)
214 #define int32 long
215 #elif (SIZEOF_SHORT == 4)
216 #define int32 short
217 #endif
218 #endif
219
220 #ifndef uint32
221 #define uint32 unsigned int32
222 #endif
223
224 #if HAVE_OFF64_T
225 #define OFF_T off64_t
226 #define STRUCT_STAT struct stat64
227 #else
228 #define OFF_T off_t
229 #define STRUCT_STAT struct stat
230 #endif
231
232 #if HAVE_OFF64_T
233 #define int64 off64_t
234 #elif (SIZEOF_LONG == 8) 
235 #define int64 long
236 #elif (SIZEOF_INT == 8) 
237 #define int64 int
238 #elif HAVE_LONGLONG
239 #define int64 long long
240 #else
241 #define int64 off_t
242 #define NO_INT64
243 #endif
244
245 #ifndef MIN
246 #define MIN(a,b) ((a)<(b)?(a):(b))
247 #endif
248
249 #ifndef MAX
250 #define MAX(a,b) ((a)>(b)?(a):(b))
251 #endif
252
253 /* the length of the md4 checksum */
254 #define MD4_SUM_LENGTH 16
255 #define SUM_LENGTH 16
256
257 #ifndef MAXPATHLEN
258 #define MAXPATHLEN 1024
259 #endif
260
261 #ifndef INADDR_NONE
262 #define INADDR_NONE 0xffffffff
263 #endif
264
265 struct file_struct {
266         unsigned flags;
267         time_t modtime;
268         OFF_T length;
269         mode_t mode;
270         ino_t inode;
271         dev_t dev;
272         dev_t rdev;
273         uid_t uid;
274         gid_t gid;
275         char *basename;
276         char *dirname;
277         char *basedir;
278         char *link;
279         char *sum;
280 };
281
282 struct file_list {
283   int count;
284   int malloced;
285   struct file_struct **files;
286 };
287
288 struct sum_buf {
289   OFF_T offset;                 /* offset in file of this chunk */
290   int len;                      /* length of chunk of file */
291   int i;                        /* index of this chunk */
292   uint32 sum1;                  /* simple checksum */
293   char sum2[SUM_LENGTH];        /* checksum  */
294 };
295
296 struct sum_struct {
297   OFF_T flength;                /* total file length */
298   int count;                    /* how many chunks */
299   int remainder;                /* flength % block_length */
300   int n;                        /* block_length */
301   struct sum_buf *sums;         /* points to info for each chunk */
302 };
303
304 struct map_struct {
305         char *map,*p;
306         int fd,p_size,p_len;
307         OFF_T size, p_offset;
308 };
309
310 struct exclude_struct {
311         char *orig;
312         char *pattern;
313         int regular_exp;
314         int include;
315         int directory;
316         int local;
317 };
318
319
320 /* we need this function because of the silly way in which duplicate
321    entries are handled in the file lists - we can't change this
322    without breaking existing versions */
323 static inline int flist_up(struct file_list *flist, int i)
324 {
325         while (!flist->files[i]->basename) i++;
326         return i;
327 }
328
329 #if HAVE_DIRENT_H
330 # include <dirent.h>
331 #else
332 # define dirent direct
333 # if HAVE_SYS_NDIR_H
334 #  include <sys/ndir.h>
335 # endif
336 # if HAVE_SYS_DIR_H
337 #  include <sys/dir.h>
338 # endif
339 # if HAVE_NDIR_H
340 #  include <ndir.h>
341 # endif
342 #endif
343
344 #include "byteorder.h"
345 #include "version.h"
346 #include "proto.h"
347 #include "md4.h"
348
349 #if !HAVE_STRERROR
350 extern char *sys_errlist[];
351 #define strerror(i) sys_errlist[i]
352 #endif
353
354 #ifndef HAVE_STRCHR
355 # define strchr                 index
356 # define strrchr                rindex
357 #endif
358
359 #ifndef HAVE_ERRNO_DECL
360 extern int errno;
361 #endif
362
363 #ifndef HAVE_BCOPY
364 #define bcopy(src,dest,n) memcpy(dest,src,n)
365 #endif
366
367 #ifndef HAVE_BZERO
368 #define bzero(buf,n) memset(buf,0,n)
369 #endif
370
371 #define SUPPORT_LINKS HAVE_READLINK
372 #define SUPPORT_HARD_LINKS HAVE_LINK
373
374 #ifndef HAVE_LCHOWN
375 #define lchown chown
376 #endif
377
378 #define SIGNAL_CAST (RETSIGTYPE (*)())
379
380 #ifndef EWOULDBLOCK
381 #define EWOULDBLOCK EAGAIN
382 #endif
383
384 #ifndef STDIN_FILENO
385 #define STDIN_FILENO 0
386 #endif
387
388 #ifndef STDOUT_FILENO
389 #define STDOUT_FILENO 1
390 #endif
391
392 #ifndef STDERR_FILENO
393 #define STDERR_FILENO 2
394 #endif
395
396 #ifndef S_IWUSR
397 #define S_IWUSR 0200
398 #endif
399
400 #ifndef S_ISBLK
401 #define S_ISBLK(mode) (((mode) & (_S_IFMT)) == (_S_IFBLK))
402 #endif
403
404 #ifndef S_ISCHR
405 #define S_ISCHR(mode) (((mode) & (_S_IFMT)) == (_S_IFCHR))
406 #endif
407
408 #ifndef S_ISSOCK
409 #ifdef _S_IFSOCK
410 #define S_ISSOCK(mode) (((mode) & (_S_IFMT)) == (_S_IFSOCK))
411 #else
412 #define S_ISSOCK(mode) (0)
413 #endif
414 #endif
415
416 #ifndef S_ISFIFO
417 #ifdef _S_IFIFO
418 #define S_ISFIFO(mode) (((mode) & (_S_IFMT)) == (_S_IFIFO))
419 #else
420 #define S_ISFIFO(mode) (0)
421 #endif
422 #endif
423
424 #ifndef S_ISDIR
425 #define S_ISDIR(mode) (((mode) & (_S_IFMT)) == (_S_IFDIR))
426 #endif
427
428 #ifndef S_ISREG
429 #define S_ISREG(mode) (((mode) & (_S_IFMT)) == (_S_IFREG))
430 #endif
431
432
433 #define IS_DEVICE(mode) (S_ISCHR(mode) || S_ISBLK(mode) || S_ISSOCK(mode) || S_ISFIFO(mode))
434