Move discard_const hack to memory.hso it can be used by Samba 3.
[kai/samba-autobuild/.git] / lib / util / util.h
1 /* 
2    Unix SMB/CIFS implementation.
3    Utility functions for Samba
4    Copyright (C) Andrew Tridgell 1992-1999
5    Copyright (C) Jelmer Vernooij 2005
6     
7    This program is free software; you can redistribute it and/or modify
8    it under the terms of the GNU General Public License as published by
9    the Free Software Foundation; either version 3 of the License, or
10    (at your option) any later version.
11    
12    This program is distributed in the hope that it will be useful,
13    but WITHOUT ANY WARRANTY; without even the implied warranty of
14    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
15    GNU General Public License for more details.
16    
17    You should have received a copy of the GNU General Public License
18    along with this program.  If not, see <http://www.gnu.org/licenses/>.
19 */
20
21 #ifndef _SAMBA_UTIL_H_
22 #define _SAMBA_UTIL_H_
23
24 #if _SAMBA_BUILD_ == 4
25 #include "lib/charset/charset.h"
26 #endif
27 #include "../lib/util/attr.h"
28
29 /* for TALLOC_CTX */
30 #include <talloc.h>
31
32 /**
33  * @file
34  * @brief Helpful macros
35  */
36
37 struct smbsrv_tcon;
38
39 extern const char *logfile;
40 extern const char *panic_action;
41
42 #include "../lib/util/time.h"
43 #include "../lib/util/data_blob.h"
44 #include "../lib/util/xfile.h"
45 #include "../lib/util/mutex.h"
46 #include "../lib/util/byteorder.h"
47
48 /**
49  * assert macros 
50  */
51 #define SMB_ASSERT(b) do { if (!(b)) { \
52         DEBUG(0,("PANIC: assert failed at %s(%d)\n", __FILE__, __LINE__)); \
53         smb_panic("assert failed"); }} while (0)
54
55 #if defined(VALGRIND)
56 #define strlen(x) valgrind_strlen(x)
57 #endif
58
59 #include "../lib/util/memory.h"
60
61 /**
62  * Write backtrace to debug log
63  */
64 _PUBLIC_ void call_backtrace(void);
65
66 /**
67  Something really nasty happened - panic !
68 **/
69 _PUBLIC_ _NORETURN_ void smb_panic(const char *why);
70
71 /**
72 setup our fault handlers
73 **/
74 _PUBLIC_ void fault_setup(const char *pname);
75
76 /**
77   register a fault handler. 
78   Should only be called once in the execution of smbd.
79 */
80 _PUBLIC_ bool register_fault_handler(const char *name, void (*fault_handler)(int sig));
81
82 /* The following definitions come from lib/util/signal.c  */
83
84
85 /**
86  Block sigs.
87 **/
88 void BlockSignals(bool block, int signum);
89
90 /**
91  Catch a signal. This should implement the following semantics:
92
93  1) The handler remains installed after being called.
94  2) The signal should be blocked during handler execution.
95 **/
96 void (*CatchSignal(int signum,void (*handler)(int )))(int);
97
98 /**
99  Ignore SIGCLD via whatever means is necessary for this OS.
100 **/
101 void CatchChild(void);
102
103 /**
104  Catch SIGCLD but leave the child around so it's status can be reaped.
105 **/
106 void CatchChildLeaveStatus(void);
107
108 /* The following definitions come from lib/util/system.c  */
109
110
111 struct in_addr;
112
113 /**************************************************************************
114 A wrapper for gethostbyname() that tries avoids looking up hostnames 
115 in the root domain, which can cause dial-on-demand links to come up for no
116 apparent reason.
117 ****************************************************************************/
118 _PUBLIC_ struct hostent *sys_gethostbyname(const char *name);
119 _PUBLIC_ struct in_addr sys_inet_makeaddr(int net, int host);
120
121 /* The following definitions come from lib/util/genrand.c  */
122
123 /**
124  Copy any user given reseed data.
125 **/
126 _PUBLIC_ void set_rand_reseed_callback(void (*fn)(void *, int *), void *);
127
128 /**
129  * Tell the random number generator it needs to reseed.
130  */
131 _PUBLIC_ void set_need_random_reseed(void);
132
133 /**
134  Interface to the (hopefully) good crypto random number generator.
135  Will use our internal PRNG if more than 40 bytes of random generation
136  has been requested, otherwise tries to read from /dev/random
137 **/
138 _PUBLIC_ void generate_random_buffer(uint8_t *out, int len);
139
140 /**
141  Interface to the (hopefully) good crypto random number generator.
142  Will always use /dev/urandom if available.
143 **/
144 _PUBLIC_ void generate_secret_buffer(uint8_t *out, int len);
145
146 /**
147   generate a single random uint32_t
148 **/
149 _PUBLIC_ uint32_t generate_random(void);
150
151 /**
152   very basic password quality checker
153 **/
154 _PUBLIC_ bool check_password_quality(const char *s);
155
156 /**
157  Use the random number generator to generate a random string.
158 **/
159 _PUBLIC_ char *generate_random_str_list(TALLOC_CTX *mem_ctx, size_t len, const char *list);
160
161 /**
162  * Generate a random text string consisting of the specified length.
163  * The returned string will be allocated.
164  *
165  * Characters used are: ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz0123456789+_-#.,
166  */
167 _PUBLIC_ char *generate_random_str(TALLOC_CTX *mem_ctx, size_t len);
168
169 /* The following definitions come from lib/util/dprintf.c  */
170
171 _PUBLIC_ void d_set_iconv(smb_iconv_t);
172 _PUBLIC_ int d_vfprintf(FILE *f, const char *format, va_list ap) PRINTF_ATTRIBUTE(2,0);
173 _PUBLIC_ int d_fprintf(FILE *f, const char *format, ...) PRINTF_ATTRIBUTE(2,3);
174 _PUBLIC_ int d_printf(const char *format, ...) PRINTF_ATTRIBUTE(1,2);
175 _PUBLIC_ void display_set_stderr(void);
176
177 /* The following definitions come from lib/util/util_str.c  */
178
179
180 /**
181  Trim the specified elements off the front and back of a string.
182 **/
183 _PUBLIC_ bool trim_string(char *s, const char *front, const char *back);
184
185 /**
186  Find the number of 'c' chars in a string
187 **/
188 _PUBLIC_ _PURE_ size_t count_chars(const char *s, char c);
189
190 /**
191  Safe string copy into a known length string. maxlength does not
192  include the terminating zero.
193 **/
194 _PUBLIC_ char *safe_strcpy(char *dest,const char *src, size_t maxlength);
195
196 /**
197  Safe string cat into a string. maxlength does not
198  include the terminating zero.
199 **/
200 _PUBLIC_ char *safe_strcat(char *dest, const char *src, size_t maxlength);
201
202 /**
203  Routine to get hex characters and turn them into a 16 byte array.
204  the array can be variable length, and any non-hex-numeric
205  characters are skipped.  "0xnn" or "0Xnn" is specially catered
206  for.
207
208  valid examples: "0A5D15"; "0x15, 0x49, 0xa2"; "59\ta9\te3\n"
209
210
211 **/
212 _PUBLIC_ size_t strhex_to_str(char *p, size_t p_len, const char *strhex, size_t strhex_len);
213
214 /** 
215  * Parse a hex string and return a data blob. 
216  */
217 _PUBLIC_ _PURE_ DATA_BLOB strhex_to_data_blob(TALLOC_CTX *mem_ctx, const char *strhex) ;
218
219 /**
220  * Routine to print a buffer as HEX digits, into an allocated string.
221  */
222 _PUBLIC_ void hex_encode(const unsigned char *buff_in, size_t len, char **out_hex_buffer);
223
224 /**
225  * talloc version of hex_encode()
226  */
227 _PUBLIC_ char *hex_encode_talloc(TALLOC_CTX *mem_ctx, const unsigned char *buff_in, size_t len);
228
229 /**
230  Substitute a string for a pattern in another string. Make sure there is 
231  enough room!
232
233  This routine looks for pattern in s and replaces it with 
234  insert. It may do multiple replacements.
235
236  Any of " ; ' $ or ` in the insert string are replaced with _
237  if len==0 then the string cannot be extended. This is different from the old
238  use of len==0 which was for no length checks to be done.
239 **/
240 _PUBLIC_ void string_sub(char *s,const char *pattern, const char *insert, size_t len);
241
242
243 _PUBLIC_ char *string_sub_talloc(TALLOC_CTX *mem_ctx, const char *s, 
244                                 const char *pattern, const char *insert);
245
246 /**
247  Similar to string_sub() but allows for any character to be substituted. 
248  Use with caution!
249  if len==0 then the string cannot be extended. This is different from the old
250  use of len==0 which was for no length checks to be done.
251 **/
252 _PUBLIC_ void all_string_sub(char *s,const char *pattern,const char *insert, size_t len);
253
254 /**
255  Unescape a URL encoded string, in place.
256 **/
257 _PUBLIC_ void rfc1738_unescape(char *buf);
258 size_t valgrind_strlen(const char *s);
259
260 /**
261   format a string into length-prefixed dotted domain format, as used in NBT
262   and in some ADS structures
263 **/
264 _PUBLIC_ const char *str_format_nbt_domain(TALLOC_CTX *mem_ctx, const char *s);
265
266 /**
267  * Add a string to an array of strings.
268  *
269  * num should be a pointer to an integer that holds the current 
270  * number of elements in strings. It will be updated by this function.
271  */
272 _PUBLIC_ bool add_string_to_array(TALLOC_CTX *mem_ctx,
273                          const char *str, const char ***strings, int *num);
274
275 /**
276   varient of strcmp() that handles NULL ptrs
277 **/
278 _PUBLIC_ int strcmp_safe(const char *s1, const char *s2);
279
280 /**
281 return the number of bytes occupied by a buffer in ASCII format
282 the result includes the null termination
283 limited by 'n' bytes
284 **/
285 _PUBLIC_ size_t ascii_len_n(const char *src, size_t n);
286
287 /**
288  Return a string representing a CIFS attribute for a file.
289 **/
290 _PUBLIC_ char *attrib_string(TALLOC_CTX *mem_ctx, uint32_t attrib);
291
292 /**
293  Set a boolean variable from the text value stored in the passed string.
294  Returns true in success, false if the passed string does not correctly 
295  represent a boolean.
296 **/
297 _PUBLIC_ bool set_boolean(const char *boolean_string, bool *boolean);
298
299 /**
300  * Parse a string containing a boolean value.
301  *
302  * val will be set to the read value.
303  *
304  * @retval true if a boolean value was parsed, false otherwise.
305  */
306 _PUBLIC_ bool conv_str_bool(const char * str, bool * val);
307
308 /**
309  * Convert a size specification like 16K into an integral number of bytes. 
310  **/
311 _PUBLIC_ bool conv_str_size(const char * str, uint64_t * val);
312
313 /**
314  * Parse a uint64_t value from a string
315  *
316  * val will be set to the value read.
317  *
318  * @retval true if parsing was successful, false otherwise
319  */
320 _PUBLIC_ bool conv_str_u64(const char * str, uint64_t * val);
321
322 /**
323 return the number of bytes occupied by a buffer in CH_UTF16 format
324 the result includes the null termination
325 **/
326 _PUBLIC_ size_t utf16_len(const void *buf);
327
328 /**
329 return the number of bytes occupied by a buffer in CH_UTF16 format
330 the result includes the null termination
331 limited by 'n' bytes
332 **/
333 _PUBLIC_ size_t utf16_len_n(const void *src, size_t n);
334 _PUBLIC_ size_t ucs2_align(const void *base_ptr, const void *p, int flags);
335
336 /**
337 Do a case-insensitive, whitespace-ignoring string compare.
338 **/
339 _PUBLIC_ int strwicmp(const char *psz1, const char *psz2);
340
341 /**
342  String replace.
343 **/
344 _PUBLIC_ void string_replace(char *s, char oldc, char newc);
345
346 /**
347  * Compare 2 strings.
348  *
349  * @note The comparison is case-insensitive.
350  **/
351 _PUBLIC_ bool strequal(const char *s1, const char *s2);
352
353 /* The following definitions come from lib/util/util_strlist.c  */
354
355
356 /**
357   build a null terminated list of strings from a input string and a
358   separator list. The separator list must contain characters less than
359   or equal to 0x2f for this to work correctly on multi-byte strings
360 */
361 _PUBLIC_ char **str_list_make(TALLOC_CTX *mem_ctx, const char *string, const char *sep);
362
363 /**
364  * build a null terminated list of strings from an argv-like input string 
365  * Entries are seperated by spaces and can be enclosed by quotes. 
366  * Does NOT support escaping
367  */
368 _PUBLIC_ const char **str_list_make_shell(TALLOC_CTX *mem_ctx, const char *string, const char *sep);
369
370 /**
371  * join a list back to one string 
372  */
373 _PUBLIC_ char *str_list_join(TALLOC_CTX *mem_ctx, const char **list, char seperator);
374
375 /** join a list back to one (shell-like) string; entries 
376  * seperated by spaces, using quotes where necessary */
377 _PUBLIC_ char *str_list_join_shell(TALLOC_CTX *mem_ctx, const char **list, char sep);
378
379 /**
380   return the number of elements in a string list
381 */
382 _PUBLIC_ size_t str_list_length(const char * const *list);
383
384 /**
385   copy a string list
386 */
387 _PUBLIC_ char **str_list_copy(TALLOC_CTX *mem_ctx, const char **list);
388
389 /**
390    Return true if all the elements of the list match exactly.
391  */
392 _PUBLIC_ bool str_list_equal(const char **list1, const char **list2);
393
394 /**
395   add an entry to a string list
396 */
397 _PUBLIC_ const char **str_list_add(const char **list, const char *s);
398
399 /**
400   remove an entry from a string list
401 */
402 _PUBLIC_ void str_list_remove(const char **list, const char *s);
403
404 /**
405   return true if a string is in a list
406 */
407 _PUBLIC_ bool str_list_check(const char **list, const char *s);
408
409 /**
410   return true if a string is in a list, case insensitively
411 */
412 _PUBLIC_ bool str_list_check_ci(const char **list, const char *s);
413
414 /* The following definitions come from lib/util/util_file.c  */
415
416
417 /**
418 read a line from a file with possible \ continuation chars. 
419 Blanks at the start or end of a line are stripped.
420 The string will be allocated if s2 is NULL
421 **/
422 _PUBLIC_ char *fgets_slash(char *s2,int maxlen,XFILE *f);
423
424 /**
425  * Read one line (data until next newline or eof) and allocate it 
426  */
427 _PUBLIC_ char *afdgets(int fd, TALLOC_CTX *mem_ctx, size_t hint);
428
429 /**
430 load a file into memory from a fd.
431 **/
432 _PUBLIC_ char *fd_load(int fd, size_t *size, size_t maxsize, TALLOC_CTX *mem_ctx);
433
434 /**
435 load a file into memory
436 **/
437 _PUBLIC_ char *file_load(const char *fname, size_t *size, size_t maxsize, TALLOC_CTX *mem_ctx);
438
439 /**
440 mmap (if possible) or read a file
441 **/
442 _PUBLIC_ void *map_file(const char *fname, size_t size);
443
444 /**
445 load a file into memory and return an array of pointers to lines in the file
446 must be freed with talloc_free(). 
447 **/
448 _PUBLIC_ char **file_lines_load(const char *fname, int *numlines, size_t maxsize, TALLOC_CTX *mem_ctx);
449
450 /**
451 load a fd into memory and return an array of pointers to lines in the file
452 must be freed with talloc_free(). If convert is true calls unix_to_dos on
453 the list.
454 **/
455 _PUBLIC_ char **fd_lines_load(int fd, int *numlines, size_t maxsize, TALLOC_CTX *mem_ctx);
456
457 /**
458 take a list of lines and modify them to produce a list where \ continues
459 a line
460 **/
461 _PUBLIC_ void file_lines_slashcont(char **lines);
462
463 /**
464   save a lump of data into a file. Mostly used for debugging 
465 */
466 _PUBLIC_ bool file_save(const char *fname, const void *packet, size_t length);
467 _PUBLIC_ int vfdprintf(int fd, const char *format, va_list ap) PRINTF_ATTRIBUTE(2,0);
468 _PUBLIC_ int fdprintf(int fd, const char *format, ...) PRINTF_ATTRIBUTE(2,3);
469 _PUBLIC_ bool large_file_support(const char *path);
470
471 /* The following definitions come from lib/util/util.c  */
472
473
474 /**
475  Find a suitable temporary directory. The result should be copied immediately
476  as it may be overwritten by a subsequent call.
477 **/
478 _PUBLIC_ const char *tmpdir(void);
479
480 /**
481  Check if a file exists - call vfs_file_exist for samba files.
482 **/
483 _PUBLIC_ bool file_exist(const char *fname);
484
485 /**
486  Check a files mod time.
487 **/
488 _PUBLIC_ time_t file_modtime(const char *fname);
489
490 /**
491  Check if a directory exists.
492 **/
493 _PUBLIC_ bool directory_exist(const char *dname);
494
495 /**
496  * Try to create the specified directory if it didn't exist.
497  *
498  * @retval true if the directory already existed and has the right permissions 
499  * or was successfully created.
500  */
501 _PUBLIC_ bool directory_create_or_exist(const char *dname, uid_t uid, 
502                                mode_t dir_perms);
503
504 /**
505  Set a fd into blocking/nonblocking mode. Uses POSIX O_NONBLOCK if available,
506  else
507   if SYSV use O_NDELAY
508   if BSD use FNDELAY
509 **/
510 _PUBLIC_ int set_blocking(int fd, bool set);
511
512 /**
513  Sleep for a specified number of milliseconds.
514 **/
515 _PUBLIC_ void msleep(unsigned int t);
516
517 /**
518  Get my own name, return in malloc'ed storage.
519 **/
520 _PUBLIC_ char* get_myname(void);
521
522 /**
523  Return true if a string could be a pure IP address.
524 **/
525 _PUBLIC_ bool is_ipaddress(const char *str);
526
527 /**
528  Interpret an internet address or name into an IP address in 4 byte form.
529 **/
530 _PUBLIC_ uint32_t interpret_addr(const char *str);
531
532 /**
533  A convenient addition to interpret_addr().
534 **/
535 _PUBLIC_ struct in_addr interpret_addr2(const char *str);
536
537 /**
538  Check if an IP is the 0.0.0.0.
539 **/
540 _PUBLIC_ bool is_zero_ip(struct in_addr ip);
541
542 /**
543  Are two IPs on the same subnet?
544 **/
545 _PUBLIC_ bool same_net(struct in_addr ip1,struct in_addr ip2,struct in_addr mask);
546
547 /**
548  Check if a process exists. Does this work on all unixes?
549 **/
550 _PUBLIC_ bool process_exists_by_pid(pid_t pid);
551
552 /**
553  Simple routine to do POSIX file locking. Cruft in NFS and 64->32 bit mapping
554  is dealt with in posix.c
555 **/
556 _PUBLIC_ bool fcntl_lock(int fd, int op, off_t offset, off_t count, int type);
557
558 /**
559  * Write dump of binary data to the log file.
560  *
561  * The data is only written if the log level is at least level.
562  */
563 _PUBLIC_ void dump_data(int level, const uint8_t *buf,int len);
564
565 /**
566  * Write dump of binary data to the log file.
567  *
568  * The data is only written if the log level is at least level.
569  * 16 zero bytes in a row are ommited
570  */
571 _PUBLIC_ void dump_data_skip_zeros(int level, const uint8_t *buf, int len);
572
573 /**
574  malloc that aborts with smb_panic on fail or zero size.
575 **/
576 _PUBLIC_ void *smb_xmalloc(size_t size);
577
578 /**
579  Memdup with smb_panic on fail.
580 **/
581 _PUBLIC_ void *smb_xmemdup(const void *p, size_t size);
582
583 /**
584  strdup that aborts on malloc fail.
585 **/
586 _PUBLIC_ char *smb_xstrdup(const char *s);
587
588 /**
589  Like strdup but for memory.
590 **/
591 _PUBLIC_ void *memdup(const void *p, size_t size);
592
593 /**
594  * Write a password to the log file.
595  *
596  * @note Only actually does something if DEBUG_PASSWORD was defined during 
597  * compile-time.
598  */
599 _PUBLIC_ void dump_data_pw(const char *msg, const uint8_t * data, size_t len);
600
601 /**
602  * see if a range of memory is all zero. A NULL pointer is considered
603  * to be all zero 
604  */
605 _PUBLIC_ bool all_zero(const uint8_t *ptr, size_t size);
606
607 /**
608   realloc an array, checking for integer overflow in the array size
609 */
610 _PUBLIC_ void *realloc_array(void *ptr, size_t el_size, unsigned count, bool free_on_fail);
611
612 /* The following definitions come from lib/util/fsusage.c  */
613
614
615 /**
616  * Retrieve amount of free disk space.
617  * this does all of the system specific guff to get the free disk space.
618  * It is derived from code in the GNU fileutils package, but has been
619  * considerably mangled for use here 
620  *
621  * results are returned in *dfree and *dsize, in 512 byte units
622 */
623 _PUBLIC_ int sys_fsusage(const char *path, uint64_t *dfree, uint64_t *dsize);
624
625 /* The following definitions come from lib/util/ms_fnmatch.c  */
626
627
628 /**
629  * @file
630  * @brief MS-style Filename matching
631  */
632
633 /* protocol types. It assumes that higher protocols include lower protocols
634    as subsets. FIXME: Move to one of the smb-specific headers */
635 enum protocol_types {
636         PROTOCOL_NONE,
637         PROTOCOL_CORE,
638         PROTOCOL_COREPLUS,
639         PROTOCOL_LANMAN1,
640         PROTOCOL_LANMAN2,
641         PROTOCOL_NT1,
642         PROTOCOL_SMB2
643 };
644
645 int ms_fnmatch(const char *pattern, const char *string, enum protocol_types protocol);
646
647 /** a generic fnmatch function - uses for non-CIFS pattern matching */
648 int gen_fnmatch(const char *pattern, const char *string);
649
650 /* The following definitions come from lib/util/mutex.c  */
651
652
653 /**
654   register a set of mutex/rwlock handlers. 
655   Should only be called once in the execution of smbd.
656 */
657 _PUBLIC_ bool register_mutex_handlers(const char *name, struct mutex_ops *ops);
658
659 /* The following definitions come from lib/util/idtree.c  */
660
661
662 /**
663   initialise a idr tree. The context return value must be passed to
664   all subsequent idr calls. To destroy the idr tree use talloc_free()
665   on this context
666  */
667 _PUBLIC_ struct idr_context *idr_init(TALLOC_CTX *mem_ctx);
668
669 /**
670   allocate the next available id, and assign 'ptr' into its slot.
671   you can retrieve later this pointer using idr_find()
672 */
673 _PUBLIC_ int idr_get_new(struct idr_context *idp, void *ptr, int limit);
674
675 /**
676    allocate a new id, giving the first available value greater than or
677    equal to the given starting id
678 */
679 _PUBLIC_ int idr_get_new_above(struct idr_context *idp, void *ptr, int starting_id, int limit);
680
681 /**
682   allocate a new id randomly in the given range
683 */
684 _PUBLIC_ int idr_get_new_random(struct idr_context *idp, void *ptr, int limit);
685
686 /**
687   find a pointer value previously set with idr_get_new given an id
688 */
689 _PUBLIC_ void *idr_find(struct idr_context *idp, int id);
690
691 /**
692   remove an id from the idr tree
693 */
694 _PUBLIC_ int idr_remove(struct idr_context *idp, int id);
695
696 /* The following definitions come from lib/util/become_daemon.c  */
697
698 /**
699  Become a daemon, discarding the controlling terminal.
700 **/
701 _PUBLIC_ void become_daemon(bool fork);
702
703 /**
704  * Load a ini-style file.
705  */
706 bool pm_process( const char *fileName,
707                  bool (*sfunc)(const char *, void *),
708                  bool (*pfunc)(const char *, const char *, void *),
709                                  void *userdata);
710
711 /**
712  * Add-on to talloc_get_type
713  */
714 _PUBLIC_ void *talloc_check_name_abort(const void *ptr, const char *name);
715 #define talloc_get_type_abort(ptr, type) \
716         (type *)talloc_check_name_abort(ptr, #type)
717
718 #endif /* _SAMBA_UTIL_H_ */