s4-messaging: fixed a memory leak in messaging_path()
[ira/wip.git] / source4 / lib / messaging / messaging.c
1 /* 
2    Unix SMB/CIFS implementation.
3
4    Samba internal messaging functions
5
6    Copyright (C) Andrew Tridgell 2004
7    
8    This program is free software; you can redistribute it and/or modify
9    it under the terms of the GNU General Public License as published by
10    the Free Software Foundation; either version 3 of the License, or
11    (at your option) any later version.
12    
13    This program is distributed in the hope that it will be useful,
14    but WITHOUT ANY WARRANTY; without even the implied warranty of
15    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
16    GNU General Public License for more details.
17    
18    You should have received a copy of the GNU General Public License
19    along with this program.  If not, see <http://www.gnu.org/licenses/>.
20 */
21
22 #include "includes.h"
23 #include "lib/events/events.h"
24 #include "system/filesys.h"
25 #include "messaging/messaging.h"
26 #include "../lib/util/dlinklist.h"
27 #include "lib/socket/socket.h"
28 #include "librpc/gen_ndr/ndr_irpc.h"
29 #include "lib/messaging/irpc.h"
30 #include "tdb_wrap.h"
31 #include "../lib/util/unix_privs.h"
32 #include "librpc/rpc/dcerpc.h"
33 #include "../tdb/include/tdb.h"
34 #include "../lib/util/util_tdb.h"
35 #include "cluster/cluster.h"
36
37 /* change the message version with any incompatible changes in the protocol */
38 #define MESSAGING_VERSION 1
39
40 struct messaging_context {
41         struct server_id server_id;
42         struct socket_context *sock;
43         const char *base_path;
44         const char *path;
45         struct dispatch_fn **dispatch;
46         uint32_t num_types;
47         struct idr_context *dispatch_tree;
48         struct messaging_rec *pending;
49         struct messaging_rec *retry_queue;
50         struct smb_iconv_convenience *iconv_convenience;
51         struct irpc_list *irpc;
52         struct idr_context *idr;
53         const char **names;
54         struct timeval start_time;
55         struct tevent_timer *retry_te;
56         struct {
57                 struct tevent_context *ev;
58                 struct tevent_fd *fde;
59         } event;
60 };
61
62 /* we have a linked list of dispatch handlers for each msg_type that
63    this messaging server can deal with */
64 struct dispatch_fn {
65         struct dispatch_fn *next, *prev;
66         uint32_t msg_type;
67         void *private_data;
68         msg_callback_t fn;
69 };
70
71 /* an individual message */
72 struct messaging_rec {
73         struct messaging_rec *next, *prev;
74         struct messaging_context *msg;
75         const char *path;
76
77         struct messaging_header {
78                 uint32_t version;
79                 uint32_t msg_type;
80                 struct server_id from;
81                 struct server_id to;
82                 uint32_t length;
83         } *header;
84
85         DATA_BLOB packet;
86         uint32_t retries;
87 };
88
89
90 static void irpc_handler(struct messaging_context *, void *, 
91                          uint32_t, struct server_id, DATA_BLOB *);
92
93
94 /*
95  A useful function for testing the message system.
96 */
97 static void ping_message(struct messaging_context *msg, void *private_data,
98                          uint32_t msg_type, struct server_id src, DATA_BLOB *data)
99 {
100         DEBUG(1,("INFO: Received PING message from server %u.%u [%.*s]\n",
101                  (uint_t)src.node, (uint_t)src.id, (int)data->length, 
102                  data->data?(const char *)data->data:""));
103         messaging_send(msg, src, MSG_PONG, data);
104 }
105
106 /*
107   return uptime of messaging server via irpc
108 */
109 static NTSTATUS irpc_uptime(struct irpc_message *msg, 
110                             struct irpc_uptime *r)
111 {
112         struct messaging_context *ctx = talloc_get_type(msg->private_data, struct messaging_context);
113         *r->out.start_time = timeval_to_nttime(&ctx->start_time);
114         return NT_STATUS_OK;
115 }
116
117 /* 
118    return the path to a messaging socket
119 */
120 static char *messaging_path(struct messaging_context *msg, struct server_id server_id)
121 {
122         TALLOC_CTX *tmp_ctx = talloc_new(msg);
123         const char *id = cluster_id_string(tmp_ctx, server_id);
124         char *s;
125         if (id == NULL) {
126                 return NULL;
127         }
128         s = talloc_asprintf(msg, "%s/msg.%s", msg->base_path, id);
129         talloc_steal(s, tmp_ctx);
130         return s;
131 }
132
133 /*
134   dispatch a fully received message
135
136   note that this deliberately can match more than one message handler
137   per message. That allows a single messasging context to register
138   (for example) a debug handler for more than one piece of code
139 */
140 static void messaging_dispatch(struct messaging_context *msg, struct messaging_rec *rec)
141 {
142         struct dispatch_fn *d, *next;
143
144         /* temporary IDs use an idtree, the rest use a array of pointers */
145         if (rec->header->msg_type >= MSG_TMP_BASE) {
146                 d = (struct dispatch_fn *)idr_find(msg->dispatch_tree, 
147                                                    rec->header->msg_type);
148         } else if (rec->header->msg_type < msg->num_types) {
149                 d = msg->dispatch[rec->header->msg_type];
150         } else {
151                 d = NULL;
152         }
153
154         for (; d; d = next) {
155                 DATA_BLOB data;
156                 next = d->next;
157                 data.data = rec->packet.data + sizeof(*rec->header);
158                 data.length = rec->header->length;
159                 d->fn(msg, d->private_data, d->msg_type, rec->header->from, &data);
160         }
161         rec->header->length = 0;
162 }
163
164 /*
165   handler for messages that arrive from other nodes in the cluster
166 */
167 static void cluster_message_handler(struct messaging_context *msg, DATA_BLOB packet)
168 {
169         struct messaging_rec *rec;
170
171         rec = talloc(msg, struct messaging_rec);
172         if (rec == NULL) {
173                 smb_panic("Unable to allocate messaging_rec");
174         }
175
176         rec->msg           = msg;
177         rec->path          = msg->path;
178         rec->header        = (struct messaging_header *)packet.data;
179         rec->packet        = packet;
180         rec->retries       = 0;
181
182         if (packet.length != sizeof(*rec->header) + rec->header->length) {
183                 DEBUG(0,("messaging: bad message header size %d should be %d\n", 
184                          rec->header->length, (int)(packet.length - sizeof(*rec->header))));
185                 talloc_free(rec);
186                 return;
187         }
188
189         messaging_dispatch(msg, rec);
190         talloc_free(rec);
191 }
192
193
194
195 /*
196   try to send the message
197 */
198 static NTSTATUS try_send(struct messaging_rec *rec)
199 {
200         struct messaging_context *msg = rec->msg;
201         size_t nsent;
202         void *priv;
203         NTSTATUS status;
204         struct socket_address *path;
205
206         /* rec->path is the path of the *other* socket, where we want
207          * this to end up */
208         path = socket_address_from_strings(msg, msg->sock->backend_name, 
209                                            rec->path, 0);
210         if (!path) {
211                 return NT_STATUS_NO_MEMORY;
212         }
213
214         /* we send with privileges so messages work from any context */
215         priv = root_privileges();
216         status = socket_sendto(msg->sock, &rec->packet, &nsent, path);
217         talloc_free(path);
218         talloc_free(priv);
219
220         return status;
221 }
222
223 /*
224   retry backed off messages
225 */
226 static void msg_retry_timer(struct tevent_context *ev, struct tevent_timer *te, 
227                             struct timeval t, void *private_data)
228 {
229         struct messaging_context *msg = talloc_get_type(private_data,
230                                                         struct messaging_context);
231         msg->retry_te = NULL;
232
233         /* put the messages back on the main queue */
234         while (msg->retry_queue) {
235                 struct messaging_rec *rec = msg->retry_queue;
236                 DLIST_REMOVE(msg->retry_queue, rec);
237                 DLIST_ADD_END(msg->pending, rec, struct messaging_rec *);
238         }
239
240         EVENT_FD_WRITEABLE(msg->event.fde);     
241 }
242
243 /*
244   handle a socket write event
245 */
246 static void messaging_send_handler(struct messaging_context *msg)
247 {
248         while (msg->pending) {
249                 struct messaging_rec *rec = msg->pending;
250                 NTSTATUS status;
251                 status = try_send(rec);
252                 if (NT_STATUS_EQUAL(status, STATUS_MORE_ENTRIES)) {
253                         rec->retries++;
254                         if (rec->retries > 3) {
255                                 /* we're getting continuous write errors -
256                                    backoff this record */
257                                 DLIST_REMOVE(msg->pending, rec);
258                                 DLIST_ADD_END(msg->retry_queue, rec, 
259                                               struct messaging_rec *);
260                                 if (msg->retry_te == NULL) {
261                                         msg->retry_te = 
262                                                 event_add_timed(msg->event.ev, msg, 
263                                                                 timeval_current_ofs(1, 0), 
264                                                                 msg_retry_timer, msg);
265                                 }
266                         }
267                         break;
268                 }
269                 rec->retries = 0;
270                 if (!NT_STATUS_IS_OK(status)) {
271                         DEBUG(1,("messaging: Lost message from %s to %s of type %u - %s\n", 
272                                  cluster_id_string(debug_ctx(), rec->header->from), 
273                                  cluster_id_string(debug_ctx(), rec->header->to), 
274                                  rec->header->msg_type, 
275                                  nt_errstr(status)));
276                 }
277                 DLIST_REMOVE(msg->pending, rec);
278                 talloc_free(rec);
279         }
280         if (msg->pending == NULL) {
281                 EVENT_FD_NOT_WRITEABLE(msg->event.fde);
282         }
283 }
284
285 /*
286   handle a new incoming packet
287 */
288 static void messaging_recv_handler(struct messaging_context *msg)
289 {
290         struct messaging_rec *rec;
291         NTSTATUS status;
292         DATA_BLOB packet;
293         size_t msize;
294
295         /* see how many bytes are in the next packet */
296         status = socket_pending(msg->sock, &msize);
297         if (!NT_STATUS_IS_OK(status)) {
298                 DEBUG(0,("socket_pending failed in messaging - %s\n", 
299                          nt_errstr(status)));
300                 return;
301         }
302         
303         packet = data_blob_talloc(msg, NULL, msize);
304         if (packet.data == NULL) {
305                 /* assume this is temporary and retry */
306                 return;
307         }
308             
309         status = socket_recv(msg->sock, packet.data, msize, &msize);
310         if (!NT_STATUS_IS_OK(status)) {
311                 data_blob_free(&packet);
312                 return;
313         }
314
315         if (msize < sizeof(*rec->header)) {
316                 DEBUG(0,("messaging: bad message of size %d\n", (int)msize));
317                 data_blob_free(&packet);
318                 return;
319         }
320
321         rec = talloc(msg, struct messaging_rec);
322         if (rec == NULL) {
323                 smb_panic("Unable to allocate messaging_rec");
324         }
325
326         talloc_steal(rec, packet.data);
327         rec->msg           = msg;
328         rec->path          = msg->path;
329         rec->header        = (struct messaging_header *)packet.data;
330         rec->packet        = packet;
331         rec->retries       = 0;
332
333         if (msize != sizeof(*rec->header) + rec->header->length) {
334                 DEBUG(0,("messaging: bad message header size %d should be %d\n", 
335                          rec->header->length, (int)(msize - sizeof(*rec->header))));
336                 talloc_free(rec);
337                 return;
338         }
339
340         messaging_dispatch(msg, rec);
341         talloc_free(rec);
342 }
343
344
345 /*
346   handle a socket event
347 */
348 static void messaging_handler(struct tevent_context *ev, struct tevent_fd *fde, 
349                               uint16_t flags, void *private_data)
350 {
351         struct messaging_context *msg = talloc_get_type(private_data,
352                                                         struct messaging_context);
353         if (flags & EVENT_FD_WRITE) {
354                 messaging_send_handler(msg);
355         }
356         if (flags & EVENT_FD_READ) {
357                 messaging_recv_handler(msg);
358         }
359 }
360
361
362 /*
363   Register a dispatch function for a particular message type.
364 */
365 NTSTATUS messaging_register(struct messaging_context *msg, void *private_data,
366                             uint32_t msg_type, msg_callback_t fn)
367 {
368         struct dispatch_fn *d;
369
370         /* possibly expand dispatch array */
371         if (msg_type >= msg->num_types) {
372                 struct dispatch_fn **dp;
373                 int i;
374                 dp = talloc_realloc(msg, msg->dispatch, struct dispatch_fn *, msg_type+1);
375                 NT_STATUS_HAVE_NO_MEMORY(dp);
376                 msg->dispatch = dp;
377                 for (i=msg->num_types;i<=msg_type;i++) {
378                         msg->dispatch[i] = NULL;
379                 }
380                 msg->num_types = msg_type+1;
381         }
382
383         d = talloc_zero(msg->dispatch, struct dispatch_fn);
384         NT_STATUS_HAVE_NO_MEMORY(d);
385         d->msg_type = msg_type;
386         d->private_data = private_data;
387         d->fn = fn;
388
389         DLIST_ADD(msg->dispatch[msg_type], d);
390
391         return NT_STATUS_OK;
392 }
393
394 /*
395   register a temporary message handler. The msg_type is allocated
396   above MSG_TMP_BASE
397 */
398 NTSTATUS messaging_register_tmp(struct messaging_context *msg, void *private_data,
399                                 msg_callback_t fn, uint32_t *msg_type)
400 {
401         struct dispatch_fn *d;
402         int id;
403
404         d = talloc_zero(msg->dispatch, struct dispatch_fn);
405         NT_STATUS_HAVE_NO_MEMORY(d);
406         d->private_data = private_data;
407         d->fn = fn;
408
409         id = idr_get_new_above(msg->dispatch_tree, d, MSG_TMP_BASE, UINT16_MAX);
410         if (id == -1) {
411                 talloc_free(d);
412                 return NT_STATUS_TOO_MANY_CONTEXT_IDS;
413         }
414
415         d->msg_type = (uint32_t)id;
416         (*msg_type) = d->msg_type;
417
418         return NT_STATUS_OK;
419 }
420
421 /*
422   De-register the function for a particular message type.
423 */
424 void messaging_deregister(struct messaging_context *msg, uint32_t msg_type, void *private_data)
425 {
426         struct dispatch_fn *d, *next;
427
428         if (msg_type >= msg->num_types) {
429                 d = (struct dispatch_fn *)idr_find(msg->dispatch_tree, 
430                                                    msg_type);
431                 if (!d) return;
432                 idr_remove(msg->dispatch_tree, msg_type);
433                 talloc_free(d);
434                 return;
435         }
436
437         for (d = msg->dispatch[msg_type]; d; d = next) {
438                 next = d->next;
439                 if (d->private_data == private_data) {
440                         DLIST_REMOVE(msg->dispatch[msg_type], d);
441                         talloc_free(d);
442                 }
443         }
444 }
445
446 /*
447   Send a message to a particular server
448 */
449 NTSTATUS messaging_send(struct messaging_context *msg, struct server_id server, 
450                         uint32_t msg_type, DATA_BLOB *data)
451 {
452         struct messaging_rec *rec;
453         NTSTATUS status;
454         size_t dlength = data?data->length:0;
455
456         rec = talloc(msg, struct messaging_rec);
457         if (rec == NULL) {
458                 return NT_STATUS_NO_MEMORY;
459         }
460
461         rec->packet = data_blob_talloc(rec, NULL, sizeof(*rec->header) + dlength);
462         if (rec->packet.data == NULL) {
463                 talloc_free(rec);
464                 return NT_STATUS_NO_MEMORY;
465         }
466
467         rec->retries       = 0;
468         rec->msg              = msg;
469         rec->header           = (struct messaging_header *)rec->packet.data;
470         /* zero padding */
471         ZERO_STRUCTP(rec->header);
472         rec->header->version  = MESSAGING_VERSION;
473         rec->header->msg_type = msg_type;
474         rec->header->from     = msg->server_id;
475         rec->header->to       = server;
476         rec->header->length   = dlength;
477         if (dlength != 0) {
478                 memcpy(rec->packet.data + sizeof(*rec->header), 
479                        data->data, dlength);
480         }
481
482         if (!cluster_node_equal(&msg->server_id, &server)) {
483                 /* the destination is on another node - dispatch via
484                    the cluster layer */
485                 status = cluster_message_send(server, &rec->packet);
486                 talloc_free(rec);
487                 return status;
488         }
489
490         rec->path = messaging_path(msg, server);
491         talloc_steal(rec, rec->path);
492
493         if (msg->pending != NULL) {
494                 status = STATUS_MORE_ENTRIES;
495         } else {
496                 status = try_send(rec);
497         }
498
499         if (NT_STATUS_EQUAL(status, STATUS_MORE_ENTRIES)) {
500                 if (msg->pending == NULL) {
501                         EVENT_FD_WRITEABLE(msg->event.fde);
502                 }
503                 DLIST_ADD_END(msg->pending, rec, struct messaging_rec *);
504                 return NT_STATUS_OK;
505         }
506
507         talloc_free(rec);
508
509         return status;
510 }
511
512 /*
513   Send a message to a particular server, with the message containing a single pointer
514 */
515 NTSTATUS messaging_send_ptr(struct messaging_context *msg, struct server_id server, 
516                             uint32_t msg_type, void *ptr)
517 {
518         DATA_BLOB blob;
519
520         blob.data = (uint8_t *)&ptr;
521         blob.length = sizeof(void *);
522
523         return messaging_send(msg, server, msg_type, &blob);
524 }
525
526
527 /*
528   destroy the messaging context
529 */
530 static int messaging_destructor(struct messaging_context *msg)
531 {
532         unlink(msg->path);
533         while (msg->names && msg->names[0]) {
534                 irpc_remove_name(msg, msg->names[0]);
535         }
536         return 0;
537 }
538
539 /*
540   create the listening socket and setup the dispatcher
541 */
542 struct messaging_context *messaging_init(TALLOC_CTX *mem_ctx, 
543                                          const char *dir,
544                                          struct server_id server_id, 
545                                          struct smb_iconv_convenience *iconv_convenience,
546                                          struct tevent_context *ev)
547 {
548         struct messaging_context *msg;
549         NTSTATUS status;
550         struct socket_address *path;
551
552         if (ev == NULL) {
553                 return NULL;
554         }
555
556         msg = talloc_zero(mem_ctx, struct messaging_context);
557         if (msg == NULL) {
558                 return NULL;
559         }
560
561         /* setup a handler for messages from other cluster nodes, if appropriate */
562         status = cluster_message_init(msg, server_id, cluster_message_handler);
563         if (!NT_STATUS_IS_OK(status)) {
564                 talloc_free(msg);
565                 return NULL;
566         }
567
568         /* create the messaging directory if needed */
569         mkdir(dir, 0700);
570
571         msg->base_path     = talloc_reference(msg, dir);
572         msg->path          = messaging_path(msg, server_id);
573         msg->server_id     = server_id;
574         msg->iconv_convenience = iconv_convenience;
575         msg->idr           = idr_init(msg);
576         msg->dispatch_tree = idr_init(msg);
577         msg->start_time    = timeval_current();
578
579         status = socket_create("unix", SOCKET_TYPE_DGRAM, &msg->sock, 0);
580         if (!NT_STATUS_IS_OK(status)) {
581                 talloc_free(msg);
582                 return NULL;
583         }
584
585         /* by stealing here we ensure that the socket is cleaned up (and even 
586            deleted) on exit */
587         talloc_steal(msg, msg->sock);
588
589         path = socket_address_from_strings(msg, msg->sock->backend_name, 
590                                            msg->path, 0);
591         if (!path) {
592                 talloc_free(msg);
593                 return NULL;
594         }
595
596         status = socket_listen(msg->sock, path, 50, 0);
597         if (!NT_STATUS_IS_OK(status)) {
598                 DEBUG(0,("Unable to setup messaging listener for '%s':%s\n", msg->path, nt_errstr(status)));
599                 talloc_free(msg);
600                 return NULL;
601         }
602
603         /* it needs to be non blocking for sends */
604         set_blocking(socket_get_fd(msg->sock), false);
605
606         msg->event.ev   = ev;
607         msg->event.fde  = event_add_fd(ev, msg, socket_get_fd(msg->sock), 
608                                        EVENT_FD_READ, messaging_handler, msg);
609
610         talloc_set_destructor(msg, messaging_destructor);
611         
612         messaging_register(msg, NULL, MSG_PING, ping_message);
613         messaging_register(msg, NULL, MSG_IRPC, irpc_handler);
614         IRPC_REGISTER(msg, irpc, IRPC_UPTIME, irpc_uptime, msg);
615
616         return msg;
617 }
618
619 /* 
620    A hack, for the short term until we get 'client only' messaging in place 
621 */
622 struct messaging_context *messaging_client_init(TALLOC_CTX *mem_ctx, 
623                                                 const char *dir,
624                                                 struct smb_iconv_convenience *iconv_convenience,
625                                                 struct tevent_context *ev)
626 {
627         struct server_id id;
628         ZERO_STRUCT(id);
629         id.id = random() % 0x10000000;
630         return messaging_init(mem_ctx, dir, id, iconv_convenience, ev);
631 }
632 /*
633   a list of registered irpc server functions
634 */
635 struct irpc_list {
636         struct irpc_list *next, *prev;
637         struct GUID uuid;
638         const struct ndr_interface_table *table;
639         int callnum;
640         irpc_function_t fn;
641         void *private_data;
642 };
643
644
645 /*
646   register a irpc server function
647 */
648 NTSTATUS irpc_register(struct messaging_context *msg_ctx, 
649                        const struct ndr_interface_table *table, 
650                        int callnum, irpc_function_t fn, void *private_data)
651 {
652         struct irpc_list *irpc;
653
654         /* override an existing handler, if any */
655         for (irpc=msg_ctx->irpc; irpc; irpc=irpc->next) {
656                 if (irpc->table == table && irpc->callnum == callnum) {
657                         break;
658                 }
659         }
660         if (irpc == NULL) {
661                 irpc = talloc(msg_ctx, struct irpc_list);
662                 NT_STATUS_HAVE_NO_MEMORY(irpc);
663                 DLIST_ADD(msg_ctx->irpc, irpc);
664         }
665
666         irpc->table   = table;
667         irpc->callnum = callnum;
668         irpc->fn      = fn;
669         irpc->private_data = private_data;
670         irpc->uuid = irpc->table->syntax_id.uuid;
671
672         return NT_STATUS_OK;
673 }
674
675
676 /*
677   handle an incoming irpc reply message
678 */
679 static void irpc_handler_reply(struct messaging_context *msg_ctx, struct irpc_message *m)
680 {
681         struct irpc_request *irpc;
682         enum ndr_err_code ndr_err;
683
684         irpc = (struct irpc_request *)idr_find(msg_ctx->idr, m->header.callid);
685         if (irpc == NULL) return;
686
687         /* parse the reply data */
688         ndr_err = irpc->table->calls[irpc->callnum].ndr_pull(m->ndr, NDR_OUT, irpc->r);
689         if (NDR_ERR_CODE_IS_SUCCESS(ndr_err)) {
690                 irpc->status = m->header.status;
691                 talloc_steal(irpc->mem_ctx, m);
692         } else {
693                 irpc->status = ndr_map_error2ntstatus(ndr_err);
694                 talloc_steal(irpc, m);
695         }
696         irpc->done = true;
697         if (irpc->async.fn) {
698                 irpc->async.fn(irpc);
699         }
700 }
701
702 /*
703   send a irpc reply
704 */
705 NTSTATUS irpc_send_reply(struct irpc_message *m, NTSTATUS status)
706 {
707         struct ndr_push *push;
708         DATA_BLOB packet;
709         enum ndr_err_code ndr_err;
710
711         m->header.status = status;
712
713         /* setup the reply */
714         push = ndr_push_init_ctx(m->ndr, m->msg_ctx->iconv_convenience);
715         if (push == NULL) {
716                 status = NT_STATUS_NO_MEMORY;
717                 goto failed;
718         }
719
720         m->header.flags |= IRPC_FLAG_REPLY;
721
722         /* construct the packet */
723         ndr_err = ndr_push_irpc_header(push, NDR_SCALARS|NDR_BUFFERS, &m->header);
724         if (!NDR_ERR_CODE_IS_SUCCESS(ndr_err)) {
725                 status = ndr_map_error2ntstatus(ndr_err);
726                 goto failed;
727         }
728
729         ndr_err = m->irpc->table->calls[m->irpc->callnum].ndr_push(push, NDR_OUT, m->data);
730         if (!NDR_ERR_CODE_IS_SUCCESS(ndr_err)) {
731                 status = ndr_map_error2ntstatus(ndr_err);
732                 goto failed;
733         }
734
735         /* send the reply message */
736         packet = ndr_push_blob(push);
737         status = messaging_send(m->msg_ctx, m->from, MSG_IRPC, &packet);
738         if (!NT_STATUS_IS_OK(status)) goto failed;
739
740 failed:
741         talloc_free(m);
742         return status;
743 }
744
745 /*
746   handle an incoming irpc request message
747 */
748 static void irpc_handler_request(struct messaging_context *msg_ctx, 
749                                  struct irpc_message *m)
750 {
751         struct irpc_list *i;
752         void *r;
753         enum ndr_err_code ndr_err;
754
755         for (i=msg_ctx->irpc; i; i=i->next) {
756                 if (GUID_equal(&i->uuid, &m->header.uuid) &&
757                     i->table->syntax_id.if_version == m->header.if_version &&
758                     i->callnum == m->header.callnum) {
759                         break;
760                 }
761         }
762
763         if (i == NULL) {
764                 /* no registered handler for this message */
765                 talloc_free(m);
766                 return;
767         }
768
769         /* allocate space for the structure */
770         r = talloc_zero_size(m->ndr, i->table->calls[m->header.callnum].struct_size);
771         if (r == NULL) goto failed;
772
773         /* parse the request data */
774         ndr_err = i->table->calls[i->callnum].ndr_pull(m->ndr, NDR_IN, r);
775         if (!NDR_ERR_CODE_IS_SUCCESS(ndr_err)) goto failed;
776
777         /* make the call */
778         m->private_data= i->private_data;
779         m->defer_reply = false;
780         m->msg_ctx     = msg_ctx;
781         m->irpc        = i;
782         m->data        = r;
783         m->ev          = msg_ctx->event.ev;
784
785         m->header.status = i->fn(m, r);
786
787         if (m->defer_reply) {
788                 /* the server function has asked to defer the reply to later */
789                 talloc_steal(msg_ctx, m);
790                 return;
791         }
792
793         irpc_send_reply(m, m->header.status);
794         return;
795
796 failed:
797         talloc_free(m);
798 }
799
800 /*
801   handle an incoming irpc message
802 */
803 static void irpc_handler(struct messaging_context *msg_ctx, void *private_data,
804                          uint32_t msg_type, struct server_id src, DATA_BLOB *packet)
805 {
806         struct irpc_message *m;
807         enum ndr_err_code ndr_err;
808
809         m = talloc(msg_ctx, struct irpc_message);
810         if (m == NULL) goto failed;
811
812         m->from = src;
813
814         m->ndr = ndr_pull_init_blob(packet, m, msg_ctx->iconv_convenience);
815         if (m->ndr == NULL) goto failed;
816
817         m->ndr->flags |= LIBNDR_FLAG_REF_ALLOC;
818
819         ndr_err = ndr_pull_irpc_header(m->ndr, NDR_BUFFERS|NDR_SCALARS, &m->header);
820         if (!NDR_ERR_CODE_IS_SUCCESS(ndr_err)) goto failed;
821
822         if (m->header.flags & IRPC_FLAG_REPLY) {
823                 irpc_handler_reply(msg_ctx, m);
824         } else {
825                 irpc_handler_request(msg_ctx, m);
826         }
827         return;
828
829 failed:
830         talloc_free(m);
831 }
832
833
834 /*
835   destroy a irpc request
836 */
837 static int irpc_destructor(struct irpc_request *irpc)
838 {
839         if (irpc->callid != -1) {
840                 idr_remove(irpc->msg_ctx->idr, irpc->callid);
841                 irpc->callid = -1;
842         }
843
844         if (irpc->reject_free) {
845                 return -1;
846         }
847         return 0;
848 }
849
850 /*
851   timeout a irpc request
852 */
853 static void irpc_timeout(struct tevent_context *ev, struct tevent_timer *te, 
854                          struct timeval t, void *private_data)
855 {
856         struct irpc_request *irpc = talloc_get_type(private_data, struct irpc_request);
857         irpc->status = NT_STATUS_IO_TIMEOUT;
858         irpc->done = true;
859         if (irpc->async.fn) {
860                 irpc->async.fn(irpc);
861         }
862 }
863
864
865 /*
866   make a irpc call - async send
867 */
868 struct irpc_request *irpc_call_send(struct messaging_context *msg_ctx, 
869                                     struct server_id server_id, 
870                                     const struct ndr_interface_table *table, 
871                                     int callnum, void *r, TALLOC_CTX *ctx)
872 {
873         struct irpc_header header;
874         struct ndr_push *ndr;
875         NTSTATUS status;
876         DATA_BLOB packet;
877         struct irpc_request *irpc;
878         enum ndr_err_code ndr_err;
879
880         irpc = talloc(msg_ctx, struct irpc_request);
881         if (irpc == NULL) goto failed;
882
883         irpc->msg_ctx  = msg_ctx;
884         irpc->table    = table;
885         irpc->callnum  = callnum;
886         irpc->callid   = idr_get_new(msg_ctx->idr, irpc, UINT16_MAX);
887         if (irpc->callid == -1) goto failed;
888         irpc->r        = r;
889         irpc->done     = false;
890         irpc->async.fn = NULL;
891         irpc->mem_ctx  = ctx;
892         irpc->reject_free = false;
893
894         talloc_set_destructor(irpc, irpc_destructor);
895
896         /* setup the header */
897         header.uuid = table->syntax_id.uuid;
898
899         header.if_version = table->syntax_id.if_version;
900         header.callid     = irpc->callid;
901         header.callnum    = callnum;
902         header.flags      = 0;
903         header.status     = NT_STATUS_OK;
904
905         /* construct the irpc packet */
906         ndr = ndr_push_init_ctx(irpc, msg_ctx->iconv_convenience);
907         if (ndr == NULL) goto failed;
908
909         ndr_err = ndr_push_irpc_header(ndr, NDR_SCALARS|NDR_BUFFERS, &header);
910         if (!NDR_ERR_CODE_IS_SUCCESS(ndr_err)) goto failed;
911
912         ndr_err = table->calls[callnum].ndr_push(ndr, NDR_IN, r);
913         if (!NDR_ERR_CODE_IS_SUCCESS(ndr_err)) goto failed;
914
915         /* and send it */
916         packet = ndr_push_blob(ndr);
917         status = messaging_send(msg_ctx, server_id, MSG_IRPC, &packet);
918         if (!NT_STATUS_IS_OK(status)) goto failed;
919
920         event_add_timed(msg_ctx->event.ev, irpc, 
921                         timeval_current_ofs(IRPC_CALL_TIMEOUT, 0), 
922                         irpc_timeout, irpc);
923
924         talloc_free(ndr);
925         return irpc;
926
927 failed:
928         talloc_free(irpc);
929         return NULL;
930 }
931
932 /*
933   wait for a irpc reply
934 */
935 NTSTATUS irpc_call_recv(struct irpc_request *irpc)
936 {
937         NTSTATUS status;
938
939         NT_STATUS_HAVE_NO_MEMORY(irpc);
940
941         irpc->reject_free = true;
942
943         while (!irpc->done) {
944                 if (event_loop_once(irpc->msg_ctx->event.ev) != 0) {
945                         return NT_STATUS_CONNECTION_DISCONNECTED;
946                 }
947         }
948
949         irpc->reject_free = false;
950
951         status = irpc->status;
952         talloc_free(irpc);
953         return status;
954 }
955
956 /*
957   perform a synchronous irpc request
958 */
959 NTSTATUS irpc_call(struct messaging_context *msg_ctx, 
960                    struct server_id server_id, 
961                    const struct ndr_interface_table *table, 
962                    int callnum, void *r,
963                    TALLOC_CTX *mem_ctx)
964 {
965         struct irpc_request *irpc = irpc_call_send(msg_ctx, server_id, 
966                                                    table, callnum, r, mem_ctx);
967         return irpc_call_recv(irpc);
968 }
969
970 /*
971   open the naming database
972 */
973 static struct tdb_wrap *irpc_namedb_open(struct messaging_context *msg_ctx)
974 {
975         struct tdb_wrap *t;
976         char *path = talloc_asprintf(msg_ctx, "%s/names.tdb", msg_ctx->base_path);
977         if (path == NULL) {
978                 return NULL;
979         }
980         t = tdb_wrap_open(msg_ctx, path, 0, 0, O_RDWR|O_CREAT, 0660);
981         talloc_free(path);
982         return t;
983 }
984         
985
986 /*
987   add a string name that this irpc server can be called on
988 */
989 NTSTATUS irpc_add_name(struct messaging_context *msg_ctx, const char *name)
990 {
991         struct tdb_wrap *t;
992         TDB_DATA rec;
993         int count;
994         NTSTATUS status = NT_STATUS_OK;
995
996         t = irpc_namedb_open(msg_ctx);
997         NT_STATUS_HAVE_NO_MEMORY(t);
998
999         if (tdb_lock_bystring(t->tdb, name) != 0) {
1000                 talloc_free(t);
1001                 return NT_STATUS_LOCK_NOT_GRANTED;
1002         }
1003         rec = tdb_fetch_bystring(t->tdb, name);
1004         count = rec.dsize / sizeof(struct server_id);
1005         rec.dptr = (unsigned char *)realloc_p(rec.dptr, struct server_id, count+1);
1006         rec.dsize += sizeof(struct server_id);
1007         if (rec.dptr == NULL) {
1008                 tdb_unlock_bystring(t->tdb, name);
1009                 talloc_free(t);
1010                 return NT_STATUS_NO_MEMORY;
1011         }
1012         ((struct server_id *)rec.dptr)[count] = msg_ctx->server_id;
1013         if (tdb_store_bystring(t->tdb, name, rec, 0) != 0) {
1014                 status = NT_STATUS_INTERNAL_ERROR;
1015         }
1016         free(rec.dptr);
1017         tdb_unlock_bystring(t->tdb, name);
1018         talloc_free(t);
1019
1020         msg_ctx->names = str_list_add(msg_ctx->names, name);
1021         talloc_steal(msg_ctx, msg_ctx->names);
1022
1023         return status;
1024 }
1025
1026 /*
1027   return a list of server ids for a server name
1028 */
1029 struct server_id *irpc_servers_byname(struct messaging_context *msg_ctx,
1030                                       TALLOC_CTX *mem_ctx,
1031                                       const char *name)
1032 {
1033         struct tdb_wrap *t;
1034         TDB_DATA rec;
1035         int count, i;
1036         struct server_id *ret;
1037
1038         t = irpc_namedb_open(msg_ctx);
1039         if (t == NULL) {
1040                 return NULL;
1041         }
1042
1043         if (tdb_lock_bystring(t->tdb, name) != 0) {
1044                 talloc_free(t);
1045                 return NULL;
1046         }
1047         rec = tdb_fetch_bystring(t->tdb, name);
1048         if (rec.dptr == NULL) {
1049                 tdb_unlock_bystring(t->tdb, name);
1050                 talloc_free(t);
1051                 return NULL;
1052         }
1053         count = rec.dsize / sizeof(struct server_id);
1054         ret = talloc_array(mem_ctx, struct server_id, count+1);
1055         if (ret == NULL) {
1056                 tdb_unlock_bystring(t->tdb, name);
1057                 talloc_free(t);
1058                 return NULL;
1059         }
1060         for (i=0;i<count;i++) {
1061                 ret[i] = ((struct server_id *)rec.dptr)[i];
1062         }
1063         ret[i] = cluster_id(0, 0);
1064         free(rec.dptr);
1065         tdb_unlock_bystring(t->tdb, name);
1066         talloc_free(t);
1067
1068         return ret;
1069 }
1070
1071 /*
1072   remove a name from a messaging context
1073 */
1074 void irpc_remove_name(struct messaging_context *msg_ctx, const char *name)
1075 {
1076         struct tdb_wrap *t;
1077         TDB_DATA rec;
1078         int count, i;
1079         struct server_id *ids;
1080
1081         str_list_remove(msg_ctx->names, name);
1082
1083         t = irpc_namedb_open(msg_ctx);
1084         if (t == NULL) {
1085                 return;
1086         }
1087
1088         if (tdb_lock_bystring(t->tdb, name) != 0) {
1089                 talloc_free(t);
1090                 return;
1091         }
1092         rec = tdb_fetch_bystring(t->tdb, name);
1093         if (rec.dptr == NULL) {
1094                 tdb_unlock_bystring(t->tdb, name);
1095                 talloc_free(t);
1096                 return;
1097         }
1098         count = rec.dsize / sizeof(struct server_id);
1099         if (count == 0) {
1100                 free(rec.dptr);
1101                 tdb_unlock_bystring(t->tdb, name);
1102                 talloc_free(t);
1103                 return;
1104         }
1105         ids = (struct server_id *)rec.dptr;
1106         for (i=0;i<count;i++) {
1107                 if (cluster_id_equal(&ids[i], &msg_ctx->server_id)) {
1108                         if (i < count-1) {
1109                                 memmove(ids+i, ids+i+1, 
1110                                         sizeof(struct server_id) * (count-(i+1)));
1111                         }
1112                         rec.dsize -= sizeof(struct server_id);
1113                         break;
1114                 }
1115         }
1116         tdb_store_bystring(t->tdb, name, rec, 0);
1117         free(rec.dptr);
1118         tdb_unlock_bystring(t->tdb, name);
1119         talloc_free(t);
1120 }
1121
1122 struct server_id messaging_get_server_id(struct messaging_context *msg_ctx)
1123 {
1124         return msg_ctx->server_id;
1125 }