r6690: added ndr_pull_struct_blob_all(), which is like ndr_pull_struct_blob() but...
[samba.git] / source / librpc / ndr / ndr.c
index cbb1046281c8e21853f3d56374496caaf8296ca5..79af5967c754e7ac56186b6e04dfbc82e6f18234 100644 (file)
@@ -28,6 +28,7 @@
 */
 
 #include "includes.h"
+#include "dlinklist.h"
 
 #define NDR_BASE_MARSHALL_SIZE 1024
 
@@ -47,16 +48,11 @@ struct ndr_pull *ndr_pull_init_blob(const DATA_BLOB *blob, TALLOC_CTX *mem_ctx)
 {
        struct ndr_pull *ndr;
 
-       ndr = talloc(mem_ctx, sizeof(*ndr));
+       ndr = talloc_zero(mem_ctx, struct ndr_pull);
        if (!ndr) return NULL;
 
-       ndr->flags = 0;
        ndr->data = blob->data;
        ndr->data_size = blob->length;
-       ndr->offset = 0;
-       ndr->mem_ctx = mem_ctx;
-       ndr->ptr_count = 0;
-       ndr->relative_list = NULL;
 
        return ndr;
 }
@@ -125,21 +121,17 @@ struct ndr_push *ndr_push_init_ctx(TALLOC_CTX *mem_ctx)
 {
        struct ndr_push *ndr;
 
-       ndr = talloc(mem_ctx, sizeof(*ndr));
+       ndr = talloc_zero(mem_ctx, struct ndr_push);
        if (!ndr) {
                return NULL;
        }
 
-       ndr->mem_ctx = mem_ctx;
        ndr->flags = 0;
        ndr->alloc_size = NDR_BASE_MARSHALL_SIZE;
-       ndr->data = talloc(ndr->mem_ctx, ndr->alloc_size);
+       ndr->data = talloc_array(ndr, uint8_t, ndr->alloc_size);
        if (!ndr->data) {
                return NULL;
        }
-       ndr->offset = 0;
-       ndr->ptr_count = 0;
-       ndr->relative_list = NULL;
 
        return ndr;
 }
@@ -148,20 +140,13 @@ struct ndr_push *ndr_push_init_ctx(TALLOC_CTX *mem_ctx)
 /* create a ndr_push structure, ready for some marshalling */
 struct ndr_push *ndr_push_init(void)
 {
-       struct ndr_push *ndr;
-       TALLOC_CTX *mem_ctx = talloc_init("ndr_push_init");
-       if (!mem_ctx) return NULL;
-       ndr = ndr_push_init_ctx(mem_ctx);
-       if (!ndr) {
-               talloc_destroy(mem_ctx);
-       }
-       return ndr;
+       return ndr_push_init_ctx(NULL);
 }
 
 /* free a ndr_push structure */
 void ndr_push_free(struct ndr_push *ndr)
 {
-       talloc_destroy(ndr->mem_ctx);
+       talloc_free(ndr);
 }
 
 
@@ -188,7 +173,7 @@ NTSTATUS ndr_push_expand(struct ndr_push *ndr, uint32_t size)
        if (size > ndr->alloc_size) {
                ndr->alloc_size = size;
        }
-       ndr->data = talloc_realloc(ndr->data, ndr->alloc_size);
+       ndr->data = talloc_realloc(ndr, ndr->data, uint8_t, ndr->alloc_size);
        if (!ndr->data) {
                return ndr_push_error(ndr, NDR_ERR_ALLOC, "Failed to push_expand to %u",
                                      ndr->alloc_size);
@@ -258,6 +243,27 @@ done:
        return NT_STATUS_OK;
 }
 
+/*
+  pull a constant size array of structures
+*/
+NTSTATUS ndr_pull_struct_array(struct ndr_pull *ndr, uint32_t count,
+                              size_t elsize, void **info,
+                              NTSTATUS (*pull_fn)(struct ndr_pull *, int, void *))
+{
+       int i;
+       char *base;
+
+       NDR_ALLOC_N_SIZE(ndr, *info, count, elsize);
+       base = (char *)*info;
+
+       for (i = 0; i < count; i++) {
+               ndr->data += ndr->offset;
+               ndr->offset = 0;
+               NDR_CHECK(pull_fn(ndr, NDR_SCALARS|NDR_BUFFERS, &base[count * elsize]));
+       }
+
+       return NT_STATUS_OK;
+}
 
 /*
   print a generic array
@@ -284,7 +290,7 @@ void ndr_print_array(struct ndr_print *ndr, const char *name, void *base,
 
 
 
-void ndr_print_debug_helper(struct ndr_print *ndr, const char *format, ...)
+void ndr_print_debug_helper(struct ndr_print *ndr, const char *format, ...) _PRINTF_ATTRIBUTE(2,3)
 {
        va_list ap;
        char *s = NULL;
@@ -305,68 +311,60 @@ void ndr_print_debug_helper(struct ndr_print *ndr, const char *format, ...)
 /*
   a useful helper function for printing idl structures via DEBUG()
 */
-void ndr_print_debug(void (*fn)(struct ndr_print *, const char *, void *),
-                    const char *name,
-                    void *ptr)
+void ndr_print_debug(ndr_print_fn_t fn, const char *name, void *ptr)
 {
-       struct ndr_print ndr;
+       struct ndr_print *ndr;
 
-       ndr.mem_ctx = talloc_init("ndr_print_debug");
-       if (!ndr.mem_ctx) return;
-       ndr.print = ndr_print_debug_helper;
-       ndr.depth = 1;
-       ndr.flags = 0;
-       fn(&ndr, name, ptr);
-       talloc_destroy(ndr.mem_ctx);
+       ndr = talloc_zero(NULL, struct ndr_print);
+       if (!ndr) return;
+       ndr->print = ndr_print_debug_helper;
+       ndr->depth = 1;
+       ndr->flags = 0;
+       fn(ndr, name, ptr);
+       talloc_free(ndr);
 }
 
-
 /*
-  a useful helper function for printing idl unions via DEBUG()
+  a useful helper function for printing idl function calls via DEBUG()
 */
-void ndr_print_union_debug(void (*fn)(struct ndr_print *, const char *, uint32_t, void *),
-                          const char *name,
-                          uint32_t level,
-                          void *ptr)
+void ndr_print_function_debug(ndr_print_function_t fn, const char *name, int flags, void *ptr)
 {
-       struct ndr_print ndr;
+       struct ndr_print *ndr;
 
-       ndr.mem_ctx = talloc_init("ndr_print_union");
-       if (!ndr.mem_ctx) return;
-       ndr.print = ndr_print_debug_helper;
-       ndr.depth = 1;
-       ndr.flags = 0;
-       fn(&ndr, name, level, ptr);
-       talloc_destroy(ndr.mem_ctx);
+       ndr = talloc_zero(NULL, struct ndr_print);
+       if (!ndr) return;
+       ndr->print = ndr_print_debug_helper;
+       ndr->depth = 1;
+       ndr->flags = 0;
+       fn(ndr, name, flags, ptr);
+       talloc_free(ndr);
 }
 
-/*
-  a useful helper function for printing idl function calls via DEBUG()
-*/
-void ndr_print_function_debug(void (*fn)(struct ndr_print *, const char *, int , void *),
-                             const char *name,
-                             int flags,
-                             void *ptr)
+void ndr_set_flags(uint32_t *pflags, uint32_t new_flags)
 {
-       struct ndr_print ndr;
-
-       ndr.mem_ctx = talloc_init("ndr_print_function");
-       if (!ndr.mem_ctx) return;
-       ndr.print = ndr_print_debug_helper;
-       ndr.depth = 1;
-       ndr.flags = 0;
-       fn(&ndr, name, flags, ptr);
-       talloc_destroy(ndr.mem_ctx);
+       /* the big/little endian flags are inter-dependent */
+       if (new_flags & LIBNDR_FLAG_LITTLE_ENDIAN) {
+               (*pflags) &= ~LIBNDR_FLAG_BIGENDIAN;
+       }
+       if (new_flags & LIBNDR_FLAG_BIGENDIAN) {
+               (*pflags) &= ~LIBNDR_FLAG_LITTLE_ENDIAN;
+       }
+       (*pflags) |= new_flags;
 }
 
-
 static NTSTATUS ndr_map_error(enum ndr_err_code err)
 {
        switch (err) {
        case NDR_ERR_BUFSIZE:
                return NT_STATUS_BUFFER_TOO_SMALL;
+       case NDR_ERR_TOKEN:
+               return NT_STATUS_INTERNAL_ERROR;
        case NDR_ERR_ALLOC:
                return NT_STATUS_NO_MEMORY;
+       case NDR_ERR_ARRAY_SIZE:
+               return NT_STATUS_ARRAY_BOUNDS_EXCEEDED;
+       default:
+               break;
        }
 
        /* we should all error codes to different status codes */
@@ -396,7 +394,7 @@ NTSTATUS ndr_pull_error(struct ndr_pull *ndr,
 /*
   return and possibly log an NDR error
 */
-NTSTATUS ndr_push_error(struct ndr_push *ndr, enum ndr_err_code err, const char *format, ...)
+NTSTATUS ndr_push_error(struct ndr_push *ndr, enum ndr_err_code err, const char *format, ...)  _PRINTF_ATTRIBUTE(3,4)
 {
        char *s=NULL;
        va_list ap;
@@ -417,187 +415,88 @@ NTSTATUS ndr_push_error(struct ndr_push *ndr, enum ndr_err_code err, const char
   handle subcontext buffers, which in midl land are user-marshalled, but
   we use magic in pidl to make them easier to cope with
 */
-static NTSTATUS ndr_pull_subcontext_header(struct ndr_pull *ndr, 
-                                          size_t sub_size,
+NTSTATUS ndr_pull_subcontext_header(struct ndr_pull *ndr, 
+                                          size_t header_size,
+                                          ssize_t size_is,
                                           struct ndr_pull *ndr2)
 {
-       switch (sub_size) {
+       ndr2->flags = ndr->flags;
+
+       switch (header_size) {
        case 0: {
-               uint32_t size = ndr->data_size - ndr->offset;
-               if (size == 0) return NT_STATUS_OK;
-               NDR_CHECK(ndr_pull_subcontext(ndr, ndr2, size));
+               uint32_t content_size = ndr->data_size - ndr->offset;
+               if (size_is >= 0) {
+                       content_size = size_is;
+               }
+               NDR_CHECK(ndr_pull_subcontext(ndr, ndr2, content_size));
                break;
        }
 
        case 2: {
-               uint16_t size;
-               NDR_CHECK(ndr_pull_uint16(ndr, &size));
-               if (size == 0) return NT_STATUS_OK;
-               NDR_CHECK(ndr_pull_subcontext(ndr, ndr2, size));
+               uint16_t content_size;
+               NDR_CHECK(ndr_pull_uint16(ndr, NDR_SCALARS, &content_size));
+               if (size_is >= 0 && size_is != content_size) {
+                       return ndr_pull_error(ndr, NDR_ERR_SUBCONTEXT, "Bad subcontext (PULL) size_is(%d) mismatch content_size %d", 
+                                               size_is, content_size);
+               }
+               NDR_CHECK(ndr_pull_subcontext(ndr, ndr2, content_size));
                break;
        }
 
        case 4: {
-               uint32_t size;
-               NDR_CHECK(ndr_pull_uint32(ndr, &size));
-               if (size == 0) return NT_STATUS_OK;
-               NDR_CHECK(ndr_pull_subcontext(ndr, ndr2, size));
+               uint32_t content_size;
+               NDR_CHECK(ndr_pull_uint32(ndr, NDR_SCALARS, &content_size));
+               if (size_is >= 0 && size_is != content_size) {
+                       return ndr_pull_error(ndr, NDR_ERR_SUBCONTEXT, "Bad subcontext (PULL) size_is(%d) mismatch content_size %d", 
+                                               size_is, content_size);
+               }
+               NDR_CHECK(ndr_pull_subcontext(ndr, ndr2, content_size));
                break;
        }
        default:
-               return ndr_pull_error(ndr, NDR_ERR_SUBCONTEXT, "Bad subcontext size %d", 
-                                     sub_size);
-       }
-       return NT_STATUS_OK;
-}
-
-/*
-  handle subcontext buffers, which in midl land are user-marshalled, but
-  we use magic in pidl to make them easier to cope with
-*/
-NTSTATUS ndr_pull_subcontext_fn(struct ndr_pull *ndr, 
-                               size_t sub_size,
-                               void *base,
-                               NTSTATUS (*fn)(struct ndr_pull *, void *))
-{
-       struct ndr_pull ndr2;
-
-       NDR_CHECK(ndr_pull_subcontext_header(ndr, sub_size, &ndr2));
-       NDR_CHECK(fn(&ndr2, base));
-       if (sub_size) {
-               NDR_CHECK(ndr_pull_advance(ndr, ndr2.data_size));
-       } else {
-               NDR_CHECK(ndr_pull_advance(ndr, ndr2.offset));
-       }
-       return NT_STATUS_OK;
-}
-
-
-NTSTATUS ndr_pull_subcontext_flags_fn(struct ndr_pull *ndr, 
-                                     size_t sub_size,
-                                     void *base,
-                                     NTSTATUS (*fn)(struct ndr_pull *, int , void *))
-{
-       struct ndr_pull ndr2;
-
-       NDR_CHECK(ndr_pull_subcontext_header(ndr, sub_size, &ndr2));
-       NDR_CHECK(fn(&ndr2, NDR_SCALARS|NDR_BUFFERS, base));
-       if (sub_size) {
-               NDR_CHECK(ndr_pull_advance(ndr, ndr2.data_size));
-       } else {
-               NDR_CHECK(ndr_pull_advance(ndr, ndr2.offset));
-       }
-       return NT_STATUS_OK;
-}
-
-NTSTATUS ndr_pull_subcontext_union_fn(struct ndr_pull *ndr, 
-                                     size_t sub_size,
-                                     uint32_t level,
-                                     void *base,
-                                     NTSTATUS (*fn)(struct ndr_pull *, int , uint32_t , void *))
-{
-       struct ndr_pull ndr2;
-
-       NDR_CHECK(ndr_pull_subcontext_header(ndr, sub_size, &ndr2));
-       NDR_CHECK(fn(&ndr2, NDR_SCALARS|NDR_BUFFERS, level, base));
-       if (sub_size) {
-               NDR_CHECK(ndr_pull_advance(ndr, ndr2.data_size));
-       } else {
-               NDR_CHECK(ndr_pull_advance(ndr, ndr2.offset));
+               return ndr_pull_error(ndr, NDR_ERR_SUBCONTEXT, "Bad subcontext (PULL) header_size %d", 
+                                     header_size);
        }
        return NT_STATUS_OK;
 }
 
-
 /*
   push a subcontext header 
 */
-static NTSTATUS ndr_push_subcontext_header(struct ndr_push *ndr, 
-                                          size_t sub_size,
+NTSTATUS ndr_push_subcontext_header(struct ndr_push *ndr, 
+                                          size_t header_size,
+                                          ssize_t size_is,
                                           struct ndr_push *ndr2)
 {
-       switch (sub_size) {
+       if (size_is >= 0) {
+               ssize_t padding_len = size_is - ndr2->offset;
+               if (padding_len > 0) {
+                       NDR_CHECK(ndr_push_zero(ndr2, padding_len));
+               } else if (padding_len < 0) {
+                       return ndr_push_error(ndr, NDR_ERR_SUBCONTEXT, "Bad subcontext (PUSH) content_size %d is larger than size_is(%d)",
+                                             ndr2->offset, size_is);
+               }
+       }
+
+       switch (header_size) {
        case 0: 
                break;
 
        case 2: 
-               NDR_CHECK(ndr_push_uint16(ndr, ndr2->offset));
+               NDR_CHECK(ndr_push_uint16(ndr, NDR_SCALARS, ndr2->offset));
                break;
 
        case 4: 
-               NDR_CHECK(ndr_push_uint32(ndr, ndr2->offset));
+               NDR_CHECK(ndr_push_uint32(ndr, NDR_SCALARS, ndr2->offset));
                break;
 
        default:
-               return ndr_push_error(ndr, NDR_ERR_SUBCONTEXT, "Bad subcontext size %d", 
-                                     sub_size);
+               return ndr_push_error(ndr, NDR_ERR_SUBCONTEXT, "Bad subcontext header size %d", 
+                                     header_size);
        }
        return NT_STATUS_OK;
 }
 
-/*
-  handle subcontext buffers, which in midl land are user-marshalled, but
-  we use magic in pidl to make them easier to cope with
-*/
-NTSTATUS ndr_push_subcontext_fn(struct ndr_push *ndr, 
-                               size_t sub_size,
-                               void *base,
-                               NTSTATUS (*fn)(struct ndr_push *, void *))
-{
-       struct ndr_push *ndr2;
-
-       ndr2 = ndr_push_init_ctx(ndr->mem_ctx);
-       if (!ndr2) return NT_STATUS_NO_MEMORY;
-
-       ndr2->flags = ndr->flags;
-       NDR_CHECK(fn(ndr2, base));
-       NDR_CHECK(ndr_push_subcontext_header(ndr, sub_size, ndr2));
-       NDR_CHECK(ndr_push_bytes(ndr, ndr2->data, ndr2->offset));
-       return NT_STATUS_OK;
-}
-
-/*
-  handle subcontext buffers for function that take a flags arg
-*/
-NTSTATUS ndr_push_subcontext_flags_fn(struct ndr_push *ndr, 
-                                     size_t sub_size,
-                                     void *base,
-                                     NTSTATUS (*fn)(struct ndr_push *, int, void *))
-{
-       struct ndr_push *ndr2;
-
-       ndr2 = ndr_push_init_ctx(ndr->mem_ctx);
-       if (!ndr2) return NT_STATUS_NO_MEMORY;
-
-       ndr2->flags = ndr->flags;
-       NDR_CHECK(fn(ndr2, NDR_SCALARS|NDR_BUFFERS, base));
-       NDR_CHECK(ndr_push_subcontext_header(ndr, sub_size, ndr2));
-       NDR_CHECK(ndr_push_bytes(ndr, ndr2->data, ndr2->offset));
-       return NT_STATUS_OK;
-}
-
-/*
-  handle subcontext buffers for function that take a union
-*/
-NTSTATUS ndr_push_subcontext_union_fn(struct ndr_push *ndr, 
-                                     size_t sub_size,
-                                     uint32_t level,
-                                     void *base,
-                                     NTSTATUS (*fn)(struct ndr_push *, int, uint32_t, void *))
-{
-       struct ndr_push *ndr2;
-
-       ndr2 = ndr_push_init_ctx(ndr->mem_ctx);
-       if (!ndr2) return NT_STATUS_NO_MEMORY;
-
-       ndr2->flags = ndr->flags;
-       NDR_CHECK(fn(ndr2, NDR_SCALARS|NDR_BUFFERS, level, base));
-       NDR_CHECK(ndr_push_subcontext_header(ndr, sub_size, ndr2));
-       NDR_CHECK(ndr_push_bytes(ndr, ndr2->data, ndr2->offset));
-       return NT_STATUS_OK;
-}
-
-
 /*
   mark the start of a structure
 */
@@ -628,43 +527,6 @@ void ndr_push_struct_end(struct ndr_push *ndr)
 {
 }
 
-
-/*
-  pull a relative structure
-*/
-NTSTATUS ndr_pull_relative(struct ndr_pull *ndr, const void **buf, size_t size, 
-                          NTSTATUS (*fn)(struct ndr_pull *, int ndr_flags, void *))
-{
-       struct ndr_pull ndr2;
-       uint32_t ofs;
-       struct ndr_pull_save save;
-       void *p;
-
-       NDR_CHECK(ndr_pull_uint32(ndr, &ofs));
-       if (ofs == 0) {
-               (*buf) = NULL;
-               return NT_STATUS_OK;
-       }
-       ndr_pull_save(ndr, &save);
-        /* the old way of handling relative pointers appears to be
-          wrong, and there doesn't seem to be anything relying on it,
-          but I am keeping the code around in case I missed a
-          critical use for it (tridge, august 2004) */
-       NDR_CHECK(ndr_pull_set_offset(ndr, ofs));
-       NDR_CHECK(ndr_pull_subcontext(ndr, &ndr2, ndr->data_size - ndr->offset));
-       /* strings must be allocated by the backend functions */
-       if (ndr->flags & LIBNDR_STRING_FLAGS) {
-               NDR_CHECK(fn(&ndr2, NDR_SCALARS|NDR_BUFFERS, &p));
-       } else {
-               NDR_ALLOC_SIZE(ndr, p, size);
-               NDR_CHECK(fn(&ndr2, NDR_SCALARS|NDR_BUFFERS, p));
-       }
-       (*buf) = p;
-       ndr_pull_restore(ndr, &save);
-       return NT_STATUS_OK;
-}
-
-
 /*
   store a token in the ndr context, for later retrieval
 */
@@ -674,7 +536,7 @@ static NTSTATUS ndr_token_store(TALLOC_CTX *mem_ctx,
                                uint32_t value)
 {
        struct ndr_token_list *tok;
-       tok = talloc_p(mem_ctx, struct ndr_token_list);
+       tok = talloc(mem_ctx, struct ndr_token_list);
        if (tok == NULL) {
                return NT_STATUS_NO_MEMORY;
        }
@@ -687,39 +549,162 @@ static NTSTATUS ndr_token_store(TALLOC_CTX *mem_ctx,
 /*
   retrieve a token from a ndr context
 */
-static uint32_t ndr_token_retrieve(struct ndr_token_list **list, const void *key)
+static NTSTATUS ndr_token_retrieve(struct ndr_token_list **list, const void *key, uint32_t *v)
 {
        struct ndr_token_list *tok;
        for (tok=*list;tok;tok=tok->next) {
                if (tok->key == key) {
                        DLIST_REMOVE((*list), tok);
+                       *v = tok->value;
+                       return NT_STATUS_OK;
+               }
+       }
+       return ndr_map_error(NDR_ERR_TOKEN);
+}
+
+/*
+  peek at but don't removed a token from a ndr context
+*/
+static uint32_t ndr_token_peek(struct ndr_token_list **list, const void *key)
+{
+       struct ndr_token_list *tok;
+       for (tok=*list;tok;tok=tok->next) {
+               if (tok->key == key) {
                        return tok->value;
                }
        }
        return 0;
 }
 
+/*
+  pull an array size field and add it to the array_size_list token list
+*/
+NTSTATUS ndr_pull_array_size(struct ndr_pull *ndr, const void *p)
+{
+       uint32_t size;
+       NDR_CHECK(ndr_pull_uint32(ndr, NDR_SCALARS, &size));
+       return ndr_token_store(ndr, &ndr->array_size_list, p, size);
+}
+
+/*
+  get the stored array size field
+*/
+uint32_t ndr_get_array_size(struct ndr_pull *ndr, const void *p)
+{
+       return ndr_token_peek(&ndr->array_size_list, p);
+}
+
+/*
+  check the stored array size field
+*/
+NTSTATUS ndr_check_array_size(struct ndr_pull *ndr, void *p, uint32_t size)
+{
+       uint32_t stored;
+       NDR_CHECK(ndr_token_retrieve(&ndr->array_size_list, p, &stored));
+       if (stored != size) {
+               return ndr_pull_error(ndr, NDR_ERR_ARRAY_SIZE, 
+                                     "Bad array size - got %u expected %u\n",
+                                     stored, size);
+       }
+       return NT_STATUS_OK;
+}
+
+/*
+  pull an array length field and add it to the array_length_list token list
+*/
+NTSTATUS ndr_pull_array_length(struct ndr_pull *ndr, const void *p)
+{
+       uint32_t length, offset;
+       NDR_CHECK(ndr_pull_uint32(ndr, NDR_SCALARS, &offset));
+       if (offset != 0) {
+               return ndr_pull_error(ndr, NDR_ERR_ARRAY_SIZE, 
+                                     "non-zero array offset %u\n", offset);
+       }
+       NDR_CHECK(ndr_pull_uint32(ndr, NDR_SCALARS, &length));
+       return ndr_token_store(ndr, &ndr->array_length_list, p, length);
+}
+
+/*
+  get the stored array length field
+*/
+uint32_t ndr_get_array_length(struct ndr_pull *ndr, const void *p)
+{
+       return ndr_token_peek(&ndr->array_length_list, p);
+}
+
+/*
+  check the stored array length field
+*/
+NTSTATUS ndr_check_array_length(struct ndr_pull *ndr, void *p, uint32_t length)
+{
+       uint32_t stored;
+       NDR_CHECK(ndr_token_retrieve(&ndr->array_length_list, p, &stored));
+       if (stored != length) {
+               return ndr_pull_error(ndr, NDR_ERR_ARRAY_SIZE, 
+                                     "Bad array length - got %u expected %u\n",
+                                     stored, length);
+       }
+       return NT_STATUS_OK;
+}
+
+/*
+  store a switch value
+ */
+NTSTATUS ndr_push_set_switch_value(struct ndr_push *ndr, const void *p, uint32_t val)
+{
+       return ndr_token_store(ndr, &ndr->switch_list, p, val);
+}
+
+NTSTATUS ndr_pull_set_switch_value(struct ndr_pull *ndr, const void *p, uint32_t val)
+{
+       return ndr_token_store(ndr, &ndr->switch_list, p, val);
+}
+
+NTSTATUS ndr_print_set_switch_value(struct ndr_print *ndr, const void *p, uint32_t val)
+{
+       return ndr_token_store(ndr, &ndr->switch_list, p, val);
+}
+
+/*
+  retrieve a switch value
+ */
+uint32_t ndr_push_get_switch_value(struct ndr_push *ndr, const void *p)
+{
+       return ndr_token_peek(&ndr->switch_list, p);
+}
+
+uint32_t ndr_pull_get_switch_value(struct ndr_pull *ndr, const void *p)
+{
+       return ndr_token_peek(&ndr->switch_list, p);
+}
+
+uint32_t ndr_print_get_switch_value(struct ndr_print *ndr, const void *p)
+{
+       return ndr_token_peek(&ndr->switch_list, p);
+}
 
 /*
   pull a relative object - stage1
   called during SCALARS processing
 */
-NTSTATUS ndr_pull_relative1(struct ndr_pull *ndr, const void *p, uint32_t rel_offset)
+NTSTATUS ndr_pull_relative_ptr1(struct ndr_pull *ndr, const void *p, uint32_t rel_offset)
 {
-       return ndr_token_store(ndr->mem_ctx, &ndr->relative_list, p, rel_offset);
+       if (ndr->flags & LIBNDR_FLAG_RELATIVE_CURRENT) {
+               return ndr_token_store(ndr, &ndr->relative_list, p, 
+                                      rel_offset + ndr->offset - 4);
+       } else {
+               return ndr_token_store(ndr, &ndr->relative_list, p, rel_offset);
+       }
 }
 
 /*
   pull a relative object - stage2
   called during BUFFERS processing
 */
-NTSTATUS ndr_pull_relative2(struct ndr_pull *ndr, const void *p)
+NTSTATUS ndr_pull_relative_ptr2(struct ndr_pull *ndr, const void *p)
 {
        uint32_t rel_offset;
-       rel_offset = ndr_token_retrieve(&ndr->relative_list, p);
-       if (rel_offset == 0) {
-               return NT_STATUS_INTERNAL_ERROR;
-       }
+       NDR_CHECK(ndr_token_retrieve(&ndr->relative_list, p, &rel_offset));
        return ndr_pull_set_offset(ndr, rel_offset);
 }
 
@@ -727,22 +712,22 @@ NTSTATUS ndr_pull_relative2(struct ndr_pull *ndr, const void *p)
   push a relative object - stage1
   this is called during SCALARS processing
 */
-NTSTATUS ndr_push_relative1(struct ndr_push *ndr, const void *p)
+NTSTATUS ndr_push_relative_ptr1(struct ndr_push *ndr, const void *p)
 {
        if (p == NULL) {
-               NDR_CHECK(ndr_push_uint32(ndr, 0));
+               NDR_CHECK(ndr_push_uint32(ndr, NDR_SCALARS, 0));
                return NT_STATUS_OK;
        }
        NDR_CHECK(ndr_push_align(ndr, 4));
-       NDR_CHECK(ndr_token_store(ndr->mem_ctx, &ndr->relative_list, p, ndr->offset));
-       return ndr_push_uint32(ndr, 0xFFFFFFFF);
+       NDR_CHECK(ndr_token_store(ndr, &ndr->relative_list, p, ndr->offset));
+       return ndr_push_uint32(ndr, NDR_SCALARS, 0xFFFFFFFF);
 }
 
 /*
   push a relative object - stage2
   this is called during buffers processing
 */
-NTSTATUS ndr_push_relative2(struct ndr_push *ndr, const void *p)
+NTSTATUS ndr_push_relative_ptr2(struct ndr_push *ndr, const void *p)
 {
        struct ndr_push_save save;
        if (p == NULL) {
@@ -750,49 +735,56 @@ NTSTATUS ndr_push_relative2(struct ndr_push *ndr, const void *p)
        }
        NDR_CHECK(ndr_push_align(ndr, 4));
        ndr_push_save(ndr, &save);
-       ndr->offset = ndr_token_retrieve(&ndr->relative_list, p);
-       if (ndr->offset == 0) {
-               return NT_STATUS_INTERNAL_ERROR;
+       NDR_CHECK(ndr_token_retrieve(&ndr->relative_list, p, &ndr->offset));
+       if (ndr->flags & LIBNDR_FLAG_RELATIVE_CURRENT) {
+               NDR_CHECK(ndr_push_uint32(ndr, NDR_SCALARS, save.offset - ndr->offset));
+       } else {
+               NDR_CHECK(ndr_push_uint32(ndr, NDR_SCALARS, save.offset));
        }
-       NDR_CHECK(ndr_push_uint32(ndr, save.offset));
        ndr_push_restore(ndr, &save);
        return NT_STATUS_OK;
 }
 
-
 /*
-  pull a union from a blob using NDR
+  pull a struct from a blob using NDR
 */
-NTSTATUS ndr_pull_union_blob(DATA_BLOB *blob, TALLOC_CTX *mem_ctx, uint32_t level, void *p,
-                            NTSTATUS (*fn)(struct ndr_pull *, int ndr_flags, uint32_t, void *))
+NTSTATUS ndr_pull_struct_blob(const DATA_BLOB *blob, TALLOC_CTX *mem_ctx, void *p,
+                             ndr_pull_flags_fn_t fn)
 {
        struct ndr_pull *ndr;
        ndr = ndr_pull_init_blob(blob, mem_ctx);
        if (!ndr) {
                return NT_STATUS_NO_MEMORY;
        }
-       return fn(ndr, NDR_SCALARS|NDR_BUFFERS, level, p);
+       return fn(ndr, NDR_SCALARS|NDR_BUFFERS, p);
 }
 
 /*
-  pull a struct from a blob using NDR
+  pull a struct from a blob using NDR - failing if all bytes are not consumed
 */
-NTSTATUS ndr_pull_struct_blob(const DATA_BLOB *blob, TALLOC_CTX *mem_ctx, void *p,
-                             NTSTATUS (*fn)(struct ndr_pull *, int , void *))
+NTSTATUS ndr_pull_struct_blob_all(const DATA_BLOB *blob, TALLOC_CTX *mem_ctx, void *p,
+                                 ndr_pull_flags_fn_t fn)
 {
        struct ndr_pull *ndr;
+       NTSTATUS status;
+
        ndr = ndr_pull_init_blob(blob, mem_ctx);
        if (!ndr) {
                return NT_STATUS_NO_MEMORY;
        }
-       return fn(ndr, NDR_SCALARS|NDR_BUFFERS, p);
+       status = fn(ndr, NDR_SCALARS|NDR_BUFFERS, p);
+       if (!NT_STATUS_IS_OK(status)) return status;
+       if (ndr->offset != ndr->data_size) {
+               return NT_STATUS_BUFFER_TOO_SMALL;
+       }
+       return status;
 }
 
 /*
   push a struct to a blob using NDR
 */
 NTSTATUS ndr_push_struct_blob(DATA_BLOB *blob, TALLOC_CTX *mem_ctx, void *p,
-                             NTSTATUS (*fn)(struct ndr_push *, int , void *))
+                             ndr_push_flags_fn_t fn)
 {
        NTSTATUS status;
        struct ndr_push *ndr;
@@ -809,3 +801,52 @@ NTSTATUS ndr_push_struct_blob(DATA_BLOB *blob, TALLOC_CTX *mem_ctx, void *p,
 
        return NT_STATUS_OK;
 }
+
+/*
+  generic ndr_size_*() handler for structures
+*/
+size_t ndr_size_struct(const void *p, int flags, ndr_push_flags_fn_t push)
+{
+       struct ndr_push *ndr;
+       NTSTATUS status;
+       size_t ret;
+
+       /* avoid recursion */
+       if (flags & LIBNDR_FLAG_NO_NDR_SIZE) return 0;
+
+       ndr = ndr_push_init_ctx(NULL);
+       if (!ndr) return 0;
+       ndr->flags |= flags | LIBNDR_FLAG_NO_NDR_SIZE;
+       status = push(ndr, NDR_SCALARS|NDR_BUFFERS, discard_const(p));
+       if (!NT_STATUS_IS_OK(status)) {
+               return 0;
+       }
+       ret = ndr->offset;
+       talloc_free(ndr);
+       return ret;
+}
+
+/*
+  generic ndr_size_*() handler for unions
+*/
+size_t ndr_size_union(const void *p, int flags, uint32_t level, ndr_push_flags_fn_t push)
+{
+       struct ndr_push *ndr;
+       NTSTATUS status;
+       size_t ret;
+
+       /* avoid recursion */
+       if (flags & LIBNDR_FLAG_NO_NDR_SIZE) return 0;
+
+       ndr = ndr_push_init_ctx(NULL);
+       if (!ndr) return 0;
+       ndr->flags |= flags | LIBNDR_FLAG_NO_NDR_SIZE;
+       ndr_push_set_switch_value(ndr, p, level);
+       status = push(ndr, NDR_SCALARS|NDR_BUFFERS, discard_const(p));
+       if (!NT_STATUS_IS_OK(status)) {
+               return 0;
+       }
+       ret = ndr->offset;
+       talloc_free(ndr);
+       return ret;
+}