r21442: Allow more flexible data structure names.
[jelmer/samba4-debian.git] / source / pidl / lib / Parse / Pidl / Samba4 / NDR / Parser.pm
1 ###################################################
2 # Samba4 NDR parser generator for IDL structures
3 # Copyright tridge@samba.org 2000-2003
4 # Copyright tpot@samba.org 2001
5 # Copyright jelmer@samba.org 2004-2006
6 # released under the GNU GPL
7
8 package Parse::Pidl::Samba4::NDR::Parser;
9
10 require Exporter;
11 @ISA = qw(Exporter);
12 @EXPORT = qw(is_charset_array);
13 @EXPORT_OK = qw(check_null_pointer GenerateFunctionInEnv 
14    GenerateFunctionOutEnv EnvSubstituteValue GenerateStructEnv NeededFunction
15    NeededElement NeededType);
16
17 use strict;
18 use Parse::Pidl::Typelist qw(hasType getType mapTypeName);
19 use Parse::Pidl::Util qw(has_property ParseExpr ParseExprExt print_uuid);
20 use Parse::Pidl::NDR qw(GetPrevLevel GetNextLevel ContainsDeferred);
21 use Parse::Pidl::Samba4 qw(is_intree choose_header);
22 use Parse::Pidl qw(warning);
23
24 use vars qw($VERSION);
25 $VERSION = '0.01';
26
27 # list of known types
28 my %typefamily;
29
30 sub get_typefamily($)
31 {
32         my $n = shift;
33         return $typefamily{$n};
34 }
35
36 sub append_prefix($$)
37 {
38         my ($e, $var_name) = @_;
39         my $pointers = 0;
40
41         foreach my $l (@{$e->{LEVELS}}) {
42                 if ($l->{TYPE} eq "POINTER") {
43                         $pointers++;
44                 } elsif ($l->{TYPE} eq "ARRAY") {
45                         if (($pointers == 0) and 
46                             (not $l->{IS_FIXED}) and
47                             (not $l->{IS_INLINE})) {
48                                 return get_value_of($var_name); 
49                         }
50                 } elsif ($l->{TYPE} eq "DATA") {
51                         if (Parse::Pidl::Typelist::scalar_is_reference($l->{DATA_TYPE})) {
52                                 return get_value_of($var_name) unless ($pointers);
53                         }
54                 }
55         }
56         
57         return $var_name;
58 }
59
60 sub has_fast_array($$)
61 {
62         my ($e,$l) = @_;
63
64         return 0 if ($l->{TYPE} ne "ARRAY");
65
66         my $nl = GetNextLevel($e,$l);
67         return 0 unless ($nl->{TYPE} eq "DATA");
68         return 0 unless (hasType($nl->{DATA_TYPE}));
69
70         my $t = getType($nl->{DATA_TYPE});
71
72         # Only uint8 and string have fast array functions at the moment
73         return ($t->{NAME} eq "uint8") or ($t->{NAME} eq "string");
74 }
75
76 sub is_charset_array($$)
77 {
78         my ($e,$l) = @_;
79
80         return 0 if ($l->{TYPE} ne "ARRAY");
81
82         my $nl = GetNextLevel($e,$l);
83
84         return 0 unless ($nl->{TYPE} eq "DATA");
85
86         return has_property($e, "charset");
87 }
88
89 sub get_pointer_to($)
90 {
91         my $var_name = shift;
92         
93         if ($var_name =~ /^\*(.*)$/) {
94                 return $1;
95         } elsif ($var_name =~ /^\&(.*)$/) {
96                 return "&($var_name)";
97         } else {
98                 return "&$var_name";
99         }
100 }
101
102 sub get_value_of($)
103 {
104         my $var_name = shift;
105
106         if ($var_name =~ /^\&(.*)$/) {
107                 return $1;
108         } else {
109                 return "*$var_name";
110         }
111 }
112
113 my $res;
114 my $deferred = [];
115 my $tabs = "";
116
117 ####################################
118 # pidl() is our basic output routine
119 sub pidl($)
120 {
121         my $d = shift;
122         if ($d) {
123                 $res .= $tabs;
124                 $res .= $d;
125         }
126         $res .="\n";
127 }
128
129 my $res_hdr;
130
131 sub pidl_hdr ($) { my $d = shift; $res_hdr .= "$d\n"; }
132
133 ####################################
134 # defer() is like pidl(), but adds to 
135 # a deferred buffer which is then added to the 
136 # output buffer at the end of the structure/union/function
137 # This is needed to cope with code that must be pushed back
138 # to the end of a block of elements
139 my $defer_tabs = "";
140 sub defer_indent() { $defer_tabs.="\t"; }
141 sub defer_deindent() { $defer_tabs=substr($defer_tabs, 0, -1); }
142
143 sub defer($)
144 {
145         my $d = shift;
146         if ($d) {
147                 push(@$deferred, $defer_tabs.$d);
148         }
149 }
150
151 ########################################
152 # add the deferred content to the current
153 # output
154 sub add_deferred()
155 {
156         pidl $_ foreach (@$deferred);
157         $deferred = [];
158         $defer_tabs = "";
159 }
160
161 sub indent()
162 {
163         $tabs .= "\t";
164 }
165
166 sub deindent()
167 {
168         $tabs = substr($tabs, 0, -1);
169 }
170
171 #####################################################################
172 # declare a function public or static, depending on its attributes
173 sub fn_declare($$$)
174 {
175         my ($type,$fn,$decl) = @_;
176
177         if (has_property($fn, "no$type")) {
178                 pidl_hdr "$decl;";
179                 return 0;
180         }
181
182         if (has_property($fn, "public")) {
183                 pidl_hdr "$decl;";
184                 pidl "_PUBLIC_ $decl";
185         } else {
186                 pidl "static $decl";
187         }
188
189         return 1;
190 }
191
192 ###################################################################
193 # setup any special flags for an element or structure
194 sub start_flags($)
195 {
196         my $e = shift;
197         my $flags = has_property($e, "flag");
198         if (defined $flags) {
199                 pidl "{";
200                 indent;
201                 pidl "uint32_t _flags_save_$e->{TYPE} = ndr->flags;";
202                 pidl "ndr_set_flags(&ndr->flags, $flags);";
203         }
204 }
205
206 ###################################################################
207 # end any special flags for an element or structure
208 sub end_flags($)
209 {
210         my $e = shift;
211         my $flags = has_property($e, "flag");
212         if (defined $flags) {
213                 pidl "ndr->flags = _flags_save_$e->{TYPE};";
214                 deindent;
215                 pidl "}";
216         }
217 }
218
219 sub GenerateStructEnv($$)
220 {
221         my ($x, $v) = @_;
222         my %env;
223
224         foreach my $e (@{$x->{ELEMENTS}}) {
225                 $env{$e->{NAME}} = "$v->$e->{NAME}";
226         }
227
228         $env{"this"} = $v;
229
230         return \%env;
231 }
232
233 sub EnvSubstituteValue($$)
234 {
235         my ($env,$s) = @_;
236
237         # Substitute the value() values in the env
238         foreach my $e (@{$s->{ELEMENTS}}) {
239                 next unless (defined(my $v = has_property($e, "value")));
240                 
241                 $env->{$e->{NAME}} = ParseExpr($v, $env, $e);
242         }
243
244         return $env;
245 }
246
247 sub GenerateFunctionInEnv($)
248 {
249         my $fn = shift;
250         my %env;
251
252         foreach my $e (@{$fn->{ELEMENTS}}) {
253                 if (grep (/in/, @{$e->{DIRECTION}})) {
254                         $env{$e->{NAME}} = "r->in.$e->{NAME}";
255                 }
256         }
257
258         return \%env;
259 }
260
261 sub GenerateFunctionOutEnv($)
262 {
263         my $fn = shift;
264         my %env;
265
266         foreach my $e (@{$fn->{ELEMENTS}}) {
267                 if (grep (/out/, @{$e->{DIRECTION}})) {
268                         $env{$e->{NAME}} = "r->out.$e->{NAME}";
269                 } elsif (grep (/in/, @{$e->{DIRECTION}})) {
270                         $env{$e->{NAME}} = "r->in.$e->{NAME}";
271                 }
272         }
273
274         return \%env;
275 }
276
277 #####################################################################
278 # parse the data of an array - push side
279 sub ParseArrayPushHeader($$$$$)
280 {
281         my ($e,$l,$ndr,$var_name,$env) = @_;
282
283         my $size;
284         my $length;
285
286         if ($l->{IS_ZERO_TERMINATED}) {
287                 if (has_property($e, "charset")) {
288                         $size = $length = "ndr_charset_length($var_name, CH_$e->{PROPERTIES}->{charset})";
289                 } else {
290                         $size = $length = "ndr_string_length($var_name, sizeof(*$var_name))";
291                 }
292         } else {
293                 $size = ParseExpr($l->{SIZE_IS}, $env, $e);
294                 $length = ParseExpr($l->{LENGTH_IS}, $env, $e);
295         }
296
297         if ((!$l->{IS_SURROUNDING}) and $l->{IS_CONFORMANT}) {
298                 pidl "NDR_CHECK(ndr_push_uint32($ndr, NDR_SCALARS, $size));";
299         }
300         
301         if ($l->{IS_VARYING}) {
302                 pidl "NDR_CHECK(ndr_push_uint32($ndr, NDR_SCALARS, 0));";  # array offset
303                 pidl "NDR_CHECK(ndr_push_uint32($ndr, NDR_SCALARS, $length));";
304         } 
305
306         return $length;
307 }
308
309 sub check_fully_dereferenced($$)
310 {
311         my ($element, $env) = @_;
312
313         return sub ($) {
314                 my $origvar = shift;
315                 my $check = 0;
316
317                 # Figure out the number of pointers in $ptr
318                 my $expandedvar = $origvar;
319                 $expandedvar =~ s/^(\**)//;
320                 my $ptr = $1;
321
322                 my $var = undef;
323                 foreach (keys %$env) {
324                         if ($env->{$_} eq $expandedvar) {
325                                 $var = $_;
326                                 last;
327                         }
328                 }
329                 
330                 return($origvar) unless (defined($var));
331                 my $e;
332                 foreach (@{$element->{PARENT}->{ELEMENTS}}) {
333                         if ($_->{NAME} eq $var) {
334                                 $e = $_;
335                                 last;
336                         }
337                 }
338
339                 $e or die("Environment doesn't match siblings");
340
341                 # See if pointer at pointer level $level
342                 # needs to be checked.
343                 my $nump = 0;
344                 foreach (@{$e->{LEVELS}}) {
345                         if ($_->{TYPE} eq "POINTER") {
346                                 $nump = $_->{POINTER_INDEX}+1;
347                         }
348                 }
349                 warning($element->{ORIGINAL}, "Got pointer for `$e->{NAME}', expected fully derefenced variable") if ($nump > length($ptr));
350                 return ($origvar);
351         }
352 }       
353
354 sub check_null_pointer($$$$)
355 {
356         my ($element, $env, $print_fn, $return) = @_;
357
358         return sub ($) {
359                 my $expandedvar = shift;
360                 my $check = 0;
361
362                 # Figure out the number of pointers in $ptr
363                 $expandedvar =~ s/^(\**)//;
364                 my $ptr = $1;
365
366                 my $var = undef;
367                 foreach (keys %$env) {
368                         if ($env->{$_} eq $expandedvar) {
369                                 $var = $_;
370                                 last;
371                         }
372                 }
373                 
374                 if (defined($var)) {
375                         my $e;
376                         # lookup ptr in $e
377                         foreach (@{$element->{PARENT}->{ELEMENTS}}) {
378                                 if ($_->{NAME} eq $var) {
379                                         $e = $_;
380                                         last;
381                                 }
382                         }
383
384                         $e or die("Environment doesn't match siblings");
385
386                         # See if pointer at pointer level $level
387                         # needs to be checked.
388                         foreach my $l (@{$e->{LEVELS}}) {
389                                 if ($l->{TYPE} eq "POINTER" and 
390                                         $l->{POINTER_INDEX} == length($ptr)) {
391                                         # No need to check ref pointers
392                                         $check = ($l->{POINTER_TYPE} ne "ref");
393                                         last;
394                                 }
395
396                                 if ($l->{TYPE} eq "DATA") {
397                                         warning($element, "too much dereferences for `$var'");
398                                 }
399                         }
400                 } else {
401                         warning($element, "unknown dereferenced expression `$expandedvar'");
402                         $check = 1;
403                 }
404                 
405                 $print_fn->("if ($ptr$expandedvar == NULL) $return") if $check;
406         }
407 }
408
409 #####################################################################
410 # parse an array - pull side
411 sub ParseArrayPullHeader($$$$$)
412 {
413         my ($e,$l,$ndr,$var_name,$env) = @_;
414
415         my $length;
416         my $size;
417
418         if ($l->{IS_CONFORMANT}) {
419                 $length = $size = "ndr_get_array_size($ndr, " . get_pointer_to($var_name) . ")";
420         } elsif ($l->{IS_ZERO_TERMINATED}) { # Noheader arrays
421                 $length = $size = "ndr_get_string_size($ndr, sizeof(*$var_name))";
422         } else {
423                 $length = $size = ParseExprExt($l->{SIZE_IS}, $env, $e->{ORIGINAL}, 
424                     check_null_pointer($e, $env, \&pidl, "return NT_STATUS_INVALID_PARAMETER_MIX;"), check_fully_dereferenced($e, $env));
425         }
426
427         if ((!$l->{IS_SURROUNDING}) and $l->{IS_CONFORMANT}) {
428                 pidl "NDR_CHECK(ndr_pull_array_size(ndr, " . get_pointer_to($var_name) . "));";
429         }
430
431         if ($l->{IS_VARYING}) {
432                 pidl "NDR_CHECK(ndr_pull_array_length($ndr, " . get_pointer_to($var_name) . "));";
433                 $length = "ndr_get_array_length($ndr, " . get_pointer_to($var_name) .")";
434         }
435
436         if ($length ne $size) {
437                 pidl "if ($length > $size) {";
438                 indent;
439                 pidl "return ndr_pull_error($ndr, NDR_ERR_ARRAY_SIZE, \"Bad array size %u should exceed array length %u\", $size, $length);";
440                 deindent;
441                 pidl "}";
442         }
443
444         if ($l->{IS_CONFORMANT} and not $l->{IS_ZERO_TERMINATED}) {
445                 defer "if ($var_name) {";
446                 defer_indent;
447                 my $size = ParseExprExt($l->{SIZE_IS}, $env, $e->{ORIGINAL}, check_null_pointer($e, $env, \&defer, "return NT_STATUS_INVALID_PARAMETER_MIX;"), check_fully_dereferenced($e, $env));
448                 defer "NDR_CHECK(ndr_check_array_size(ndr, (void*)" . get_pointer_to($var_name) . ", $size));";
449                 defer_deindent;
450                 defer "}";
451         }
452
453         if ($l->{IS_VARYING} and not $l->{IS_ZERO_TERMINATED}) {
454                 defer "if ($var_name) {";
455                 defer_indent;
456                 my $length = ParseExprExt($l->{LENGTH_IS}, $env, $e->{ORIGINAL}, 
457                         check_null_pointer($e, $env, \&defer, "return NT_STATUS_INVALID_PARAMETER_MIX;"), 
458                         check_fully_dereferenced($e, $env));
459                 defer "NDR_CHECK(ndr_check_array_length(ndr, (void*)" . get_pointer_to($var_name) . ", $length));";
460                 defer_deindent;
461                 defer "}"
462         }
463
464         if (not $l->{IS_FIXED} and not is_charset_array($e, $l)) {
465                 AllocateArrayLevel($e,$l,$ndr,$env,$size);
466         }
467
468         return $length;
469 }
470
471 sub compression_alg($$)
472 {
473         my ($e, $l) = @_;
474         my ($alg, $clen, $dlen) = split(/ /, $l->{COMPRESSION});
475
476         return $alg;
477 }
478
479 sub compression_clen($$$)
480 {
481         my ($e, $l, $env) = @_;
482         my ($alg, $clen, $dlen) = split(/ /, $l->{COMPRESSION});
483
484         return ParseExpr($clen, $env, $e->{ORIGINAL});
485 }
486
487 sub compression_dlen($$$)
488 {
489         my ($e,$l,$env) = @_;
490         my ($alg, $clen, $dlen) = split(/ /, $l->{COMPRESSION});
491
492         return ParseExpr($dlen, $env, $e->{ORIGINAL});
493 }
494
495 sub ParseCompressionPushStart($$$$)
496 {
497         my ($e,$l,$ndr,$env) = @_;
498         my $comndr = "$ndr\_compressed";
499         my $alg = compression_alg($e, $l);
500         my $dlen = compression_dlen($e, $l, $env);
501
502         pidl "{";
503         indent;
504         pidl "struct ndr_push *$comndr;";
505         pidl "NDR_CHECK(ndr_push_compression_start($ndr, &$comndr, $alg, $dlen));";
506
507         return $comndr;
508 }
509
510 sub ParseCompressionPushEnd($$$$)
511 {
512         my ($e,$l,$ndr,$env) = @_;
513         my $comndr = "$ndr\_compressed";
514         my $alg = compression_alg($e, $l);
515         my $dlen = compression_dlen($e, $l, $env);
516
517         pidl "NDR_CHECK(ndr_push_compression_end($ndr, $comndr, $alg, $dlen));";
518         deindent;
519         pidl "}";
520 }
521
522 sub ParseCompressionPullStart($$$$)
523 {
524         my ($e,$l,$ndr,$env) = @_;
525         my $comndr = "$ndr\_compressed";
526         my $alg = compression_alg($e, $l);
527         my $dlen = compression_dlen($e, $l, $env);
528
529         pidl "{";
530         indent;
531         pidl "struct ndr_pull *$comndr;";
532         pidl "NDR_CHECK(ndr_pull_compression_start($ndr, &$comndr, $alg, $dlen));";
533
534         return $comndr;
535 }
536
537 sub ParseCompressionPullEnd($$$$)
538 {
539         my ($e,$l,$ndr,$env) = @_;
540         my $comndr = "$ndr\_compressed";
541         my $alg = compression_alg($e, $l);
542         my $dlen = compression_dlen($e, $l, $env);
543
544         pidl "NDR_CHECK(ndr_pull_compression_end($ndr, $comndr, $alg, $dlen));";
545         deindent;
546         pidl "}";
547 }
548
549 sub ParseSubcontextPushStart($$$$)
550 {
551         my ($e,$l,$ndr,$env) = @_;
552         my $subndr = "_ndr_$e->{NAME}";
553         my $subcontext_size = ParseExpr($l->{SUBCONTEXT_SIZE}, $env, $e->{ORIGINAL});
554
555         pidl "{";
556         indent;
557         pidl "struct ndr_push *$subndr;";
558         pidl "NDR_CHECK(ndr_push_subcontext_start($ndr, &$subndr, $l->{HEADER_SIZE}, $subcontext_size));";
559
560         if (defined $l->{COMPRESSION}) {
561                 $subndr = ParseCompressionPushStart($e, $l, $subndr, $env);
562         }
563
564         return $subndr;
565 }
566
567 sub ParseSubcontextPushEnd($$$$)
568 {
569         my ($e,$l,$ndr,$env) = @_;
570         my $subndr = "_ndr_$e->{NAME}";
571         my $subcontext_size = ParseExpr($l->{SUBCONTEXT_SIZE}, $env, $e->{ORIGINAL});
572
573         if (defined $l->{COMPRESSION}) {
574                 ParseCompressionPushEnd($e, $l, $subndr, $env);
575         }
576
577         pidl "NDR_CHECK(ndr_push_subcontext_end($ndr, $subndr, $l->{HEADER_SIZE}, $subcontext_size));";
578         deindent;
579         pidl "}";
580 }
581
582 sub ParseSubcontextPullStart($$$$)
583 {
584         my ($e,$l,$ndr,$env) = @_;
585         my $subndr = "_ndr_$e->{NAME}";
586         my $subcontext_size = ParseExpr($l->{SUBCONTEXT_SIZE}, $env, $e->{ORIGINAL});
587
588         pidl "{";
589         indent;
590         pidl "struct ndr_pull *$subndr;";
591         pidl "NDR_CHECK(ndr_pull_subcontext_start($ndr, &$subndr, $l->{HEADER_SIZE}, $subcontext_size));";
592
593         if (defined $l->{COMPRESSION}) {
594                 $subndr = ParseCompressionPullStart($e, $l, $subndr, $env);
595         }
596
597         return $subndr;
598 }
599
600 sub ParseSubcontextPullEnd($$$$)
601 {
602         my ($e,$l,$ndr,$env) = @_;
603         my $subndr = "_ndr_$e->{NAME}";
604         my $subcontext_size = ParseExpr($l->{SUBCONTEXT_SIZE}, $env, $e->{ORIGINAL});
605
606         if (defined $l->{COMPRESSION}) {
607                 ParseCompressionPullEnd($e, $l, $subndr, $env);
608         }
609
610         pidl "NDR_CHECK(ndr_pull_subcontext_end($ndr, $subndr, $l->{HEADER_SIZE}, $subcontext_size));";
611         deindent;
612         pidl "}";
613 }
614
615 sub ParseElementPushLevel
616 {
617         my ($e,$l,$ndr,$var_name,$env,$primitives,$deferred) = @_;
618
619         my $ndr_flags = CalcNdrFlags($l, $primitives, $deferred);
620
621         if ($l->{TYPE} eq "ARRAY" and ($l->{IS_CONFORMANT} or $l->{IS_VARYING})) {
622                 $var_name = get_pointer_to($var_name);
623         }
624
625         if (defined($ndr_flags)) {
626                 if ($l->{TYPE} eq "SUBCONTEXT") {
627                         my $subndr = ParseSubcontextPushStart($e, $l, $ndr, $env);
628                         ParseElementPushLevel($e, GetNextLevel($e, $l), $subndr, $var_name, $env, 1, 1);
629                         ParseSubcontextPushEnd($e, $l, $ndr, $env);
630                 } elsif ($l->{TYPE} eq "POINTER") {
631                         ParsePtrPush($e, $l, $var_name);
632                 } elsif ($l->{TYPE} eq "ARRAY") {
633                         my $length = ParseArrayPushHeader($e, $l, $ndr, $var_name, $env); 
634
635                         my $nl = GetNextLevel($e, $l);
636
637                         # Allow speedups for arrays of scalar types
638                         if (is_charset_array($e,$l)) {
639                                 pidl "NDR_CHECK(ndr_push_charset($ndr, $ndr_flags, $var_name, $length, sizeof(" . mapTypeName($nl->{DATA_TYPE}) . "), CH_$e->{PROPERTIES}->{charset}));";
640                                 return;
641                         } elsif (has_fast_array($e,$l)) {
642                                 pidl "NDR_CHECK(ndr_push_array_$nl->{DATA_TYPE}($ndr, $ndr_flags, $var_name, $length));";
643                                 return;
644                         } 
645                 } elsif ($l->{TYPE} eq "SWITCH") {
646                         ParseSwitchPush($e, $l, $ndr, $var_name, $ndr_flags, $env);
647                 } elsif ($l->{TYPE} eq "DATA") {
648                         ParseDataPush($e, $l, $ndr, $var_name, $ndr_flags);
649                 }
650         }
651
652         if ($l->{TYPE} eq "POINTER" and $deferred) {
653                 if ($l->{POINTER_TYPE} ne "ref") {
654                         pidl "if ($var_name) {";
655                         indent;
656                         if ($l->{POINTER_TYPE} eq "relative") {
657                                 pidl "NDR_CHECK(ndr_push_relative_ptr2(ndr, $var_name));";
658                         }
659                 }
660                 $var_name = get_value_of($var_name);
661                 ParseElementPushLevel($e, GetNextLevel($e, $l), $ndr, $var_name, $env, 1, 1);
662
663                 if ($l->{POINTER_TYPE} ne "ref") {
664                         deindent;
665                         pidl "}";
666                 }
667         } elsif ($l->{TYPE} eq "ARRAY" and not has_fast_array($e,$l) and
668                 not is_charset_array($e, $l)) {
669                 my $length = ParseExpr($l->{LENGTH_IS}, $env, $e->{ORIGINAL});
670                 my $counter = "cntr_$e->{NAME}_$l->{LEVEL_INDEX}";
671
672                 $var_name = $var_name . "[$counter]";
673
674                 if (($primitives and not $l->{IS_DEFERRED}) or ($deferred and $l->{IS_DEFERRED})) {
675                         pidl "for ($counter = 0; $counter < $length; $counter++) {";
676                         indent;
677                         ParseElementPushLevel($e, GetNextLevel($e, $l), $ndr, $var_name, $env, 1, 0);
678                         deindent;
679                         pidl "}";
680                 }
681
682                 if ($deferred and ContainsDeferred($e, $l)) {
683                         pidl "for ($counter = 0; $counter < $length; $counter++) {";
684                         indent;
685                         ParseElementPushLevel($e, GetNextLevel($e, $l), $ndr, $var_name, $env, 0, 1);
686                         deindent;
687                         pidl "}";
688                 }       
689         } elsif ($l->{TYPE} eq "SWITCH") {
690                 ParseElementPushLevel($e, GetNextLevel($e, $l), $ndr, $var_name, $env, $primitives, $deferred);
691         }
692 }
693
694 #####################################################################
695 # parse scalars in a structure element
696 sub ParseElementPush($$$$$)
697 {
698         my ($e,$ndr,$env,$primitives,$deferred) = @_;
699         my $subndr = undef;
700
701         my $var_name = $env->{$e->{NAME}};
702
703         return unless $primitives or ($deferred and ContainsDeferred($e, $e->{LEVELS}[0]));
704
705         # Representation type is different from transmit_as
706         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE}) {
707                 pidl "{";
708                 indent;
709                 my $transmit_name = "_transmit_$e->{NAME}";
710                 pidl mapTypeName($e->{TYPE}) ." $transmit_name;";
711                 pidl "NDR_CHECK(ndr_$e->{REPRESENTATION_TYPE}_to_$e->{TYPE}($var_name, " . get_pointer_to($transmit_name) . "));";
712                 $var_name = $transmit_name;
713         }
714
715         $var_name = append_prefix($e, $var_name);
716
717         start_flags($e);
718
719         if (defined(my $value = has_property($e, "value"))) {
720                 $var_name = ParseExpr($value, $env, $e->{ORIGINAL});
721         }
722
723         ParseElementPushLevel($e, $e->{LEVELS}[0], $ndr, $var_name, $env, $primitives, $deferred);
724
725         end_flags($e);
726
727         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE}) {
728                 deindent;
729                 pidl "}";
730         }
731 }
732
733 #####################################################################
734 # parse a pointer in a struct element or function
735 sub ParsePtrPush($$$)
736 {
737         my ($e,$l,$var_name) = @_;
738
739         if ($l->{POINTER_TYPE} eq "ref") {
740                 pidl "if ($var_name == NULL) return NT_STATUS_INVALID_PARAMETER_MIX;";
741                 if ($l->{LEVEL} eq "EMBEDDED") {
742                         pidl "NDR_CHECK(ndr_push_ref_ptr(ndr));";
743                 }
744         } elsif ($l->{POINTER_TYPE} eq "relative") {
745                 pidl "NDR_CHECK(ndr_push_relative_ptr1(ndr, $var_name));";
746         } elsif ($l->{POINTER_TYPE} eq "unique") {
747                 pidl "NDR_CHECK(ndr_push_unique_ptr(ndr, $var_name));";
748         } elsif ($l->{POINTER_TYPE} eq "full") {
749                 pidl "NDR_CHECK(ndr_push_full_ptr(ndr, $var_name));";
750         } else {
751                 die("Unhandled pointer type $l->{POINTER_TYPE}");
752         }
753 }
754
755 #####################################################################
756 # print scalars in a structure element
757 sub ParseElementPrint($$$)
758 {
759         my($e, $var_name, $env) = @_;
760
761         return if (has_property($e, "noprint"));
762
763         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE}) {
764                 pidl "ndr_print_$e->{REPRESENTATION_TYPE}(ndr, \"$e->{NAME}\", $var_name);";
765                 return;
766         }
767
768         $var_name = append_prefix($e, $var_name);
769
770         if (defined(my $value = has_property($e, "value"))) {
771                 $var_name = "(ndr->flags & LIBNDR_PRINT_SET_VALUES)?" . ParseExpr($value,$env, $e->{ORIGINAL}) . ":$var_name";
772         }
773
774         foreach my $l (@{$e->{LEVELS}}) {
775                 if ($l->{TYPE} eq "POINTER") {
776                         pidl "ndr_print_ptr(ndr, \"$e->{NAME}\", $var_name);";
777                         pidl "ndr->depth++;";
778                         if ($l->{POINTER_TYPE} ne "ref") {
779                                 pidl "if ($var_name) {";
780                                 indent;
781                         }
782                         $var_name = get_value_of($var_name);
783                 } elsif ($l->{TYPE} eq "ARRAY") {
784                         my $length;
785
786                         if ($l->{IS_CONFORMANT} or $l->{IS_VARYING}) {
787                                 $var_name = get_pointer_to($var_name); 
788                         }
789                         
790                         if ($l->{IS_ZERO_TERMINATED}) {
791                                 $length = "ndr_string_length($var_name, sizeof(*$var_name))";
792                         } else {
793                                 $length = ParseExprExt($l->{LENGTH_IS}, $env, $e->{ORIGINAL}, 
794                                                         check_null_pointer($e, $env, \&pidl, "return;"), check_fully_dereferenced($e, $env));
795                         }
796
797                         if (is_charset_array($e,$l)) {
798                                 pidl "ndr_print_string(ndr, \"$e->{NAME}\", $var_name);";
799                                 last;
800                         } elsif (has_fast_array($e, $l)) {
801                                 my $nl = GetNextLevel($e, $l);
802                                 pidl "ndr_print_array_$nl->{DATA_TYPE}(ndr, \"$e->{NAME}\", $var_name, $length);";
803                                 last;
804                         } else {
805                                 my $counter = "cntr_$e->{NAME}_$l->{LEVEL_INDEX}";
806
807                                 pidl "ndr->print(ndr, \"\%s: ARRAY(\%d)\", \"$e->{NAME}\", $length);";
808                                 pidl 'ndr->depth++;';
809                                 pidl "for ($counter=0;$counter<$length;$counter++) {";
810                                 indent;
811                                 pidl "char *idx_$l->{LEVEL_INDEX}=NULL;";
812                                 pidl "asprintf(&idx_$l->{LEVEL_INDEX}, \"[\%d]\", $counter);";
813                                 pidl "if (idx_$l->{LEVEL_INDEX}) {";
814                                 indent;
815
816                                 $var_name = $var_name . "[$counter]";
817                         }
818                 } elsif ($l->{TYPE} eq "DATA") {
819                         if (not Parse::Pidl::Typelist::is_scalar($l->{DATA_TYPE}) or Parse::Pidl::Typelist::scalar_is_reference($l->{DATA_TYPE})) {
820                                 $var_name = get_pointer_to($var_name);
821                         }
822                         pidl "ndr_print_$l->{DATA_TYPE}(ndr, \"$e->{NAME}\", $var_name);";
823                 } elsif ($l->{TYPE} eq "SWITCH") {
824                         my $switch_var = ParseExprExt($l->{SWITCH_IS}, $env, $e->{ORIGINAL}, 
825                                                 check_null_pointer($e, $env, \&pidl, "return;"), check_fully_dereferenced($e, $env));
826                         pidl "ndr_print_set_switch_value(ndr, " . get_pointer_to($var_name) . ", $switch_var);";
827                 } 
828         }
829
830         foreach my $l (reverse @{$e->{LEVELS}}) {
831                 if ($l->{TYPE} eq "POINTER") {
832                         if ($l->{POINTER_TYPE} ne "ref") {
833                                 deindent;
834                                 pidl "}";
835                         }
836                         pidl "ndr->depth--;";
837                 } elsif (($l->{TYPE} eq "ARRAY")
838                         and not is_charset_array($e,$l)
839                         and not has_fast_array($e,$l)) {
840                         pidl "free(idx_$l->{LEVEL_INDEX});";
841                         deindent;
842                         pidl "}";
843                         deindent;
844                         pidl "}";
845                         pidl "ndr->depth--;";
846                 }
847         }
848 }
849
850 #####################################################################
851 # parse scalars in a structure element - pull size
852 sub ParseSwitchPull($$$$$$)
853 {
854         my($e,$l,$ndr,$var_name,$ndr_flags,$env) = @_;
855         my $switch_var = ParseExprExt($l->{SWITCH_IS}, $env, $e->{ORIGINAL}, 
856                 check_null_pointer($e, $env, \&pidl, "return NT_STATUS_INVALID_PARAMETER_MIX;"), check_fully_dereferenced($e, $env));
857
858         $var_name = get_pointer_to($var_name);
859         pidl "NDR_CHECK(ndr_pull_set_switch_value($ndr, $var_name, $switch_var));";
860 }
861
862 #####################################################################
863 # push switch element
864 sub ParseSwitchPush($$$$$$)
865 {
866         my($e,$l,$ndr,$var_name,$ndr_flags,$env) = @_;
867         my $switch_var = ParseExprExt($l->{SWITCH_IS}, $env, $e->{ORIGINAL}, 
868                 check_null_pointer($e, $env, \&pidl, "return NT_STATUS_INVALID_PARAMETER_MIX;"), check_fully_dereferenced($e, $env));
869
870         $var_name = get_pointer_to($var_name);
871         pidl "NDR_CHECK(ndr_push_set_switch_value($ndr, $var_name, $switch_var));";
872 }
873
874 sub ParseDataPull($$$$$)
875 {
876         my ($e,$l,$ndr,$var_name,$ndr_flags) = @_;
877
878         if (Parse::Pidl::Typelist::scalar_is_reference($l->{DATA_TYPE})) {
879                 $var_name = get_pointer_to($var_name);
880         }
881
882         $var_name = get_pointer_to($var_name);
883
884         pidl "NDR_CHECK(ndr_pull_$l->{DATA_TYPE}($ndr, $ndr_flags, $var_name));";
885
886         if (my $range = has_property($e, "range")) {
887                 $var_name = get_value_of($var_name);
888                 my ($low, $high) = split(/ /, $range, 2);
889                 pidl "if ($var_name < $low || $var_name > $high) {";
890                 pidl "\treturn ndr_pull_error($ndr, NDR_ERR_RANGE, \"value out of range\");";
891                 pidl "}";
892         }
893 }
894
895 sub ParseDataPush($$$$$)
896 {
897         my ($e,$l,$ndr,$var_name,$ndr_flags) = @_;
898
899         # strings are passed by value rather than reference
900         if (not Parse::Pidl::Typelist::is_scalar($l->{DATA_TYPE}) or Parse::Pidl::Typelist::scalar_is_reference($l->{DATA_TYPE})) {
901                 $var_name = get_pointer_to($var_name);
902         }
903
904         pidl "NDR_CHECK(ndr_push_$l->{DATA_TYPE}($ndr, $ndr_flags, $var_name));";
905 }
906
907 sub CalcNdrFlags($$$)
908 {
909         my ($l,$primitives,$deferred) = @_;
910
911         my $scalars = 0;
912         my $buffers = 0;
913
914         # Add NDR_SCALARS if this one is deferred 
915         # and deferreds may be pushed
916         $scalars = 1 if ($l->{IS_DEFERRED} and $deferred);
917
918         # Add NDR_SCALARS if this one is not deferred and 
919         # primitives may be pushed
920         $scalars = 1 if (!$l->{IS_DEFERRED} and $primitives);
921         
922         # Add NDR_BUFFERS if this one contains deferred stuff
923         # and deferreds may be pushed
924         $buffers = 1 if ($l->{CONTAINS_DEFERRED} and $deferred);
925
926         return "NDR_SCALARS|NDR_BUFFERS" if ($scalars and $buffers);
927         return "NDR_SCALARS" if ($scalars);
928         return "NDR_BUFFERS" if ($buffers);
929         return undef;
930 }
931
932 sub ParseMemCtxPullStart($$$)
933 {
934         my ($e, $l, $ptr_name) = @_;
935
936         my $mem_r_ctx = "_mem_save_$e->{NAME}_$l->{LEVEL_INDEX}";
937         my $mem_c_ctx = $ptr_name;
938         my $mem_c_flags = "0";
939
940         return if ($l->{TYPE} eq "ARRAY" and $l->{IS_FIXED});
941
942         if (($l->{TYPE} eq "POINTER") and ($l->{POINTER_TYPE} eq "ref")) {
943                 my $nl = GetNextLevel($e, $l);
944                 my $next_is_array = ($nl->{TYPE} eq "ARRAY");
945                 my $next_is_string = (($nl->{TYPE} eq "DATA") and 
946                                         ($nl->{DATA_TYPE} eq "string"));
947                 if ($next_is_array or $next_is_string) {
948                         return;
949                 } else {
950                         $mem_c_flags = "LIBNDR_FLAG_REF_ALLOC";
951                 }
952         }
953
954         pidl "$mem_r_ctx = NDR_PULL_GET_MEM_CTX(ndr);";
955         pidl "NDR_PULL_SET_MEM_CTX(ndr, $mem_c_ctx, $mem_c_flags);";
956 }
957
958 sub ParseMemCtxPullEnd($$)
959 {
960         my $e = shift;
961         my $l = shift;
962
963         my $mem_r_ctx = "_mem_save_$e->{NAME}_$l->{LEVEL_INDEX}";
964         my $mem_r_flags = "0";
965
966         return if ($l->{TYPE} eq "ARRAY" and $l->{IS_FIXED});
967
968         if (($l->{TYPE} eq "POINTER") and ($l->{POINTER_TYPE} eq "ref")) {
969                 my $nl = GetNextLevel($e, $l);
970                 my $next_is_array = ($nl->{TYPE} eq "ARRAY");
971                 my $next_is_string = (($nl->{TYPE} eq "DATA") and 
972                                         ($nl->{DATA_TYPE} eq "string"));
973                 if ($next_is_array or $next_is_string) {
974                         return;
975                 } else {
976                         $mem_r_flags = "LIBNDR_FLAG_REF_ALLOC";
977                 }
978         }
979
980         pidl "NDR_PULL_SET_MEM_CTX(ndr, $mem_r_ctx, $mem_r_flags);";
981 }
982
983 sub CheckStringTerminator($$$$)
984 {
985         my ($ndr,$e,$l,$length) = @_;
986         my $nl = GetNextLevel($e, $l);
987
988         # Make sure last element is zero!
989         pidl "NDR_CHECK(ndr_check_string_terminator($ndr, $length, sizeof($nl->{DATA_TYPE}_t)));";
990 }
991
992 sub ParseElementPullLevel
993 {
994         my($e,$l,$ndr,$var_name,$env,$primitives,$deferred) = @_;
995
996         my $ndr_flags = CalcNdrFlags($l, $primitives, $deferred);
997
998         if ($l->{TYPE} eq "ARRAY" and ($l->{IS_VARYING} or $l->{IS_CONFORMANT})) {
999                 $var_name = get_pointer_to($var_name);
1000         }
1001
1002         # Only pull something if there's actually something to be pulled
1003         if (defined($ndr_flags)) {
1004                 if ($l->{TYPE} eq "SUBCONTEXT") {
1005                         my $subndr = ParseSubcontextPullStart($e, $l, $ndr, $env);
1006                         ParseElementPullLevel($e, GetNextLevel($e,$l), $subndr, $var_name, $env, 1, 1);
1007                         ParseSubcontextPullEnd($e, $l, $ndr, $env);
1008                 } elsif ($l->{TYPE} eq "ARRAY") {
1009                         my $length = ParseArrayPullHeader($e, $l, $ndr, $var_name, $env);
1010
1011                         my $nl = GetNextLevel($e, $l);
1012
1013                         if (is_charset_array($e,$l)) {
1014                                 if ($l->{IS_ZERO_TERMINATED}) {
1015                                         CheckStringTerminator($ndr, $e, $l, $length);
1016                                 }
1017                                 pidl "NDR_CHECK(ndr_pull_charset($ndr, $ndr_flags, ".get_pointer_to($var_name).", $length, sizeof(" . mapTypeName($nl->{DATA_TYPE}) . "), CH_$e->{PROPERTIES}->{charset}));";
1018                                 return;
1019                         } elsif (has_fast_array($e, $l)) {
1020                                 if ($l->{IS_ZERO_TERMINATED}) {
1021                                         CheckStringTerminator($ndr,$e,$l,$length);
1022                                 }
1023                                 pidl "NDR_CHECK(ndr_pull_array_$nl->{DATA_TYPE}($ndr, $ndr_flags, $var_name, $length));";
1024                                 return;
1025                         }
1026                 } elsif ($l->{TYPE} eq "POINTER") {
1027                         ParsePtrPull($e, $l, $ndr, $var_name);
1028                 } elsif ($l->{TYPE} eq "SWITCH") {
1029                         ParseSwitchPull($e, $l, $ndr, $var_name, $ndr_flags, $env);
1030                 } elsif ($l->{TYPE} eq "DATA") {
1031                         ParseDataPull($e, $l, $ndr, $var_name, $ndr_flags);
1032                 }
1033         }
1034
1035         # add additional constructions
1036         if ($l->{TYPE} eq "POINTER" and $deferred) {
1037                 if ($l->{POINTER_TYPE} ne "ref") {
1038                         pidl "if ($var_name) {";
1039                         indent;
1040
1041                         if ($l->{POINTER_TYPE} eq "relative") {
1042                                 pidl "struct ndr_pull_save _relative_save;";
1043                                 pidl "ndr_pull_save(ndr, &_relative_save);";
1044                                 pidl "NDR_CHECK(ndr_pull_relative_ptr2(ndr, $var_name));";
1045                         }
1046                 }
1047
1048                 ParseMemCtxPullStart($e, $l, $var_name);
1049
1050                 $var_name = get_value_of($var_name);
1051                 ParseElementPullLevel($e, GetNextLevel($e,$l), $ndr, $var_name, $env, 1, 1);
1052
1053                 ParseMemCtxPullEnd($e,$l);
1054
1055                 if ($l->{POINTER_TYPE} ne "ref") {
1056                         if ($l->{POINTER_TYPE} eq "relative") {
1057                                 pidl "ndr_pull_restore(ndr, &_relative_save);";
1058                         }
1059                         deindent;
1060                         pidl "}";
1061                 }
1062         } elsif ($l->{TYPE} eq "ARRAY" and 
1063                         not has_fast_array($e,$l) and not is_charset_array($e, $l)) {
1064                 my $length = ParseExpr($l->{LENGTH_IS}, $env, $e->{ORIGINAL});
1065                 my $counter = "cntr_$e->{NAME}_$l->{LEVEL_INDEX}";
1066                 my $array_name = $var_name;
1067
1068                 $var_name = $var_name . "[$counter]";
1069
1070                 ParseMemCtxPullStart($e, $l, $array_name);
1071
1072                 if (($primitives and not $l->{IS_DEFERRED}) or ($deferred and $l->{IS_DEFERRED})) {
1073                         my $nl = GetNextLevel($e,$l);
1074
1075                         if ($l->{IS_ZERO_TERMINATED}) {
1076                                 CheckStringTerminator($ndr,$e,$l,$length);
1077                         }
1078
1079                         pidl "for ($counter = 0; $counter < $length; $counter++) {";
1080                         indent;
1081                         ParseElementPullLevel($e, $nl, $ndr, $var_name, $env, 1, 0);
1082                         deindent;
1083                         pidl "}";
1084                 }
1085
1086                 if ($deferred and ContainsDeferred($e, $l)) {
1087                         pidl "for ($counter = 0; $counter < $length; $counter++) {";
1088                         indent;
1089                         ParseElementPullLevel($e,GetNextLevel($e,$l), $ndr, $var_name, $env, 0, 1);
1090                         deindent;
1091                         pidl "}";
1092                 }
1093
1094                 ParseMemCtxPullEnd($e, $l);
1095
1096         } elsif ($l->{TYPE} eq "SWITCH") {
1097                 ParseElementPullLevel($e, GetNextLevel($e,$l), $ndr, $var_name, $env, $primitives, $deferred);
1098         }
1099 }
1100
1101 #####################################################################
1102 # parse scalars in a structure element - pull size
1103 sub ParseElementPull($$$$$)
1104 {
1105         my($e,$ndr,$env,$primitives,$deferred) = @_;
1106
1107         my $var_name = $env->{$e->{NAME}};
1108         my $represent_name;
1109         my $transmit_name;
1110
1111         return unless $primitives or ($deferred and ContainsDeferred($e, $e->{LEVELS}[0]));
1112
1113         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE}) {
1114                 pidl "{";
1115                 indent;
1116                 $represent_name = $var_name;
1117                 $transmit_name = "_transmit_$e->{NAME}";
1118                 $var_name = $transmit_name;
1119                 pidl mapTypeName($e->{TYPE})." $var_name;";
1120         }
1121
1122         $var_name = append_prefix($e, $var_name);
1123
1124         start_flags($e);
1125
1126         ParseElementPullLevel($e,$e->{LEVELS}[0],$ndr,$var_name,$env,$primitives,$deferred);
1127
1128         end_flags($e);
1129
1130         # Representation type is different from transmit_as
1131         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE}) {
1132                 pidl "NDR_CHECK(ndr_$e->{TYPE}_to_$e->{REPRESENTATION_TYPE}($transmit_name, ".get_pointer_to($represent_name)."));";
1133                 deindent;
1134                 pidl "}";
1135         }
1136 }
1137
1138 #####################################################################
1139 # parse a pointer in a struct element or function
1140 sub ParsePtrPull($$$$)
1141 {
1142         my($e,$l,$ndr,$var_name) = @_;
1143
1144         my $nl = GetNextLevel($e, $l);
1145         my $next_is_array = ($nl->{TYPE} eq "ARRAY");
1146         my $next_is_string = (($nl->{TYPE} eq "DATA") and 
1147                                                  ($nl->{DATA_TYPE} eq "string"));
1148
1149         if ($l->{POINTER_TYPE} eq "ref") {
1150                 if ($l->{LEVEL} eq "EMBEDDED") {
1151                         pidl "NDR_CHECK(ndr_pull_ref_ptr($ndr, &_ptr_$e->{NAME}));";
1152                 }
1153
1154                 if (!$next_is_array and !$next_is_string) {
1155                         pidl "if (ndr->flags & LIBNDR_FLAG_REF_ALLOC) {";
1156                         pidl "\tNDR_PULL_ALLOC($ndr, $var_name);"; 
1157                         pidl "}";
1158                 }
1159                 
1160                 return;
1161         } elsif (($l->{POINTER_TYPE} eq "unique") or 
1162                  ($l->{POINTER_TYPE} eq "relative") or
1163                  ($l->{POINTER_TYPE} eq "full")) {
1164                 pidl "NDR_CHECK(ndr_pull_generic_ptr($ndr, &_ptr_$e->{NAME}));";
1165                 pidl "if (_ptr_$e->{NAME}) {";
1166                 indent;
1167         } else {
1168                 die("Unhandled pointer type $l->{POINTER_TYPE}");
1169         }
1170
1171         # Don't do this for arrays, they're allocated at the actual level 
1172         # of the array
1173         unless ($next_is_array or $next_is_string) { 
1174                 pidl "NDR_PULL_ALLOC($ndr, $var_name);"; 
1175         } else {
1176                 # FIXME: Yes, this is nasty.
1177                 # We allocate an array twice
1178                 # - once just to indicate that it's there,
1179                 # - then the real allocation...
1180                 pidl "NDR_PULL_ALLOC($ndr, $var_name);";
1181         }
1182
1183         #pidl "memset($var_name, 0, sizeof($var_name));";
1184         if ($l->{POINTER_TYPE} eq "relative") {
1185                 pidl "NDR_CHECK(ndr_pull_relative_ptr1($ndr, $var_name, _ptr_$e->{NAME}));";
1186         }
1187         deindent;
1188         pidl "} else {";
1189         pidl "\t$var_name = NULL;";
1190         pidl "}";
1191 }
1192
1193 #####################################################################
1194 # parse a struct
1195 sub ParseStructPush($$$)
1196 {
1197         my ($struct, $name, $varname) = @_;
1198         
1199         return unless defined($struct->{ELEMENTS});
1200
1201         my $env = GenerateStructEnv($struct, $varname);
1202
1203         EnvSubstituteValue($env, $struct);
1204
1205         # save the old relative_base_offset
1206         pidl "uint32_t _save_relative_base_offset = ndr_push_get_relative_base_offset(ndr);" if defined($struct->{PROPERTIES}{relative_base});
1207
1208         foreach my $e (@{$struct->{ELEMENTS}}) { 
1209                 DeclareArrayVariables($e);
1210         }
1211
1212         start_flags($struct);
1213
1214         # see if the structure contains a conformant array. If it
1215         # does, then it must be the last element of the structure, and
1216         # we need to push the conformant length early, as it fits on
1217         # the wire before the structure (and even before the structure
1218         # alignment)
1219         if (defined($struct->{SURROUNDING_ELEMENT})) {
1220                 my $e = $struct->{SURROUNDING_ELEMENT};
1221
1222                 if (defined($e->{LEVELS}[0]) and 
1223                         $e->{LEVELS}[0]->{TYPE} eq "ARRAY") {
1224                         my $size;
1225                         
1226                         if ($e->{LEVELS}[0]->{IS_ZERO_TERMINATED}) {
1227                                 if (has_property($e, "charset")) {
1228                                         $size = "ndr_charset_length($varname->$e->{NAME}, CH_$e->{PROPERTIES}->{charset})";
1229                                 } else {
1230                                         $size = "ndr_string_length($varname->$e->{NAME}, sizeof(*$varname->$e->{NAME}))";
1231                                 }
1232                         } else {
1233                                 $size = ParseExpr($e->{LEVELS}[0]->{SIZE_IS}, $env, $e->{ORIGINAL});
1234                         }
1235
1236                         pidl "NDR_CHECK(ndr_push_uint32(ndr, NDR_SCALARS, $size));";
1237                 } else {
1238                         pidl "NDR_CHECK(ndr_push_uint32(ndr, NDR_SCALARS, ndr_string_array_size(ndr, $varname->$e->{NAME})));";
1239                 }
1240         }
1241
1242         pidl "if (ndr_flags & NDR_SCALARS) {";
1243         indent;
1244
1245         pidl "NDR_CHECK(ndr_push_align(ndr, $struct->{ALIGN}));";
1246
1247         if (defined($struct->{PROPERTIES}{relative_base})) {
1248                 # set the current offset as base for relative pointers
1249                 # and store it based on the toplevel struct/union
1250                 pidl "NDR_CHECK(ndr_push_setup_relative_base_offset1(ndr, $varname, ndr->offset));";
1251         }
1252
1253         foreach my $e (@{$struct->{ELEMENTS}}) {
1254                 ParseElementPush($e, "ndr", $env, 1, 0);
1255         }       
1256
1257         deindent;
1258         pidl "}";
1259
1260         pidl "if (ndr_flags & NDR_BUFFERS) {";
1261         indent;
1262         if (defined($struct->{PROPERTIES}{relative_base})) {
1263                 # retrieve the current offset as base for relative pointers
1264                 # based on the toplevel struct/union
1265                 pidl "NDR_CHECK(ndr_push_setup_relative_base_offset2(ndr, $varname));";
1266         }
1267         foreach my $e (@{$struct->{ELEMENTS}}) {
1268                 ParseElementPush($e, "ndr", $env, 0, 1);
1269         }
1270
1271         deindent;
1272         pidl "}";
1273
1274         end_flags($struct);
1275         # restore the old relative_base_offset
1276         pidl "ndr_push_restore_relative_base_offset(ndr, _save_relative_base_offset);" if defined($struct->{PROPERTIES}{relative_base});
1277 }
1278
1279 #####################################################################
1280 # generate a push function for an enum
1281 sub ParseEnumPush($$$)
1282 {
1283         my($enum,$name,$varname) = @_;
1284         my($type_fn) = $enum->{BASE_TYPE};
1285
1286         start_flags($enum);
1287         pidl "NDR_CHECK(ndr_push_$type_fn(ndr, NDR_SCALARS, $varname));";
1288         end_flags($enum);
1289 }
1290
1291 #####################################################################
1292 # generate a pull function for an enum
1293 sub ParseEnumPull($$$)
1294 {
1295         my($enum,$name,$varname) = @_;
1296         my($type_fn) = $enum->{BASE_TYPE};
1297         my($type_v_decl) = mapTypeName($type_fn);
1298
1299         pidl "$type_v_decl v;";
1300         start_flags($enum);
1301         pidl "NDR_CHECK(ndr_pull_$type_fn(ndr, NDR_SCALARS, &v));";
1302         pidl "*$varname = v;";
1303
1304         end_flags($enum);
1305 }
1306
1307 #####################################################################
1308 # generate a print function for an enum
1309 sub ParseEnumPrint($$$)
1310 {
1311         my($enum,$name,$varname) = @_;
1312
1313         pidl "const char *val = NULL;";
1314         pidl "";
1315
1316         start_flags($enum);
1317
1318         pidl "switch ($varname) {";
1319         indent;
1320         my $els = \@{$enum->{ELEMENTS}};
1321         foreach my $i (0 .. $#{$els}) {
1322                 my $e = ${$els}[$i];
1323                 chomp $e;
1324                 if ($e =~ /^(.*)=/) {
1325                         $e = $1;
1326                 }
1327                 pidl "case $e: val = \"$e\"; break;";
1328         }
1329
1330         deindent;
1331         pidl "}";
1332         
1333         pidl "ndr_print_enum(ndr, name, \"$enum->{TYPE}\", val, $varname);";
1334
1335         end_flags($enum);
1336 }
1337
1338 sub DeclEnum($$$$)
1339 {
1340         my ($e,$t,$name,$varname) = @_;
1341         return "enum $name " . 
1342                 ($t eq "pull"?"*":"") . $varname;
1343 }
1344
1345 $typefamily{ENUM} = {
1346         DECL => \&DeclEnum,
1347         PUSH_FN_BODY => \&ParseEnumPush,
1348         PULL_FN_BODY => \&ParseEnumPull,
1349         PRINT_FN_BODY => \&ParseEnumPrint,
1350 };
1351
1352 #####################################################################
1353 # generate a push function for a bitmap
1354 sub ParseBitmapPush($$$)
1355 {
1356         my($bitmap,$name,$varname) = @_;
1357         my($type_fn) = $bitmap->{BASE_TYPE};
1358
1359         start_flags($bitmap);
1360
1361         pidl "NDR_CHECK(ndr_push_$type_fn(ndr, NDR_SCALARS, $varname));";
1362
1363         end_flags($bitmap);
1364 }
1365
1366 #####################################################################
1367 # generate a pull function for an bitmap
1368 sub ParseBitmapPull($$$)
1369 {
1370         my($bitmap,$name,$varname) = @_;
1371         my $type_fn = $bitmap->{BASE_TYPE};
1372         my($type_decl) = mapTypeName($bitmap->{BASE_TYPE});
1373
1374         pidl "$type_decl v;";
1375         start_flags($bitmap);
1376         pidl "NDR_CHECK(ndr_pull_$type_fn(ndr, NDR_SCALARS, &v));";
1377         pidl "*$varname = v;";
1378
1379         end_flags($bitmap);
1380 }
1381
1382 #####################################################################
1383 # generate a print function for an bitmap
1384 sub ParseBitmapPrintElement($$$$)
1385 {
1386         my($e,$bitmap,$name,$varname) = @_;
1387         my($type_decl) = mapTypeName($bitmap->{BASE_TYPE});
1388         my($type_fn) = $bitmap->{BASE_TYPE};
1389         my($flag);
1390
1391         if ($e =~ /^(\w+) .*$/) {
1392                 $flag = "$1";
1393         } else {
1394                 die "Bitmap: \"$name\" invalid Flag: \"$e\"";
1395         }
1396
1397         pidl "ndr_print_bitmap_flag(ndr, sizeof($type_decl), \"$flag\", $flag, $varname);";
1398 }
1399
1400 #####################################################################
1401 # generate a print function for an bitmap
1402 sub ParseBitmapPrint($$$)
1403 {
1404         my($bitmap,$name,$varname) = @_;
1405         my($type_decl) = mapTypeName($bitmap->{TYPE});
1406         my($type_fn) = $bitmap->{BASE_TYPE};
1407
1408         start_flags($bitmap);
1409
1410         pidl "ndr_print_$type_fn(ndr, name, $varname);";
1411
1412         pidl "ndr->depth++;";
1413         foreach my $e (@{$bitmap->{ELEMENTS}}) {
1414                 ParseBitmapPrintElement($e, $bitmap, $name, $varname);
1415         }
1416         pidl "ndr->depth--;";
1417
1418         end_flags($bitmap);
1419 }
1420
1421 sub DeclBitmap($$$$)
1422 {
1423         my ($e,$t,$name,$varname) = @_;
1424         return mapTypeName(Parse::Pidl::Typelist::bitmap_type_fn($e)) . 
1425                 ($t eq "pull"?" *":" ") . $varname;
1426 }
1427
1428 $typefamily{BITMAP} = {
1429         DECL => \&DeclBitmap,
1430         PUSH_FN_BODY => \&ParseBitmapPush,
1431         PULL_FN_BODY => \&ParseBitmapPull,
1432         PRINT_FN_BODY => \&ParseBitmapPrint,
1433 };
1434
1435 #####################################################################
1436 # generate a struct print function
1437 sub ParseStructPrint($$$)
1438 {
1439         my($struct,$name,$varname) = @_;
1440
1441         return unless defined $struct->{ELEMENTS};
1442
1443         my $env = GenerateStructEnv($struct, $varname);
1444
1445         EnvSubstituteValue($env, $struct);
1446
1447         DeclareArrayVariables($_) foreach (@{$struct->{ELEMENTS}});
1448
1449         pidl "ndr_print_struct(ndr, name, \"$name\");";
1450
1451         start_flags($struct);
1452
1453         pidl "ndr->depth++;";
1454         
1455         ParseElementPrint($_, $env->{$_->{NAME}}, $env) 
1456                 foreach (@{$struct->{ELEMENTS}});
1457         pidl "ndr->depth--;";
1458
1459         end_flags($struct);
1460 }
1461
1462 sub DeclarePtrVariables($)
1463 {
1464         my $e = shift;
1465         foreach my $l (@{$e->{LEVELS}}) {
1466                 if ($l->{TYPE} eq "POINTER" and 
1467                         not ($l->{POINTER_TYPE} eq "ref" and $l->{LEVEL} eq "TOP")) {
1468                         pidl "uint32_t _ptr_$e->{NAME};";
1469                         last;
1470                 }
1471         }
1472 }
1473
1474 sub DeclareArrayVariables($)
1475 {
1476         my $e = shift;
1477
1478         foreach my $l (@{$e->{LEVELS}}) {
1479                 next if has_fast_array($e,$l);
1480                 next if is_charset_array($e,$l);
1481                 if ($l->{TYPE} eq "ARRAY") {
1482                         pidl "uint32_t cntr_$e->{NAME}_$l->{LEVEL_INDEX};";
1483                 }
1484         }
1485 }
1486
1487 sub need_decl_mem_ctx($$)
1488 {
1489         my ($e,$l) = @_;
1490
1491         return 0 if has_fast_array($e,$l);
1492         return 0 if is_charset_array($e,$l);
1493         return 1 if (($l->{TYPE} eq "ARRAY") and not $l->{IS_FIXED});
1494
1495         if (($l->{TYPE} eq "POINTER") and ($l->{POINTER_TYPE} eq "ref")) {
1496                 my $nl = GetNextLevel($e, $l);
1497                 my $next_is_array = ($nl->{TYPE} eq "ARRAY");
1498                 my $next_is_string = (($nl->{TYPE} eq "DATA") and 
1499                                         ($nl->{DATA_TYPE} eq "string"));
1500                 return 0 if ($next_is_array or $next_is_string);
1501         }
1502         return 1 if ($l->{TYPE} eq "POINTER");
1503
1504         return 0;
1505 }
1506
1507 sub DeclareMemCtxVariables($)
1508 {
1509         my $e = shift;
1510         foreach my $l (@{$e->{LEVELS}}) {
1511                 if (need_decl_mem_ctx($e, $l)) {
1512                         pidl "TALLOC_CTX *_mem_save_$e->{NAME}_$l->{LEVEL_INDEX};";
1513                 }
1514         }
1515 }
1516
1517 #####################################################################
1518 # parse a struct - pull side
1519 sub ParseStructPull($$$)
1520 {
1521         my($struct,$name,$varname) = @_;
1522
1523         return unless defined $struct->{ELEMENTS};
1524
1525         my $env = GenerateStructEnv($struct, $varname);
1526
1527         # declare any internal pointers we need
1528         foreach my $e (@{$struct->{ELEMENTS}}) {
1529                 DeclarePtrVariables($e);
1530                 DeclareArrayVariables($e);
1531                 DeclareMemCtxVariables($e);
1532         }
1533
1534         # save the old relative_base_offset
1535         pidl "uint32_t _save_relative_base_offset = ndr_pull_get_relative_base_offset(ndr);" if defined($struct->{PROPERTIES}{relative_base});
1536
1537         start_flags($struct);
1538
1539         pidl "if (ndr_flags & NDR_SCALARS) {";
1540         indent;
1541
1542         if (defined $struct->{SURROUNDING_ELEMENT}) {
1543                 pidl "NDR_CHECK(ndr_pull_array_size(ndr, &$varname->$struct->{SURROUNDING_ELEMENT}->{NAME}));";
1544         }
1545
1546         pidl "NDR_CHECK(ndr_pull_align(ndr, $struct->{ALIGN}));";
1547
1548         if (defined($struct->{PROPERTIES}{relative_base})) {
1549                 # set the current offset as base for relative pointers
1550                 # and store it based on the toplevel struct/union
1551                 pidl "NDR_CHECK(ndr_pull_setup_relative_base_offset1(ndr, $varname, ndr->offset));";
1552         }
1553
1554         foreach my $e (@{$struct->{ELEMENTS}}) {
1555                 ParseElementPull($e, "ndr", $env, 1, 0);
1556         }       
1557
1558         add_deferred();
1559
1560         deindent;
1561         pidl "}";
1562         pidl "if (ndr_flags & NDR_BUFFERS) {";
1563         indent;
1564         if (defined($struct->{PROPERTIES}{relative_base})) {
1565                 # retrieve the current offset as base for relative pointers
1566                 # based on the toplevel struct/union
1567                 pidl "NDR_CHECK(ndr_pull_setup_relative_base_offset2(ndr, $varname));";
1568         }
1569         foreach my $e (@{$struct->{ELEMENTS}}) {
1570                 ParseElementPull($e, "ndr", $env, 0, 1);
1571         }
1572
1573         add_deferred();
1574
1575         deindent;
1576         pidl "}";
1577
1578         end_flags($struct);
1579         # restore the old relative_base_offset
1580         pidl "ndr_pull_restore_relative_base_offset(ndr, _save_relative_base_offset);" if defined($struct->{PROPERTIES}{relative_base});
1581 }
1582
1583 #####################################################################
1584 # calculate size of ndr struct
1585 sub ParseStructNdrSize($$$)
1586 {
1587         my ($t, $name, $varname) = @_;
1588         my $sizevar;
1589
1590         if (my $flags = has_property($t, "flag")) {
1591                 pidl "flags |= $flags;";
1592         }
1593         pidl "return ndr_size_struct($varname, flags, (ndr_push_flags_fn_t)ndr_push_$name);";
1594 }
1595
1596 sub DeclStruct($$$$)
1597 {
1598         my ($e,$t,$name,$varname) = @_;
1599         return ($t ne "pull"?"const ":"") . "struct $name *$varname";
1600 }
1601
1602 sub ArgsStructNdrSize($$$)
1603 {
1604         my ($d, $name, $varname) = @_;
1605         return "const struct $name *$varname, int flags";
1606 }
1607
1608 $typefamily{STRUCT} = {
1609         PUSH_FN_BODY => \&ParseStructPush,
1610         DECL => \&DeclStruct,
1611         PULL_FN_BODY => \&ParseStructPull,
1612         PRINT_FN_BODY => \&ParseStructPrint,
1613         SIZE_FN_BODY => \&ParseStructNdrSize,
1614         SIZE_FN_ARGS => \&ArgsStructNdrSize,
1615 };
1616
1617 #####################################################################
1618 # calculate size of ndr struct
1619 sub ParseUnionNdrSize($$$)
1620 {
1621         my ($t, $name, $varname) = @_;
1622         my $sizevar;
1623
1624         if (my $flags = has_property($t, "flag")) {
1625                 pidl "flags |= $flags;";
1626         }
1627
1628         pidl "return ndr_size_union($varname, flags, level, (ndr_push_flags_fn_t)ndr_push_$name);";
1629 }
1630
1631 #####################################################################
1632 # parse a union - push side
1633 sub ParseUnionPush($$$)
1634 {
1635         my ($e,$name,$varname) = @_;
1636         my $have_default = 0;
1637
1638         # save the old relative_base_offset
1639         pidl "uint32_t _save_relative_base_offset = ndr_push_get_relative_base_offset(ndr);" if defined($e->{PROPERTIES}{relative_base});
1640         pidl "int level;";
1641
1642         start_flags($e);
1643
1644         pidl "level = ndr_push_get_switch_value(ndr, $varname);";
1645
1646         pidl "if (ndr_flags & NDR_SCALARS) {";
1647         indent;
1648
1649         if (defined($e->{SWITCH_TYPE})) {
1650                 pidl "NDR_CHECK(ndr_push_$e->{SWITCH_TYPE}(ndr, NDR_SCALARS, level));";
1651         }
1652
1653         pidl "switch (level) {";
1654         indent;
1655         foreach my $el (@{$e->{ELEMENTS}}) {
1656                 if ($el->{CASE} eq "default") {
1657                         $have_default = 1;
1658                 }
1659                 pidl "$el->{CASE}:";
1660
1661                 if ($el->{TYPE} ne "EMPTY") {
1662                         indent;
1663                         if (defined($e->{PROPERTIES}{relative_base})) {
1664                                 pidl "NDR_CHECK(ndr_push_align(ndr, $el->{ALIGN}));";
1665                                 # set the current offset as base for relative pointers
1666                                 # and store it based on the toplevel struct/union
1667                                 pidl "NDR_CHECK(ndr_push_setup_relative_base_offset1(ndr, $varname, ndr->offset));";
1668                         }
1669                         DeclareArrayVariables($el);
1670                         ParseElementPush($el, "ndr", {$el->{NAME} => "$varname->$el->{NAME}"}, 1, 0);
1671                         deindent;
1672                 }
1673                 pidl "break;";
1674                 pidl "";
1675         }
1676         if (! $have_default) {
1677                 pidl "default:";
1678                 pidl "\treturn ndr_push_error(ndr, NDR_ERR_BAD_SWITCH, \"Bad switch value \%u\", level);";
1679         }
1680         deindent;
1681         pidl "}";
1682         deindent;
1683         pidl "}";
1684         pidl "if (ndr_flags & NDR_BUFFERS) {";
1685         indent;
1686         if (defined($e->{PROPERTIES}{relative_base})) {
1687                 # retrieve the current offset as base for relative pointers
1688                 # based on the toplevel struct/union
1689                 pidl "NDR_CHECK(ndr_push_setup_relative_base_offset2(ndr, $varname));";
1690         }
1691         pidl "switch (level) {";
1692         indent;
1693         foreach my $el (@{$e->{ELEMENTS}}) {
1694                 pidl "$el->{CASE}:";
1695                 if ($el->{TYPE} ne "EMPTY") {
1696                         indent;
1697                         ParseElementPush($el, "ndr", {$el->{NAME} => "$varname->$el->{NAME}"}, 0, 1);
1698                         deindent;
1699                 }
1700                 pidl "break;";
1701                 pidl "";
1702         }
1703         if (! $have_default) {
1704                 pidl "default:";
1705                 pidl "\treturn ndr_push_error(ndr, NDR_ERR_BAD_SWITCH, \"Bad switch value \%u\", level);";
1706         }
1707         deindent;
1708         pidl "}";
1709
1710         deindent;
1711         pidl "}";
1712         end_flags($e);
1713         # restore the old relative_base_offset
1714         pidl "ndr_push_restore_relative_base_offset(ndr, _save_relative_base_offset);" if defined($e->{PROPERTIES}{relative_base});
1715 }
1716
1717 #####################################################################
1718 # print a union
1719 sub ParseUnionPrint($$$)
1720 {
1721         my ($e,$name,$varname) = @_;
1722         my $have_default = 0;
1723
1724         pidl "int level;";
1725         foreach my $el (@{$e->{ELEMENTS}}) {
1726                 DeclareArrayVariables($el);
1727         }
1728
1729         start_flags($e);
1730
1731         pidl "level = ndr_print_get_switch_value(ndr, $varname);";
1732
1733         pidl "ndr_print_union(ndr, name, level, \"$name\");";
1734
1735         pidl "switch (level) {";
1736         indent;
1737         foreach my $el (@{$e->{ELEMENTS}}) {
1738                 if ($el->{CASE} eq "default") {
1739                         $have_default = 1;
1740                 }
1741                 pidl "$el->{CASE}:";
1742                 if ($el->{TYPE} ne "EMPTY") {
1743                         indent;
1744                         ParseElementPrint($el, "$varname->$el->{NAME}", {});
1745                         deindent;
1746                 }
1747                 pidl "break;";
1748                 pidl "";
1749         }
1750         if (! $have_default) {
1751                 pidl "default:";
1752                 pidl "\tndr_print_bad_level(ndr, name, level);";
1753         }
1754         deindent;
1755         pidl "}";
1756
1757         end_flags($e);
1758 }
1759
1760 #####################################################################
1761 # parse a union - pull side
1762 sub ParseUnionPull($$$)
1763 {
1764         my ($e,$name,$varname) = @_;
1765         my $have_default = 0;
1766         my $switch_type = $e->{SWITCH_TYPE};
1767
1768         # save the old relative_base_offset
1769         pidl "uint32_t _save_relative_base_offset = ndr_pull_get_relative_base_offset(ndr);" if defined($e->{PROPERTIES}{relative_base});
1770         pidl "int level;";
1771         if (defined($switch_type)) {
1772                 if (Parse::Pidl::Typelist::typeIs($switch_type, "ENUM")) {
1773                         $switch_type = Parse::Pidl::Typelist::enum_type_fn(getType($switch_type)->{DATA});
1774                 }
1775                 pidl mapTypeName($switch_type) . " _level;";
1776         }
1777
1778         my %double_cases = ();
1779         foreach my $el (@{$e->{ELEMENTS}}) {
1780                 next if ($el->{TYPE} eq "EMPTY");
1781                 next if ($double_cases{"$el->{NAME}"});
1782                 DeclareMemCtxVariables($el);
1783                 $double_cases{"$el->{NAME}"} = 1;
1784         }
1785
1786         start_flags($e);
1787
1788         pidl "level = ndr_pull_get_switch_value(ndr, $varname);";
1789
1790         pidl "if (ndr_flags & NDR_SCALARS) {";
1791         indent;
1792
1793         if (defined($switch_type)) {
1794                 pidl "NDR_CHECK(ndr_pull_$switch_type(ndr, NDR_SCALARS, &_level));";
1795                 pidl "if (_level != level) {"; 
1796                 pidl "\treturn ndr_pull_error(ndr, NDR_ERR_BAD_SWITCH, \"Bad switch value %u for $name\", _level);";
1797                 pidl "}";
1798         }
1799
1800         pidl "switch (level) {";
1801         indent;
1802         foreach my $el (@{$e->{ELEMENTS}}) {
1803                 if ($el->{CASE} eq "default") {
1804                         $have_default = 1;
1805                 } 
1806                 pidl "$el->{CASE}: {";
1807
1808                 if ($el->{TYPE} ne "EMPTY") {
1809                         indent;
1810                         DeclarePtrVariables($el);
1811                         DeclareArrayVariables($el);
1812                         if (defined($e->{PROPERTIES}{relative_base})) {
1813                                 pidl "NDR_CHECK(ndr_pull_align(ndr, $el->{ALIGN}));";
1814                                 # set the current offset as base for relative pointers
1815                                 # and store it based on the toplevel struct/union
1816                                 pidl "NDR_CHECK(ndr_pull_setup_relative_base_offset1(ndr, $varname, ndr->offset));";
1817                         }
1818                         ParseElementPull($el, "ndr", {$el->{NAME} => "$varname->$el->{NAME}"}, 1, 0);
1819                         deindent;
1820                 }
1821                 pidl "break; }";
1822                 pidl "";
1823         }
1824         if (! $have_default) {
1825                 pidl "default:";
1826                 pidl "\treturn ndr_pull_error(ndr, NDR_ERR_BAD_SWITCH, \"Bad switch value \%u\", level);";
1827         }
1828         deindent;
1829         pidl "}";
1830         deindent;
1831         pidl "}";
1832         pidl "if (ndr_flags & NDR_BUFFERS) {";
1833         indent;
1834         if (defined($e->{PROPERTIES}{relative_base})) {
1835                 # retrieve the current offset as base for relative pointers
1836                 # based on the toplevel struct/union
1837                 pidl "NDR_CHECK(ndr_pull_setup_relative_base_offset2(ndr, $varname));";
1838         }
1839         pidl "switch (level) {";
1840         indent;
1841         foreach my $el (@{$e->{ELEMENTS}}) {
1842                 pidl "$el->{CASE}:";
1843                 if ($el->{TYPE} ne "EMPTY") {
1844                         indent;
1845                         ParseElementPull($el, "ndr", {$el->{NAME} => "$varname->$el->{NAME}"}, 0, 1);
1846                         deindent;
1847                 }
1848                 pidl "break;";
1849                 pidl "";
1850         }
1851         if (! $have_default) {
1852                 pidl "default:";
1853                 pidl "\treturn ndr_pull_error(ndr, NDR_ERR_BAD_SWITCH, \"Bad switch value \%u\", level);";
1854         }
1855         deindent;
1856         pidl "}";
1857
1858         deindent;
1859         pidl "}";
1860
1861         add_deferred();
1862
1863         end_flags($e);
1864         # restore the old relative_base_offset
1865         pidl "ndr_pull_restore_relative_base_offset(ndr, _save_relative_base_offset);" if defined($e->{PROPERTIES}{relative_base});
1866 }
1867
1868 sub DeclUnion($$$$)
1869 {
1870         my ($e,$t,$name,$varname) = @_;
1871         return ($t ne "pull"?"const ":"") . "union $name *$varname";
1872 }
1873
1874 sub ArgsUnionNdrSize($$)
1875 {
1876         my ($d,$name) = @_;
1877         return "const union $name *r, uint32_t level, int flags";
1878 }
1879
1880 $typefamily{UNION} = {
1881         PUSH_FN_BODY => \&ParseUnionPush,
1882         DECL => \&DeclUnion,
1883         PULL_FN_BODY => \&ParseUnionPull,
1884         PRINT_FN_BODY => \&ParseUnionPrint,
1885         SIZE_FN_ARGS => \&ArgsUnionNdrSize,
1886         SIZE_FN_BODY => \&ParseUnionNdrSize,
1887 };
1888         
1889 #####################################################################
1890 # parse a typedef - push side
1891 sub ParseTypedefPush($$$)
1892 {
1893         my($e,$name,$varname) = @_;
1894
1895         $typefamily{$e->{DATA}->{TYPE}}->{PUSH_FN_BODY}->($e->{DATA}, $name, $varname);
1896 }
1897
1898 #####################################################################
1899 # parse a typedef - pull side
1900 sub ParseTypedefPull($$$)
1901 {
1902         my($e,$name,$varname) = @_;
1903
1904         $typefamily{$e->{DATA}->{TYPE}}->{PULL_FN_BODY}->($e->{DATA}, $name, $varname);
1905 }
1906
1907 #####################################################################
1908 # parse a typedef - print side
1909 sub ParseTypedefPrint($$$)
1910 {
1911         my($e,$name,$varname) = @_;
1912
1913         $typefamily{$e->{DATA}->{TYPE}}->{PRINT_FN_BODY}->($e->{DATA}, $name, $varname);
1914 }
1915
1916 #####################################################################
1917 ## calculate the size of a structure
1918 sub ParseTypedefNdrSize($$$)
1919 {
1920         my($t,$name,$varname) = @_;
1921
1922         $typefamily{$t->{DATA}->{TYPE}}->{SIZE_FN_BODY}->($t->{DATA}, $name, $varname);
1923 }
1924
1925 sub DeclTypedef($$$$)
1926 {
1927         my ($e, $t, $name, $varname) = @_;
1928         
1929         return $typefamily{$e->{DATA}->{TYPE}}->{DECL}->($e->{DATA}, $t, $name, $varname);
1930 }
1931
1932 sub ArgsTypedefNdrSize($$$)
1933 {
1934         my ($d, $name, $varname) = @_;
1935         return $typefamily{$d->{DATA}->{TYPE}}->{SIZE_FN_ARGS}->($d->{DATA}, $name, $varname);
1936 }
1937
1938 $typefamily{TYPEDEF} = {
1939         PUSH_FN_BODY => \&ParseTypedefPush,
1940         DECL => \&DeclTypedef,
1941         PULL_FN_BODY => \&ParseTypedefPull,
1942         PRINT_FN_BODY => \&ParseTypedefPrint,
1943         SIZE_FN_ARGS => \&ArgsTypedefNdrSize,
1944         SIZE_FN_BODY => \&ParseTypedefNdrSize,
1945 };
1946
1947 #####################################################################
1948 # parse a function - print side
1949 sub ParseFunctionPrint($)
1950 {
1951         my($fn) = shift;
1952
1953         pidl_hdr "void ndr_print_$fn->{NAME}(struct ndr_print *ndr, const char *name, int flags, const struct $fn->{NAME} *r);";
1954
1955         return if has_property($fn, "noprint");
1956
1957         pidl "_PUBLIC_ void ndr_print_$fn->{NAME}(struct ndr_print *ndr, const char *name, int flags, const struct $fn->{NAME} *r)";
1958         pidl "{";
1959         indent;
1960
1961         foreach my $e (@{$fn->{ELEMENTS}}) {
1962                 DeclareArrayVariables($e);
1963         }
1964
1965         pidl "ndr_print_struct(ndr, name, \"$fn->{NAME}\");";
1966         pidl "ndr->depth++;";
1967
1968         pidl "if (flags & NDR_SET_VALUES) {";
1969         pidl "\tndr->flags |= LIBNDR_PRINT_SET_VALUES;";
1970         pidl "}";
1971
1972         pidl "if (flags & NDR_IN) {";
1973         indent;
1974         pidl "ndr_print_struct(ndr, \"in\", \"$fn->{NAME}\");";
1975         pidl "ndr->depth++;";
1976
1977         my $env = GenerateFunctionInEnv($fn);
1978         EnvSubstituteValue($env, $fn);
1979
1980         foreach my $e (@{$fn->{ELEMENTS}}) {
1981                 if (grep(/in/,@{$e->{DIRECTION}})) {
1982                         ParseElementPrint($e, $env->{$e->{NAME}}, $env);
1983                 }
1984         }
1985         pidl "ndr->depth--;";
1986         deindent;
1987         pidl "}";
1988         
1989         pidl "if (flags & NDR_OUT) {";
1990         indent;
1991         pidl "ndr_print_struct(ndr, \"out\", \"$fn->{NAME}\");";
1992         pidl "ndr->depth++;";
1993
1994         $env = GenerateFunctionOutEnv($fn);
1995         foreach my $e (@{$fn->{ELEMENTS}}) {
1996                 if (grep(/out/,@{$e->{DIRECTION}})) {
1997                         ParseElementPrint($e, $env->{$e->{NAME}}, $env);
1998                 }
1999         }
2000         if ($fn->{RETURN_TYPE}) {
2001                 pidl "ndr_print_$fn->{RETURN_TYPE}(ndr, \"result\", r->out.result);";
2002         }
2003         pidl "ndr->depth--;";
2004         deindent;
2005         pidl "}";
2006         
2007         pidl "ndr->depth--;";
2008         deindent;
2009         pidl "}";
2010         pidl "";
2011 }
2012
2013 #####################################################################
2014 # parse a function
2015 sub ParseFunctionPush($)
2016
2017         my($fn) = shift;
2018
2019         fn_declare("push", $fn, "NTSTATUS ndr_push_$fn->{NAME}(struct ndr_push *ndr, int flags, const struct $fn->{NAME} *r)") or return;
2020
2021         return if has_property($fn, "nopush");
2022
2023         pidl "{";
2024         indent;
2025
2026         foreach my $e (@{$fn->{ELEMENTS}}) { 
2027                 DeclareArrayVariables($e);
2028         }
2029
2030         pidl "if (flags & NDR_IN) {";
2031         indent;
2032
2033         my $env = GenerateFunctionInEnv($fn);
2034
2035         EnvSubstituteValue($env, $fn);
2036
2037         foreach my $e (@{$fn->{ELEMENTS}}) {
2038                 if (grep(/in/,@{$e->{DIRECTION}})) {
2039                         ParseElementPush($e, "ndr", $env, 1, 1);
2040                 }
2041         }
2042
2043         deindent;
2044         pidl "}";
2045
2046         pidl "if (flags & NDR_OUT) {";
2047         indent;
2048
2049         $env = GenerateFunctionOutEnv($fn);
2050         foreach my $e (@{$fn->{ELEMENTS}}) {
2051                 if (grep(/out/,@{$e->{DIRECTION}})) {
2052                         ParseElementPush($e, "ndr", $env, 1, 1);
2053                 }
2054         }
2055
2056         if ($fn->{RETURN_TYPE}) {
2057                 pidl "NDR_CHECK(ndr_push_$fn->{RETURN_TYPE}(ndr, NDR_SCALARS, r->out.result));";
2058         }
2059     
2060         deindent;
2061         pidl "}";
2062         pidl "return NT_STATUS_OK;";
2063         deindent;
2064         pidl "}";
2065         pidl "";
2066 }
2067
2068 sub AllocateArrayLevel($$$$$)
2069 {
2070         my ($e,$l,$ndr,$env,$size) = @_;
2071
2072         my $var = ParseExpr($e->{NAME}, $env, $e->{ORIGINAL});
2073
2074         my $pl = GetPrevLevel($e, $l);
2075         if (defined($pl) and 
2076             $pl->{TYPE} eq "POINTER" and 
2077             $pl->{POINTER_TYPE} eq "ref"
2078             and not $l->{IS_ZERO_TERMINATED}) {
2079                 pidl "if (ndr->flags & LIBNDR_FLAG_REF_ALLOC) {";
2080                 pidl "\tNDR_PULL_ALLOC_N($ndr, $var, $size);";
2081                 pidl "}";
2082                 if (grep(/in/,@{$e->{DIRECTION}}) and
2083                     grep(/out/,@{$e->{DIRECTION}})) {
2084                         pidl "memcpy(r->out.$e->{NAME}, r->in.$e->{NAME}, $size * sizeof(*r->in.$e->{NAME}));";
2085                 }
2086                 return;
2087         }
2088
2089         pidl "NDR_PULL_ALLOC_N($ndr, $var, $size);";
2090 }
2091
2092 #####################################################################
2093 # parse a function
2094 sub ParseFunctionPull($)
2095
2096         my($fn) = shift;
2097
2098         # pull function args
2099         fn_declare("pull", $fn, "NTSTATUS ndr_pull_$fn->{NAME}(struct ndr_pull *ndr, int flags, struct $fn->{NAME} *r)") or return;
2100
2101         pidl "{";
2102         indent;
2103
2104         # declare any internal pointers we need
2105         foreach my $e (@{$fn->{ELEMENTS}}) { 
2106                 DeclarePtrVariables($e);
2107                 DeclareArrayVariables($e);
2108         }
2109
2110         my %double_cases = ();
2111         foreach my $e (@{$fn->{ELEMENTS}}) {
2112                 next if ($e->{TYPE} eq "EMPTY");
2113                 next if ($double_cases{"$e->{NAME}"});
2114                 DeclareMemCtxVariables($e);
2115                 $double_cases{"$e->{NAME}"} = 1;
2116         }
2117
2118         pidl "if (flags & NDR_IN) {";
2119         indent;
2120
2121         # auto-init the out section of a structure. I originally argued that
2122         # this was a bad idea as it hides bugs, but coping correctly
2123         # with initialisation and not wiping ref vars is turning
2124         # out to be too tricky (tridge)
2125         foreach my $e (@{$fn->{ELEMENTS}}) {
2126                 next unless grep(/out/, @{$e->{DIRECTION}});
2127                 pidl "ZERO_STRUCT(r->out);";
2128                 pidl "";
2129                 last;
2130         }
2131
2132         my $env = GenerateFunctionInEnv($fn);
2133
2134         foreach my $e (@{$fn->{ELEMENTS}}) {
2135                 next unless (grep(/in/, @{$e->{DIRECTION}}));
2136                 ParseElementPull($e, "ndr", $env, 1, 1);
2137         }
2138
2139         # allocate the "simple" out ref variables. FIXME: Shouldn't this have it's
2140         # own flag rather than be in NDR_IN ?
2141
2142         foreach my $e (@{$fn->{ELEMENTS}}) {
2143                 next unless (grep(/out/, @{$e->{DIRECTION}}));
2144                 next unless ($e->{LEVELS}[0]->{TYPE} eq "POINTER" and 
2145                              $e->{LEVELS}[0]->{POINTER_TYPE} eq "ref");
2146                 next if (($e->{LEVELS}[1]->{TYPE} eq "DATA") and 
2147                                  ($e->{LEVELS}[1]->{DATA_TYPE} eq "string"));
2148                 next if (($e->{LEVELS}[1]->{TYPE} eq "ARRAY") 
2149                         and   $e->{LEVELS}[1]->{IS_ZERO_TERMINATED});
2150
2151                 if ($e->{LEVELS}[1]->{TYPE} eq "ARRAY") {
2152                         my $size = ParseExprExt($e->{LEVELS}[1]->{SIZE_IS}, $env, $e->{ORIGINAL}, check_null_pointer($e, $env, \&pidl, "return NT_STATUS_INVALID_PARAMETER_MIX;"), 
2153                                 check_fully_dereferenced($e, $env));
2154                         
2155                         pidl "NDR_PULL_ALLOC_N(ndr, r->out.$e->{NAME}, $size);";
2156
2157                         if (grep(/in/, @{$e->{DIRECTION}})) {
2158                                 pidl "memcpy(r->out.$e->{NAME}, r->in.$e->{NAME}, $size * sizeof(*r->in.$e->{NAME}));";
2159                         } else {
2160                                 pidl "memset(r->out.$e->{NAME}, 0, $size * sizeof(*r->out.$e->{NAME}));";
2161                         }
2162                 } else {
2163                         pidl "NDR_PULL_ALLOC(ndr, r->out.$e->{NAME});";
2164                 
2165                         if (grep(/in/, @{$e->{DIRECTION}})) {
2166                                 pidl "*r->out.$e->{NAME} = *r->in.$e->{NAME};";
2167                         } else {
2168                                 pidl "ZERO_STRUCTP(r->out.$e->{NAME});";
2169                         }
2170                 }
2171         }
2172
2173         add_deferred();
2174         deindent;
2175         pidl "}";
2176         
2177         pidl "if (flags & NDR_OUT) {";
2178         indent;
2179
2180         $env = GenerateFunctionOutEnv($fn);
2181         foreach my $e (@{$fn->{ELEMENTS}}) {
2182                 next unless grep(/out/, @{$e->{DIRECTION}});
2183                 ParseElementPull($e, "ndr", $env, 1, 1);
2184         }
2185
2186         if ($fn->{RETURN_TYPE}) {
2187                 pidl "NDR_CHECK(ndr_pull_$fn->{RETURN_TYPE}(ndr, NDR_SCALARS, &r->out.result));";
2188         }
2189
2190         add_deferred();
2191         deindent;
2192         pidl "}";
2193
2194         pidl "return NT_STATUS_OK;";
2195         deindent;
2196         pidl "}";
2197         pidl "";
2198 }
2199
2200 #####################################################################
2201 # produce a function call table
2202 sub FunctionTable($)
2203 {
2204         my($interface) = shift;
2205         my $count = 0;
2206         my $uname = uc $interface->{NAME};
2207
2208         return if ($#{$interface->{FUNCTIONS}}+1 == 0);
2209         return unless defined ($interface->{PROPERTIES}->{uuid});
2210
2211         pidl "static const struct dcerpc_interface_call $interface->{NAME}\_calls[] = {";
2212         foreach my $d (@{$interface->{FUNCTIONS}}) {
2213                 next if not defined($d->{OPNUM});
2214                 pidl "\t{";
2215                 pidl "\t\t\"$d->{NAME}\",";
2216                 pidl "\t\tsizeof(struct $d->{NAME}),";
2217                 pidl "\t\t(ndr_push_flags_fn_t) ndr_push_$d->{NAME},";
2218                 pidl "\t\t(ndr_pull_flags_fn_t) ndr_pull_$d->{NAME},";
2219                 pidl "\t\t(ndr_print_function_t) ndr_print_$d->{NAME},";
2220                 pidl "\t\t".($d->{ASYNC}?"True":"False").",";
2221                 pidl "\t},";
2222                 $count++;
2223         }
2224         pidl "\t{ NULL, 0, NULL, NULL, NULL, False }";
2225         pidl "};";
2226         pidl "";
2227
2228         pidl "static const char * const $interface->{NAME}\_endpoint_strings[] = {";
2229         foreach my $ep (@{$interface->{ENDPOINTS}}) {
2230                 pidl "\t$ep, ";
2231         }
2232         my $endpoint_count = $#{$interface->{ENDPOINTS}}+1;
2233         
2234         pidl "};";
2235         pidl "";
2236
2237         pidl "static const struct dcerpc_endpoint_list $interface->{NAME}\_endpoints = {";
2238         pidl "\t.count\t= $endpoint_count,";
2239         pidl "\t.names\t= $interface->{NAME}\_endpoint_strings";
2240         pidl "};";
2241         pidl "";
2242
2243         if (! defined $interface->{PROPERTIES}->{authservice}) {
2244                 $interface->{PROPERTIES}->{authservice} = "\"host\"";
2245         }
2246
2247         my @a = split / /, $interface->{PROPERTIES}->{authservice};
2248         my $authservice_count = $#a + 1;
2249
2250         pidl "static const char * const $interface->{NAME}\_authservice_strings[] = {";
2251         foreach my $ap (@a) {
2252                 pidl "\t$ap, ";
2253         }
2254         pidl "};";
2255         pidl "";
2256
2257         pidl "static const struct dcerpc_authservice_list $interface->{NAME}\_authservices = {";
2258         pidl "\t.count\t= $endpoint_count,";
2259         pidl "\t.names\t= $interface->{NAME}\_authservice_strings";
2260         pidl "};";
2261         pidl "";
2262
2263         pidl "\nconst struct dcerpc_interface_table dcerpc_table_$interface->{NAME} = {";
2264         pidl "\t.name\t\t= \"$interface->{NAME}\",";
2265         pidl "\t.syntax_id\t= {";
2266         pidl "\t\t" . print_uuid($interface->{UUID}) .",";
2267         pidl "\t\tDCERPC_$uname\_VERSION";
2268         pidl "\t},";
2269         pidl "\t.helpstring\t= DCERPC_$uname\_HELPSTRING,";
2270         pidl "\t.num_calls\t= $count,";
2271         pidl "\t.calls\t\t= $interface->{NAME}\_calls,";
2272         pidl "\t.endpoints\t= &$interface->{NAME}\_endpoints,";
2273         pidl "\t.authservices\t= &$interface->{NAME}\_authservices";
2274         pidl "};";
2275         pidl "";
2276
2277 }
2278
2279 #####################################################################
2280 # generate include statements for imported idl files
2281 sub HeaderImport
2282 {
2283         my @imports = @_;
2284         foreach (@imports) {
2285                 s/\.idl\"$//;
2286                 s/^\"//;
2287                 pidl choose_header("librpc/gen_ndr/ndr_$_\.h", "gen_ndr/ndr_$_.h");
2288         }
2289 }
2290
2291 #####################################################################
2292 # generate include statements for included header files
2293 sub HeaderInclude
2294 {
2295         my @includes = @_;
2296         foreach (@includes) {
2297                 pidl_hdr "#include $_";
2298         }
2299 }
2300
2301 #####################################################################
2302 # generate prototypes and defines for the interface definitions
2303 # FIXME: these prototypes are for the DCE/RPC client functions, not the 
2304 # NDR parser and so do not belong here, technically speaking
2305 sub HeaderInterface($)
2306 {
2307         my($interface) = shift;
2308
2309         my $count = 0;
2310
2311         pidl_hdr choose_header("librpc/ndr/libndr.h", "ndr.h");
2312
2313         if (has_property($interface, "object")) {
2314                 pidl choose_header("librpc/gen_ndr/ndr_orpc.h", "ndr/orpc.h");
2315         }
2316
2317         if (defined $interface->{PROPERTIES}->{helper}) {
2318                 HeaderInclude(split / /, $interface->{PROPERTIES}->{helper});
2319         }
2320
2321         if (defined $interface->{PROPERTIES}->{uuid}) {
2322                 my $name = uc $interface->{NAME};
2323                 pidl_hdr "#define DCERPC_$name\_UUID " . 
2324                 Parse::Pidl::Util::make_str(lc($interface->{PROPERTIES}->{uuid}));
2325
2326                 if(!defined $interface->{PROPERTIES}->{version}) { $interface->{PROPERTIES}->{version} = "0.0"; }
2327                 pidl_hdr "#define DCERPC_$name\_VERSION $interface->{PROPERTIES}->{version}";
2328
2329                 pidl_hdr "#define DCERPC_$name\_NAME \"$interface->{NAME}\"";
2330
2331                 if(!defined $interface->{PROPERTIES}->{helpstring}) { $interface->{PROPERTIES}->{helpstring} = "NULL"; }
2332                 pidl_hdr "#define DCERPC_$name\_HELPSTRING $interface->{PROPERTIES}->{helpstring}";
2333
2334                 pidl_hdr "extern const struct dcerpc_interface_table dcerpc_table_$interface->{NAME};";
2335                 pidl_hdr "NTSTATUS dcerpc_server_$interface->{NAME}_init(void);";
2336         }
2337
2338         foreach (@{$interface->{FUNCTIONS}}) {
2339                 next if has_property($_, "noopnum");
2340                 next if grep(/$_->{NAME}/,@{$interface->{INHERITED_FUNCTIONS}});
2341                 my $u_name = uc $_->{NAME};
2342         
2343                 my $val = sprintf("0x%02x", $count);
2344                 if (defined($interface->{BASE})) {
2345                         $val .= " + DCERPC_" . uc $interface->{BASE} . "_CALL_COUNT";
2346                 }
2347                 
2348                 pidl_hdr "#define DCERPC_$u_name ($val)";
2349
2350                 pidl_hdr "";
2351                 $count++;
2352         }
2353
2354         my $val = $count;
2355
2356         if (defined($interface->{BASE})) {
2357                 $val .= " + DCERPC_" . uc $interface->{BASE} . "_CALL_COUNT";
2358         }
2359
2360         pidl_hdr "#define DCERPC_" . uc $interface->{NAME} . "_CALL_COUNT ($val)";
2361
2362 }
2363
2364 sub ParseTypePush($)
2365 {
2366         my ($e) = @_;
2367
2368         my $varname = "r";
2369         my $args = $typefamily{$e->{TYPE}}->{DECL}->($e, "push", $e->{NAME}, $varname);
2370         fn_declare("push", $e, "NTSTATUS ndr_push_$e->{NAME}(struct ndr_push *ndr, int ndr_flags, $args)") or return;
2371
2372         pidl "{";
2373         indent;
2374         $typefamily{$e->{TYPE}}->{PUSH_FN_BODY}->($e, $e->{NAME}, $varname);
2375         pidl "return NT_STATUS_OK;";
2376         deindent;
2377         pidl "}";
2378         pidl "";;
2379 }
2380
2381 sub ParseTypePull($)
2382 {
2383         my ($e) = @_;
2384
2385         my $varname = "r";
2386         my $args = $typefamily{$e->{TYPE}}->{DECL}->($e, "pull", $e->{NAME}, $varname);
2387
2388         fn_declare("pull", $e, "NTSTATUS ndr_pull_$e->{NAME}(struct ndr_pull *ndr, int ndr_flags, $args)") or return;
2389
2390         pidl "{";
2391         indent;
2392         $typefamily{$e->{TYPE}}->{PULL_FN_BODY}->($e, $e->{NAME}, $varname);
2393         pidl "return NT_STATUS_OK;";
2394         deindent;
2395         pidl "}";
2396         pidl "";
2397 }
2398
2399 sub ParseTypePrint($)
2400 {
2401         my ($e) = @_;
2402         my $varname = "r";
2403         my $args = $typefamily{$e->{TYPE}}->{DECL}->($e, "print", $e->{NAME}, $varname);
2404
2405         pidl_hdr "void ndr_print_$e->{NAME}(struct ndr_print *ndr, const char *name, $args);";
2406
2407         return if (has_property($e, "noprint"));
2408
2409         pidl "_PUBLIC_ void ndr_print_$e->{NAME}(struct ndr_print *ndr, const char *name, $args)";
2410         pidl "{";
2411         indent;
2412         $typefamily{$e->{TYPE}}->{PRINT_FN_BODY}->($e, $e->{NAME}, $varname);
2413         deindent;
2414         pidl "}";
2415         pidl "";
2416 }
2417
2418 sub ParseTypeNdrSize($)
2419 {
2420         my ($t) = @_;
2421
2422         my $varname = "r";
2423         my $tf = $typefamily{$t->{TYPE}};
2424         my $args = $tf->{SIZE_FN_ARGS}->($t, $t->{NAME}, $varname);
2425
2426         fn_declare("size", $t, "size_t ndr_size_$t->{NAME}($args)") or return;
2427
2428         pidl "{";
2429         indent;
2430         $typefamily{$t->{TYPE}}->{SIZE_FN_BODY}->($t, $t->{NAME}, $varname);
2431         deindent;
2432         pidl "}";
2433         pidl "";
2434 }
2435
2436 #####################################################################
2437 # parse the interface definitions
2438 sub ParseInterface($$)
2439 {
2440         my($interface,$needed) = @_;
2441
2442         pidl_hdr "#ifndef _HEADER_NDR_$interface->{NAME}";
2443         pidl_hdr "#define _HEADER_NDR_$interface->{NAME}";
2444
2445         pidl_hdr "";
2446
2447         if ($needed->{"compression"}) {
2448                 pidl choose_header("librpc/ndr/ndr_compression.h", "ndr/compression.h");
2449         }
2450
2451         HeaderInterface($interface);
2452
2453         # Typedefs
2454         foreach my $d (@{$interface->{TYPES}}) {
2455                 ($needed->{"push_$d->{NAME}"}) && ParseTypePush($d);
2456                 ($needed->{"pull_$d->{NAME}"}) && ParseTypePull($d);
2457                 ($needed->{"print_$d->{NAME}"}) && ParseTypePrint($d);
2458
2459                 # Make sure we don't generate a function twice...
2460                 $needed->{"push_$d->{NAME}"} = $needed->{"pull_$d->{NAME}"} = 
2461                         $needed->{"print_$d->{NAME}"} = 0;
2462
2463                 ($needed->{"ndr_size_$d->{NAME}"}) && ParseTypeNdrSize($d);
2464         }
2465
2466         # Functions
2467         foreach my $d (@{$interface->{FUNCTIONS}}) {
2468                 ($needed->{"push_$d->{NAME}"}) && ParseFunctionPush($d);
2469                 ($needed->{"pull_$d->{NAME}"}) && ParseFunctionPull($d);
2470                 ($needed->{"print_$d->{NAME}"}) && ParseFunctionPrint($d);
2471
2472                 # Make sure we don't generate a function twice...
2473                 $needed->{"push_$d->{NAME}"} = $needed->{"pull_$d->{NAME}"} = 
2474                         $needed->{"print_$d->{NAME}"} = 0;
2475         }
2476
2477         FunctionTable($interface);
2478
2479         pidl_hdr "#endif /* _HEADER_NDR_$interface->{NAME} */";
2480 }
2481
2482 sub GenerateIncludes()
2483 {
2484         if (is_intree()) {
2485                 pidl "#include \"includes.h\"";
2486         } else {
2487                 pidl "#define _GNU_SOURCE";
2488                 pidl "#include <stdint.h>";
2489                 pidl "#include <stdlib.h>";
2490                 pidl "#include <stdio.h>";
2491                 pidl "#include <stdbool.h>";
2492                 pidl "#include <stdarg.h>";
2493                 pidl "#include <string.h>";
2494         }
2495
2496         # Samba3 has everything in include/includes.h
2497         if (is_intree() != 3) {
2498                 pidl choose_header("libcli/util/nterr.h", "core/nterr.h");
2499                 pidl choose_header("librpc/gen_ndr/ndr_misc.h", "gen_ndr/ndr_misc.h");
2500                 pidl choose_header("librpc/gen_ndr/ndr_dcerpc.h", "gen_ndr/ndr_dcerpc.h");
2501                 pidl choose_header("librpc/rpc/dcerpc.h", "dcerpc.h"); #FIXME: This shouldn't be here!
2502         }
2503 }
2504
2505 #####################################################################
2506 # parse a parsed IDL structure back into an IDL file
2507 sub Parse($$$)
2508 {
2509         my($ndr,$gen_header,$ndr_header) = @_;
2510
2511         $tabs = "";
2512         $res = "";
2513
2514         $res_hdr = "";
2515         pidl_hdr "/* header auto-generated by pidl */";
2516         pidl_hdr "";
2517         pidl_hdr "#include \"$gen_header\"" if ($gen_header);
2518         pidl_hdr "";
2519
2520         pidl "/* parser auto-generated by pidl */";
2521         pidl "";
2522         GenerateIncludes();
2523         pidl "#include \"$ndr_header\"" if ($ndr_header);
2524         pidl "";
2525
2526         my %needed = ();
2527
2528         foreach (@{$ndr}) {
2529                 ($_->{TYPE} eq "INTERFACE") && NeededInterface($_, \%needed);
2530         }
2531
2532         foreach (@{$ndr}) {
2533                 ($_->{TYPE} eq "INTERFACE") && ParseInterface($_, \%needed);
2534                 ($_->{TYPE} eq "IMPORT") && HeaderImport(@{$_->{PATHS}});
2535                 ($_->{TYPE} eq "INCLUDE") && HeaderInclude(@{$_->{PATHS}});
2536         }
2537
2538         return ($res_hdr, $res);
2539 }
2540
2541 sub NeededElement($$$)
2542 {
2543         my ($e, $dir, $needed) = @_;
2544
2545         return if ($e->{TYPE} eq "EMPTY");
2546
2547         my @fn = ();
2548         if ($dir eq "print") {
2549                 push(@fn, "print_$e->{REPRESENTATION_TYPE}");
2550         } elsif ($dir eq "pull") {
2551                 push (@fn, "pull_$e->{TYPE}");
2552                 push (@fn, "ndr_$e->{TYPE}_to_$e->{REPRESENTATION_TYPE}")
2553                         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE});
2554         } elsif ($dir eq "push") {
2555                 push (@fn, "push_$e->{TYPE}");
2556                 push (@fn, "ndr_$e->{REPRESENTATION_TYPE}_to_$e->{TYPE}")
2557                         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE});
2558         } else {
2559                 die("invalid direction `$dir'");
2560         }
2561
2562         foreach (@fn) {
2563                 unless (defined($needed->{$_})) {
2564                         $needed->{$_} = 1;
2565                 }
2566         }
2567 }
2568
2569 sub NeededFunction($$)
2570 {
2571         my ($fn,$needed) = @_;
2572         $needed->{"pull_$fn->{NAME}"} = 1;
2573         $needed->{"push_$fn->{NAME}"} = 1;
2574         $needed->{"print_$fn->{NAME}"} = 1;
2575         foreach my $e (@{$fn->{ELEMENTS}}) {
2576                 $e->{PARENT} = $fn;
2577                 NeededElement($e, $_, $needed) foreach ("pull", "push", "print");
2578         }
2579 }
2580
2581 sub NeededType($$)
2582 {
2583         my ($t,$needed) = @_;
2584         if (has_property($t, "public")) {
2585                 $needed->{"pull_$t->{NAME}"} = 1;
2586                 $needed->{"push_$t->{NAME}"} = 1;
2587                 $needed->{"print_$t->{NAME}"} = 1;
2588         }
2589
2590         if ($t->{DATA}->{TYPE} eq "STRUCT" or $t->{DATA}->{TYPE} eq "UNION") {
2591                 if (has_property($t, "gensize")) {
2592                         $needed->{"ndr_size_$t->{NAME}"} = 1;
2593                 }
2594
2595                 for my $e (@{$t->{DATA}->{ELEMENTS}}) {
2596                         $e->{PARENT} = $t->{DATA};
2597                         if (has_property($e, "compression")) { 
2598                                 $needed->{"compression"} = 1;
2599                         }
2600                         NeededElement($e, "pull", $needed) if ($needed->{"pull_$t->{NAME}"});
2601                         NeededElement($e, "push", $needed) if ($needed->{"push_$t->{NAME}"});
2602                         NeededElement($e, "print", $needed) if ($needed->{"print_$t->{NAME}"});
2603                 }
2604         }
2605 }
2606
2607 #####################################################################
2608 # work out what parse functions are needed
2609 sub NeededInterface($$)
2610 {
2611         my ($interface,$needed) = @_;
2612         NeededFunction($_, $needed) foreach (@{$interface->{FUNCTIONS}});
2613         NeededType($_, $needed) foreach (reverse @{$interface->{TYPES}});
2614 }
2615
2616 1;