r21455: Fix a bug in our handling of conformant arrays. The conformant array was
[tprouty/samba.git] / source4 / pidl / lib / Parse / Pidl / Samba4 / NDR / Parser.pm
1 ###################################################
2 # Samba4 NDR parser generator for IDL structures
3 # Copyright tridge@samba.org 2000-2003
4 # Copyright tpot@samba.org 2001
5 # Copyright jelmer@samba.org 2004-2006
6 # released under the GNU GPL
7
8 package Parse::Pidl::Samba4::NDR::Parser;
9
10 require Exporter;
11 @ISA = qw(Exporter);
12 @EXPORT = qw(is_charset_array);
13 @EXPORT_OK = qw(check_null_pointer GenerateFunctionInEnv 
14    GenerateFunctionOutEnv EnvSubstituteValue GenerateStructEnv NeededFunction
15    NeededElement NeededType $res);
16
17 use strict;
18 use Parse::Pidl::Typelist qw(hasType getType mapTypeName);
19 use Parse::Pidl::Util qw(has_property ParseExpr ParseExprExt print_uuid);
20 use Parse::Pidl::NDR qw(GetPrevLevel GetNextLevel ContainsDeferred);
21 use Parse::Pidl::Samba4 qw(is_intree choose_header);
22 use Parse::Pidl qw(warning);
23
24 use vars qw($VERSION);
25 $VERSION = '0.01';
26
27 # list of known types
28 my %typefamily;
29
30 sub get_typefamily($)
31 {
32         my $n = shift;
33         return $typefamily{$n};
34 }
35
36 sub append_prefix($$)
37 {
38         my ($e, $var_name) = @_;
39         my $pointers = 0;
40
41         foreach my $l (@{$e->{LEVELS}}) {
42                 if ($l->{TYPE} eq "POINTER") {
43                         $pointers++;
44                 } elsif ($l->{TYPE} eq "ARRAY") {
45                         if (($pointers == 0) and 
46                             (not $l->{IS_FIXED}) and
47                             (not $l->{IS_INLINE})) {
48                                 return get_value_of($var_name); 
49                         }
50                 } elsif ($l->{TYPE} eq "DATA") {
51                         if (Parse::Pidl::Typelist::scalar_is_reference($l->{DATA_TYPE})) {
52                                 return get_value_of($var_name) unless ($pointers);
53                         }
54                 }
55         }
56         
57         return $var_name;
58 }
59
60 sub has_fast_array($$)
61 {
62         my ($e,$l) = @_;
63
64         return 0 if ($l->{TYPE} ne "ARRAY");
65
66         my $nl = GetNextLevel($e,$l);
67         return 0 unless ($nl->{TYPE} eq "DATA");
68         return 0 unless (hasType($nl->{DATA_TYPE}));
69
70         my $t = getType($nl->{DATA_TYPE});
71
72         # Only uint8 and string have fast array functions at the moment
73         return ($t->{NAME} eq "uint8") or ($t->{NAME} eq "string");
74 }
75
76 sub is_charset_array($$)
77 {
78         my ($e,$l) = @_;
79
80         return 0 if ($l->{TYPE} ne "ARRAY");
81
82         my $nl = GetNextLevel($e,$l);
83
84         return 0 unless ($nl->{TYPE} eq "DATA");
85
86         return has_property($e, "charset");
87 }
88
89 sub get_pointer_to($)
90 {
91         my $var_name = shift;
92         
93         if ($var_name =~ /^\*(.*)$/) {
94                 return $1;
95         } elsif ($var_name =~ /^\&(.*)$/) {
96                 return "&($var_name)";
97         } else {
98                 return "&$var_name";
99         }
100 }
101
102 sub get_value_of($)
103 {
104         my $var_name = shift;
105
106         if ($var_name =~ /^\&(.*)$/) {
107                 return $1;
108         } else {
109                 return "*$var_name";
110         }
111 }
112
113 our $res;
114 my $deferred = [];
115 my $tabs = "";
116
117 ####################################
118 # pidl() is our basic output routine
119 sub pidl($)
120 {
121         my $d = shift;
122         if ($d) {
123                 $res .= $tabs;
124                 $res .= $d;
125         }
126         $res .="\n";
127 }
128
129 my $res_hdr;
130
131 sub pidl_hdr ($) { my $d = shift; $res_hdr .= "$d\n"; }
132
133 ####################################
134 # defer() is like pidl(), but adds to 
135 # a deferred buffer which is then added to the 
136 # output buffer at the end of the structure/union/function
137 # This is needed to cope with code that must be pushed back
138 # to the end of a block of elements
139 my $defer_tabs = "";
140 sub defer_indent() { $defer_tabs.="\t"; }
141 sub defer_deindent() { $defer_tabs=substr($defer_tabs, 0, -1); }
142
143 sub defer($)
144 {
145         my $d = shift;
146         if ($d) {
147                 push(@$deferred, $defer_tabs.$d);
148         }
149 }
150
151 ########################################
152 # add the deferred content to the current
153 # output
154 sub add_deferred()
155 {
156         pidl $_ foreach (@$deferred);
157         $deferred = [];
158         $defer_tabs = "";
159 }
160
161 sub indent()
162 {
163         $tabs .= "\t";
164 }
165
166 sub deindent()
167 {
168         $tabs = substr($tabs, 0, -1);
169 }
170
171 #####################################################################
172 # declare a function public or static, depending on its attributes
173 sub fn_declare($$$)
174 {
175         my ($type,$fn,$decl) = @_;
176
177         if (has_property($fn, "no$type")) {
178                 pidl_hdr "$decl;";
179                 return 0;
180         }
181
182         if (has_property($fn, "public")) {
183                 pidl_hdr "$decl;";
184                 pidl "_PUBLIC_ $decl";
185         } else {
186                 pidl "static $decl";
187         }
188
189         return 1;
190 }
191
192 ###################################################################
193 # setup any special flags for an element or structure
194 sub start_flags($)
195 {
196         my $e = shift;
197         my $flags = has_property($e, "flag");
198         if (defined $flags) {
199                 pidl "{";
200                 indent;
201                 pidl "uint32_t _flags_save_$e->{TYPE} = ndr->flags;";
202                 pidl "ndr_set_flags(&ndr->flags, $flags);";
203         }
204 }
205
206 ###################################################################
207 # end any special flags for an element or structure
208 sub end_flags($)
209 {
210         my $e = shift;
211         my $flags = has_property($e, "flag");
212         if (defined $flags) {
213                 pidl "ndr->flags = _flags_save_$e->{TYPE};";
214                 deindent;
215                 pidl "}";
216         }
217 }
218
219 sub GenerateStructEnv($$)
220 {
221         my ($x, $v) = @_;
222         my %env;
223
224         foreach my $e (@{$x->{ELEMENTS}}) {
225                 $env{$e->{NAME}} = "$v->$e->{NAME}";
226         }
227
228         $env{"this"} = $v;
229
230         return \%env;
231 }
232
233 sub EnvSubstituteValue($$)
234 {
235         my ($env,$s) = @_;
236
237         # Substitute the value() values in the env
238         foreach my $e (@{$s->{ELEMENTS}}) {
239                 next unless (defined(my $v = has_property($e, "value")));
240                 
241                 $env->{$e->{NAME}} = ParseExpr($v, $env, $e);
242         }
243
244         return $env;
245 }
246
247 sub GenerateFunctionInEnv($)
248 {
249         my $fn = shift;
250         my %env;
251
252         foreach my $e (@{$fn->{ELEMENTS}}) {
253                 if (grep (/in/, @{$e->{DIRECTION}})) {
254                         $env{$e->{NAME}} = "r->in.$e->{NAME}";
255                 }
256         }
257
258         return \%env;
259 }
260
261 sub GenerateFunctionOutEnv($)
262 {
263         my $fn = shift;
264         my %env;
265
266         foreach my $e (@{$fn->{ELEMENTS}}) {
267                 if (grep (/out/, @{$e->{DIRECTION}})) {
268                         $env{$e->{NAME}} = "r->out.$e->{NAME}";
269                 } elsif (grep (/in/, @{$e->{DIRECTION}})) {
270                         $env{$e->{NAME}} = "r->in.$e->{NAME}";
271                 }
272         }
273
274         return \%env;
275 }
276
277 #####################################################################
278 # parse the data of an array - push side
279 sub ParseArrayPushHeader($$$$$)
280 {
281         my ($e,$l,$ndr,$var_name,$env) = @_;
282
283         my $size;
284         my $length;
285
286         if ($l->{IS_ZERO_TERMINATED}) {
287                 if (has_property($e, "charset")) {
288                         $size = $length = "ndr_charset_length($var_name, CH_$e->{PROPERTIES}->{charset})";
289                 } else {
290                         $size = $length = "ndr_string_length($var_name, sizeof(*$var_name))";
291                 }
292         } else {
293                 $size = ParseExpr($l->{SIZE_IS}, $env, $e);
294                 $length = ParseExpr($l->{LENGTH_IS}, $env, $e);
295         }
296
297         if ((!$l->{IS_SURROUNDING}) and $l->{IS_CONFORMANT}) {
298                 pidl "NDR_CHECK(ndr_push_uint32($ndr, NDR_SCALARS, $size));";
299         }
300         
301         if ($l->{IS_VARYING}) {
302                 pidl "NDR_CHECK(ndr_push_uint32($ndr, NDR_SCALARS, 0));";  # array offset
303                 pidl "NDR_CHECK(ndr_push_uint32($ndr, NDR_SCALARS, $length));";
304         } 
305
306         return $length;
307 }
308
309 sub check_fully_dereferenced($$)
310 {
311         my ($element, $env) = @_;
312
313         return sub ($) {
314                 my $origvar = shift;
315                 my $check = 0;
316
317                 # Figure out the number of pointers in $ptr
318                 my $expandedvar = $origvar;
319                 $expandedvar =~ s/^(\**)//;
320                 my $ptr = $1;
321
322                 my $var = undef;
323                 foreach (keys %$env) {
324                         if ($env->{$_} eq $expandedvar) {
325                                 $var = $_;
326                                 last;
327                         }
328                 }
329                 
330                 return($origvar) unless (defined($var));
331                 my $e;
332                 foreach (@{$element->{PARENT}->{ELEMENTS}}) {
333                         if ($_->{NAME} eq $var) {
334                                 $e = $_;
335                                 last;
336                         }
337                 }
338
339                 $e or die("Environment doesn't match siblings");
340
341                 # See if pointer at pointer level $level
342                 # needs to be checked.
343                 my $nump = 0;
344                 foreach (@{$e->{LEVELS}}) {
345                         if ($_->{TYPE} eq "POINTER") {
346                                 $nump = $_->{POINTER_INDEX}+1;
347                         }
348                 }
349                 warning($element->{ORIGINAL}, "Got pointer for `$e->{NAME}', expected fully derefenced variable") if ($nump > length($ptr));
350                 return ($origvar);
351         }
352 }       
353
354 sub check_null_pointer($$$$)
355 {
356         my ($element, $env, $print_fn, $return) = @_;
357
358         return sub ($) {
359                 my $expandedvar = shift;
360                 my $check = 0;
361
362                 # Figure out the number of pointers in $ptr
363                 $expandedvar =~ s/^(\**)//;
364                 my $ptr = $1;
365
366                 my $var = undef;
367                 foreach (keys %$env) {
368                         if ($env->{$_} eq $expandedvar) {
369                                 $var = $_;
370                                 last;
371                         }
372                 }
373                 
374                 if (defined($var)) {
375                         my $e;
376                         # lookup ptr in $e
377                         foreach (@{$element->{PARENT}->{ELEMENTS}}) {
378                                 if ($_->{NAME} eq $var) {
379                                         $e = $_;
380                                         last;
381                                 }
382                         }
383
384                         $e or die("Environment doesn't match siblings");
385
386                         # See if pointer at pointer level $level
387                         # needs to be checked.
388                         foreach my $l (@{$e->{LEVELS}}) {
389                                 if ($l->{TYPE} eq "POINTER" and 
390                                         $l->{POINTER_INDEX} == length($ptr)) {
391                                         # No need to check ref pointers
392                                         $check = ($l->{POINTER_TYPE} ne "ref");
393                                         last;
394                                 }
395
396                                 if ($l->{TYPE} eq "DATA") {
397                                         warning($element, "too much dereferences for `$var'");
398                                 }
399                         }
400                 } else {
401                         warning($element, "unknown dereferenced expression `$expandedvar'");
402                         $check = 1;
403                 }
404                 
405                 $print_fn->("if ($ptr$expandedvar == NULL) $return") if $check;
406         }
407 }
408
409 #####################################################################
410 # parse an array - pull side
411 sub ParseArrayPullHeader($$$$$)
412 {
413         my ($e,$l,$ndr,$var_name,$env) = @_;
414
415         my $length;
416         my $size;
417
418         if ($l->{IS_CONFORMANT}) {
419                 $length = $size = "ndr_get_array_size($ndr, " . get_pointer_to($var_name) . ")";
420         } elsif ($l->{IS_ZERO_TERMINATED}) { # Noheader arrays
421                 $length = $size = "ndr_get_string_size($ndr, sizeof(*$var_name))";
422         } else {
423                 $length = $size = ParseExprExt($l->{SIZE_IS}, $env, $e->{ORIGINAL}, 
424                     check_null_pointer($e, $env, \&pidl, "return NT_STATUS_INVALID_PARAMETER_MIX;"), check_fully_dereferenced($e, $env));
425         }
426
427         if ((!$l->{IS_SURROUNDING}) and $l->{IS_CONFORMANT}) {
428                 pidl "NDR_CHECK(ndr_pull_array_size(ndr, " . get_pointer_to($var_name) . "));";
429         }
430
431         if ($l->{IS_VARYING}) {
432                 pidl "NDR_CHECK(ndr_pull_array_length($ndr, " . get_pointer_to($var_name) . "));";
433                 $length = "ndr_get_array_length($ndr, " . get_pointer_to($var_name) .")";
434         }
435
436         if ($length ne $size) {
437                 pidl "if ($length > $size) {";
438                 indent;
439                 pidl "return ndr_pull_error($ndr, NDR_ERR_ARRAY_SIZE, \"Bad array size %u should exceed array length %u\", $size, $length);";
440                 deindent;
441                 pidl "}";
442         }
443
444         if ($l->{IS_CONFORMANT} and not $l->{IS_ZERO_TERMINATED}) {
445                 defer "if ($var_name) {";
446                 defer_indent;
447                 my $size = ParseExprExt($l->{SIZE_IS}, $env, $e->{ORIGINAL}, check_null_pointer($e, $env, \&defer, "return NT_STATUS_INVALID_PARAMETER_MIX;"), check_fully_dereferenced($e, $env));
448                 defer "NDR_CHECK(ndr_check_array_size(ndr, (void*)" . get_pointer_to($var_name) . ", $size));";
449                 defer_deindent;
450                 defer "}";
451         }
452
453         if ($l->{IS_VARYING} and not $l->{IS_ZERO_TERMINATED}) {
454                 defer "if ($var_name) {";
455                 defer_indent;
456                 my $length = ParseExprExt($l->{LENGTH_IS}, $env, $e->{ORIGINAL}, 
457                         check_null_pointer($e, $env, \&defer, "return NT_STATUS_INVALID_PARAMETER_MIX;"), 
458                         check_fully_dereferenced($e, $env));
459                 defer "NDR_CHECK(ndr_check_array_length(ndr, (void*)" . get_pointer_to($var_name) . ", $length));";
460                 defer_deindent;
461                 defer "}"
462         }
463
464         if (not $l->{IS_FIXED} and not is_charset_array($e, $l)) {
465                 AllocateArrayLevel($e,$l,$ndr,$env,$size);
466         }
467
468         return $length;
469 }
470
471 sub compression_alg($$)
472 {
473         my ($e, $l) = @_;
474         my ($alg, $clen, $dlen) = split(/ /, $l->{COMPRESSION});
475
476         return $alg;
477 }
478
479 sub compression_clen($$$)
480 {
481         my ($e, $l, $env) = @_;
482         my ($alg, $clen, $dlen) = split(/ /, $l->{COMPRESSION});
483
484         return ParseExpr($clen, $env, $e->{ORIGINAL});
485 }
486
487 sub compression_dlen($$$)
488 {
489         my ($e,$l,$env) = @_;
490         my ($alg, $clen, $dlen) = split(/ /, $l->{COMPRESSION});
491
492         return ParseExpr($dlen, $env, $e->{ORIGINAL});
493 }
494
495 sub ParseCompressionPushStart($$$$)
496 {
497         my ($e,$l,$ndr,$env) = @_;
498         my $comndr = "$ndr\_compressed";
499         my $alg = compression_alg($e, $l);
500         my $dlen = compression_dlen($e, $l, $env);
501
502         pidl "{";
503         indent;
504         pidl "struct ndr_push *$comndr;";
505         pidl "NDR_CHECK(ndr_push_compression_start($ndr, &$comndr, $alg, $dlen));";
506
507         return $comndr;
508 }
509
510 sub ParseCompressionPushEnd($$$$)
511 {
512         my ($e,$l,$ndr,$env) = @_;
513         my $comndr = "$ndr\_compressed";
514         my $alg = compression_alg($e, $l);
515         my $dlen = compression_dlen($e, $l, $env);
516
517         pidl "NDR_CHECK(ndr_push_compression_end($ndr, $comndr, $alg, $dlen));";
518         deindent;
519         pidl "}";
520 }
521
522 sub ParseCompressionPullStart($$$$)
523 {
524         my ($e,$l,$ndr,$env) = @_;
525         my $comndr = "$ndr\_compressed";
526         my $alg = compression_alg($e, $l);
527         my $dlen = compression_dlen($e, $l, $env);
528
529         pidl "{";
530         indent;
531         pidl "struct ndr_pull *$comndr;";
532         pidl "NDR_CHECK(ndr_pull_compression_start($ndr, &$comndr, $alg, $dlen));";
533
534         return $comndr;
535 }
536
537 sub ParseCompressionPullEnd($$$$)
538 {
539         my ($e,$l,$ndr,$env) = @_;
540         my $comndr = "$ndr\_compressed";
541         my $alg = compression_alg($e, $l);
542         my $dlen = compression_dlen($e, $l, $env);
543
544         pidl "NDR_CHECK(ndr_pull_compression_end($ndr, $comndr, $alg, $dlen));";
545         deindent;
546         pidl "}";
547 }
548
549 sub ParseSubcontextPushStart($$$$)
550 {
551         my ($e,$l,$ndr,$env) = @_;
552         my $subndr = "_ndr_$e->{NAME}";
553         my $subcontext_size = ParseExpr($l->{SUBCONTEXT_SIZE}, $env, $e->{ORIGINAL});
554
555         pidl "{";
556         indent;
557         pidl "struct ndr_push *$subndr;";
558         pidl "NDR_CHECK(ndr_push_subcontext_start($ndr, &$subndr, $l->{HEADER_SIZE}, $subcontext_size));";
559
560         if (defined $l->{COMPRESSION}) {
561                 $subndr = ParseCompressionPushStart($e, $l, $subndr, $env);
562         }
563
564         return $subndr;
565 }
566
567 sub ParseSubcontextPushEnd($$$$)
568 {
569         my ($e,$l,$ndr,$env) = @_;
570         my $subndr = "_ndr_$e->{NAME}";
571         my $subcontext_size = ParseExpr($l->{SUBCONTEXT_SIZE}, $env, $e->{ORIGINAL});
572
573         if (defined $l->{COMPRESSION}) {
574                 ParseCompressionPushEnd($e, $l, $subndr, $env);
575         }
576
577         pidl "NDR_CHECK(ndr_push_subcontext_end($ndr, $subndr, $l->{HEADER_SIZE}, $subcontext_size));";
578         deindent;
579         pidl "}";
580 }
581
582 sub ParseSubcontextPullStart($$$$)
583 {
584         my ($e,$l,$ndr,$env) = @_;
585         my $subndr = "_ndr_$e->{NAME}";
586         my $subcontext_size = ParseExpr($l->{SUBCONTEXT_SIZE}, $env, $e->{ORIGINAL});
587
588         pidl "{";
589         indent;
590         pidl "struct ndr_pull *$subndr;";
591         pidl "NDR_CHECK(ndr_pull_subcontext_start($ndr, &$subndr, $l->{HEADER_SIZE}, $subcontext_size));";
592
593         if (defined $l->{COMPRESSION}) {
594                 $subndr = ParseCompressionPullStart($e, $l, $subndr, $env);
595         }
596
597         return $subndr;
598 }
599
600 sub ParseSubcontextPullEnd($$$$)
601 {
602         my ($e,$l,$ndr,$env) = @_;
603         my $subndr = "_ndr_$e->{NAME}";
604         my $subcontext_size = ParseExpr($l->{SUBCONTEXT_SIZE}, $env, $e->{ORIGINAL});
605
606         if (defined $l->{COMPRESSION}) {
607                 ParseCompressionPullEnd($e, $l, $subndr, $env);
608         }
609
610         pidl "NDR_CHECK(ndr_pull_subcontext_end($ndr, $subndr, $l->{HEADER_SIZE}, $subcontext_size));";
611         deindent;
612         pidl "}";
613 }
614
615 sub ParseElementPushLevel
616 {
617         my ($e,$l,$ndr,$var_name,$env,$primitives,$deferred) = @_;
618
619         my $ndr_flags = CalcNdrFlags($l, $primitives, $deferred);
620
621         if ($l->{TYPE} eq "ARRAY" and ($l->{IS_CONFORMANT} or $l->{IS_VARYING})) {
622                 $var_name = get_pointer_to($var_name);
623         }
624
625         if (defined($ndr_flags)) {
626                 if ($l->{TYPE} eq "SUBCONTEXT") {
627                         my $subndr = ParseSubcontextPushStart($e, $l, $ndr, $env);
628                         ParseElementPushLevel($e, GetNextLevel($e, $l), $subndr, $var_name, $env, 1, 1);
629                         ParseSubcontextPushEnd($e, $l, $ndr, $env);
630                 } elsif ($l->{TYPE} eq "POINTER") {
631                         ParsePtrPush($e, $l, $var_name);
632                 } elsif ($l->{TYPE} eq "ARRAY") {
633                         my $length = ParseArrayPushHeader($e, $l, $ndr, $var_name, $env); 
634
635                         my $nl = GetNextLevel($e, $l);
636
637                         # Allow speedups for arrays of scalar types
638                         if (is_charset_array($e,$l)) {
639                                 pidl "NDR_CHECK(ndr_push_charset($ndr, $ndr_flags, $var_name, $length, sizeof(" . mapTypeName($nl->{DATA_TYPE}) . "), CH_$e->{PROPERTIES}->{charset}));";
640                                 return;
641                         } elsif (has_fast_array($e,$l)) {
642                                 pidl "NDR_CHECK(ndr_push_array_$nl->{DATA_TYPE}($ndr, $ndr_flags, $var_name, $length));";
643                                 return;
644                         } 
645                 } elsif ($l->{TYPE} eq "SWITCH") {
646                         ParseSwitchPush($e, $l, $ndr, $var_name, $ndr_flags, $env);
647                 } elsif ($l->{TYPE} eq "DATA") {
648                         ParseDataPush($e, $l, $ndr, $var_name, $ndr_flags);
649                 }
650         }
651
652         if ($l->{TYPE} eq "POINTER" and $deferred) {
653                 if ($l->{POINTER_TYPE} ne "ref") {
654                         pidl "if ($var_name) {";
655                         indent;
656                         if ($l->{POINTER_TYPE} eq "relative") {
657                                 pidl "NDR_CHECK(ndr_push_relative_ptr2(ndr, $var_name));";
658                         }
659                 }
660                 $var_name = get_value_of($var_name);
661                 ParseElementPushLevel($e, GetNextLevel($e, $l), $ndr, $var_name, $env, 1, 1);
662
663                 if ($l->{POINTER_TYPE} ne "ref") {
664                         deindent;
665                         pidl "}";
666                 }
667         } elsif ($l->{TYPE} eq "ARRAY" and not has_fast_array($e,$l) and
668                 not is_charset_array($e, $l)) {
669                 my $length = ParseExpr($l->{LENGTH_IS}, $env, $e->{ORIGINAL});
670                 my $counter = "cntr_$e->{NAME}_$l->{LEVEL_INDEX}";
671
672                 $var_name = $var_name . "[$counter]";
673
674                 if (($primitives and not $l->{IS_DEFERRED}) or ($deferred and $l->{IS_DEFERRED})) {
675                         pidl "for ($counter = 0; $counter < $length; $counter++) {";
676                         indent;
677                         ParseElementPushLevel($e, GetNextLevel($e, $l), $ndr, $var_name, $env, 1, 0);
678                         deindent;
679                         pidl "}";
680                 }
681
682                 if ($deferred and ContainsDeferred($e, $l)) {
683                         pidl "for ($counter = 0; $counter < $length; $counter++) {";
684                         indent;
685                         ParseElementPushLevel($e, GetNextLevel($e, $l), $ndr, $var_name, $env, 0, 1);
686                         deindent;
687                         pidl "}";
688                 }       
689         } elsif ($l->{TYPE} eq "SWITCH") {
690                 ParseElementPushLevel($e, GetNextLevel($e, $l), $ndr, $var_name, $env, $primitives, $deferred);
691         }
692 }
693
694 #####################################################################
695 # parse scalars in a structure element
696 sub ParseElementPush($$$$$)
697 {
698         my ($e,$ndr,$env,$primitives,$deferred) = @_;
699         my $subndr = undef;
700
701         my $var_name = $env->{$e->{NAME}};
702
703         return unless $primitives or ($deferred and ContainsDeferred($e, $e->{LEVELS}[0]));
704
705         # Representation type is different from transmit_as
706         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE}) {
707                 pidl "{";
708                 indent;
709                 my $transmit_name = "_transmit_$e->{NAME}";
710                 pidl mapTypeName($e->{TYPE}) ." $transmit_name;";
711                 pidl "NDR_CHECK(ndr_$e->{REPRESENTATION_TYPE}_to_$e->{TYPE}($var_name, " . get_pointer_to($transmit_name) . "));";
712                 $var_name = $transmit_name;
713         }
714
715         $var_name = append_prefix($e, $var_name);
716
717         start_flags($e);
718
719         if (defined(my $value = has_property($e, "value"))) {
720                 $var_name = ParseExpr($value, $env, $e->{ORIGINAL});
721         }
722
723         ParseElementPushLevel($e, $e->{LEVELS}[0], $ndr, $var_name, $env, $primitives, $deferred);
724
725         end_flags($e);
726
727         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE}) {
728                 deindent;
729                 pidl "}";
730         }
731 }
732
733 #####################################################################
734 # parse a pointer in a struct element or function
735 sub ParsePtrPush($$$)
736 {
737         my ($e,$l,$var_name) = @_;
738
739         if ($l->{POINTER_TYPE} eq "ref") {
740                 pidl "if ($var_name == NULL) return NT_STATUS_INVALID_PARAMETER_MIX;";
741                 if ($l->{LEVEL} eq "EMBEDDED") {
742                         pidl "NDR_CHECK(ndr_push_ref_ptr(ndr));";
743                 }
744         } elsif ($l->{POINTER_TYPE} eq "relative") {
745                 pidl "NDR_CHECK(ndr_push_relative_ptr1(ndr, $var_name));";
746         } elsif ($l->{POINTER_TYPE} eq "unique") {
747                 pidl "NDR_CHECK(ndr_push_unique_ptr(ndr, $var_name));";
748         } elsif ($l->{POINTER_TYPE} eq "full") {
749                 pidl "NDR_CHECK(ndr_push_full_ptr(ndr, $var_name));";
750         } else {
751                 die("Unhandled pointer type $l->{POINTER_TYPE}");
752         }
753 }
754
755 #####################################################################
756 # print scalars in a structure element
757 sub ParseElementPrint($$$)
758 {
759         my($e, $var_name, $env) = @_;
760
761         return if (has_property($e, "noprint"));
762
763         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE}) {
764                 pidl "ndr_print_$e->{REPRESENTATION_TYPE}(ndr, \"$e->{NAME}\", $var_name);";
765                 return;
766         }
767
768         $var_name = append_prefix($e, $var_name);
769
770         if (defined(my $value = has_property($e, "value"))) {
771                 $var_name = "(ndr->flags & LIBNDR_PRINT_SET_VALUES)?" . ParseExpr($value,$env, $e->{ORIGINAL}) . ":$var_name";
772         }
773
774         foreach my $l (@{$e->{LEVELS}}) {
775                 if ($l->{TYPE} eq "POINTER") {
776                         pidl "ndr_print_ptr(ndr, \"$e->{NAME}\", $var_name);";
777                         pidl "ndr->depth++;";
778                         if ($l->{POINTER_TYPE} ne "ref") {
779                                 pidl "if ($var_name) {";
780                                 indent;
781                         }
782                         $var_name = get_value_of($var_name);
783                 } elsif ($l->{TYPE} eq "ARRAY") {
784                         my $length;
785
786                         if ($l->{IS_CONFORMANT} or $l->{IS_VARYING}) {
787                                 $var_name = get_pointer_to($var_name); 
788                         }
789                         
790                         if ($l->{IS_ZERO_TERMINATED}) {
791                                 $length = "ndr_string_length($var_name, sizeof(*$var_name))";
792                         } else {
793                                 $length = ParseExprExt($l->{LENGTH_IS}, $env, $e->{ORIGINAL}, 
794                                                         check_null_pointer($e, $env, \&pidl, "return;"), check_fully_dereferenced($e, $env));
795                         }
796
797                         if (is_charset_array($e,$l)) {
798                                 pidl "ndr_print_string(ndr, \"$e->{NAME}\", $var_name);";
799                                 last;
800                         } elsif (has_fast_array($e, $l)) {
801                                 my $nl = GetNextLevel($e, $l);
802                                 pidl "ndr_print_array_$nl->{DATA_TYPE}(ndr, \"$e->{NAME}\", $var_name, $length);";
803                                 last;
804                         } else {
805                                 my $counter = "cntr_$e->{NAME}_$l->{LEVEL_INDEX}";
806
807                                 pidl "ndr->print(ndr, \"\%s: ARRAY(\%d)\", \"$e->{NAME}\", $length);";
808                                 pidl 'ndr->depth++;';
809                                 pidl "for ($counter=0;$counter<$length;$counter++) {";
810                                 indent;
811                                 pidl "char *idx_$l->{LEVEL_INDEX}=NULL;";
812                                 pidl "asprintf(&idx_$l->{LEVEL_INDEX}, \"[\%d]\", $counter);";
813                                 pidl "if (idx_$l->{LEVEL_INDEX}) {";
814                                 indent;
815
816                                 $var_name = $var_name . "[$counter]";
817                         }
818                 } elsif ($l->{TYPE} eq "DATA") {
819                         if (not Parse::Pidl::Typelist::is_scalar($l->{DATA_TYPE}) or Parse::Pidl::Typelist::scalar_is_reference($l->{DATA_TYPE})) {
820                                 $var_name = get_pointer_to($var_name);
821                         }
822                         pidl "ndr_print_$l->{DATA_TYPE}(ndr, \"$e->{NAME}\", $var_name);";
823                 } elsif ($l->{TYPE} eq "SWITCH") {
824                         my $switch_var = ParseExprExt($l->{SWITCH_IS}, $env, $e->{ORIGINAL}, 
825                                                 check_null_pointer($e, $env, \&pidl, "return;"), check_fully_dereferenced($e, $env));
826                         pidl "ndr_print_set_switch_value(ndr, " . get_pointer_to($var_name) . ", $switch_var);";
827                 } 
828         }
829
830         foreach my $l (reverse @{$e->{LEVELS}}) {
831                 if ($l->{TYPE} eq "POINTER") {
832                         if ($l->{POINTER_TYPE} ne "ref") {
833                                 deindent;
834                                 pidl "}";
835                         }
836                         pidl "ndr->depth--;";
837                 } elsif (($l->{TYPE} eq "ARRAY")
838                         and not is_charset_array($e,$l)
839                         and not has_fast_array($e,$l)) {
840                         pidl "free(idx_$l->{LEVEL_INDEX});";
841                         deindent;
842                         pidl "}";
843                         deindent;
844                         pidl "}";
845                         pidl "ndr->depth--;";
846                 }
847         }
848 }
849
850 #####################################################################
851 # parse scalars in a structure element - pull size
852 sub ParseSwitchPull($$$$$$)
853 {
854         my($e,$l,$ndr,$var_name,$ndr_flags,$env) = @_;
855         my $switch_var = ParseExprExt($l->{SWITCH_IS}, $env, $e->{ORIGINAL}, 
856                 check_null_pointer($e, $env, \&pidl, "return NT_STATUS_INVALID_PARAMETER_MIX;"), check_fully_dereferenced($e, $env));
857
858         $var_name = get_pointer_to($var_name);
859         pidl "NDR_CHECK(ndr_pull_set_switch_value($ndr, $var_name, $switch_var));";
860 }
861
862 #####################################################################
863 # push switch element
864 sub ParseSwitchPush($$$$$$)
865 {
866         my($e,$l,$ndr,$var_name,$ndr_flags,$env) = @_;
867         my $switch_var = ParseExprExt($l->{SWITCH_IS}, $env, $e->{ORIGINAL}, 
868                 check_null_pointer($e, $env, \&pidl, "return NT_STATUS_INVALID_PARAMETER_MIX;"), check_fully_dereferenced($e, $env));
869
870         $var_name = get_pointer_to($var_name);
871         pidl "NDR_CHECK(ndr_push_set_switch_value($ndr, $var_name, $switch_var));";
872 }
873
874 sub ParseDataPull($$$$$)
875 {
876         my ($e,$l,$ndr,$var_name,$ndr_flags) = @_;
877
878         if (Parse::Pidl::Typelist::scalar_is_reference($l->{DATA_TYPE})) {
879                 $var_name = get_pointer_to($var_name);
880         }
881
882         $var_name = get_pointer_to($var_name);
883
884         pidl "NDR_CHECK(ndr_pull_$l->{DATA_TYPE}($ndr, $ndr_flags, $var_name));";
885
886         if (my $range = has_property($e, "range")) {
887                 $var_name = get_value_of($var_name);
888                 my ($low, $high) = split(/ /, $range, 2);
889                 pidl "if ($var_name < $low || $var_name > $high) {";
890                 pidl "\treturn ndr_pull_error($ndr, NDR_ERR_RANGE, \"value out of range\");";
891                 pidl "}";
892         }
893 }
894
895 sub ParseDataPush($$$$$)
896 {
897         my ($e,$l,$ndr,$var_name,$ndr_flags) = @_;
898
899         # strings are passed by value rather than reference
900         if (not Parse::Pidl::Typelist::is_scalar($l->{DATA_TYPE}) or Parse::Pidl::Typelist::scalar_is_reference($l->{DATA_TYPE})) {
901                 $var_name = get_pointer_to($var_name);
902         }
903
904         pidl "NDR_CHECK(ndr_push_$l->{DATA_TYPE}($ndr, $ndr_flags, $var_name));";
905 }
906
907 sub CalcNdrFlags($$$)
908 {
909         my ($l,$primitives,$deferred) = @_;
910
911         my $scalars = 0;
912         my $buffers = 0;
913
914         # Add NDR_SCALARS if this one is deferred 
915         # and deferreds may be pushed
916         $scalars = 1 if ($l->{IS_DEFERRED} and $deferred);
917
918         # Add NDR_SCALARS if this one is not deferred and 
919         # primitives may be pushed
920         $scalars = 1 if (!$l->{IS_DEFERRED} and $primitives);
921         
922         # Add NDR_BUFFERS if this one contains deferred stuff
923         # and deferreds may be pushed
924         $buffers = 1 if ($l->{CONTAINS_DEFERRED} and $deferred);
925
926         return "NDR_SCALARS|NDR_BUFFERS" if ($scalars and $buffers);
927         return "NDR_SCALARS" if ($scalars);
928         return "NDR_BUFFERS" if ($buffers);
929         return undef;
930 }
931
932 sub ParseMemCtxPullStart($$$)
933 {
934         my ($e, $l, $ptr_name) = @_;
935
936         my $mem_r_ctx = "_mem_save_$e->{NAME}_$l->{LEVEL_INDEX}";
937         my $mem_c_ctx = $ptr_name;
938         my $mem_c_flags = "0";
939
940         return if ($l->{TYPE} eq "ARRAY" and $l->{IS_FIXED});
941
942         if (($l->{TYPE} eq "POINTER") and ($l->{POINTER_TYPE} eq "ref")) {
943                 my $nl = GetNextLevel($e, $l);
944                 my $next_is_array = ($nl->{TYPE} eq "ARRAY");
945                 my $next_is_string = (($nl->{TYPE} eq "DATA") and 
946                                         ($nl->{DATA_TYPE} eq "string"));
947                 if ($next_is_array or $next_is_string) {
948                         return;
949                 } else {
950                         $mem_c_flags = "LIBNDR_FLAG_REF_ALLOC";
951                 }
952         }
953
954         pidl "$mem_r_ctx = NDR_PULL_GET_MEM_CTX(ndr);";
955         pidl "NDR_PULL_SET_MEM_CTX(ndr, $mem_c_ctx, $mem_c_flags);";
956 }
957
958 sub ParseMemCtxPullEnd($$)
959 {
960         my $e = shift;
961         my $l = shift;
962
963         my $mem_r_ctx = "_mem_save_$e->{NAME}_$l->{LEVEL_INDEX}";
964         my $mem_r_flags = "0";
965
966         return if ($l->{TYPE} eq "ARRAY" and $l->{IS_FIXED});
967
968         if (($l->{TYPE} eq "POINTER") and ($l->{POINTER_TYPE} eq "ref")) {
969                 my $nl = GetNextLevel($e, $l);
970                 my $next_is_array = ($nl->{TYPE} eq "ARRAY");
971                 my $next_is_string = (($nl->{TYPE} eq "DATA") and 
972                                         ($nl->{DATA_TYPE} eq "string"));
973                 if ($next_is_array or $next_is_string) {
974                         return;
975                 } else {
976                         $mem_r_flags = "LIBNDR_FLAG_REF_ALLOC";
977                 }
978         }
979
980         pidl "NDR_PULL_SET_MEM_CTX(ndr, $mem_r_ctx, $mem_r_flags);";
981 }
982
983 sub CheckStringTerminator($$$$)
984 {
985         my ($ndr,$e,$l,$length) = @_;
986         my $nl = GetNextLevel($e, $l);
987
988         # Make sure last element is zero!
989         pidl "NDR_CHECK(ndr_check_string_terminator($ndr, $length, sizeof($nl->{DATA_TYPE}_t)));";
990 }
991
992 sub ParseElementPullLevel
993 {
994         my($e,$l,$ndr,$var_name,$env,$primitives,$deferred) = @_;
995
996         my $ndr_flags = CalcNdrFlags($l, $primitives, $deferred);
997
998         if ($l->{TYPE} eq "ARRAY" and ($l->{IS_VARYING} or $l->{IS_CONFORMANT})) {
999                 $var_name = get_pointer_to($var_name);
1000         }
1001
1002         # Only pull something if there's actually something to be pulled
1003         if (defined($ndr_flags)) {
1004                 if ($l->{TYPE} eq "SUBCONTEXT") {
1005                         my $subndr = ParseSubcontextPullStart($e, $l, $ndr, $env);
1006                         ParseElementPullLevel($e, GetNextLevel($e,$l), $subndr, $var_name, $env, 1, 1);
1007                         ParseSubcontextPullEnd($e, $l, $ndr, $env);
1008                 } elsif ($l->{TYPE} eq "ARRAY") {
1009                         my $length = ParseArrayPullHeader($e, $l, $ndr, $var_name, $env);
1010
1011                         my $nl = GetNextLevel($e, $l);
1012
1013                         if (is_charset_array($e,$l)) {
1014                                 if ($l->{IS_ZERO_TERMINATED}) {
1015                                         CheckStringTerminator($ndr, $e, $l, $length);
1016                                 }
1017                                 pidl "NDR_CHECK(ndr_pull_charset($ndr, $ndr_flags, ".get_pointer_to($var_name).", $length, sizeof(" . mapTypeName($nl->{DATA_TYPE}) . "), CH_$e->{PROPERTIES}->{charset}));";
1018                                 return;
1019                         } elsif (has_fast_array($e, $l)) {
1020                                 if ($l->{IS_ZERO_TERMINATED}) {
1021                                         CheckStringTerminator($ndr,$e,$l,$length);
1022                                 }
1023                                 pidl "NDR_CHECK(ndr_pull_array_$nl->{DATA_TYPE}($ndr, $ndr_flags, $var_name, $length));";
1024                                 return;
1025                         }
1026                 } elsif ($l->{TYPE} eq "POINTER") {
1027                         ParsePtrPull($e, $l, $ndr, $var_name);
1028                 } elsif ($l->{TYPE} eq "SWITCH") {
1029                         ParseSwitchPull($e, $l, $ndr, $var_name, $ndr_flags, $env);
1030                 } elsif ($l->{TYPE} eq "DATA") {
1031                         ParseDataPull($e, $l, $ndr, $var_name, $ndr_flags);
1032                 }
1033         }
1034
1035         # add additional constructions
1036         if ($l->{TYPE} eq "POINTER" and $deferred) {
1037                 if ($l->{POINTER_TYPE} ne "ref") {
1038                         pidl "if ($var_name) {";
1039                         indent;
1040
1041                         if ($l->{POINTER_TYPE} eq "relative") {
1042                                 pidl "struct ndr_pull_save _relative_save;";
1043                                 pidl "ndr_pull_save(ndr, &_relative_save);";
1044                                 pidl "NDR_CHECK(ndr_pull_relative_ptr2(ndr, $var_name));";
1045                         }
1046                 }
1047
1048                 ParseMemCtxPullStart($e, $l, $var_name);
1049
1050                 $var_name = get_value_of($var_name);
1051                 ParseElementPullLevel($e, GetNextLevel($e,$l), $ndr, $var_name, $env, 1, 1);
1052
1053                 ParseMemCtxPullEnd($e,$l);
1054
1055                 if ($l->{POINTER_TYPE} ne "ref") {
1056                         if ($l->{POINTER_TYPE} eq "relative") {
1057                                 pidl "ndr_pull_restore(ndr, &_relative_save);";
1058                         }
1059                         deindent;
1060                         pidl "}";
1061                 }
1062         } elsif ($l->{TYPE} eq "ARRAY" and 
1063                         not has_fast_array($e,$l) and not is_charset_array($e, $l)) {
1064                 my $length = ParseExpr($l->{LENGTH_IS}, $env, $e->{ORIGINAL});
1065                 my $counter = "cntr_$e->{NAME}_$l->{LEVEL_INDEX}";
1066                 my $array_name = $var_name;
1067
1068                 $var_name = $var_name . "[$counter]";
1069
1070                 ParseMemCtxPullStart($e, $l, $array_name);
1071
1072                 if (($primitives and not $l->{IS_DEFERRED}) or ($deferred and $l->{IS_DEFERRED})) {
1073                         my $nl = GetNextLevel($e,$l);
1074
1075                         if ($l->{IS_ZERO_TERMINATED}) {
1076                                 CheckStringTerminator($ndr,$e,$l,$length);
1077                         }
1078
1079                         pidl "for ($counter = 0; $counter < $length; $counter++) {";
1080                         indent;
1081                         ParseElementPullLevel($e, $nl, $ndr, $var_name, $env, 1, 0);
1082                         deindent;
1083                         pidl "}";
1084                 }
1085
1086                 if ($deferred and ContainsDeferred($e, $l)) {
1087                         pidl "for ($counter = 0; $counter < $length; $counter++) {";
1088                         indent;
1089                         ParseElementPullLevel($e,GetNextLevel($e,$l), $ndr, $var_name, $env, 0, 1);
1090                         deindent;
1091                         pidl "}";
1092                 }
1093
1094                 ParseMemCtxPullEnd($e, $l);
1095
1096         } elsif ($l->{TYPE} eq "SWITCH") {
1097                 ParseElementPullLevel($e, GetNextLevel($e,$l), $ndr, $var_name, $env, $primitives, $deferred);
1098         }
1099 }
1100
1101 #####################################################################
1102 # parse scalars in a structure element - pull size
1103 sub ParseElementPull($$$$$)
1104 {
1105         my($e,$ndr,$env,$primitives,$deferred) = @_;
1106
1107         my $var_name = $env->{$e->{NAME}};
1108         my $represent_name;
1109         my $transmit_name;
1110
1111         return unless $primitives or ($deferred and ContainsDeferred($e, $e->{LEVELS}[0]));
1112
1113         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE}) {
1114                 pidl "{";
1115                 indent;
1116                 $represent_name = $var_name;
1117                 $transmit_name = "_transmit_$e->{NAME}";
1118                 $var_name = $transmit_name;
1119                 pidl mapTypeName($e->{TYPE})." $var_name;";
1120         }
1121
1122         $var_name = append_prefix($e, $var_name);
1123
1124         start_flags($e);
1125
1126         ParseElementPullLevel($e,$e->{LEVELS}[0],$ndr,$var_name,$env,$primitives,$deferred);
1127
1128         end_flags($e);
1129
1130         # Representation type is different from transmit_as
1131         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE}) {
1132                 pidl "NDR_CHECK(ndr_$e->{TYPE}_to_$e->{REPRESENTATION_TYPE}($transmit_name, ".get_pointer_to($represent_name)."));";
1133                 deindent;
1134                 pidl "}";
1135         }
1136 }
1137
1138 #####################################################################
1139 # parse a pointer in a struct element or function
1140 sub ParsePtrPull($$$$)
1141 {
1142         my($e,$l,$ndr,$var_name) = @_;
1143
1144         my $nl = GetNextLevel($e, $l);
1145         my $next_is_array = ($nl->{TYPE} eq "ARRAY");
1146         my $next_is_string = (($nl->{TYPE} eq "DATA") and 
1147                                                  ($nl->{DATA_TYPE} eq "string"));
1148
1149         if ($l->{POINTER_TYPE} eq "ref") {
1150                 if ($l->{LEVEL} eq "EMBEDDED") {
1151                         pidl "NDR_CHECK(ndr_pull_ref_ptr($ndr, &_ptr_$e->{NAME}));";
1152                 }
1153
1154                 if (!$next_is_array and !$next_is_string) {
1155                         pidl "if (ndr->flags & LIBNDR_FLAG_REF_ALLOC) {";
1156                         pidl "\tNDR_PULL_ALLOC($ndr, $var_name);"; 
1157                         pidl "}";
1158                 }
1159                 
1160                 return;
1161         } elsif (($l->{POINTER_TYPE} eq "unique") or 
1162                  ($l->{POINTER_TYPE} eq "relative") or
1163                  ($l->{POINTER_TYPE} eq "full")) {
1164                 pidl "NDR_CHECK(ndr_pull_generic_ptr($ndr, &_ptr_$e->{NAME}));";
1165                 pidl "if (_ptr_$e->{NAME}) {";
1166                 indent;
1167         } else {
1168                 die("Unhandled pointer type $l->{POINTER_TYPE}");
1169         }
1170
1171         # Don't do this for arrays, they're allocated at the actual level 
1172         # of the array
1173         unless ($next_is_array or $next_is_string) { 
1174                 pidl "NDR_PULL_ALLOC($ndr, $var_name);"; 
1175         } else {
1176                 # FIXME: Yes, this is nasty.
1177                 # We allocate an array twice
1178                 # - once just to indicate that it's there,
1179                 # - then the real allocation...
1180                 pidl "NDR_PULL_ALLOC($ndr, $var_name);";
1181         }
1182
1183         #pidl "memset($var_name, 0, sizeof($var_name));";
1184         if ($l->{POINTER_TYPE} eq "relative") {
1185                 pidl "NDR_CHECK(ndr_pull_relative_ptr1($ndr, $var_name, _ptr_$e->{NAME}));";
1186         }
1187         deindent;
1188         pidl "} else {";
1189         pidl "\t$var_name = NULL;";
1190         pidl "}";
1191 }
1192
1193 sub ParseStructPushPrimitives($$$$)
1194 {
1195         my ($struct, $name, $varname, $env) = @_;
1196
1197         # see if the structure contains a conformant array. If it
1198         # does, then it must be the last element of the structure, and
1199         # we need to push the conformant length early, as it fits on
1200         # the wire before the structure (and even before the structure
1201         # alignment)
1202         if (defined($struct->{SURROUNDING_ELEMENT})) {
1203                 my $e = $struct->{SURROUNDING_ELEMENT};
1204
1205                 if (defined($e->{LEVELS}[0]) and 
1206                         $e->{LEVELS}[0]->{TYPE} eq "ARRAY") {
1207                         my $size;
1208                         
1209                         if ($e->{LEVELS}[0]->{IS_ZERO_TERMINATED}) {
1210                                 if (has_property($e, "charset")) {
1211                                         $size = "ndr_charset_length($varname->$e->{NAME}, CH_$e->{PROPERTIES}->{charset})";
1212                                 } else {
1213                                         $size = "ndr_string_length($varname->$e->{NAME}, sizeof(*$varname->$e->{NAME}))";
1214                                 }
1215                         } else {
1216                                 $size = ParseExpr($e->{LEVELS}[0]->{SIZE_IS}, $env, $e->{ORIGINAL});
1217                         }
1218
1219                         pidl "NDR_CHECK(ndr_push_uint32(ndr, NDR_SCALARS, $size));";
1220                 } else {
1221                         pidl "NDR_CHECK(ndr_push_uint32(ndr, NDR_SCALARS, ndr_string_array_size(ndr, $varname->$e->{NAME})));";
1222                 }
1223         }
1224
1225         pidl "NDR_CHECK(ndr_push_align(ndr, $struct->{ALIGN}));";
1226
1227         if (defined($struct->{PROPERTIES}{relative_base})) {
1228                 # set the current offset as base for relative pointers
1229                 # and store it based on the toplevel struct/union
1230                 pidl "NDR_CHECK(ndr_push_setup_relative_base_offset1(ndr, $varname, ndr->offset));";
1231         }
1232
1233         ParseElementPush($_, "ndr", $env, 1, 0) foreach (@{$struct->{ELEMENTS}});
1234 }
1235
1236 sub ParseStructPushDeferred($$$$)
1237 {
1238         my ($struct, $name, $varname, $env) = @_;
1239         if (defined($struct->{PROPERTIES}{relative_base})) {
1240                 # retrieve the current offset as base for relative pointers
1241                 # based on the toplevel struct/union
1242                 pidl "NDR_CHECK(ndr_push_setup_relative_base_offset2(ndr, $varname));";
1243         }
1244         ParseElementPush($_, "ndr", $env, 0, 1) foreach (@{$struct->{ELEMENTS}});
1245 }
1246
1247 #####################################################################
1248 # parse a struct
1249 sub ParseStructPush($$$)
1250 {
1251         my ($struct, $name, $varname) = @_;
1252         
1253         return unless defined($struct->{ELEMENTS});
1254
1255         my $env = GenerateStructEnv($struct, $varname);
1256
1257         EnvSubstituteValue($env, $struct);
1258
1259         DeclareArrayVariables($_) foreach (@{$struct->{ELEMENTS}});
1260
1261         start_flags($struct);
1262
1263         pidl "if (ndr_flags & NDR_SCALARS) {";
1264         indent;
1265         ParseStructPushPrimitives($struct, $name, $varname, $env);
1266         deindent;
1267         pidl "}";
1268
1269         pidl "if (ndr_flags & NDR_BUFFERS) {";
1270         indent;
1271         ParseStructPushDeferred($struct, $name, $varname, $env);
1272         deindent;
1273         pidl "}";
1274
1275         end_flags($struct);
1276 }
1277
1278 #####################################################################
1279 # generate a push function for an enum
1280 sub ParseEnumPush($$$)
1281 {
1282         my($enum,$name,$varname) = @_;
1283         my($type_fn) = $enum->{BASE_TYPE};
1284
1285         start_flags($enum);
1286         pidl "NDR_CHECK(ndr_push_$type_fn(ndr, NDR_SCALARS, $varname));";
1287         end_flags($enum);
1288 }
1289
1290 #####################################################################
1291 # generate a pull function for an enum
1292 sub ParseEnumPull($$$)
1293 {
1294         my($enum,$name,$varname) = @_;
1295         my($type_fn) = $enum->{BASE_TYPE};
1296         my($type_v_decl) = mapTypeName($type_fn);
1297
1298         pidl "$type_v_decl v;";
1299         start_flags($enum);
1300         pidl "NDR_CHECK(ndr_pull_$type_fn(ndr, NDR_SCALARS, &v));";
1301         pidl "*$varname = v;";
1302
1303         end_flags($enum);
1304 }
1305
1306 #####################################################################
1307 # generate a print function for an enum
1308 sub ParseEnumPrint($$$)
1309 {
1310         my($enum,$name,$varname) = @_;
1311
1312         pidl "const char *val = NULL;";
1313         pidl "";
1314
1315         start_flags($enum);
1316
1317         pidl "switch ($varname) {";
1318         indent;
1319         my $els = \@{$enum->{ELEMENTS}};
1320         foreach my $i (0 .. $#{$els}) {
1321                 my $e = ${$els}[$i];
1322                 chomp $e;
1323                 if ($e =~ /^(.*)=/) {
1324                         $e = $1;
1325                 }
1326                 pidl "case $e: val = \"$e\"; break;";
1327         }
1328
1329         deindent;
1330         pidl "}";
1331         
1332         pidl "ndr_print_enum(ndr, name, \"$enum->{TYPE}\", val, $varname);";
1333
1334         end_flags($enum);
1335 }
1336
1337 sub DeclEnum($$$$)
1338 {
1339         my ($e,$t,$name,$varname) = @_;
1340         return "enum $name " . 
1341                 ($t eq "pull"?"*":"") . $varname;
1342 }
1343
1344 $typefamily{ENUM} = {
1345         DECL => \&DeclEnum,
1346         PUSH_FN_BODY => \&ParseEnumPush,
1347         PULL_FN_BODY => \&ParseEnumPull,
1348         PRINT_FN_BODY => \&ParseEnumPrint,
1349 };
1350
1351 #####################################################################
1352 # generate a push function for a bitmap
1353 sub ParseBitmapPush($$$)
1354 {
1355         my($bitmap,$name,$varname) = @_;
1356         my($type_fn) = $bitmap->{BASE_TYPE};
1357
1358         start_flags($bitmap);
1359
1360         pidl "NDR_CHECK(ndr_push_$type_fn(ndr, NDR_SCALARS, $varname));";
1361
1362         end_flags($bitmap);
1363 }
1364
1365 #####################################################################
1366 # generate a pull function for an bitmap
1367 sub ParseBitmapPull($$$)
1368 {
1369         my($bitmap,$name,$varname) = @_;
1370         my $type_fn = $bitmap->{BASE_TYPE};
1371         my($type_decl) = mapTypeName($bitmap->{BASE_TYPE});
1372
1373         pidl "$type_decl v;";
1374         start_flags($bitmap);
1375         pidl "NDR_CHECK(ndr_pull_$type_fn(ndr, NDR_SCALARS, &v));";
1376         pidl "*$varname = v;";
1377
1378         end_flags($bitmap);
1379 }
1380
1381 #####################################################################
1382 # generate a print function for an bitmap
1383 sub ParseBitmapPrintElement($$$$)
1384 {
1385         my($e,$bitmap,$name,$varname) = @_;
1386         my($type_decl) = mapTypeName($bitmap->{BASE_TYPE});
1387         my($type_fn) = $bitmap->{BASE_TYPE};
1388         my($flag);
1389
1390         if ($e =~ /^(\w+) .*$/) {
1391                 $flag = "$1";
1392         } else {
1393                 die "Bitmap: \"$name\" invalid Flag: \"$e\"";
1394         }
1395
1396         pidl "ndr_print_bitmap_flag(ndr, sizeof($type_decl), \"$flag\", $flag, $varname);";
1397 }
1398
1399 #####################################################################
1400 # generate a print function for an bitmap
1401 sub ParseBitmapPrint($$$)
1402 {
1403         my($bitmap,$name,$varname) = @_;
1404         my($type_decl) = mapTypeName($bitmap->{TYPE});
1405         my($type_fn) = $bitmap->{BASE_TYPE};
1406
1407         start_flags($bitmap);
1408
1409         pidl "ndr_print_$type_fn(ndr, name, $varname);";
1410
1411         pidl "ndr->depth++;";
1412         foreach my $e (@{$bitmap->{ELEMENTS}}) {
1413                 ParseBitmapPrintElement($e, $bitmap, $name, $varname);
1414         }
1415         pidl "ndr->depth--;";
1416
1417         end_flags($bitmap);
1418 }
1419
1420 sub DeclBitmap($$$$)
1421 {
1422         my ($e,$t,$name,$varname) = @_;
1423         return mapTypeName(Parse::Pidl::Typelist::bitmap_type_fn($e)) . 
1424                 ($t eq "pull"?" *":" ") . $varname;
1425 }
1426
1427 $typefamily{BITMAP} = {
1428         DECL => \&DeclBitmap,
1429         PUSH_FN_BODY => \&ParseBitmapPush,
1430         PULL_FN_BODY => \&ParseBitmapPull,
1431         PRINT_FN_BODY => \&ParseBitmapPrint,
1432 };
1433
1434 #####################################################################
1435 # generate a struct print function
1436 sub ParseStructPrint($$$)
1437 {
1438         my($struct,$name,$varname) = @_;
1439
1440         return unless defined $struct->{ELEMENTS};
1441
1442         my $env = GenerateStructEnv($struct, $varname);
1443
1444         EnvSubstituteValue($env, $struct);
1445
1446         DeclareArrayVariables($_) foreach (@{$struct->{ELEMENTS}});
1447
1448         pidl "ndr_print_struct(ndr, name, \"$name\");";
1449
1450         start_flags($struct);
1451
1452         pidl "ndr->depth++;";
1453         
1454         ParseElementPrint($_, $env->{$_->{NAME}}, $env) 
1455                 foreach (@{$struct->{ELEMENTS}});
1456         pidl "ndr->depth--;";
1457
1458         end_flags($struct);
1459 }
1460
1461 sub DeclarePtrVariables($)
1462 {
1463         my $e = shift;
1464         foreach my $l (@{$e->{LEVELS}}) {
1465                 if ($l->{TYPE} eq "POINTER" and 
1466                         not ($l->{POINTER_TYPE} eq "ref" and $l->{LEVEL} eq "TOP")) {
1467                         pidl "uint32_t _ptr_$e->{NAME};";
1468                         last;
1469                 }
1470         }
1471 }
1472
1473 sub DeclareArrayVariables($)
1474 {
1475         my $e = shift;
1476
1477         foreach my $l (@{$e->{LEVELS}}) {
1478                 next if has_fast_array($e,$l);
1479                 next if is_charset_array($e,$l);
1480                 if ($l->{TYPE} eq "ARRAY") {
1481                         pidl "uint32_t cntr_$e->{NAME}_$l->{LEVEL_INDEX};";
1482                 }
1483         }
1484 }
1485
1486 sub need_decl_mem_ctx($$)
1487 {
1488         my ($e,$l) = @_;
1489
1490         return 0 if has_fast_array($e,$l);
1491         return 0 if is_charset_array($e,$l);
1492         return 1 if (($l->{TYPE} eq "ARRAY") and not $l->{IS_FIXED});
1493
1494         if (($l->{TYPE} eq "POINTER") and ($l->{POINTER_TYPE} eq "ref")) {
1495                 my $nl = GetNextLevel($e, $l);
1496                 my $next_is_array = ($nl->{TYPE} eq "ARRAY");
1497                 my $next_is_string = (($nl->{TYPE} eq "DATA") and 
1498                                         ($nl->{DATA_TYPE} eq "string"));
1499                 return 0 if ($next_is_array or $next_is_string);
1500         }
1501         return 1 if ($l->{TYPE} eq "POINTER");
1502
1503         return 0;
1504 }
1505
1506 sub DeclareMemCtxVariables($)
1507 {
1508         my $e = shift;
1509         foreach my $l (@{$e->{LEVELS}}) {
1510                 if (need_decl_mem_ctx($e, $l)) {
1511                         pidl "TALLOC_CTX *_mem_save_$e->{NAME}_$l->{LEVEL_INDEX};";
1512                 }
1513         }
1514 }
1515
1516 sub ParseStructPullPrimitives($$$$)
1517 {
1518         my($struct,$name,$varname,$env) = @_;
1519
1520         if (defined $struct->{SURROUNDING_ELEMENT}) {
1521                 pidl "NDR_CHECK(ndr_pull_array_size(ndr, &$varname->$struct->{SURROUNDING_ELEMENT}->{NAME}));";
1522         }
1523
1524         pidl "NDR_CHECK(ndr_pull_align(ndr, $struct->{ALIGN}));";
1525
1526         if (defined($struct->{PROPERTIES}{relative_base})) {
1527                 # set the current offset as base for relative pointers
1528                 # and store it based on the toplevel struct/union
1529                 pidl "NDR_CHECK(ndr_pull_setup_relative_base_offset1(ndr, $varname, ndr->offset));";
1530         }
1531
1532         ParseElementPull($_, "ndr", $env, 1, 0) foreach (@{$struct->{ELEMENTS}});
1533
1534         add_deferred();
1535 }
1536
1537 sub ParseStructPullDeferred($$$$)
1538 {
1539         my ($struct,$name,$varname,$env) = @_;
1540
1541         if (defined($struct->{PROPERTIES}{relative_base})) {
1542                 # retrieve the current offset as base for relative pointers
1543                 # based on the toplevel struct/union
1544                 pidl "NDR_CHECK(ndr_pull_setup_relative_base_offset2(ndr, $varname));";
1545         }
1546         foreach my $e (@{$struct->{ELEMENTS}}) {
1547                 ParseElementPull($e, "ndr", $env, 0, 1);
1548         }
1549
1550         add_deferred();
1551 }
1552
1553 #####################################################################
1554 # parse a struct - pull side
1555 sub ParseStructPull($$$)
1556 {
1557         my($struct,$name,$varname) = @_;
1558
1559         return unless defined $struct->{ELEMENTS};
1560
1561         # declare any internal pointers we need
1562         foreach my $e (@{$struct->{ELEMENTS}}) {
1563                 DeclarePtrVariables($e);
1564                 DeclareArrayVariables($e);
1565                 DeclareMemCtxVariables($e);
1566         }
1567
1568         start_flags($struct);
1569
1570         my $env = GenerateStructEnv($struct, $varname);
1571
1572         pidl "if (ndr_flags & NDR_SCALARS) {";
1573         indent;
1574         ParseStructPullPrimitives($struct,$name,$varname,$env);
1575         deindent;
1576         pidl "}";
1577         pidl "if (ndr_flags & NDR_BUFFERS) {";
1578         indent;
1579         ParseStructPullDeferred($struct,$name,$varname,$env);
1580         deindent;
1581         pidl "}";
1582
1583         end_flags($struct);
1584 }
1585
1586 #####################################################################
1587 # calculate size of ndr struct
1588 sub ParseStructNdrSize($$$)
1589 {
1590         my ($t, $name, $varname) = @_;
1591         my $sizevar;
1592
1593         if (my $flags = has_property($t, "flag")) {
1594                 pidl "flags |= $flags;";
1595         }
1596         pidl "return ndr_size_struct($varname, flags, (ndr_push_flags_fn_t)ndr_push_$name);";
1597 }
1598
1599 sub DeclStruct($$$$)
1600 {
1601         my ($e,$t,$name,$varname) = @_;
1602         return ($t ne "pull"?"const ":"") . "struct $name *$varname";
1603 }
1604
1605 sub ArgsStructNdrSize($$$)
1606 {
1607         my ($d, $name, $varname) = @_;
1608         return "const struct $name *$varname, int flags";
1609 }
1610
1611 $typefamily{STRUCT} = {
1612         PUSH_FN_BODY => \&ParseStructPush,
1613         DECL => \&DeclStruct,
1614         PULL_FN_BODY => \&ParseStructPull,
1615         PRINT_FN_BODY => \&ParseStructPrint,
1616         SIZE_FN_BODY => \&ParseStructNdrSize,
1617         SIZE_FN_ARGS => \&ArgsStructNdrSize,
1618 };
1619
1620 #####################################################################
1621 # calculate size of ndr struct
1622 sub ParseUnionNdrSize($$$)
1623 {
1624         my ($t, $name, $varname) = @_;
1625         my $sizevar;
1626
1627         if (my $flags = has_property($t, "flag")) {
1628                 pidl "flags |= $flags;";
1629         }
1630
1631         pidl "return ndr_size_union($varname, flags, level, (ndr_push_flags_fn_t)ndr_push_$name);";
1632 }
1633
1634 #####################################################################
1635 # parse a union - push side
1636 sub ParseUnionPush($$$)
1637 {
1638         my ($e,$name,$varname) = @_;
1639         my $have_default = 0;
1640
1641         pidl "int level;";
1642
1643         start_flags($e);
1644
1645         pidl "level = ndr_push_get_switch_value(ndr, $varname);";
1646
1647         pidl "if (ndr_flags & NDR_SCALARS) {";
1648         indent;
1649
1650         if (defined($e->{SWITCH_TYPE})) {
1651                 pidl "NDR_CHECK(ndr_push_$e->{SWITCH_TYPE}(ndr, NDR_SCALARS, level));";
1652         }
1653
1654         pidl "switch (level) {";
1655         indent;
1656         foreach my $el (@{$e->{ELEMENTS}}) {
1657                 if ($el->{CASE} eq "default") {
1658                         $have_default = 1;
1659                 }
1660                 pidl "$el->{CASE}:";
1661
1662                 if ($el->{TYPE} ne "EMPTY") {
1663                         indent;
1664                         if (defined($e->{PROPERTIES}{relative_base})) {
1665                                 pidl "NDR_CHECK(ndr_push_align(ndr, $el->{ALIGN}));";
1666                                 # set the current offset as base for relative pointers
1667                                 # and store it based on the toplevel struct/union
1668                                 pidl "NDR_CHECK(ndr_push_setup_relative_base_offset1(ndr, $varname, ndr->offset));";
1669                         }
1670                         DeclareArrayVariables($el);
1671                         ParseElementPush($el, "ndr", {$el->{NAME} => "$varname->$el->{NAME}"}, 1, 0);
1672                         deindent;
1673                 }
1674                 pidl "break;";
1675                 pidl "";
1676         }
1677         if (! $have_default) {
1678                 pidl "default:";
1679                 pidl "\treturn ndr_push_error(ndr, NDR_ERR_BAD_SWITCH, \"Bad switch value \%u\", level);";
1680         }
1681         deindent;
1682         pidl "}";
1683         deindent;
1684         pidl "}";
1685         pidl "if (ndr_flags & NDR_BUFFERS) {";
1686         indent;
1687         if (defined($e->{PROPERTIES}{relative_base})) {
1688                 # retrieve the current offset as base for relative pointers
1689                 # based on the toplevel struct/union
1690                 pidl "NDR_CHECK(ndr_push_setup_relative_base_offset2(ndr, $varname));";
1691         }
1692         pidl "switch (level) {";
1693         indent;
1694         foreach my $el (@{$e->{ELEMENTS}}) {
1695                 pidl "$el->{CASE}:";
1696                 if ($el->{TYPE} ne "EMPTY") {
1697                         indent;
1698                         ParseElementPush($el, "ndr", {$el->{NAME} => "$varname->$el->{NAME}"}, 0, 1);
1699                         deindent;
1700                 }
1701                 pidl "break;";
1702                 pidl "";
1703         }
1704         if (! $have_default) {
1705                 pidl "default:";
1706                 pidl "\treturn ndr_push_error(ndr, NDR_ERR_BAD_SWITCH, \"Bad switch value \%u\", level);";
1707         }
1708         deindent;
1709         pidl "}";
1710
1711         deindent;
1712         pidl "}";
1713         end_flags($e);
1714 }
1715
1716 #####################################################################
1717 # print a union
1718 sub ParseUnionPrint($$$)
1719 {
1720         my ($e,$name,$varname) = @_;
1721         my $have_default = 0;
1722
1723         pidl "int level;";
1724         foreach my $el (@{$e->{ELEMENTS}}) {
1725                 DeclareArrayVariables($el);
1726         }
1727
1728         start_flags($e);
1729
1730         pidl "level = ndr_print_get_switch_value(ndr, $varname);";
1731
1732         pidl "ndr_print_union(ndr, name, level, \"$name\");";
1733
1734         pidl "switch (level) {";
1735         indent;
1736         foreach my $el (@{$e->{ELEMENTS}}) {
1737                 if ($el->{CASE} eq "default") {
1738                         $have_default = 1;
1739                 }
1740                 pidl "$el->{CASE}:";
1741                 if ($el->{TYPE} ne "EMPTY") {
1742                         indent;
1743                         ParseElementPrint($el, "$varname->$el->{NAME}", {});
1744                         deindent;
1745                 }
1746                 pidl "break;";
1747                 pidl "";
1748         }
1749         if (! $have_default) {
1750                 pidl "default:";
1751                 pidl "\tndr_print_bad_level(ndr, name, level);";
1752         }
1753         deindent;
1754         pidl "}";
1755
1756         end_flags($e);
1757 }
1758
1759 sub ParseUnionPullPrimitives($$$$)
1760 {
1761         my ($e,$name,$varname,$switch_type) = @_;
1762         my $have_default = 0;
1763
1764         if (defined($switch_type)) {
1765                 pidl "NDR_CHECK(ndr_pull_$switch_type(ndr, NDR_SCALARS, &_level));";
1766                 pidl "if (_level != level) {"; 
1767                 pidl "\treturn ndr_pull_error(ndr, NDR_ERR_BAD_SWITCH, \"Bad switch value %u for $name\", _level);";
1768                 pidl "}";
1769         }
1770
1771         pidl "switch (level) {";
1772         indent;
1773         foreach my $el (@{$e->{ELEMENTS}}) {
1774                 if ($el->{CASE} eq "default") {
1775                         $have_default = 1;
1776                 } 
1777                 pidl "$el->{CASE}: {";
1778
1779                 if ($el->{TYPE} ne "EMPTY") {
1780                         indent;
1781                         DeclarePtrVariables($el);
1782                         DeclareArrayVariables($el);
1783                         if (defined($e->{PROPERTIES}{relative_base})) {
1784                                 pidl "NDR_CHECK(ndr_pull_align(ndr, $el->{ALIGN}));";
1785                                 # set the current offset as base for relative pointers
1786                                 # and store it based on the toplevel struct/union
1787                                 pidl "NDR_CHECK(ndr_pull_setup_relative_base_offset1(ndr, $varname, ndr->offset));";
1788                         }
1789                         ParseElementPull($el, "ndr", {$el->{NAME} => "$varname->$el->{NAME}"}, 1, 0);
1790                         deindent;
1791                 }
1792                 pidl "break; }";
1793                 pidl "";
1794         }
1795         if (! $have_default) {
1796                 pidl "default:";
1797                 pidl "\treturn ndr_pull_error(ndr, NDR_ERR_BAD_SWITCH, \"Bad switch value \%u\", level);";
1798         }
1799         deindent;
1800         pidl "}";
1801 }
1802
1803 sub ParseUnionPullDeferred($$$)
1804 {
1805         my ($e,$name,$varname) = @_;
1806         my $have_default = 0;
1807
1808         if (defined($e->{PROPERTIES}{relative_base})) {
1809                 # retrieve the current offset as base for relative pointers
1810                 # based on the toplevel struct/union
1811                 pidl "NDR_CHECK(ndr_pull_setup_relative_base_offset2(ndr, $varname));";
1812         }
1813         pidl "switch (level) {";
1814         indent;
1815         foreach my $el (@{$e->{ELEMENTS}}) {
1816                 if ($el->{CASE} eq "default") {
1817                         $have_default = 1;
1818                 } 
1819
1820                 pidl "$el->{CASE}:";
1821                 if ($el->{TYPE} ne "EMPTY") {
1822                         indent;
1823                         ParseElementPull($el, "ndr", {$el->{NAME} => "$varname->$el->{NAME}"}, 0, 1);
1824                         deindent;
1825                 }
1826                 pidl "break;";
1827                 pidl "";
1828         }
1829         if (! $have_default) {
1830                 pidl "default:";
1831                 pidl "\treturn ndr_pull_error(ndr, NDR_ERR_BAD_SWITCH, \"Bad switch value \%u\", level);";
1832         }
1833         deindent;
1834         pidl "}";
1835
1836
1837 }
1838
1839 #####################################################################
1840 # parse a union - pull side
1841 sub ParseUnionPull($$$)
1842 {
1843         my ($e,$name,$varname) = @_;
1844         my $switch_type = $e->{SWITCH_TYPE};
1845
1846         pidl "int level;";
1847         if (defined($switch_type)) {
1848                 if (Parse::Pidl::Typelist::typeIs($switch_type, "ENUM")) {
1849                         $switch_type = Parse::Pidl::Typelist::enum_type_fn(getType($switch_type)->{DATA});
1850                 }
1851                 pidl mapTypeName($switch_type) . " _level;";
1852         }
1853
1854         my %double_cases = ();
1855         foreach my $el (@{$e->{ELEMENTS}}) {
1856                 next if ($el->{TYPE} eq "EMPTY");
1857                 next if ($double_cases{"$el->{NAME}"});
1858                 DeclareMemCtxVariables($el);
1859                 $double_cases{"$el->{NAME}"} = 1;
1860         }
1861
1862         start_flags($e);
1863
1864         pidl "level = ndr_pull_get_switch_value(ndr, $varname);";
1865
1866         pidl "if (ndr_flags & NDR_SCALARS) {";
1867         indent;
1868         ParseUnionPullPrimitives($e,$name,$varname,$switch_type);
1869         deindent;
1870         pidl "}";
1871
1872         pidl "if (ndr_flags & NDR_BUFFERS) {";
1873         indent;
1874         ParseUnionPullDeferred($e,$name,$varname);
1875         deindent;
1876         pidl "}";
1877
1878         add_deferred();
1879
1880         end_flags($e);
1881 }
1882
1883 sub DeclUnion($$$$)
1884 {
1885         my ($e,$t,$name,$varname) = @_;
1886         return ($t ne "pull"?"const ":"") . "union $name *$varname";
1887 }
1888
1889 sub ArgsUnionNdrSize($$)
1890 {
1891         my ($d,$name) = @_;
1892         return "const union $name *r, uint32_t level, int flags";
1893 }
1894
1895 $typefamily{UNION} = {
1896         PUSH_FN_BODY => \&ParseUnionPush,
1897         DECL => \&DeclUnion,
1898         PULL_FN_BODY => \&ParseUnionPull,
1899         PRINT_FN_BODY => \&ParseUnionPrint,
1900         SIZE_FN_ARGS => \&ArgsUnionNdrSize,
1901         SIZE_FN_BODY => \&ParseUnionNdrSize,
1902 };
1903         
1904 #####################################################################
1905 # parse a typedef - push side
1906 sub ParseTypedefPush($$$)
1907 {
1908         my($e,$name,$varname) = @_;
1909
1910         $typefamily{$e->{DATA}->{TYPE}}->{PUSH_FN_BODY}->($e->{DATA}, $name, $varname);
1911 }
1912
1913 #####################################################################
1914 # parse a typedef - pull side
1915 sub ParseTypedefPull($$$)
1916 {
1917         my($e,$name,$varname) = @_;
1918
1919         $typefamily{$e->{DATA}->{TYPE}}->{PULL_FN_BODY}->($e->{DATA}, $name, $varname);
1920 }
1921
1922 #####################################################################
1923 # parse a typedef - print side
1924 sub ParseTypedefPrint($$$)
1925 {
1926         my($e,$name,$varname) = @_;
1927
1928         $typefamily{$e->{DATA}->{TYPE}}->{PRINT_FN_BODY}->($e->{DATA}, $name, $varname);
1929 }
1930
1931 #####################################################################
1932 ## calculate the size of a structure
1933 sub ParseTypedefNdrSize($$$)
1934 {
1935         my($t,$name,$varname) = @_;
1936
1937         $typefamily{$t->{DATA}->{TYPE}}->{SIZE_FN_BODY}->($t->{DATA}, $name, $varname);
1938 }
1939
1940 sub DeclTypedef($$$$)
1941 {
1942         my ($e, $t, $name, $varname) = @_;
1943         
1944         return $typefamily{$e->{DATA}->{TYPE}}->{DECL}->($e->{DATA}, $t, $name, $varname);
1945 }
1946
1947 sub ArgsTypedefNdrSize($$$)
1948 {
1949         my ($d, $name, $varname) = @_;
1950         return $typefamily{$d->{DATA}->{TYPE}}->{SIZE_FN_ARGS}->($d->{DATA}, $name, $varname);
1951 }
1952
1953 $typefamily{TYPEDEF} = {
1954         PUSH_FN_BODY => \&ParseTypedefPush,
1955         DECL => \&DeclTypedef,
1956         PULL_FN_BODY => \&ParseTypedefPull,
1957         PRINT_FN_BODY => \&ParseTypedefPrint,
1958         SIZE_FN_ARGS => \&ArgsTypedefNdrSize,
1959         SIZE_FN_BODY => \&ParseTypedefNdrSize,
1960 };
1961
1962 #####################################################################
1963 # parse a function - print side
1964 sub ParseFunctionPrint($)
1965 {
1966         my($fn) = shift;
1967
1968         pidl_hdr "void ndr_print_$fn->{NAME}(struct ndr_print *ndr, const char *name, int flags, const struct $fn->{NAME} *r);";
1969
1970         return if has_property($fn, "noprint");
1971
1972         pidl "_PUBLIC_ void ndr_print_$fn->{NAME}(struct ndr_print *ndr, const char *name, int flags, const struct $fn->{NAME} *r)";
1973         pidl "{";
1974         indent;
1975
1976         foreach my $e (@{$fn->{ELEMENTS}}) {
1977                 DeclareArrayVariables($e);
1978         }
1979
1980         pidl "ndr_print_struct(ndr, name, \"$fn->{NAME}\");";
1981         pidl "ndr->depth++;";
1982
1983         pidl "if (flags & NDR_SET_VALUES) {";
1984         pidl "\tndr->flags |= LIBNDR_PRINT_SET_VALUES;";
1985         pidl "}";
1986
1987         pidl "if (flags & NDR_IN) {";
1988         indent;
1989         pidl "ndr_print_struct(ndr, \"in\", \"$fn->{NAME}\");";
1990         pidl "ndr->depth++;";
1991
1992         my $env = GenerateFunctionInEnv($fn);
1993         EnvSubstituteValue($env, $fn);
1994
1995         foreach my $e (@{$fn->{ELEMENTS}}) {
1996                 if (grep(/in/,@{$e->{DIRECTION}})) {
1997                         ParseElementPrint($e, $env->{$e->{NAME}}, $env);
1998                 }
1999         }
2000         pidl "ndr->depth--;";
2001         deindent;
2002         pidl "}";
2003         
2004         pidl "if (flags & NDR_OUT) {";
2005         indent;
2006         pidl "ndr_print_struct(ndr, \"out\", \"$fn->{NAME}\");";
2007         pidl "ndr->depth++;";
2008
2009         $env = GenerateFunctionOutEnv($fn);
2010         foreach my $e (@{$fn->{ELEMENTS}}) {
2011                 if (grep(/out/,@{$e->{DIRECTION}})) {
2012                         ParseElementPrint($e, $env->{$e->{NAME}}, $env);
2013                 }
2014         }
2015         if ($fn->{RETURN_TYPE}) {
2016                 pidl "ndr_print_$fn->{RETURN_TYPE}(ndr, \"result\", r->out.result);";
2017         }
2018         pidl "ndr->depth--;";
2019         deindent;
2020         pidl "}";
2021         
2022         pidl "ndr->depth--;";
2023         deindent;
2024         pidl "}";
2025         pidl "";
2026 }
2027
2028 #####################################################################
2029 # parse a function
2030 sub ParseFunctionPush($)
2031
2032         my($fn) = shift;
2033
2034         fn_declare("push", $fn, "NTSTATUS ndr_push_$fn->{NAME}(struct ndr_push *ndr, int flags, const struct $fn->{NAME} *r)") or return;
2035
2036         return if has_property($fn, "nopush");
2037
2038         pidl "{";
2039         indent;
2040
2041         foreach my $e (@{$fn->{ELEMENTS}}) { 
2042                 DeclareArrayVariables($e);
2043         }
2044
2045         pidl "if (flags & NDR_IN) {";
2046         indent;
2047
2048         my $env = GenerateFunctionInEnv($fn);
2049
2050         EnvSubstituteValue($env, $fn);
2051
2052         foreach my $e (@{$fn->{ELEMENTS}}) {
2053                 if (grep(/in/,@{$e->{DIRECTION}})) {
2054                         ParseElementPush($e, "ndr", $env, 1, 1);
2055                 }
2056         }
2057
2058         deindent;
2059         pidl "}";
2060
2061         pidl "if (flags & NDR_OUT) {";
2062         indent;
2063
2064         $env = GenerateFunctionOutEnv($fn);
2065         foreach my $e (@{$fn->{ELEMENTS}}) {
2066                 if (grep(/out/,@{$e->{DIRECTION}})) {
2067                         ParseElementPush($e, "ndr", $env, 1, 1);
2068                 }
2069         }
2070
2071         if ($fn->{RETURN_TYPE}) {
2072                 pidl "NDR_CHECK(ndr_push_$fn->{RETURN_TYPE}(ndr, NDR_SCALARS, r->out.result));";
2073         }
2074     
2075         deindent;
2076         pidl "}";
2077         pidl "return NT_STATUS_OK;";
2078         deindent;
2079         pidl "}";
2080         pidl "";
2081 }
2082
2083 sub AllocateArrayLevel($$$$$)
2084 {
2085         my ($e,$l,$ndr,$env,$size) = @_;
2086
2087         my $var = ParseExpr($e->{NAME}, $env, $e->{ORIGINAL});
2088
2089         my $pl = GetPrevLevel($e, $l);
2090         if (defined($pl) and 
2091             $pl->{TYPE} eq "POINTER" and 
2092             $pl->{POINTER_TYPE} eq "ref"
2093             and not $l->{IS_ZERO_TERMINATED}) {
2094                 pidl "if (ndr->flags & LIBNDR_FLAG_REF_ALLOC) {";
2095                 pidl "\tNDR_PULL_ALLOC_N($ndr, $var, $size);";
2096                 pidl "}";
2097                 if (grep(/in/,@{$e->{DIRECTION}}) and
2098                     grep(/out/,@{$e->{DIRECTION}})) {
2099                         pidl "memcpy(r->out.$e->{NAME}, r->in.$e->{NAME}, $size * sizeof(*r->in.$e->{NAME}));";
2100                 }
2101                 return;
2102         }
2103
2104         pidl "NDR_PULL_ALLOC_N($ndr, $var, $size);";
2105 }
2106
2107 #####################################################################
2108 # parse a function
2109 sub ParseFunctionPull($)
2110
2111         my($fn) = shift;
2112
2113         # pull function args
2114         fn_declare("pull", $fn, "NTSTATUS ndr_pull_$fn->{NAME}(struct ndr_pull *ndr, int flags, struct $fn->{NAME} *r)") or return;
2115
2116         pidl "{";
2117         indent;
2118
2119         # declare any internal pointers we need
2120         foreach my $e (@{$fn->{ELEMENTS}}) { 
2121                 DeclarePtrVariables($e);
2122                 DeclareArrayVariables($e);
2123         }
2124
2125         my %double_cases = ();
2126         foreach my $e (@{$fn->{ELEMENTS}}) {
2127                 next if ($e->{TYPE} eq "EMPTY");
2128                 next if ($double_cases{"$e->{NAME}"});
2129                 DeclareMemCtxVariables($e);
2130                 $double_cases{"$e->{NAME}"} = 1;
2131         }
2132
2133         pidl "if (flags & NDR_IN) {";
2134         indent;
2135
2136         # auto-init the out section of a structure. I originally argued that
2137         # this was a bad idea as it hides bugs, but coping correctly
2138         # with initialisation and not wiping ref vars is turning
2139         # out to be too tricky (tridge)
2140         foreach my $e (@{$fn->{ELEMENTS}}) {
2141                 next unless grep(/out/, @{$e->{DIRECTION}});
2142                 pidl "ZERO_STRUCT(r->out);";
2143                 pidl "";
2144                 last;
2145         }
2146
2147         my $env = GenerateFunctionInEnv($fn);
2148
2149         foreach my $e (@{$fn->{ELEMENTS}}) {
2150                 next unless (grep(/in/, @{$e->{DIRECTION}}));
2151                 ParseElementPull($e, "ndr", $env, 1, 1);
2152         }
2153
2154         # allocate the "simple" out ref variables. FIXME: Shouldn't this have it's
2155         # own flag rather than be in NDR_IN ?
2156
2157         foreach my $e (@{$fn->{ELEMENTS}}) {
2158                 next unless (grep(/out/, @{$e->{DIRECTION}}));
2159                 next unless ($e->{LEVELS}[0]->{TYPE} eq "POINTER" and 
2160                              $e->{LEVELS}[0]->{POINTER_TYPE} eq "ref");
2161                 next if (($e->{LEVELS}[1]->{TYPE} eq "DATA") and 
2162                                  ($e->{LEVELS}[1]->{DATA_TYPE} eq "string"));
2163                 next if (($e->{LEVELS}[1]->{TYPE} eq "ARRAY") 
2164                         and   $e->{LEVELS}[1]->{IS_ZERO_TERMINATED});
2165
2166                 if ($e->{LEVELS}[1]->{TYPE} eq "ARRAY") {
2167                         my $size = ParseExprExt($e->{LEVELS}[1]->{SIZE_IS}, $env, $e->{ORIGINAL}, check_null_pointer($e, $env, \&pidl, "return NT_STATUS_INVALID_PARAMETER_MIX;"), 
2168                                 check_fully_dereferenced($e, $env));
2169                         
2170                         pidl "NDR_PULL_ALLOC_N(ndr, r->out.$e->{NAME}, $size);";
2171
2172                         if (grep(/in/, @{$e->{DIRECTION}})) {
2173                                 pidl "memcpy(r->out.$e->{NAME}, r->in.$e->{NAME}, $size * sizeof(*r->in.$e->{NAME}));";
2174                         } else {
2175                                 pidl "memset(r->out.$e->{NAME}, 0, $size * sizeof(*r->out.$e->{NAME}));";
2176                         }
2177                 } else {
2178                         pidl "NDR_PULL_ALLOC(ndr, r->out.$e->{NAME});";
2179                 
2180                         if (grep(/in/, @{$e->{DIRECTION}})) {
2181                                 pidl "*r->out.$e->{NAME} = *r->in.$e->{NAME};";
2182                         } else {
2183                                 pidl "ZERO_STRUCTP(r->out.$e->{NAME});";
2184                         }
2185                 }
2186         }
2187
2188         add_deferred();
2189         deindent;
2190         pidl "}";
2191         
2192         pidl "if (flags & NDR_OUT) {";
2193         indent;
2194
2195         $env = GenerateFunctionOutEnv($fn);
2196         foreach my $e (@{$fn->{ELEMENTS}}) {
2197                 next unless grep(/out/, @{$e->{DIRECTION}});
2198                 ParseElementPull($e, "ndr", $env, 1, 1);
2199         }
2200
2201         if ($fn->{RETURN_TYPE}) {
2202                 pidl "NDR_CHECK(ndr_pull_$fn->{RETURN_TYPE}(ndr, NDR_SCALARS, &r->out.result));";
2203         }
2204
2205         add_deferred();
2206         deindent;
2207         pidl "}";
2208
2209         pidl "return NT_STATUS_OK;";
2210         deindent;
2211         pidl "}";
2212         pidl "";
2213 }
2214
2215 #####################################################################
2216 # produce a function call table
2217 sub FunctionTable($)
2218 {
2219         my($interface) = shift;
2220         my $count = 0;
2221         my $uname = uc $interface->{NAME};
2222
2223         return if ($#{$interface->{FUNCTIONS}}+1 == 0);
2224         return unless defined ($interface->{PROPERTIES}->{uuid});
2225
2226         pidl "static const struct dcerpc_interface_call $interface->{NAME}\_calls[] = {";
2227         foreach my $d (@{$interface->{FUNCTIONS}}) {
2228                 next if not defined($d->{OPNUM});
2229                 pidl "\t{";
2230                 pidl "\t\t\"$d->{NAME}\",";
2231                 pidl "\t\tsizeof(struct $d->{NAME}),";
2232                 pidl "\t\t(ndr_push_flags_fn_t) ndr_push_$d->{NAME},";
2233                 pidl "\t\t(ndr_pull_flags_fn_t) ndr_pull_$d->{NAME},";
2234                 pidl "\t\t(ndr_print_function_t) ndr_print_$d->{NAME},";
2235                 pidl "\t\t".($d->{ASYNC}?"True":"False").",";
2236                 pidl "\t},";
2237                 $count++;
2238         }
2239         pidl "\t{ NULL, 0, NULL, NULL, NULL, False }";
2240         pidl "};";
2241         pidl "";
2242
2243         pidl "static const char * const $interface->{NAME}\_endpoint_strings[] = {";
2244         foreach my $ep (@{$interface->{ENDPOINTS}}) {
2245                 pidl "\t$ep, ";
2246         }
2247         my $endpoint_count = $#{$interface->{ENDPOINTS}}+1;
2248         
2249         pidl "};";
2250         pidl "";
2251
2252         pidl "static const struct dcerpc_endpoint_list $interface->{NAME}\_endpoints = {";
2253         pidl "\t.count\t= $endpoint_count,";
2254         pidl "\t.names\t= $interface->{NAME}\_endpoint_strings";
2255         pidl "};";
2256         pidl "";
2257
2258         if (! defined $interface->{PROPERTIES}->{authservice}) {
2259                 $interface->{PROPERTIES}->{authservice} = "\"host\"";
2260         }
2261
2262         my @a = split / /, $interface->{PROPERTIES}->{authservice};
2263         my $authservice_count = $#a + 1;
2264
2265         pidl "static const char * const $interface->{NAME}\_authservice_strings[] = {";
2266         foreach my $ap (@a) {
2267                 pidl "\t$ap, ";
2268         }
2269         pidl "};";
2270         pidl "";
2271
2272         pidl "static const struct dcerpc_authservice_list $interface->{NAME}\_authservices = {";
2273         pidl "\t.count\t= $endpoint_count,";
2274         pidl "\t.names\t= $interface->{NAME}\_authservice_strings";
2275         pidl "};";
2276         pidl "";
2277
2278         pidl "\nconst struct dcerpc_interface_table dcerpc_table_$interface->{NAME} = {";
2279         pidl "\t.name\t\t= \"$interface->{NAME}\",";
2280         pidl "\t.syntax_id\t= {";
2281         pidl "\t\t" . print_uuid($interface->{UUID}) .",";
2282         pidl "\t\tDCERPC_$uname\_VERSION";
2283         pidl "\t},";
2284         pidl "\t.helpstring\t= DCERPC_$uname\_HELPSTRING,";
2285         pidl "\t.num_calls\t= $count,";
2286         pidl "\t.calls\t\t= $interface->{NAME}\_calls,";
2287         pidl "\t.endpoints\t= &$interface->{NAME}\_endpoints,";
2288         pidl "\t.authservices\t= &$interface->{NAME}\_authservices";
2289         pidl "};";
2290         pidl "";
2291
2292 }
2293
2294 #####################################################################
2295 # generate include statements for imported idl files
2296 sub HeaderImport
2297 {
2298         my @imports = @_;
2299         foreach (@imports) {
2300                 s/\.idl\"$//;
2301                 s/^\"//;
2302                 pidl choose_header("librpc/gen_ndr/ndr_$_\.h", "gen_ndr/ndr_$_.h");
2303         }
2304 }
2305
2306 #####################################################################
2307 # generate include statements for included header files
2308 sub HeaderInclude
2309 {
2310         my @includes = @_;
2311         foreach (@includes) {
2312                 pidl_hdr "#include $_";
2313         }
2314 }
2315
2316 #####################################################################
2317 # generate prototypes and defines for the interface definitions
2318 # FIXME: these prototypes are for the DCE/RPC client functions, not the 
2319 # NDR parser and so do not belong here, technically speaking
2320 sub HeaderInterface($)
2321 {
2322         my($interface) = shift;
2323
2324         my $count = 0;
2325
2326         pidl_hdr choose_header("librpc/ndr/libndr.h", "ndr.h");
2327
2328         if (has_property($interface, "object")) {
2329                 pidl choose_header("librpc/gen_ndr/ndr_orpc.h", "ndr/orpc.h");
2330         }
2331
2332         if (defined $interface->{PROPERTIES}->{helper}) {
2333                 HeaderInclude(split / /, $interface->{PROPERTIES}->{helper});
2334         }
2335
2336         if (defined $interface->{PROPERTIES}->{uuid}) {
2337                 my $name = uc $interface->{NAME};
2338                 pidl_hdr "#define DCERPC_$name\_UUID " . 
2339                 Parse::Pidl::Util::make_str(lc($interface->{PROPERTIES}->{uuid}));
2340
2341                 if(!defined $interface->{PROPERTIES}->{version}) { $interface->{PROPERTIES}->{version} = "0.0"; }
2342                 pidl_hdr "#define DCERPC_$name\_VERSION $interface->{PROPERTIES}->{version}";
2343
2344                 pidl_hdr "#define DCERPC_$name\_NAME \"$interface->{NAME}\"";
2345
2346                 if(!defined $interface->{PROPERTIES}->{helpstring}) { $interface->{PROPERTIES}->{helpstring} = "NULL"; }
2347                 pidl_hdr "#define DCERPC_$name\_HELPSTRING $interface->{PROPERTIES}->{helpstring}";
2348
2349                 pidl_hdr "extern const struct dcerpc_interface_table dcerpc_table_$interface->{NAME};";
2350                 pidl_hdr "NTSTATUS dcerpc_server_$interface->{NAME}_init(void);";
2351         }
2352
2353         foreach (@{$interface->{FUNCTIONS}}) {
2354                 next if has_property($_, "noopnum");
2355                 next if grep(/$_->{NAME}/,@{$interface->{INHERITED_FUNCTIONS}});
2356                 my $u_name = uc $_->{NAME};
2357         
2358                 my $val = sprintf("0x%02x", $count);
2359                 if (defined($interface->{BASE})) {
2360                         $val .= " + DCERPC_" . uc $interface->{BASE} . "_CALL_COUNT";
2361                 }
2362                 
2363                 pidl_hdr "#define DCERPC_$u_name ($val)";
2364
2365                 pidl_hdr "";
2366                 $count++;
2367         }
2368
2369         my $val = $count;
2370
2371         if (defined($interface->{BASE})) {
2372                 $val .= " + DCERPC_" . uc $interface->{BASE} . "_CALL_COUNT";
2373         }
2374
2375         pidl_hdr "#define DCERPC_" . uc $interface->{NAME} . "_CALL_COUNT ($val)";
2376
2377 }
2378
2379 sub ParseTypePush($)
2380 {
2381         my ($e) = @_;
2382
2383         my $varname = "r";
2384         my $args = $typefamily{$e->{TYPE}}->{DECL}->($e, "push", $e->{NAME}, $varname);
2385         fn_declare("push", $e, "NTSTATUS ndr_push_$e->{NAME}(struct ndr_push *ndr, int ndr_flags, $args)") or return;
2386
2387         pidl "{";
2388         indent;
2389         # save the old relative_base_offset
2390         pidl "uint32_t _save_relative_base_offset = ndr_push_get_relative_base_offset(ndr);" if defined(has_property($e, "relative_base"));
2391         $typefamily{$e->{TYPE}}->{PUSH_FN_BODY}->($e, $e->{NAME}, $varname);
2392         # restore the old relative_base_offset
2393         pidl "ndr_push_restore_relative_base_offset(ndr, _save_relative_base_offset);" if defined(has_property($e, "relative_base"));
2394         pidl "return NT_STATUS_OK;";
2395         deindent;
2396         pidl "}";
2397         pidl "";;
2398 }
2399
2400 sub ParseTypePull($)
2401 {
2402         my ($e) = @_;
2403
2404         my $varname = "r";
2405         my $args = $typefamily{$e->{TYPE}}->{DECL}->($e, "pull", $e->{NAME}, $varname);
2406
2407         fn_declare("pull", $e, "NTSTATUS ndr_pull_$e->{NAME}(struct ndr_pull *ndr, int ndr_flags, $args)") or return;
2408
2409         pidl "{";
2410         indent;
2411         # save the old relative_base_offset
2412         pidl "uint32_t _save_relative_base_offset = ndr_pull_get_relative_base_offset(ndr);" if defined(has_property($e, "relative_base"));
2413         $typefamily{$e->{TYPE}}->{PULL_FN_BODY}->($e, $e->{NAME}, $varname);
2414         # restore the old relative_base_offset
2415         pidl "ndr_pull_restore_relative_base_offset(ndr, _save_relative_base_offset);" if defined(has_property($e, "relative_base"));
2416         pidl "return NT_STATUS_OK;";
2417         deindent;
2418         pidl "}";
2419         pidl "";
2420 }
2421
2422 sub ParseTypePrint($)
2423 {
2424         my ($e) = @_;
2425         my $varname = "r";
2426         my $args = $typefamily{$e->{TYPE}}->{DECL}->($e, "print", $e->{NAME}, $varname);
2427
2428         pidl_hdr "void ndr_print_$e->{NAME}(struct ndr_print *ndr, const char *name, $args);";
2429
2430         return if (has_property($e, "noprint"));
2431
2432         pidl "_PUBLIC_ void ndr_print_$e->{NAME}(struct ndr_print *ndr, const char *name, $args)";
2433         pidl "{";
2434         indent;
2435         $typefamily{$e->{TYPE}}->{PRINT_FN_BODY}->($e, $e->{NAME}, $varname);
2436         deindent;
2437         pidl "}";
2438         pidl "";
2439 }
2440
2441 sub ParseTypeNdrSize($)
2442 {
2443         my ($t) = @_;
2444
2445         my $varname = "r";
2446         my $tf = $typefamily{$t->{TYPE}};
2447         my $args = $tf->{SIZE_FN_ARGS}->($t, $t->{NAME}, $varname);
2448
2449         fn_declare("size", $t, "size_t ndr_size_$t->{NAME}($args)") or return;
2450
2451         pidl "{";
2452         indent;
2453         $typefamily{$t->{TYPE}}->{SIZE_FN_BODY}->($t, $t->{NAME}, $varname);
2454         deindent;
2455         pidl "}";
2456         pidl "";
2457 }
2458
2459 #####################################################################
2460 # parse the interface definitions
2461 sub ParseInterface($$)
2462 {
2463         my($interface,$needed) = @_;
2464
2465         pidl_hdr "#ifndef _HEADER_NDR_$interface->{NAME}";
2466         pidl_hdr "#define _HEADER_NDR_$interface->{NAME}";
2467
2468         pidl_hdr "";
2469
2470         if ($needed->{"compression"}) {
2471                 pidl choose_header("librpc/ndr/ndr_compression.h", "ndr/compression.h");
2472         }
2473
2474         HeaderInterface($interface);
2475
2476         # Typedefs
2477         foreach my $d (@{$interface->{TYPES}}) {
2478                 ($needed->{"push_$d->{NAME}"}) && ParseTypePush($d);
2479                 ($needed->{"pull_$d->{NAME}"}) && ParseTypePull($d);
2480                 ($needed->{"print_$d->{NAME}"}) && ParseTypePrint($d);
2481
2482                 # Make sure we don't generate a function twice...
2483                 $needed->{"push_$d->{NAME}"} = $needed->{"pull_$d->{NAME}"} = 
2484                         $needed->{"print_$d->{NAME}"} = 0;
2485
2486                 ($needed->{"ndr_size_$d->{NAME}"}) && ParseTypeNdrSize($d);
2487         }
2488
2489         # Functions
2490         foreach my $d (@{$interface->{FUNCTIONS}}) {
2491                 ($needed->{"push_$d->{NAME}"}) && ParseFunctionPush($d);
2492                 ($needed->{"pull_$d->{NAME}"}) && ParseFunctionPull($d);
2493                 ($needed->{"print_$d->{NAME}"}) && ParseFunctionPrint($d);
2494
2495                 # Make sure we don't generate a function twice...
2496                 $needed->{"push_$d->{NAME}"} = $needed->{"pull_$d->{NAME}"} = 
2497                         $needed->{"print_$d->{NAME}"} = 0;
2498         }
2499
2500         FunctionTable($interface);
2501
2502         pidl_hdr "#endif /* _HEADER_NDR_$interface->{NAME} */";
2503 }
2504
2505 sub GenerateIncludes()
2506 {
2507         if (is_intree()) {
2508                 pidl "#include \"includes.h\"";
2509         } else {
2510                 pidl "#define _GNU_SOURCE";
2511                 pidl "#include <stdint.h>";
2512                 pidl "#include <stdlib.h>";
2513                 pidl "#include <stdio.h>";
2514                 pidl "#include <stdbool.h>";
2515                 pidl "#include <stdarg.h>";
2516                 pidl "#include <string.h>";
2517         }
2518
2519         # Samba3 has everything in include/includes.h
2520         if (is_intree() != 3) {
2521                 pidl choose_header("libcli/util/nterr.h", "core/nterr.h");
2522                 pidl choose_header("librpc/gen_ndr/ndr_misc.h", "gen_ndr/ndr_misc.h");
2523                 pidl choose_header("librpc/gen_ndr/ndr_dcerpc.h", "gen_ndr/ndr_dcerpc.h");
2524                 pidl choose_header("librpc/rpc/dcerpc.h", "dcerpc.h"); #FIXME: This shouldn't be here!
2525         }
2526 }
2527
2528 #####################################################################
2529 # parse a parsed IDL structure back into an IDL file
2530 sub Parse($$$)
2531 {
2532         my($ndr,$gen_header,$ndr_header) = @_;
2533
2534         $tabs = "";
2535         $res = "";
2536
2537         $res_hdr = "";
2538         pidl_hdr "/* header auto-generated by pidl */";
2539         pidl_hdr "";
2540         pidl_hdr "#include \"$gen_header\"" if ($gen_header);
2541         pidl_hdr "";
2542
2543         pidl "/* parser auto-generated by pidl */";
2544         pidl "";
2545         GenerateIncludes();
2546         pidl "#include \"$ndr_header\"" if ($ndr_header);
2547         pidl "";
2548
2549         my %needed = ();
2550
2551         foreach (@{$ndr}) {
2552                 ($_->{TYPE} eq "INTERFACE") && NeededInterface($_, \%needed);
2553         }
2554
2555         foreach (@{$ndr}) {
2556                 ($_->{TYPE} eq "INTERFACE") && ParseInterface($_, \%needed);
2557                 ($_->{TYPE} eq "IMPORT") && HeaderImport(@{$_->{PATHS}});
2558                 ($_->{TYPE} eq "INCLUDE") && HeaderInclude(@{$_->{PATHS}});
2559         }
2560
2561         return ($res_hdr, $res);
2562 }
2563
2564 sub NeededElement($$$)
2565 {
2566         my ($e, $dir, $needed) = @_;
2567
2568         return if ($e->{TYPE} eq "EMPTY");
2569
2570         my @fn = ();
2571         if ($dir eq "print") {
2572                 push(@fn, "print_$e->{REPRESENTATION_TYPE}");
2573         } elsif ($dir eq "pull") {
2574                 push (@fn, "pull_$e->{TYPE}");
2575                 push (@fn, "ndr_$e->{TYPE}_to_$e->{REPRESENTATION_TYPE}")
2576                         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE});
2577         } elsif ($dir eq "push") {
2578                 push (@fn, "push_$e->{TYPE}");
2579                 push (@fn, "ndr_$e->{REPRESENTATION_TYPE}_to_$e->{TYPE}")
2580                         if ($e->{REPRESENTATION_TYPE} ne $e->{TYPE});
2581         } else {
2582                 die("invalid direction `$dir'");
2583         }
2584
2585         foreach (@fn) {
2586                 unless (defined($needed->{$_})) {
2587                         $needed->{$_} = 1;
2588                 }
2589         }
2590 }
2591
2592 sub NeededFunction($$)
2593 {
2594         my ($fn,$needed) = @_;
2595         $needed->{"pull_$fn->{NAME}"} = 1;
2596         $needed->{"push_$fn->{NAME}"} = 1;
2597         $needed->{"print_$fn->{NAME}"} = 1;
2598         foreach my $e (@{$fn->{ELEMENTS}}) {
2599                 $e->{PARENT} = $fn;
2600                 NeededElement($e, $_, $needed) foreach ("pull", "push", "print");
2601         }
2602 }
2603
2604 sub NeededType($$)
2605 {
2606         my ($t,$needed) = @_;
2607         if (has_property($t, "public")) {
2608                 $needed->{"pull_$t->{NAME}"} = 1;
2609                 $needed->{"push_$t->{NAME}"} = 1;
2610                 $needed->{"print_$t->{NAME}"} = 1;
2611         }
2612
2613         if ($t->{DATA}->{TYPE} eq "STRUCT" or $t->{DATA}->{TYPE} eq "UNION") {
2614                 if (has_property($t, "gensize")) {
2615                         $needed->{"ndr_size_$t->{NAME}"} = 1;
2616                 }
2617
2618                 for my $e (@{$t->{DATA}->{ELEMENTS}}) {
2619                         $e->{PARENT} = $t->{DATA};
2620                         if (has_property($e, "compression")) { 
2621                                 $needed->{"compression"} = 1;
2622                         }
2623                         NeededElement($e, "pull", $needed) if ($needed->{"pull_$t->{NAME}"});
2624                         NeededElement($e, "push", $needed) if ($needed->{"push_$t->{NAME}"});
2625                         NeededElement($e, "print", $needed) if ($needed->{"print_$t->{NAME}"});
2626                 }
2627         }
2628 }
2629
2630 #####################################################################
2631 # work out what parse functions are needed
2632 sub NeededInterface($$)
2633 {
2634         my ($interface,$needed) = @_;
2635         NeededFunction($_, $needed) foreach (@{$interface->{FUNCTIONS}});
2636         NeededType($_, $needed) foreach (reverse @{$interface->{TYPES}});
2637 }
2638
2639 1;