r23455: These buffers may not be null terminated. Ensure we don't run past the
[sfrench/samba-autobuild/.git] / source4 / heimdal / lib / des / pkcs12.c
1 /*
2  * Copyright (c) 2006 Kungliga Tekniska Högskolan
3  * (Royal Institute of Technology, Stockholm, Sweden). 
4  * All rights reserved. 
5  *
6  * Redistribution and use in source and binary forms, with or without 
7  * modification, are permitted provided that the following conditions 
8  * are met: 
9  *
10  * 1. Redistributions of source code must retain the above copyright 
11  *    notice, this list of conditions and the following disclaimer. 
12  *
13  * 2. Redistributions in binary form must reproduce the above copyright 
14  *    notice, this list of conditions and the following disclaimer in the 
15  *    documentation and/or other materials provided with the distribution. 
16  *
17  * 3. Neither the name of the Institute nor the names of its contributors 
18  *    may be used to endorse or promote products derived from this software 
19  *    without specific prior written permission. 
20  *
21  * THIS SOFTWARE IS PROVIDED BY THE INSTITUTE AND CONTRIBUTORS ``AS IS'' AND 
22  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE 
23  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE 
24  * ARE DISCLAIMED.  IN NO EVENT SHALL THE INSTITUTE OR CONTRIBUTORS BE LIABLE 
25  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL 
26  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS 
27  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) 
28  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT 
29  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY 
30  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF 
31  * SUCH DAMAGE. 
32  */
33
34 #ifdef HAVE_CONFIG_H
35 #include <config.h>
36 #endif
37
38 RCSID("$Id: pkcs12.c,v 1.1 2006/01/13 08:26:49 lha Exp $");
39
40 #include <stdio.h>
41 #include <stdlib.h>
42 #include <assert.h>
43
44 #include <pkcs12.h>
45 #include <bn.h>
46
47 #include <roken.h>
48
49 int
50 PKCS12_key_gen(const void *key, size_t keylen, 
51                const void *salt, size_t saltlen,
52                int id, int iteration, size_t outkeysize, 
53                void *out, const EVP_MD *md)
54 {
55     unsigned char *v, *I, hash[EVP_MAX_MD_SIZE];
56     unsigned int size, size_I = 0;
57     unsigned char idc = id;
58     EVP_MD_CTX ctx;
59     unsigned char *outp = out;
60     int i, vlen;
61
62     EVP_MD_CTX_init(&ctx);
63
64     vlen = EVP_MD_block_size(md);
65     v = malloc(vlen + 1);
66     if (v == NULL)
67         return 0;
68
69     I = calloc(1, vlen * 2);
70     if (I == NULL) {
71         free(v);
72         return 0;
73     }
74
75     if (salt && saltlen > 0) {
76         for (i = 0; i < vlen; i++)
77             I[i] = ((unsigned char*)salt)[i % saltlen];
78         size_I += vlen;
79     }
80     if (key && keylen > 0) {
81         for (i = 0; i < vlen / 2; i++) {
82             I[(i * 2) + size_I] = 0;
83             I[(i * 2) + size_I + 1] = ((unsigned char*)key)[i % (keylen + 1)];
84         }
85         size_I += vlen;
86     }
87
88     while (1) {
89         BIGNUM *bnB, *bnOne;
90
91         if (!EVP_DigestInit_ex(&ctx, md, NULL))
92             return 0;
93         for (i = 0; i < vlen; i++)
94             EVP_DigestUpdate(&ctx, &idc, 1);
95         EVP_DigestUpdate(&ctx, I, size_I);
96         EVP_DigestFinal_ex(&ctx, hash, &size);
97
98         for (i = 1; i < iteration; i++)
99             EVP_Digest(hash, size, hash, &size, md, NULL);
100
101         memcpy(outp, hash, min(outkeysize, size));
102         if (outkeysize < size)
103             break;
104         outkeysize -= size;
105         outp += size;
106
107         for (i = 0; i < vlen; i++) 
108             v[i] = hash[i % size];
109
110         bnB = BN_bin2bn(v, vlen, NULL);
111         bnOne = BN_new();
112         BN_set_word(bnOne, 1);
113
114         BN_uadd(bnB, bnB, bnOne);
115
116         for (i = 0; i < vlen * 2; i += vlen) {
117             BIGNUM *bnI;
118             int j;
119
120             bnI = BN_bin2bn(I + i, vlen, NULL);
121
122             BN_uadd(bnI, bnI, bnB);
123
124             j = BN_num_bytes(bnI);
125             if (j > vlen) {
126                 assert(j == vlen + 1);
127                 BN_bn2bin(bnI, v);
128                 memcpy(I + i, v + 1, vlen);
129             } else {
130                 memset(I + i, 0, vlen - j);
131                 BN_bn2bin(bnI, I + i + vlen - j);
132             }
133             BN_free(bnI);
134         }           
135         BN_free(bnB);
136         BN_free(bnOne);
137         size_I = vlen * 2;
138     }
139
140     EVP_MD_CTX_cleanup(&ctx);
141     free(I);
142     free(v);
143
144     return 1;
145 }