93f8f14ce93c06ccf4a745d9717aca2cb773d613
[gnupg.git] / g10 / getkey.c
1 /* getkey.c -  Get a key from the database
2  * Copyright (C) 1998, 1999, 2000, 2001, 2002, 2003, 2004, 2005, 2006,
3  *               2007, 2008 Free Software Foundation, Inc.
4  *
5  * This file is part of GnuPG.
6  *
7  * GnuPG is free software; you can redistribute it and/or modify
8  * it under the terms of the GNU General Public License as published by
9  * the Free Software Foundation; either version 3 of the License, or
10  * (at your option) any later version.
11  *
12  * GnuPG is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
15  * GNU General Public License for more details.
16  *
17  * You should have received a copy of the GNU General Public License
18  * along with this program; if not, see <http://www.gnu.org/licenses/>.
19  */
20
21 #include <config.h>
22 #include <stdio.h>
23 #include <stdlib.h>
24 #include <string.h>
25 #include <assert.h>
26 #include <ctype.h>
27
28 #include "gpg.h"
29 #include "util.h"
30 #include "packet.h"
31 #include "iobuf.h"
32 #include "keydb.h"
33 #include "options.h"
34 #include "main.h"
35 #include "trustdb.h"
36 #include "i18n.h"
37 #include "keyserver-internal.h"
38
39 #define MAX_PK_CACHE_ENTRIES   PK_UID_CACHE_SIZE
40 #define MAX_UID_CACHE_ENTRIES  PK_UID_CACHE_SIZE
41
42 #if MAX_PK_CACHE_ENTRIES < 2
43 #error We need the cache for key creation
44 #endif
45
46 struct getkey_ctx_s {
47     int exact;
48     KBNODE keyblock;
49     KBPOS  kbpos;
50     KBNODE found_key; /* pointer into some keyblock */
51     int last_rc;
52     int req_usage;
53     int req_algo;
54     KEYDB_HANDLE kr_handle;
55     int not_allocated;
56     int nitems;
57     KEYDB_SEARCH_DESC items[1];
58 };
59
60 #if 0
61 static struct {
62     int any;
63     int okay_count;
64     int nokey_count;
65     int error_count;
66 } lkup_stats[21];
67 #endif
68
69 typedef struct keyid_list {
70     struct keyid_list *next;
71     u32 keyid[2];
72 } *keyid_list_t;
73
74
75 #if MAX_PK_CACHE_ENTRIES
76   typedef struct pk_cache_entry {
77       struct pk_cache_entry *next;
78       u32 keyid[2];
79       PKT_public_key *pk;
80   } *pk_cache_entry_t;
81   static pk_cache_entry_t pk_cache;
82   static int pk_cache_entries;   /* number of entries in pk cache */
83   static int pk_cache_disabled;
84 #endif
85
86 #if MAX_UID_CACHE_ENTRIES < 5
87 #error we really need the userid cache
88 #endif
89 typedef struct user_id_db {
90     struct user_id_db *next;
91     keyid_list_t keyids;
92     int len;
93     char name[1];
94 } *user_id_db_t;
95 static user_id_db_t user_id_db;
96 static int uid_cache_entries;   /* number of entries in uid cache */
97
98 static void merge_selfsigs( KBNODE keyblock );
99 static int lookup( GETKEY_CTX ctx, KBNODE *ret_keyblock, int secmode );
100
101 #if 0
102 static void
103 print_stats()
104 {
105     int i;
106     for(i=0; i < DIM(lkup_stats); i++ ) {
107         if( lkup_stats[i].any )
108             fprintf(stderr,
109                     "lookup stats: mode=%-2d  ok=%-6d  nokey=%-6d  err=%-6d\n",
110                     i,
111                     lkup_stats[i].okay_count,
112                     lkup_stats[i].nokey_count,
113                     lkup_stats[i].error_count );
114     }
115 }
116 #endif
117
118
119 void
120 cache_public_key( PKT_public_key *pk )
121 {
122 #if MAX_PK_CACHE_ENTRIES
123     pk_cache_entry_t ce;
124     u32 keyid[2];
125
126     if( pk_cache_disabled )
127         return;
128
129     if( pk->dont_cache )
130         return;
131
132     if( is_ELGAMAL(pk->pubkey_algo)
133         || pk->pubkey_algo == PUBKEY_ALGO_DSA
134         || is_RSA(pk->pubkey_algo) ) {
135         keyid_from_pk( pk, keyid );
136     }
137     else
138         return; /* don't know how to get the keyid */
139
140     for( ce = pk_cache; ce; ce = ce->next )
141         if( ce->keyid[0] == keyid[0] && ce->keyid[1] == keyid[1] ) {
142             if( DBG_CACHE )
143                 log_debug("cache_public_key: already in cache\n");
144             return;
145         }
146
147     if( pk_cache_entries >= MAX_PK_CACHE_ENTRIES ) {
148         /* fixme: use another algorithm to free some cache slots */
149         pk_cache_disabled=1;
150         if( opt.verbose > 1 )
151             log_info(_("too many entries in pk cache - disabled\n"));
152         return;
153     }
154     pk_cache_entries++;
155     ce = xmalloc( sizeof *ce );
156     ce->next = pk_cache;
157     pk_cache = ce;
158     ce->pk = copy_public_key( NULL, pk );
159     ce->keyid[0] = keyid[0];
160     ce->keyid[1] = keyid[1];
161 #endif
162 }
163
164
165 /* Return a const utf-8 string with the text "[User ID not found]".
166    This fucntion is required so that we don't need to switch gettext's
167    encoding temporary. */
168 static const char *
169 user_id_not_found_utf8 (void)
170 {
171   static char *text;
172
173   if (!text)
174     text = native_to_utf8 (_("[User ID not found]"));
175   return text;
176 }
177
178
179
180 /*
181  * Return the user ID from the given keyblock.
182  * We use the primary uid flag which has been set by the merge_selfsigs
183  * function.  The returned value is only valid as long as then given
184  * keyblock is not changed
185  */
186 static const char *
187 get_primary_uid ( KBNODE keyblock, size_t *uidlen )
188 {
189     KBNODE k;
190     const char *s;
191
192     for (k=keyblock; k; k=k->next ) {
193         if ( k->pkt->pkttype == PKT_USER_ID
194              && !k->pkt->pkt.user_id->attrib_data
195              && k->pkt->pkt.user_id->is_primary ) {
196             *uidlen = k->pkt->pkt.user_id->len;
197             return k->pkt->pkt.user_id->name;
198         }
199     } 
200     s = user_id_not_found_utf8 ();
201     *uidlen = strlen (s);
202     return s;
203 }
204
205
206 static void
207 release_keyid_list ( keyid_list_t k )
208 {
209     while (  k ) {
210         keyid_list_t k2 = k->next;
211         xfree (k);
212         k = k2;
213     }
214 }
215
216 /****************
217  * Store the association of keyid and userid
218  * Feed only public keys to this function.
219  */
220 static void
221 cache_user_id( KBNODE keyblock )
222 {
223     user_id_db_t r;
224     const char *uid;
225     size_t uidlen;
226     keyid_list_t keyids = NULL;
227     KBNODE k;
228
229     for (k=keyblock; k; k = k->next ) {
230         if ( k->pkt->pkttype == PKT_PUBLIC_KEY
231              || k->pkt->pkttype == PKT_PUBLIC_SUBKEY ) {
232             keyid_list_t a = xmalloc_clear ( sizeof *a );
233             /* Hmmm: For a long list of keyids it might be an advantage
234              * to append the keys */
235             keyid_from_pk( k->pkt->pkt.public_key, a->keyid );
236             /* first check for duplicates */
237             for(r=user_id_db; r; r = r->next ) {
238                 keyid_list_t b = r->keyids;
239                 for ( b = r->keyids; b; b = b->next ) {
240                     if( b->keyid[0] == a->keyid[0]
241                         && b->keyid[1] == a->keyid[1] ) {
242                         if( DBG_CACHE )
243                             log_debug("cache_user_id: already in cache\n");
244                         release_keyid_list ( keyids );
245                         xfree ( a );
246                         return;
247                     }
248                 }
249             }
250             /* now put it into the cache */
251             a->next = keyids;
252             keyids = a;
253         }
254     }
255     if ( !keyids )
256         BUG (); /* No key no fun */
257
258
259     uid = get_primary_uid ( keyblock, &uidlen );
260
261     if( uid_cache_entries >= MAX_UID_CACHE_ENTRIES ) {
262         /* fixme: use another algorithm to free some cache slots */
263         r = user_id_db;
264         user_id_db = r->next;
265         release_keyid_list ( r->keyids );
266         xfree(r);
267         uid_cache_entries--;
268     }
269     r = xmalloc( sizeof *r + uidlen-1 );
270     r->keyids = keyids;
271     r->len = uidlen;
272     memcpy(r->name, uid, r->len);
273     r->next = user_id_db;
274     user_id_db = r;
275     uid_cache_entries++;
276 }
277
278
279 void
280 getkey_disable_caches()
281 {
282 #if MAX_PK_CACHE_ENTRIES
283     {
284         pk_cache_entry_t ce, ce2;
285
286         for( ce = pk_cache; ce; ce = ce2 ) {
287             ce2 = ce->next;
288             free_public_key( ce->pk );
289             xfree( ce );
290         }
291         pk_cache_disabled=1;
292         pk_cache_entries = 0;
293         pk_cache = NULL;
294     }
295 #endif
296     /* fixme: disable user id cache ? */
297 }
298
299
300 static void
301 pk_from_block ( GETKEY_CTX ctx, PKT_public_key *pk, KBNODE keyblock )
302 {
303     KBNODE a = ctx->found_key ? ctx->found_key : keyblock;
304
305     assert ( a->pkt->pkttype == PKT_PUBLIC_KEY
306              ||  a->pkt->pkttype == PKT_PUBLIC_SUBKEY );
307      
308     copy_public_key ( pk, a->pkt->pkt.public_key );
309 }
310
311 static void
312 sk_from_block ( GETKEY_CTX ctx,
313                 PKT_secret_key *sk, KBNODE keyblock )
314 {
315     KBNODE a = ctx->found_key ? ctx->found_key : keyblock;
316
317     assert ( a->pkt->pkttype == PKT_SECRET_KEY
318              ||  a->pkt->pkttype == PKT_SECRET_SUBKEY );
319      
320     copy_secret_key( sk, a->pkt->pkt.secret_key);
321 }
322
323
324 /****************
325  * Get a public key and store it into the allocated pk
326  * can be called with PK set to NULL to just read it into some
327  * internal structures.
328  */
329 int
330 get_pubkey( PKT_public_key *pk, u32 *keyid )
331 {
332     int internal = 0;
333     int rc = 0;
334
335 #if MAX_PK_CACHE_ENTRIES
336     if(pk)
337       {
338         /* Try to get it from the cache.  We don't do this when pk is
339            NULL as it does not guarantee that the user IDs are
340            cached. */
341         pk_cache_entry_t ce;
342         for( ce = pk_cache; ce; ce = ce->next )
343           {
344             if( ce->keyid[0] == keyid[0] && ce->keyid[1] == keyid[1] )
345               {
346                 copy_public_key( pk, ce->pk );
347                 return 0;
348               }
349           }
350       }
351 #endif
352     /* more init stuff */
353     if( !pk ) {
354         pk = xmalloc_clear( sizeof *pk );
355         internal++;
356     }
357
358
359     /* do a lookup */
360     {   struct getkey_ctx_s ctx;
361         KBNODE kb = NULL;
362         memset( &ctx, 0, sizeof ctx );
363         ctx.exact = 1; /* use the key ID exactly as given */
364         ctx.not_allocated = 1;
365         ctx.kr_handle = keydb_new (0);
366         ctx.nitems = 1;
367         ctx.items[0].mode = KEYDB_SEARCH_MODE_LONG_KID;
368         ctx.items[0].u.kid[0] = keyid[0];
369         ctx.items[0].u.kid[1] = keyid[1];
370         ctx.req_algo  = pk->req_algo;
371         ctx.req_usage = pk->req_usage;
372         rc = lookup( &ctx, &kb, 0 );
373         if ( !rc ) {
374             pk_from_block ( &ctx, pk, kb );
375         }
376         get_pubkey_end( &ctx );
377         release_kbnode ( kb );
378     }
379     if( !rc )
380         goto leave;
381
382     rc = G10ERR_NO_PUBKEY;
383
384   leave:
385     if( !rc )
386         cache_public_key( pk );
387     if( internal )
388         free_public_key(pk);
389     return rc;
390 }
391
392
393 /* Get a public key and store it into the allocated pk.  This function
394    differs from get_pubkey() in that it does not do a check of the key
395    to avoid recursion.  It should be used only in very certain cases.
396    It will only retrieve primary keys. */
397 int
398 get_pubkey_fast (PKT_public_key *pk, u32 *keyid)
399 {
400   int rc = 0;
401   KEYDB_HANDLE hd;
402   KBNODE keyblock;
403   u32 pkid[2];
404   
405   assert (pk);
406 #if MAX_PK_CACHE_ENTRIES
407   { /* Try to get it from the cache */
408     pk_cache_entry_t ce;
409
410     for (ce = pk_cache; ce; ce = ce->next)
411       {
412         if (ce->keyid[0] == keyid[0] && ce->keyid[1] == keyid[1])
413           {
414             if (pk)
415               copy_public_key (pk, ce->pk);
416             return 0;
417           }
418       }
419   }
420 #endif
421
422   hd = keydb_new (0);
423   rc = keydb_search_kid (hd, keyid);
424   if (rc == -1)
425     {
426       keydb_release (hd);
427       return G10ERR_NO_PUBKEY;
428     }
429   rc = keydb_get_keyblock (hd, &keyblock);
430   keydb_release (hd);
431   if (rc) 
432     {
433       log_error ("keydb_get_keyblock failed: %s\n", g10_errstr(rc));
434       return G10ERR_NO_PUBKEY;
435     }
436
437   assert ( keyblock->pkt->pkttype == PKT_PUBLIC_KEY
438            ||  keyblock->pkt->pkttype == PKT_PUBLIC_SUBKEY );
439
440   keyid_from_pk(keyblock->pkt->pkt.public_key,pkid);
441   if(keyid[0]==pkid[0] && keyid[1]==pkid[1])
442     copy_public_key (pk, keyblock->pkt->pkt.public_key );
443   else
444     rc=G10ERR_NO_PUBKEY;
445
446   release_kbnode (keyblock);
447
448   /* Not caching key here since it won't have all of the fields
449      properly set. */
450
451   return rc;
452 }
453
454
455 KBNODE
456 get_pubkeyblock( u32 *keyid )
457 {
458     struct getkey_ctx_s ctx;
459     int rc = 0;
460     KBNODE keyblock = NULL;
461
462     memset( &ctx, 0, sizeof ctx );
463     /* no need to set exact here because we want the entire block */
464     ctx.not_allocated = 1;
465     ctx.kr_handle = keydb_new (0);
466     ctx.nitems = 1;
467     ctx.items[0].mode = KEYDB_SEARCH_MODE_LONG_KID;
468     ctx.items[0].u.kid[0] = keyid[0];
469     ctx.items[0].u.kid[1] = keyid[1];
470     rc = lookup( &ctx, &keyblock, 0 );
471     get_pubkey_end( &ctx );
472
473     return rc ? NULL : keyblock;
474 }
475
476
477
478
479 /****************
480  * Get a secret key and store it into sk
481  */
482 int
483 get_seckey( PKT_secret_key *sk, u32 *keyid )
484 {
485     int rc;
486     struct getkey_ctx_s ctx;
487     KBNODE kb = NULL;
488
489     memset( &ctx, 0, sizeof ctx );
490     ctx.exact = 1; /* use the key ID exactly as given */
491     ctx.not_allocated = 1;
492     ctx.kr_handle = keydb_new (1);
493     ctx.nitems = 1;
494     ctx.items[0].mode = KEYDB_SEARCH_MODE_LONG_KID;
495     ctx.items[0].u.kid[0] = keyid[0];
496     ctx.items[0].u.kid[1] = keyid[1];
497     ctx.req_algo  = sk->req_algo;
498     ctx.req_usage = sk->req_usage;
499     rc = lookup( &ctx, &kb, 1 );
500     if ( !rc ) {
501         sk_from_block ( &ctx, sk, kb );
502     }
503     get_seckey_end( &ctx );
504     release_kbnode ( kb );
505
506     if( !rc ) {
507         /* check the secret key (this may prompt for a passprase to
508          * unlock the secret key
509          */
510         rc = check_secret_key( sk, 0 );
511     }
512
513     return rc;
514 }
515
516
517 /****************
518  * Check whether the secret key is available.  This is just a fast
519  * check and does not tell us whether the secret key is valid.  It
520  * merely tells other whether there is some secret key.
521  * Returns: 0 := key is available
522  * G10ERR_NO_SECKEY := not availabe
523  */
524 int
525 seckey_available( u32 *keyid )
526 {
527     int rc;
528     KEYDB_HANDLE hd = keydb_new (1);
529
530     rc = keydb_search_kid (hd, keyid);
531     if ( rc == -1 )
532         rc = G10ERR_NO_SECKEY;
533     keydb_release (hd);
534     return rc;
535 }
536
537
538 /****************
539  * Return the type of the user id:
540  *
541  * Please use the constants KEYDB_SERCH_MODE_xxx
542  *  0 = Invalid user ID
543  *  1 = exact match
544  *  2 = match a substring
545  *  3 = match an email address
546  *  4 = match a substring of an email address
547  *  5 = match an email address, but compare from end
548  *  6 = word match mode
549  * 10 = it is a short KEYID (don't care about keyid[0])
550  * 11 = it is a long  KEYID
551  * 12 = it is a trustdb index (keyid is looked up)
552  * 16 = it is a 16 byte fingerprint
553  * 20 = it is a 20 byte fingerprint
554  * 21 = Unified fingerprint :fpr:pk_algo:
555  *      (We don't use pk_algo yet)
556  *
557  * Rules used:
558  * - If the username starts with 8,9,16 or 17 hex-digits (the first one
559  *   must be in the range 0..9), this is considered a keyid; depending
560  *   on the length a short or complete one.
561  * - If the username starts with 32,33,40 or 41 hex-digits (the first one
562  *   must be in the range 0..9), this is considered a fingerprint.
563  * - If the username starts with a left angle, we assume it is a complete
564  *   email address and look only at this part.
565  * - If the username starts with a colon we assume it is a unified 
566  *   key specfification. 
567  * - If the username starts with a '.', we assume it is the ending
568  *   part of an email address
569  * - If the username starts with an '@', we assume it is a part of an
570  *   email address
571  * - If the userid start with an '=' an exact compare is done.
572  * - If the userid starts with a '*' a case insensitive substring search is
573  *   done (This is the default).
574  * - If the userid starts with a '+' we will compare individual words
575  *   and a match requires that all the words are in the userid.
576  *   Words are delimited by white space or "()<>[]{}.@-+_,;/&!"
577  *   (note that you can't search for these characters). Compare
578  *   is not case sensitive.
579  * - If the userid starts with a '&' a 40 hex digits keygrip is expected.
580  */
581
582 int
583 classify_user_id( const char *name, KEYDB_SEARCH_DESC *desc )
584 {
585     const char *s;
586     int hexprefix = 0;
587     int hexlength;
588     int mode = 0;   
589     KEYDB_SEARCH_DESC dummy_desc;
590
591     if (!desc)
592         desc = &dummy_desc;
593
594     /* clear the structure so that the mode field is set to zero unless
595      * we set it to the correct value right at the end of this function */
596     memset (desc, 0, sizeof *desc);
597
598     /* skip leading spaces.  Fixme: what is with trailing spaces? */
599     for(s = name; *s && spacep (s); s++ )
600         ;
601
602     switch (*s) {
603         case 0:    /* empty string is an error */
604             return 0;
605
606 #if 0
607         case '.':  /* an email address, compare from end */
608             mode = KEYDB_SEARCH_MODE_MAILEND;
609             s++;
610             desc->u.name = s;
611             break;
612 #endif
613
614         case '<':  /* an email address */
615             mode = KEYDB_SEARCH_MODE_MAIL;
616             desc->u.name = s;
617             break;
618
619         case '@':  /* part of an email address */
620             mode = KEYDB_SEARCH_MODE_MAILSUB;
621             s++;
622             desc->u.name = s;
623             break;
624
625         case '=':  /* exact compare */
626             mode = KEYDB_SEARCH_MODE_EXACT;
627             s++;
628             desc->u.name = s;
629             break;
630
631         case '*':  /* case insensitive substring search */
632             mode = KEYDB_SEARCH_MODE_SUBSTR;
633             s++;
634             desc->u.name = s;
635             break;
636
637 #if 0
638         case '+':  /* compare individual words */
639             mode = KEYDB_SEARCH_MODE_WORDS;
640             s++;
641             desc->u.name = s;
642             break;
643 #endif
644
645         case '#':  /* local user id */
646             return 0; /* This is now obsolete and can't not be used anymore*/
647         
648         case ':': /*Unified fingerprint */
649             {  
650                 const char *se, *si;
651                 int i;
652                 
653                 se = strchr( ++s,':');
654                 if ( !se )
655                     return 0;
656                 for (i=0,si=s; si < se; si++, i++ ) {
657                     if ( !strchr("01234567890abcdefABCDEF", *si ) )
658                         return 0; /* invalid digit */
659                 }
660                 if (i != 32 && i != 40)
661                     return 0; /* invalid length of fpr*/
662                 for (i=0,si=s; si < se; i++, si +=2) 
663                     desc->u.fpr[i] = hextobyte(si);
664                 for ( ; i < 20; i++)
665                     desc->u.fpr[i]= 0;
666                 s = se + 1;
667                 mode = KEYDB_SEARCH_MODE_FPR;
668             } 
669             break;
670            
671         case '&':  /* keygrip */
672           return 0; /* Not yet implememted. */
673
674         default:
675             if (s[0] == '0' && s[1] == 'x') {
676                 hexprefix = 1;
677                 s += 2;
678             }
679
680             hexlength = strspn(s, "0123456789abcdefABCDEF");
681             if (hexlength >= 8 && s[hexlength] =='!') {
682                 desc->exact = 1;
683                 hexlength++; /* just for the following check */
684             }
685
686             /* check if a hexadecimal number is terminated by EOS or blank */
687             if (hexlength && s[hexlength] && !spacep(s+hexlength)) {
688                 if (hexprefix)      /* a "0x" prefix without correct */
689                     return 0;       /* termination is an error */
690                 else                /* The first chars looked like */
691                     hexlength = 0;  /* a hex number, but really were not. */
692             }
693
694             if (desc->exact)
695                 hexlength--;
696
697             if (hexlength == 8
698                 || (!hexprefix && hexlength == 9 && *s == '0')){
699                 /* short keyid */
700                 if (hexlength == 9)
701                     s++;
702                 desc->u.kid[0] = 0;
703                 desc->u.kid[1] = strtoul( s, NULL, 16 );
704                 mode = KEYDB_SEARCH_MODE_SHORT_KID;
705             }
706             else if (hexlength == 16
707                      || (!hexprefix && hexlength == 17 && *s == '0')) {
708                 /* complete keyid */
709                 char buf[9];
710                 if (hexlength == 17)
711                     s++;
712                 mem2str(buf, s, 9 );
713                 desc->u.kid[0] = strtoul( buf, NULL, 16 );
714                 desc->u.kid[1] = strtoul( s+8, NULL, 16 );
715                 mode = KEYDB_SEARCH_MODE_LONG_KID;
716             }
717             else if (hexlength == 32 || (!hexprefix && hexlength == 33
718                                                             && *s == '0')) {
719                 /* md5 fingerprint */
720                 int i;
721                 if (hexlength == 33)
722                     s++;
723                 memset(desc->u.fpr+16, 0, 4); 
724                 for (i=0; i < 16; i++, s+=2) {
725                     int c = hextobyte(s);
726                     if (c == -1)
727                         return 0;
728                     desc->u.fpr[i] = c;
729                 }
730                 mode = KEYDB_SEARCH_MODE_FPR16;
731             }
732             else if (hexlength == 40 || (!hexprefix && hexlength == 41
733                                                               && *s == '0')) {
734                 /* sha1/rmd160 fingerprint */
735                 int i;
736                 if (hexlength == 41)
737                     s++;
738                 for (i=0; i < 20; i++, s+=2) {
739                     int c = hextobyte(s);
740                     if (c == -1)
741                         return 0;
742                     desc->u.fpr[i] = c;
743                 }
744                 mode = KEYDB_SEARCH_MODE_FPR20;
745             }
746             else {
747                 if (hexprefix)  /* This was a hex number with a prefix */
748                     return 0;   /* and a wrong length */
749
750                 desc->exact = 0;
751                 desc->u.name = s;
752                 mode = KEYDB_SEARCH_MODE_SUBSTR;   /* default mode */
753             }
754     }
755
756     desc->mode = mode;
757     return mode;
758 }
759
760
761 static int
762 skip_unusable(void *dummy,u32 *keyid,PKT_user_id *uid)
763 {
764   int unusable=0;
765   KBNODE keyblock;
766
767   keyblock=get_pubkeyblock(keyid);
768   if(!keyblock)
769     {
770       log_error("error checking usability status of %s\n",keystr(keyid));
771       goto leave;
772     }
773
774   /* Is the user ID in question revoked/expired? */
775   if(uid)
776     {
777       KBNODE node;
778
779       for(node=keyblock;node;node=node->next)
780         {
781           if(node->pkt->pkttype==PKT_USER_ID)
782             {
783               if(cmp_user_ids(uid,node->pkt->pkt.user_id)==0
784                  && (node->pkt->pkt.user_id->is_revoked
785                      || node->pkt->pkt.user_id->is_expired))
786                 {
787                   unusable=1;
788                   break;
789                 }
790             }
791         }
792     }
793
794   if(!unusable)
795     unusable=pk_is_disabled(keyblock->pkt->pkt.public_key);
796
797  leave:
798   release_kbnode(keyblock);
799   return unusable;
800 }
801
802 /****************
803  * Try to get the pubkey by the userid. This function looks for the
804  * first pubkey certificate which has the given name in a user_id.  if
805  * pk/sk has the pubkey algo set, the function will only return a
806  * pubkey with that algo.  If namelist is NULL, the first key is
807  * returned.  The caller should provide storage for either the pk or
808  * the sk.  If ret_kb is not NULL the function will return the
809  * keyblock there.
810  */
811
812 static int
813 key_byname( GETKEY_CTX *retctx, strlist_t namelist,
814             PKT_public_key *pk, PKT_secret_key *sk,
815             int secmode, int include_unusable,
816             KBNODE *ret_kb, KEYDB_HANDLE *ret_kdbhd )
817 {
818     int rc = 0;
819     int n;
820     strlist_t r;
821     GETKEY_CTX ctx;
822     KBNODE help_kb = NULL;
823     
824     if( retctx ) {/* reset the returned context in case of error */
825         assert (!ret_kdbhd);  /* not allowed because the handle is
826                                  stored in the context */
827         *retctx = NULL;
828     }
829     if (ret_kdbhd)
830         *ret_kdbhd = NULL;
831
832     if(!namelist)
833       {
834         ctx = xmalloc_clear (sizeof *ctx);
835         ctx->nitems = 1;
836         ctx->items[0].mode=KEYDB_SEARCH_MODE_FIRST;
837         if(!include_unusable)
838           ctx->items[0].skipfnc=skip_unusable;
839       }
840     else
841       {
842         /* build the search context */
843         for(n=0, r=namelist; r; r = r->next )
844           n++;
845
846         ctx = xmalloc_clear (sizeof *ctx + (n-1)*sizeof ctx->items );
847         ctx->nitems = n;
848
849         for(n=0, r=namelist; r; r = r->next, n++ )
850           {
851             classify_user_id (r->d, &ctx->items[n]);
852         
853             if (ctx->items[n].exact)
854               ctx->exact = 1;
855             if (!ctx->items[n].mode)
856               {
857                 xfree (ctx);
858                 return G10ERR_INV_USER_ID;
859               }
860             if(!include_unusable
861                && ctx->items[n].mode!=KEYDB_SEARCH_MODE_SHORT_KID
862                && ctx->items[n].mode!=KEYDB_SEARCH_MODE_LONG_KID
863                && ctx->items[n].mode!=KEYDB_SEARCH_MODE_FPR16
864                && ctx->items[n].mode!=KEYDB_SEARCH_MODE_FPR20
865                && ctx->items[n].mode!=KEYDB_SEARCH_MODE_FPR)
866               ctx->items[n].skipfnc=skip_unusable;
867           }
868       }
869
870     ctx->kr_handle = keydb_new (secmode);
871     if ( !ret_kb ) 
872         ret_kb = &help_kb;
873
874     if( secmode ) {
875         if (sk) {
876             ctx->req_algo  = sk->req_algo;
877             ctx->req_usage = sk->req_usage;
878         }
879         rc = lookup( ctx, ret_kb, 1 );
880         if ( !rc && sk ) {
881             sk_from_block ( ctx, sk, *ret_kb );
882         }
883     }
884     else {
885         if (pk) {
886             ctx->req_algo  = pk->req_algo;
887             ctx->req_usage = pk->req_usage;
888         }
889         rc = lookup( ctx, ret_kb, 0 );
890         if ( !rc && pk ) {
891             pk_from_block ( ctx, pk, *ret_kb );
892         }
893     }
894
895     release_kbnode ( help_kb );
896
897     if (retctx) /* caller wants the context */
898         *retctx = ctx;
899     else {
900         if (ret_kdbhd) {
901             *ret_kdbhd = ctx->kr_handle;
902             ctx->kr_handle = NULL;
903         }
904         get_pubkey_end (ctx);
905     }
906
907     return rc;
908 }
909
910
911
912 /* Find a public key from NAME and return the keyblock or the key.  If
913    ret_kdb is not NULL, the KEYDB handle used to locate this keyblock
914    is returned and the caller is responsible for closing it.  If a key
915    was not found (or if local search has been disabled) and NAME is a
916    valid RFC822 mailbox and --auto-key-locate has been enabled, we try
917    to import the key via the online mechanisms defined by
918    --auto-key-locate.  */
919 int
920 get_pubkey_byname (PKT_public_key *pk,
921                    const char *name, KBNODE *ret_keyblock,
922                    KEYDB_HANDLE *ret_kdbhd, int include_unusable, 
923                    int no_akl)
924 {
925   int rc;
926   strlist_t namelist = NULL;
927   struct akl *akl;
928   int is_mbox;
929   int nodefault = 0;
930
931   is_mbox = is_valid_mailbox (name);
932
933   /* Check whether we the default local search has been disabled.
934      This is the case if either the "nodefault" or the "local" keyword
935      are in the list of auto key locate mechanisms.  */
936   if (!no_akl)
937     {
938       for (akl=opt.auto_key_locate; akl; akl=akl->next)
939         if (akl->type == AKL_NODEFAULT || akl->type == AKL_LOCAL)
940           {
941             nodefault = 1;
942             break;
943           }
944     }
945
946   if (nodefault && is_mbox)
947     {
948       /* Nodefault but a mailbox - let the AKL locate the key.  */
949       rc = G10ERR_NO_PUBKEY;
950     }
951   else
952     {
953       add_to_strlist (&namelist, name);
954       rc = key_byname (NULL, namelist, pk, NULL, 0,
955                        include_unusable, ret_keyblock, ret_kdbhd);
956     }
957
958   /* If the requested name resembles a valid mailbox and automatic
959      retrieval has been enabled, we try to import the key. */
960   if (gpg_err_code (rc) == G10ERR_NO_PUBKEY && !no_akl && is_mbox)
961     {
962       for (akl=opt.auto_key_locate; akl; akl=akl->next)
963         {
964           unsigned char *fpr = NULL;
965           size_t fpr_len;
966           int did_key_byname = 0;
967           int no_fingerprint = 0;
968           const char *mechanism = "?";
969           
970           switch(akl->type)
971             {
972             case AKL_NODEFAULT:
973               /* This is a dummy mechanism.  */
974               mechanism = "None";
975               rc = G10ERR_NO_PUBKEY;
976               break;
977
978             case AKL_LOCAL:
979               mechanism = "Local";
980               did_key_byname = 1;
981               add_to_strlist (&namelist, name);
982               rc = key_byname (NULL, namelist, pk, NULL, 0,
983                                include_unusable, ret_keyblock, ret_kdbhd);
984               break;
985
986             case AKL_CERT:
987               mechanism = "DNS CERT";
988               glo_ctrl.in_auto_key_retrieve++;
989               rc=keyserver_import_cert(name,&fpr,&fpr_len);
990               glo_ctrl.in_auto_key_retrieve--;
991               break;
992
993             case AKL_PKA:
994               mechanism = "PKA";
995               glo_ctrl.in_auto_key_retrieve++;
996               rc=keyserver_import_pka(name,&fpr,&fpr_len);
997               glo_ctrl.in_auto_key_retrieve--;
998               break;
999
1000             case AKL_LDAP:
1001               mechanism = "LDAP";
1002               glo_ctrl.in_auto_key_retrieve++;
1003               rc=keyserver_import_ldap(name,&fpr,&fpr_len);
1004               glo_ctrl.in_auto_key_retrieve--;
1005               break;
1006
1007             case AKL_KEYSERVER:
1008               /* Strictly speaking, we don't need to only use a valid
1009                  mailbox for the getname search, but it helps cut down
1010                  on the problem of searching for something like "john"
1011                  and getting a whole lot of keys back. */
1012               if(opt.keyserver)
1013                 {
1014                   mechanism = opt.keyserver->uri;
1015                   glo_ctrl.in_auto_key_retrieve++;
1016                   rc=keyserver_import_name(name,&fpr,&fpr_len,opt.keyserver);
1017                   glo_ctrl.in_auto_key_retrieve--;
1018                 }
1019               else
1020                 {
1021                   mechanism = "Unconfigured keyserver";
1022                   rc = G10ERR_NO_PUBKEY;
1023                 }
1024               break;
1025
1026             case AKL_SPEC:
1027               {
1028                 struct keyserver_spec *keyserver;
1029
1030                 mechanism = akl->spec->uri;
1031                 keyserver=keyserver_match(akl->spec);
1032                 glo_ctrl.in_auto_key_retrieve++;
1033                 rc=keyserver_import_name(name,&fpr,&fpr_len,keyserver);
1034                 glo_ctrl.in_auto_key_retrieve--;
1035               }
1036               break;
1037             }
1038           
1039           /* Use the fingerprint of the key that we actually fetched.
1040              This helps prevent problems where the key that we fetched
1041              doesn't have the same name that we used to fetch it.  In
1042              the case of CERT and PKA, this is an actual security
1043              requirement as the URL might point to a key put in by an
1044              attacker.  By forcing the use of the fingerprint, we
1045              won't use the attacker's key here. */
1046           if (!rc && fpr)
1047             {
1048               char fpr_string[MAX_FINGERPRINT_LEN*2+1];
1049
1050               assert(fpr_len<=MAX_FINGERPRINT_LEN);
1051
1052               free_strlist(namelist);
1053               namelist=NULL;
1054
1055               bin2hex (fpr, fpr_len, fpr_string);
1056               
1057               if(opt.verbose)
1058                 log_info("auto-key-locate found fingerprint %s\n",fpr_string);
1059
1060               add_to_strlist( &namelist, fpr_string );
1061             }
1062           else if (!rc && !fpr && !did_key_byname)
1063             {
1064               no_fingerprint = 1;
1065               rc = G10ERR_NO_PUBKEY;
1066             }
1067           xfree (fpr);
1068           fpr = NULL;
1069
1070           if (!rc && !did_key_byname)
1071             rc = key_byname (NULL, namelist, pk, NULL, 0,
1072                              include_unusable, ret_keyblock, ret_kdbhd);
1073           if (!rc)
1074             {
1075               /* Key found.  */
1076               log_info (_("automatically retrieved `%s' via %s\n"),
1077                         name, mechanism);
1078               break;  
1079             }
1080           if (rc != G10ERR_NO_PUBKEY || opt.verbose || no_fingerprint)
1081             log_info (_("error retrieving `%s' via %s: %s\n"),
1082                       name, mechanism, 
1083                       no_fingerprint? _("No fingerprint"):g10_errstr(rc));
1084         }
1085     }
1086
1087   free_strlist( namelist );
1088   return rc;
1089 }
1090
1091 int
1092 get_pubkey_bynames( GETKEY_CTX *retctx, PKT_public_key *pk,
1093                     strlist_t names, KBNODE *ret_keyblock )
1094 {
1095     return key_byname( retctx, names, pk, NULL, 0, 1, ret_keyblock, NULL);
1096 }
1097
1098 int
1099 get_pubkey_next( GETKEY_CTX ctx, PKT_public_key *pk, KBNODE *ret_keyblock )
1100 {
1101     int rc;
1102
1103     rc = lookup( ctx, ret_keyblock, 0 );
1104     if ( !rc && pk && ret_keyblock )
1105         pk_from_block ( ctx, pk, *ret_keyblock );
1106     
1107     return rc;
1108 }
1109
1110 void
1111 get_pubkey_end( GETKEY_CTX ctx )
1112 {
1113     if( ctx ) {
1114         memset (&ctx->kbpos, 0, sizeof ctx->kbpos);
1115         keydb_release (ctx->kr_handle);
1116         if( !ctx->not_allocated )
1117             xfree( ctx );
1118     }
1119 }
1120
1121
1122 /****************
1123  * Search for a key with the given fingerprint.
1124  * FIXME:
1125  * We should replace this with the _byname function.  Thiscsan be done
1126  * by creating a userID conforming to the unified fingerprint style. 
1127  */
1128 int
1129 get_pubkey_byfprint( PKT_public_key *pk,
1130                      const byte *fprint, size_t fprint_len)
1131 {
1132     int rc;
1133
1134     if( fprint_len == 20 || fprint_len == 16 ) {
1135         struct getkey_ctx_s ctx;
1136         KBNODE kb = NULL;
1137
1138         memset( &ctx, 0, sizeof ctx );
1139         ctx.exact = 1 ;
1140         ctx.not_allocated = 1;
1141         ctx.kr_handle = keydb_new (0);
1142         ctx.nitems = 1;
1143         ctx.items[0].mode = fprint_len==16? KEYDB_SEARCH_MODE_FPR16
1144                                           : KEYDB_SEARCH_MODE_FPR20;
1145         memcpy( ctx.items[0].u.fpr, fprint, fprint_len );
1146         rc = lookup( &ctx, &kb, 0 );
1147         if (!rc && pk )
1148             pk_from_block ( &ctx, pk, kb );
1149         release_kbnode ( kb );
1150         get_pubkey_end( &ctx );
1151     }
1152     else
1153         rc = G10ERR_GENERAL; /* Oops */
1154     return rc;
1155 }
1156
1157
1158 /* Get a public key and store it into the allocated pk.  This function
1159    differs from get_pubkey_byfprint() in that it does not do a check
1160    of the key to avoid recursion.  It should be used only in very
1161    certain cases.  PK may be NULL to check just for the existance of
1162    the key. */
1163 int
1164 get_pubkey_byfprint_fast (PKT_public_key *pk,
1165                           const byte *fprint, size_t fprint_len)
1166 {
1167   int rc = 0;
1168   KEYDB_HANDLE hd;
1169   KBNODE keyblock;
1170   byte fprbuf[MAX_FINGERPRINT_LEN];
1171   int i;
1172   
1173   for (i=0; i < MAX_FINGERPRINT_LEN && i < fprint_len; i++)
1174     fprbuf[i] = fprint[i];
1175   while (i < MAX_FINGERPRINT_LEN) 
1176     fprbuf[i++] = 0;
1177
1178   hd = keydb_new (0);
1179   rc = keydb_search_fpr (hd, fprbuf);
1180   if (rc == -1)
1181     {
1182       keydb_release (hd);
1183       return G10ERR_NO_PUBKEY;
1184     }
1185   rc = keydb_get_keyblock (hd, &keyblock);
1186   keydb_release (hd);
1187   if (rc) 
1188     {
1189       log_error ("keydb_get_keyblock failed: %s\n", g10_errstr(rc));
1190       return G10ERR_NO_PUBKEY;
1191     }
1192   
1193   assert ( keyblock->pkt->pkttype == PKT_PUBLIC_KEY
1194            ||  keyblock->pkt->pkttype == PKT_PUBLIC_SUBKEY );
1195   if (pk)
1196     copy_public_key (pk, keyblock->pkt->pkt.public_key );
1197   release_kbnode (keyblock);
1198
1199   /* Not caching key here since it won't have all of the fields
1200      properly set. */
1201
1202   return 0;
1203 }
1204
1205 /****************
1206  * Search for a key with the given fingerprint and return the
1207  * complete keyblock which may have more than only this key.
1208  */
1209 int
1210 get_keyblock_byfprint( KBNODE *ret_keyblock, const byte *fprint,
1211                                                 size_t fprint_len )
1212 {
1213     int rc;
1214
1215     if( fprint_len == 20 || fprint_len == 16 ) {
1216         struct getkey_ctx_s ctx;
1217
1218         memset( &ctx, 0, sizeof ctx );
1219         ctx.not_allocated = 1;
1220         ctx.kr_handle = keydb_new (0);
1221         ctx.nitems = 1;
1222         ctx.items[0].mode = fprint_len==16? KEYDB_SEARCH_MODE_FPR16
1223                                           : KEYDB_SEARCH_MODE_FPR20;
1224         memcpy( ctx.items[0].u.fpr, fprint, fprint_len );
1225         rc = lookup( &ctx, ret_keyblock, 0 );
1226         get_pubkey_end( &ctx );
1227     }
1228     else
1229         rc = G10ERR_GENERAL; /* Oops */
1230
1231     return rc;
1232 }
1233
1234
1235 /****************
1236  * Get a secret key by name and store it into sk
1237  * If NAME is NULL use the default key
1238  */
1239 static int
1240 get_seckey_byname2( GETKEY_CTX *retctx,
1241                     PKT_secret_key *sk, const char *name, int unprotect,
1242                     KBNODE *retblock )
1243 {
1244   strlist_t namelist = NULL;
1245   int rc,include_unusable=1;
1246
1247   /* If we have no name, try to use the default secret key.  If we
1248      have no default, we'll use the first usable one. */
1249
1250   if( !name && opt.def_secret_key && *opt.def_secret_key )
1251     add_to_strlist( &namelist, opt.def_secret_key );
1252   else if(name)
1253     add_to_strlist( &namelist, name );
1254   else
1255     include_unusable=0;
1256
1257   rc = key_byname( retctx, namelist, NULL, sk, 1, include_unusable,
1258                    retblock, NULL );
1259
1260   free_strlist( namelist );
1261
1262   if( !rc && unprotect )
1263     rc = check_secret_key( sk, 0 );
1264
1265   return rc;
1266 }
1267
1268 int 
1269 get_seckey_byname( PKT_secret_key *sk, const char *name, int unlock )
1270 {
1271     return get_seckey_byname2 ( NULL, sk, name, unlock, NULL );
1272 }
1273
1274
1275 int
1276 get_seckey_bynames( GETKEY_CTX *retctx, PKT_secret_key *sk,
1277                     strlist_t names, KBNODE *ret_keyblock )
1278 {
1279     return key_byname( retctx, names, NULL, sk, 1, 1, ret_keyblock, NULL );
1280 }
1281
1282
1283 int
1284 get_seckey_next( GETKEY_CTX ctx, PKT_secret_key *sk, KBNODE *ret_keyblock )
1285 {
1286     int rc;
1287
1288     rc = lookup( ctx, ret_keyblock, 1 );
1289     if ( !rc && sk && ret_keyblock )
1290         sk_from_block ( ctx, sk, *ret_keyblock );
1291
1292     return rc;
1293 }
1294
1295
1296 void
1297 get_seckey_end( GETKEY_CTX ctx )
1298 {
1299     get_pubkey_end( ctx );
1300 }
1301
1302
1303 /****************
1304  * Search for a key with the given fingerprint.
1305  * FIXME:
1306  * We should replace this with the _byname function.  Thiscsan be done
1307  * by creating a userID conforming to the unified fingerprint style. 
1308  */
1309 int
1310 get_seckey_byfprint( PKT_secret_key *sk,
1311                      const byte *fprint, size_t fprint_len)
1312 {
1313     int rc;
1314
1315     if( fprint_len == 20 || fprint_len == 16 ) {
1316         struct getkey_ctx_s ctx;
1317         KBNODE kb = NULL;
1318
1319         memset( &ctx, 0, sizeof ctx );
1320         ctx.exact = 1 ;
1321         ctx.not_allocated = 1;
1322         ctx.kr_handle = keydb_new (1);
1323         ctx.nitems = 1;
1324         ctx.items[0].mode = fprint_len==16? KEYDB_SEARCH_MODE_FPR16
1325                                           : KEYDB_SEARCH_MODE_FPR20;
1326         memcpy( ctx.items[0].u.fpr, fprint, fprint_len );
1327         rc = lookup( &ctx, &kb, 1 );
1328         if (!rc && sk )
1329             sk_from_block ( &ctx, sk, kb );
1330         release_kbnode ( kb );
1331         get_seckey_end( &ctx );
1332     }
1333     else
1334         rc = G10ERR_GENERAL; /* Oops */
1335     return rc;
1336 }
1337
1338
1339 /* Search for a secret key with the given fingerprint and return the
1340    complete keyblock which may have more than only this key. */
1341 int
1342 get_seckeyblock_byfprint (KBNODE *ret_keyblock, const byte *fprint,
1343                           size_t fprint_len )
1344 {
1345   int rc;
1346   struct getkey_ctx_s ctx;
1347   
1348   if (fprint_len != 20 && fprint_len == 16)
1349     return G10ERR_GENERAL; /* Oops */
1350     
1351   memset (&ctx, 0, sizeof ctx);
1352   ctx.not_allocated = 1;
1353   ctx.kr_handle = keydb_new (1);
1354   ctx.nitems = 1;
1355   ctx.items[0].mode = (fprint_len==16
1356                        ? KEYDB_SEARCH_MODE_FPR16
1357                        : KEYDB_SEARCH_MODE_FPR20);
1358   memcpy (ctx.items[0].u.fpr, fprint, fprint_len);
1359   rc = lookup (&ctx, ret_keyblock, 1);
1360   get_seckey_end (&ctx);
1361   
1362   return rc;
1363 }
1364
1365
1366 \f
1367 /************************************************
1368  ************* Merging stuff ********************
1369  ************************************************/
1370
1371 /****************
1372  * merge all selfsignatures with the keys.
1373  * FIXME: replace this at least for the public key parts
1374  *        by merge_selfsigs.
1375  *        It is still used in keyedit.c and
1376  *        at 2 or 3 other places - check whether it is really needed.
1377  *        It might be needed by the key edit and import stuff because
1378  *        the keylock is changed.
1379  */
1380 void
1381 merge_keys_and_selfsig( KBNODE keyblock )
1382 {
1383     PKT_public_key *pk = NULL;
1384     PKT_secret_key *sk = NULL;
1385     PKT_signature *sig;
1386     KBNODE k;
1387     u32 kid[2] = { 0, 0 };
1388     u32 sigdate = 0;
1389
1390     if (keyblock && keyblock->pkt->pkttype == PKT_PUBLIC_KEY ) {
1391         /* divert to our new function */
1392         merge_selfsigs (keyblock);
1393         return;
1394     }
1395     /* still need the old one because the new one can't handle secret keys */
1396
1397     for(k=keyblock; k; k = k->next ) {
1398         if( k->pkt->pkttype == PKT_PUBLIC_KEY
1399             || k->pkt->pkttype == PKT_PUBLIC_SUBKEY ) {
1400             pk = k->pkt->pkt.public_key; sk = NULL;
1401             if( pk->version < 4 )
1402                 pk = NULL; /* not needed for old keys */
1403             else if( k->pkt->pkttype == PKT_PUBLIC_KEY )
1404                 keyid_from_pk( pk, kid );
1405             else if( !pk->expiredate ) { /* and subkey */
1406                 /* insert the expiration date here */
1407                 /*FIXME!!! pk->expiredate = subkeys_expiretime( k, kid );*/
1408             }
1409             sigdate = 0;
1410         }
1411         else if( k->pkt->pkttype == PKT_SECRET_KEY
1412             || k->pkt->pkttype == PKT_SECRET_SUBKEY ) {
1413             pk = NULL; sk = k->pkt->pkt.secret_key;
1414             if( sk->version < 4 )
1415                 sk = NULL;
1416             else if( k->pkt->pkttype == PKT_SECRET_KEY )
1417                 keyid_from_sk( sk, kid );
1418             sigdate = 0;
1419         }
1420         else if( (pk || sk ) && k->pkt->pkttype == PKT_SIGNATURE
1421                  && (sig=k->pkt->pkt.signature)->sig_class >= 0x10
1422                  && sig->sig_class <= 0x30 && sig->version > 3
1423                  && !(sig->sig_class == 0x18 || sig->sig_class == 0x28)
1424                  && sig->keyid[0] == kid[0] && sig->keyid[1] == kid[1] ) {
1425             /* okay this is a self-signature which can be used.
1426              * This is not used for subkey binding signature, becuase this
1427              * is done above.
1428              * FIXME: We should only use this if the signature is valid
1429              *        but this is time consuming - we must provide another
1430              *        way to handle this
1431              */
1432             const byte *p;
1433             u32 ed;
1434
1435             p = parse_sig_subpkt( sig->hashed, SIGSUBPKT_KEY_EXPIRE, NULL );
1436             if( pk ) {
1437                 ed = p? pk->timestamp + buffer_to_u32(p):0;
1438                 if( sig->timestamp > sigdate ) {
1439                     pk->expiredate = ed;
1440                     sigdate = sig->timestamp;
1441                 }
1442             }
1443             else {
1444                 ed = p? sk->timestamp + buffer_to_u32(p):0;
1445                 if( sig->timestamp > sigdate ) {
1446                     sk->expiredate = ed;
1447                     sigdate = sig->timestamp;
1448                 }
1449             }
1450         }
1451
1452         if(pk && (pk->expiredate==0 ||
1453                   (pk->max_expiredate && pk->expiredate>pk->max_expiredate)))
1454           pk->expiredate=pk->max_expiredate;
1455
1456         if(sk && (sk->expiredate==0 ||
1457                   (sk->max_expiredate && sk->expiredate>sk->max_expiredate)))
1458           sk->expiredate=sk->max_expiredate;
1459     }
1460 }
1461
1462 static int
1463 parse_key_usage(PKT_signature *sig)
1464 {
1465   int key_usage=0;
1466   const byte *p;
1467   size_t n;
1468   byte flags;
1469
1470   p=parse_sig_subpkt(sig->hashed,SIGSUBPKT_KEY_FLAGS,&n);
1471   if(p && n)
1472     {
1473       /* first octet of the keyflags */
1474       flags=*p;
1475
1476       if(flags & 1)
1477         {
1478           key_usage |= PUBKEY_USAGE_CERT;
1479           flags&=~1;
1480         }
1481
1482       if(flags & 2)
1483         {
1484           key_usage |= PUBKEY_USAGE_SIG;
1485           flags&=~2;
1486         }
1487
1488       /* We do not distinguish between encrypting communications and
1489          encrypting storage. */
1490       if(flags & (0x04|0x08))
1491         {
1492           key_usage |= PUBKEY_USAGE_ENC;
1493           flags&=~(0x04|0x08);
1494         }
1495
1496       if(flags & 0x20)
1497         {
1498           key_usage |= PUBKEY_USAGE_AUTH;
1499           flags&=~0x20;
1500         }
1501
1502       if(flags)
1503         key_usage |= PUBKEY_USAGE_UNKNOWN;
1504     }
1505
1506   /* We set PUBKEY_USAGE_UNKNOWN to indicate that this key has a
1507      capability that we do not handle.  This serves to distinguish
1508      between a zero key usage which we handle as the default
1509      capabilities for that algorithm, and a usage that we do not
1510      handle. */
1511
1512   return key_usage;
1513 }
1514
1515 /*
1516  * Apply information from SIGNODE (which is the valid self-signature
1517  * associated with that UID) to the UIDNODE:
1518  * - wether the UID has been revoked
1519  * - assumed creation date of the UID
1520  * - temporary store the keyflags here
1521  * - temporary store the key expiration time here
1522  * - mark whether the primary user ID flag hat been set.
1523  * - store the preferences
1524  */
1525 static void
1526 fixup_uidnode ( KBNODE uidnode, KBNODE signode, u32 keycreated )
1527 {
1528     PKT_user_id   *uid = uidnode->pkt->pkt.user_id;
1529     PKT_signature *sig = signode->pkt->pkt.signature;
1530     const byte *p, *sym, *hash, *zip;
1531     size_t n, nsym, nhash, nzip;
1532
1533     sig->flags.chosen_selfsig = 1; /* we chose this one */
1534     uid->created = 0; /* not created == invalid */
1535     if ( IS_UID_REV ( sig ) ) 
1536       {
1537         uid->is_revoked = 1;
1538         return; /* has been revoked */
1539       }
1540     else
1541       uid->is_revoked = 0;
1542
1543     uid->expiredate = sig->expiredate;
1544
1545     if (sig->flags.expired)
1546       {
1547         uid->is_expired = 1;
1548         return; /* has expired */
1549       }
1550     else
1551       uid->is_expired = 0;
1552
1553     uid->created = sig->timestamp; /* this one is okay */
1554     uid->selfsigversion = sig->version;
1555     /* If we got this far, it's not expired :) */
1556     uid->is_expired = 0;
1557
1558     /* store the key flags in the helper variable for later processing */
1559     uid->help_key_usage=parse_key_usage(sig);
1560
1561     /* ditto for the key expiration */
1562     p = parse_sig_subpkt (sig->hashed, SIGSUBPKT_KEY_EXPIRE, NULL);
1563     if( p && buffer_to_u32(p) )
1564       uid->help_key_expire = keycreated + buffer_to_u32(p);
1565     else
1566       uid->help_key_expire = 0;
1567
1568     /* Set the primary user ID flag - we will later wipe out some
1569      * of them to only have one in our keyblock */
1570     uid->is_primary = 0;
1571     p = parse_sig_subpkt ( sig->hashed, SIGSUBPKT_PRIMARY_UID, NULL );
1572     if ( p && *p )
1573         uid->is_primary = 2;
1574     /* We could also query this from the unhashed area if it is not in
1575      * the hased area and then later try to decide which is the better
1576      * there should be no security problem with this.
1577      * For now we only look at the hashed one. 
1578      */
1579
1580     /* Now build the preferences list.  These must come from the
1581        hashed section so nobody can modify the ciphers a key is
1582        willing to accept. */
1583     p = parse_sig_subpkt ( sig->hashed, SIGSUBPKT_PREF_SYM, &n );
1584     sym = p; nsym = p?n:0;
1585     p = parse_sig_subpkt ( sig->hashed, SIGSUBPKT_PREF_HASH, &n );
1586     hash = p; nhash = p?n:0;
1587     p = parse_sig_subpkt ( sig->hashed, SIGSUBPKT_PREF_COMPR, &n );
1588     zip = p; nzip = p?n:0;
1589     if (uid->prefs) 
1590         xfree (uid->prefs);
1591     n = nsym + nhash + nzip;
1592     if (!n)
1593         uid->prefs = NULL;
1594     else {
1595         uid->prefs = xmalloc (sizeof (*uid->prefs) * (n+1));
1596         n = 0;
1597         for (; nsym; nsym--, n++) {
1598             uid->prefs[n].type = PREFTYPE_SYM;
1599             uid->prefs[n].value = *sym++;
1600         }
1601         for (; nhash; nhash--, n++) {
1602             uid->prefs[n].type = PREFTYPE_HASH;
1603             uid->prefs[n].value = *hash++;
1604         }
1605         for (; nzip; nzip--, n++) {
1606             uid->prefs[n].type = PREFTYPE_ZIP;
1607             uid->prefs[n].value = *zip++;
1608         }
1609         uid->prefs[n].type = PREFTYPE_NONE; /* end of list marker */
1610         uid->prefs[n].value = 0;
1611     }
1612
1613     /* see whether we have the MDC feature */
1614     uid->flags.mdc = 0;
1615     p = parse_sig_subpkt (sig->hashed, SIGSUBPKT_FEATURES, &n);
1616     if (p && n && (p[0] & 0x01))
1617         uid->flags.mdc = 1;
1618
1619     /* and the keyserver modify flag */
1620     uid->flags.ks_modify = 1;
1621     p = parse_sig_subpkt (sig->hashed, SIGSUBPKT_KS_FLAGS, &n);
1622     if (p && n && (p[0] & 0x80))
1623         uid->flags.ks_modify = 0;
1624 }
1625
1626 static void
1627 sig_to_revoke_info(PKT_signature *sig,struct revoke_info *rinfo)
1628 {
1629   rinfo->date = sig->timestamp;
1630   rinfo->algo = sig->pubkey_algo;
1631   rinfo->keyid[0] = sig->keyid[0];
1632   rinfo->keyid[1] = sig->keyid[1];
1633 }
1634
1635 static void
1636 merge_selfsigs_main(KBNODE keyblock, int *r_revoked, struct revoke_info *rinfo)
1637 {
1638     PKT_public_key *pk = NULL;
1639     KBNODE k;
1640     u32 kid[2];
1641     u32 sigdate, uiddate, uiddate2;
1642     KBNODE signode, uidnode, uidnode2;
1643     u32 curtime = make_timestamp ();
1644     unsigned int key_usage = 0;
1645     u32 keytimestamp = 0;
1646     u32 key_expire = 0;
1647     int key_expire_seen = 0;
1648     byte sigversion = 0;
1649
1650     *r_revoked = 0;
1651     memset(rinfo,0,sizeof(*rinfo));
1652
1653     if ( keyblock->pkt->pkttype != PKT_PUBLIC_KEY )
1654         BUG ();
1655     pk = keyblock->pkt->pkt.public_key;
1656     keytimestamp = pk->timestamp;
1657
1658     keyid_from_pk( pk, kid );
1659     pk->main_keyid[0] = kid[0];
1660     pk->main_keyid[1] = kid[1];
1661
1662     if ( pk->version < 4 ) {
1663         /* before v4 the key packet itself contains the expiration
1664          * date and there was no way to change it, so we start with
1665          * the one from the key packet */
1666         key_expire = pk->max_expiredate;
1667         key_expire_seen = 1;
1668     }
1669
1670     /* first pass: find the latest direct key self-signature.
1671      * We assume that the newest one overrides all others
1672      */
1673
1674     /* In case this key was already merged */
1675     xfree(pk->revkey);
1676     pk->revkey=NULL;
1677     pk->numrevkeys=0;
1678
1679     signode = NULL;
1680     sigdate = 0; /* helper to find the latest signature */
1681     for(k=keyblock; k && k->pkt->pkttype != PKT_USER_ID; k = k->next ) {
1682         if ( k->pkt->pkttype == PKT_SIGNATURE ) {
1683             PKT_signature *sig = k->pkt->pkt.signature;
1684             if ( sig->keyid[0] == kid[0] && sig->keyid[1]==kid[1] ) { 
1685                 if ( check_key_signature( keyblock, k, NULL ) )
1686                     ; /* signature did not verify */
1687                 else if ( IS_KEY_REV (sig) ){
1688                     /* key has been revoked - there is no way to override
1689                      * such a revocation, so we theoretically can stop now.
1690                      * We should not cope with expiration times for revocations
1691                      * here because we have to assume that an attacker can
1692                      * generate all kinds of signatures.  However due to the
1693                      * fact that the key has been revoked it does not harm
1694                      * either and by continuing we gather some more info on 
1695                      * that key.
1696                      */ 
1697                     *r_revoked = 1;
1698                     sig_to_revoke_info(sig,rinfo);
1699                 }
1700                 else if ( IS_KEY_SIG (sig) ) {
1701                   /* Add any revocation keys onto the pk.  This is
1702                      particularly interesting since we normally only
1703                      get data from the most recent 1F signature, but
1704                      you need multiple 1F sigs to properly handle
1705                      revocation keys (PGP does it this way, and a
1706                      revocation key could be sensitive and hence in a
1707                      different signature). */
1708                   if(sig->revkey) {
1709                     int i;
1710
1711                     pk->revkey=
1712                       xrealloc(pk->revkey,sizeof(struct revocation_key)*
1713                                 (pk->numrevkeys+sig->numrevkeys));
1714
1715                     for(i=0;i<sig->numrevkeys;i++)
1716                       memcpy(&pk->revkey[pk->numrevkeys++],
1717                              sig->revkey[i],
1718                              sizeof(struct revocation_key));
1719                   }
1720
1721                   if( sig->timestamp >= sigdate ) {
1722                     if(sig->flags.expired)
1723                         ; /* signature has expired - ignore it */
1724                     else {
1725                         sigdate = sig->timestamp;
1726                         signode = k;
1727                         if( sig->version > sigversion )
1728                           sigversion = sig->version;
1729
1730                     }
1731                   }
1732                 }
1733             }
1734         }
1735     }
1736
1737     /* Remove dupes from the revocation keys */
1738
1739     if(pk->revkey)
1740       {
1741         int i,j,x,changed=0;
1742
1743         for(i=0;i<pk->numrevkeys;i++)
1744           {
1745             for(j=i+1;j<pk->numrevkeys;j++)
1746               {
1747                 if(memcmp(&pk->revkey[i],&pk->revkey[j],
1748                           sizeof(struct revocation_key))==0)
1749                   {
1750                     /* remove j */
1751
1752                     for(x=j;x<pk->numrevkeys-1;x++)
1753                       pk->revkey[x]=pk->revkey[x+1];
1754
1755                     pk->numrevkeys--;
1756                     j--;
1757                     changed=1;
1758                   }
1759               }
1760           }
1761
1762         if(changed)
1763           pk->revkey=xrealloc(pk->revkey,
1764                                pk->numrevkeys*sizeof(struct revocation_key));
1765       }
1766
1767     if ( signode )
1768       {
1769         /* some information from a direct key signature take precedence
1770          * over the same information given in UID sigs.
1771          */
1772         PKT_signature *sig = signode->pkt->pkt.signature;
1773         const byte *p;
1774
1775         key_usage=parse_key_usage(sig);
1776
1777         p = parse_sig_subpkt (sig->hashed, SIGSUBPKT_KEY_EXPIRE, NULL);
1778         if( p && buffer_to_u32(p) )
1779           {
1780             key_expire = keytimestamp + buffer_to_u32(p);
1781             key_expire_seen = 1;
1782           }
1783
1784         /* mark that key as valid: one direct key signature should 
1785          * render a key as valid */
1786         pk->is_valid = 1;
1787       }
1788
1789     /* pass 1.5: look for key revocation signatures that were not made
1790        by the key (i.e. did a revocation key issue a revocation for
1791        us?).  Only bother to do this if there is a revocation key in
1792        the first place and we're not revoked already. */
1793
1794     if(!*r_revoked && pk->revkey)
1795       for(k=keyblock; k && k->pkt->pkttype != PKT_USER_ID; k = k->next )
1796         {
1797           if ( k->pkt->pkttype == PKT_SIGNATURE )
1798             {
1799               PKT_signature *sig = k->pkt->pkt.signature;
1800
1801               if(IS_KEY_REV(sig) &&
1802                  (sig->keyid[0]!=kid[0] || sig->keyid[1]!=kid[1]))
1803                 { 
1804                   int rc=check_revocation_keys(pk,sig);
1805                   if(rc==0)
1806                     {
1807                       *r_revoked=2;
1808                       sig_to_revoke_info(sig,rinfo);
1809                       /* don't continue checking since we can't be any
1810                          more revoked than this */
1811                       break;
1812                     }
1813                   else if(rc==G10ERR_NO_PUBKEY)
1814                     pk->maybe_revoked=1;
1815
1816                   /* A failure here means the sig did not verify, was
1817                      not issued by a revocation key, or a revocation
1818                      key loop was broken.  If a revocation key isn't
1819                      findable, however, the key might be revoked and
1820                      we don't know it. */
1821
1822                   /* TODO: In the future handle subkey and cert
1823                      revocations?  PGP doesn't, but it's in 2440. */
1824                 }
1825             }
1826         }
1827
1828     /* second pass: look at the self-signature of all user IDs */
1829     signode = uidnode = NULL;
1830     sigdate = 0; /* helper to find the latest signature in one user ID */
1831     for(k=keyblock; k && k->pkt->pkttype != PKT_PUBLIC_SUBKEY; k = k->next ) {
1832         if ( k->pkt->pkttype == PKT_USER_ID ) {
1833             if ( uidnode && signode ) 
1834               {
1835                 fixup_uidnode ( uidnode, signode, keytimestamp );
1836                 pk->is_valid=1;
1837               }
1838             uidnode = k;
1839             signode = NULL;
1840             sigdate = 0;
1841         }
1842         else if ( k->pkt->pkttype == PKT_SIGNATURE && uidnode ) {
1843             PKT_signature *sig = k->pkt->pkt.signature;
1844             if ( sig->keyid[0] == kid[0] && sig->keyid[1]==kid[1] ) { 
1845                 if ( check_key_signature( keyblock, k, NULL ) )
1846                     ; /* signature did not verify */
1847                 else if ( (IS_UID_SIG (sig) || IS_UID_REV (sig))
1848                           && sig->timestamp >= sigdate )
1849                   {
1850                     /* Note: we allow to invalidate cert revocations
1851                      * by a newer signature.  An attacker can't use this
1852                      * because a key should be revoced with a key revocation.
1853                      * The reason why we have to allow for that is that at
1854                      * one time an email address may become invalid but later
1855                      * the same email address may become valid again (hired,
1856                      * fired, hired again).
1857                      */
1858
1859                     sigdate = sig->timestamp;
1860                     signode = k;
1861                     signode->pkt->pkt.signature->flags.chosen_selfsig=0;
1862                     if( sig->version > sigversion )
1863                       sigversion = sig->version;
1864                   }
1865             }
1866         }
1867     }
1868     if ( uidnode && signode ) {
1869         fixup_uidnode ( uidnode, signode, keytimestamp );
1870         pk->is_valid = 1;
1871     }
1872
1873     /* If the key isn't valid yet, and we have
1874        --allow-non-selfsigned-uid set, then force it valid. */
1875     if(!pk->is_valid && opt.allow_non_selfsigned_uid)
1876       {
1877         if(opt.verbose)
1878           log_info(_("Invalid key %s made valid by"
1879                      " --allow-non-selfsigned-uid\n"),keystr_from_pk(pk));
1880         pk->is_valid = 1;
1881       }
1882
1883     /* The key STILL isn't valid, so try and find an ultimately
1884        trusted signature. */
1885     if(!pk->is_valid)
1886       {
1887         uidnode=NULL;
1888
1889         for(k=keyblock; k && k->pkt->pkttype != PKT_PUBLIC_SUBKEY; k=k->next)
1890           {
1891             if ( k->pkt->pkttype == PKT_USER_ID )
1892               uidnode = k;
1893             else if ( k->pkt->pkttype == PKT_SIGNATURE && uidnode )
1894               {
1895                 PKT_signature *sig = k->pkt->pkt.signature;
1896
1897                 if(sig->keyid[0] != kid[0] || sig->keyid[1]!=kid[1])
1898                   {
1899                     PKT_public_key *ultimate_pk;
1900
1901                     ultimate_pk=xmalloc_clear(sizeof(*ultimate_pk));
1902
1903                     /* We don't want to use the full get_pubkey to
1904                        avoid infinite recursion in certain cases.
1905                        There is no reason to check that an ultimately
1906                        trusted key is still valid - if it has been
1907                        revoked or the user should also renmove the
1908                        ultimate trust flag.  */
1909                     if(get_pubkey_fast(ultimate_pk,sig->keyid)==0
1910                        && check_key_signature2(keyblock,k,ultimate_pk,
1911                                                NULL,NULL,NULL,NULL)==0
1912                        && get_ownertrust(ultimate_pk)==TRUST_ULTIMATE)
1913                       {
1914                         free_public_key(ultimate_pk);
1915                         pk->is_valid=1;
1916                         break;
1917                       }
1918
1919                     free_public_key(ultimate_pk);
1920                   }
1921               }
1922           }
1923       }
1924
1925     /* Record the highest selfsig version so we know if this is a v3
1926        key through and through, or a v3 key with a v4 selfsig
1927        somewhere.  This is useful in a few places to know if the key
1928        must be treated as PGP2-style or OpenPGP-style.  Note that a
1929        selfsig revocation with a higher version number will also raise
1930        this value.  This is okay since such a revocation must be
1931        issued by the user (i.e. it cannot be issued by someone else to
1932        modify the key behavior.) */
1933
1934     pk->selfsigversion=sigversion;
1935
1936     /* Now that we had a look at all user IDs we can now get some information
1937      * from those user IDs.
1938      */
1939     
1940     if ( !key_usage ) {
1941         /* find the latest user ID with key flags set */
1942         uiddate = 0; /* helper to find the latest user ID */
1943         for(k=keyblock; k && k->pkt->pkttype != PKT_PUBLIC_SUBKEY;
1944             k = k->next ) {
1945             if ( k->pkt->pkttype == PKT_USER_ID ) {
1946                 PKT_user_id *uid = k->pkt->pkt.user_id;
1947                 if ( uid->help_key_usage && uid->created > uiddate ) {
1948                     key_usage = uid->help_key_usage;
1949                     uiddate = uid->created;
1950                 }
1951             }
1952         }
1953     }
1954     if ( !key_usage ) { /* no key flags at all: get it from the algo */
1955         key_usage = openpgp_pk_algo_usage ( pk->pubkey_algo );
1956     }
1957     else { /* check that the usage matches the usage as given by the algo */
1958         int x = openpgp_pk_algo_usage ( pk->pubkey_algo );
1959         if ( x ) /* mask it down to the actual allowed usage */
1960             key_usage &= x; 
1961     }
1962
1963     /* Whatever happens, it's a primary key, so it can certify. */
1964     pk->pubkey_usage = key_usage|PUBKEY_USAGE_CERT;
1965
1966     if ( !key_expire_seen ) {
1967         /* find the latest valid user ID with a key expiration set 
1968          * Note, that this may be a different one from the above because
1969          * some user IDs may have no expiration date set */
1970         uiddate = 0; 
1971         for(k=keyblock; k && k->pkt->pkttype != PKT_PUBLIC_SUBKEY;
1972             k = k->next ) {
1973             if ( k->pkt->pkttype == PKT_USER_ID ) {
1974                 PKT_user_id *uid = k->pkt->pkt.user_id;
1975                 if ( uid->help_key_expire && uid->created > uiddate ) {
1976                     key_expire = uid->help_key_expire;
1977                     uiddate = uid->created;
1978                 }
1979             }
1980         }
1981     }
1982
1983     /* Currently only v3 keys have a maximum expiration date, but I'll
1984        bet v5 keys get this feature again. */
1985     if(key_expire==0 || (pk->max_expiredate && key_expire>pk->max_expiredate))
1986       key_expire=pk->max_expiredate;
1987
1988     pk->has_expired = key_expire >= curtime? 0 : key_expire;
1989     pk->expiredate = key_expire;
1990
1991     /* Fixme: we should see how to get rid of the expiretime fields  but
1992      * this needs changes at other places too. */
1993
1994     /* and now find the real primary user ID and delete all others */
1995     uiddate = uiddate2 = 0;
1996     uidnode = uidnode2 = NULL;
1997     for(k=keyblock; k && k->pkt->pkttype != PKT_PUBLIC_SUBKEY; k = k->next ) {
1998         if ( k->pkt->pkttype == PKT_USER_ID &&
1999              !k->pkt->pkt.user_id->attrib_data) {
2000             PKT_user_id *uid = k->pkt->pkt.user_id;
2001             if (uid->is_primary)
2002               {
2003                 if(uid->created > uiddate)
2004                   {
2005                     uiddate = uid->created;
2006                     uidnode = k;
2007                   }
2008                 else if(uid->created==uiddate && uidnode)
2009                   {
2010                     /* The dates are equal, so we need to do a
2011                        different (and arbitrary) comparison.  This
2012                        should rarely, if ever, happen.  It's good to
2013                        try and guarantee that two different GnuPG
2014                        users with two different keyrings at least pick
2015                        the same primary. */
2016                     if(cmp_user_ids(uid,uidnode->pkt->pkt.user_id)>0)
2017                       uidnode=k;
2018                   }
2019               }
2020             else
2021               {
2022                 if(uid->created > uiddate2)
2023                   {
2024                     uiddate2 = uid->created;
2025                     uidnode2 = k;
2026                   }
2027                 else if(uid->created==uiddate2 && uidnode2)
2028                   {
2029                     if(cmp_user_ids(uid,uidnode2->pkt->pkt.user_id)>0)
2030                       uidnode2=k;
2031                   }
2032               }
2033         }
2034     }
2035     if ( uidnode ) {
2036         for(k=keyblock; k && k->pkt->pkttype != PKT_PUBLIC_SUBKEY;
2037             k = k->next ) {
2038             if ( k->pkt->pkttype == PKT_USER_ID &&
2039                  !k->pkt->pkt.user_id->attrib_data) {
2040                 PKT_user_id *uid = k->pkt->pkt.user_id;
2041                 if ( k != uidnode ) 
2042                     uid->is_primary = 0;
2043             }
2044         }
2045     }
2046     else if( uidnode2 ) {
2047         /* none is flagged primary - use the latest user ID we have,
2048            and disambiguate with the arbitrary packet comparison. */
2049         uidnode2->pkt->pkt.user_id->is_primary = 1;
2050     }
2051     else
2052       {
2053         /* None of our uids were self-signed, so pick the one that
2054            sorts first to be the primary.  This is the best we can do
2055            here since there are no self sigs to date the uids. */
2056
2057         uidnode = NULL;
2058
2059         for(k=keyblock; k && k->pkt->pkttype != PKT_PUBLIC_SUBKEY;
2060             k = k->next )
2061           {
2062             if(k->pkt->pkttype==PKT_USER_ID
2063                && !k->pkt->pkt.user_id->attrib_data)
2064               {
2065                 if(!uidnode)
2066                   {
2067                     uidnode=k;
2068                     uidnode->pkt->pkt.user_id->is_primary=1;
2069                     continue;
2070                   }
2071                 else
2072                   {
2073                     if(cmp_user_ids(k->pkt->pkt.user_id,
2074                                     uidnode->pkt->pkt.user_id)>0)
2075                       {
2076                         uidnode->pkt->pkt.user_id->is_primary=0;
2077                         uidnode=k;
2078                         uidnode->pkt->pkt.user_id->is_primary=1;
2079                       }
2080                     else
2081                       k->pkt->pkt.user_id->is_primary=0; /* just to be
2082                                                             safe */
2083                   }
2084               }
2085           }
2086       }
2087 }
2088
2089 /* Convert a buffer to a signature.  Useful for 0x19 embedded sigs.
2090    Caller must free the signature when they are done. */
2091 static PKT_signature *
2092 buf_to_sig(const byte *buf,size_t len)
2093 {
2094   PKT_signature *sig=xmalloc_clear(sizeof(PKT_signature));
2095   IOBUF iobuf=iobuf_temp_with_content(buf,len);
2096   int save_mode=set_packet_list_mode(0);
2097
2098   if(parse_signature(iobuf,PKT_SIGNATURE,len,sig)!=0)
2099     {
2100       xfree(sig);
2101       sig=NULL;
2102     }
2103
2104   set_packet_list_mode(save_mode);
2105   iobuf_close(iobuf);
2106
2107   return sig;
2108 }
2109
2110 static void
2111 merge_selfsigs_subkey( KBNODE keyblock, KBNODE subnode )
2112 {
2113     PKT_public_key *mainpk = NULL, *subpk = NULL;
2114     PKT_signature *sig;
2115     KBNODE k;
2116     u32 mainkid[2];
2117     u32 sigdate = 0;
2118     KBNODE signode;
2119     u32 curtime = make_timestamp ();
2120     unsigned int key_usage = 0;
2121     u32 keytimestamp = 0;
2122     u32 key_expire = 0;
2123     const byte *p;
2124
2125     if ( subnode->pkt->pkttype != PKT_PUBLIC_SUBKEY )
2126         BUG ();
2127     mainpk = keyblock->pkt->pkt.public_key;
2128     if ( mainpk->version < 4 )
2129         return; /* (actually this should never happen) */
2130     keyid_from_pk( mainpk, mainkid );
2131     subpk = subnode->pkt->pkt.public_key;
2132     keytimestamp = subpk->timestamp;
2133
2134     subpk->is_valid = 0;
2135     subpk->main_keyid[0] = mainpk->main_keyid[0];
2136     subpk->main_keyid[1] = mainpk->main_keyid[1];
2137
2138     /* find the latest key binding self-signature. */
2139     signode = NULL;
2140     sigdate = 0; /* helper to find the latest signature */
2141     for(k=subnode->next; k && k->pkt->pkttype != PKT_PUBLIC_SUBKEY;
2142                                                         k = k->next ) {
2143         if ( k->pkt->pkttype == PKT_SIGNATURE ) {
2144             sig = k->pkt->pkt.signature;
2145             if ( sig->keyid[0] == mainkid[0] && sig->keyid[1]==mainkid[1] ) { 
2146                 if ( check_key_signature( keyblock, k, NULL ) )
2147                     ; /* signature did not verify */
2148                 else if ( IS_SUBKEY_REV (sig) ) {
2149                   /* Note that this means that the date on a
2150                      revocation sig does not matter - even if the
2151                      binding sig is dated after the revocation sig,
2152                      the subkey is still marked as revoked.  This
2153                      seems ok, as it is just as easy to make new
2154                      subkeys rather than re-sign old ones as the
2155                      problem is in the distribution.  Plus, PGP (7)
2156                      does this the same way.  */
2157                     subpk->is_revoked = 1;
2158                     sig_to_revoke_info(sig,&subpk->revoked);
2159                     /* although we could stop now, we continue to 
2160                      * figure out other information like the old expiration
2161                      * time */
2162                 }
2163                 else if ( IS_SUBKEY_SIG (sig) && sig->timestamp >= sigdate )
2164                   {
2165                     if(sig->flags.expired)
2166                       ; /* signature has expired - ignore it */
2167                     else
2168                       {
2169                         sigdate = sig->timestamp;
2170                         signode = k;
2171                         signode->pkt->pkt.signature->flags.chosen_selfsig=0;
2172                       }
2173                   }
2174             }
2175         }
2176     }
2177
2178     /* no valid key binding */
2179     if ( !signode )
2180       return;
2181
2182     sig = signode->pkt->pkt.signature;
2183     sig->flags.chosen_selfsig=1; /* so we know which selfsig we chose later */
2184
2185     key_usage=parse_key_usage(sig);
2186     if ( !key_usage )
2187       {
2188         /* no key flags at all: get it from the algo */
2189         key_usage = openpgp_pk_algo_usage ( subpk->pubkey_algo );
2190       }
2191     else
2192       {
2193         /* check that the usage matches the usage as given by the algo */
2194         int x = openpgp_pk_algo_usage ( subpk->pubkey_algo );
2195         if ( x ) /* mask it down to the actual allowed usage */
2196           key_usage &= x; 
2197       }
2198
2199     subpk->pubkey_usage = key_usage;
2200     
2201     p = parse_sig_subpkt (sig->hashed, SIGSUBPKT_KEY_EXPIRE, NULL);
2202     if ( p && buffer_to_u32(p) )
2203         key_expire = keytimestamp + buffer_to_u32(p);
2204     else
2205         key_expire = 0;
2206     subpk->has_expired = key_expire >= curtime? 0 : key_expire;
2207     subpk->expiredate = key_expire;
2208
2209     /* algo doesn't exist */
2210     if(openpgp_pk_test_algo(subpk->pubkey_algo))
2211       return;
2212
2213     subpk->is_valid = 1;
2214
2215     /* Find the most recent 0x19 embedded signature on our self-sig. */
2216     if(subpk->backsig==0)
2217       {
2218         int seq=0;
2219         size_t n;
2220         PKT_signature *backsig=NULL;
2221
2222         sigdate=0;
2223
2224         /* We do this while() since there may be other embedded
2225            signatures in the future.  We only want 0x19 here. */
2226
2227         while((p=enum_sig_subpkt(sig->hashed,
2228                                  SIGSUBPKT_SIGNATURE,&n,&seq,NULL)))
2229           if(n>3 && ((p[0]==3 && p[2]==0x19) || (p[0]==4 && p[1]==0x19)))
2230             {
2231               PKT_signature *tempsig=buf_to_sig(p,n);
2232               if(tempsig)
2233                 {
2234                   if(tempsig->timestamp>sigdate)
2235                     {
2236                       if(backsig)
2237                         free_seckey_enc(backsig);
2238
2239                       backsig=tempsig;
2240                       sigdate=backsig->timestamp;
2241                     }
2242                   else
2243                     free_seckey_enc(tempsig);
2244                 }
2245             }
2246
2247         seq=0;
2248
2249         /* It is safe to have this in the unhashed area since the 0x19
2250            is located on the selfsig for convenience, not security. */
2251
2252         while((p=enum_sig_subpkt(sig->unhashed,SIGSUBPKT_SIGNATURE,
2253                                  &n,&seq,NULL)))
2254           if(n>3 && ((p[0]==3 && p[2]==0x19) || (p[0]==4 && p[1]==0x19)))
2255             {
2256               PKT_signature *tempsig=buf_to_sig(p,n);
2257               if(tempsig)
2258                 {
2259                   if(tempsig->timestamp>sigdate)
2260                     {
2261                       if(backsig)
2262                         free_seckey_enc(backsig);
2263
2264                       backsig=tempsig;
2265                       sigdate=backsig->timestamp;
2266                     }
2267                   else
2268                     free_seckey_enc(tempsig);
2269                 }
2270             }
2271
2272         if(backsig)
2273           {
2274             /* At ths point, backsig contains the most recent 0x19 sig.
2275                Let's see if it is good. */
2276
2277             /* 2==valid, 1==invalid, 0==didn't check */
2278             if(check_backsig(mainpk,subpk,backsig)==0)
2279               subpk->backsig=2;
2280             else
2281               subpk->backsig=1;
2282
2283             free_seckey_enc(backsig);
2284           }
2285       }
2286 }
2287
2288
2289 /* 
2290  * Merge information from the self-signatures with the key, so that
2291  * we can later use them more easy.
2292  * The function works by first applying the self signatures to the
2293  * primary key and the to each subkey.
2294  * Here are the rules we use to decide which inormation from which
2295  * self-signature is used:
2296  * We check all self signatures or validity and ignore all invalid signatures.
2297  * All signatures are then ordered by their creation date ....
2298  * For the primary key:
2299  *   FIXME the docs    
2300  */
2301 static void
2302 merge_selfsigs( KBNODE keyblock )
2303 {
2304     KBNODE k;
2305     int revoked;
2306     struct revoke_info rinfo;
2307     PKT_public_key *main_pk;
2308     prefitem_t *prefs;
2309     int mdc_feature;
2310
2311     if ( keyblock->pkt->pkttype != PKT_PUBLIC_KEY ) {
2312         if (keyblock->pkt->pkttype == PKT_SECRET_KEY ) {
2313             log_error ("expected public key but found secret key "
2314                        "- must stop\n");
2315             /* we better exit here becuase a public key is expected at
2316                other places too.  FIXME: Figure this out earlier and
2317                don't get to here at all */
2318             g10_exit (1);
2319         }
2320         BUG ();
2321     }
2322
2323     merge_selfsigs_main ( keyblock, &revoked, &rinfo );
2324
2325     /* now merge in the data from each of the subkeys */
2326     for(k=keyblock; k; k = k->next ) {
2327         if (  k->pkt->pkttype == PKT_PUBLIC_SUBKEY ) {
2328             merge_selfsigs_subkey ( keyblock, k );
2329         }
2330     }
2331
2332     main_pk = keyblock->pkt->pkt.public_key;
2333     if ( revoked || main_pk->has_expired || !main_pk->is_valid ) {
2334         /* if the primary key is revoked, expired, or invalid we
2335          * better set the appropriate flags on that key and all
2336          * subkeys */
2337         for(k=keyblock; k; k = k->next ) {
2338             if ( k->pkt->pkttype == PKT_PUBLIC_KEY
2339                 || k->pkt->pkttype == PKT_PUBLIC_SUBKEY ) {
2340                 PKT_public_key *pk = k->pkt->pkt.public_key;
2341                 if(!main_pk->is_valid)
2342                   pk->is_valid = 0;
2343                 if(revoked && !pk->is_revoked)
2344                   {
2345                     pk->is_revoked = revoked;
2346                     memcpy(&pk->revoked,&rinfo,sizeof(rinfo));
2347                   }
2348                 if(main_pk->has_expired)
2349                   pk->has_expired = main_pk->has_expired;
2350             }
2351         }
2352         return;
2353     }
2354
2355     /* set the preference list of all keys to those of the primary real
2356      * user ID.  Note: we use these preferences when we don't know by
2357      * which user ID the key has been selected.
2358      * fixme: we should keep atoms of commonly used preferences or
2359      * use reference counting to optimize the preference lists storage.
2360      * FIXME: it might be better to use the intersection of 
2361      * all preferences.
2362      * Do a similar thing for the MDC feature flag.
2363      */
2364     prefs = NULL;
2365     mdc_feature = 0;
2366     for (k=keyblock; k && k->pkt->pkttype != PKT_PUBLIC_SUBKEY; k = k->next) {
2367         if (k->pkt->pkttype == PKT_USER_ID
2368             && !k->pkt->pkt.user_id->attrib_data
2369             && k->pkt->pkt.user_id->is_primary) {
2370             prefs = k->pkt->pkt.user_id->prefs;
2371             mdc_feature = k->pkt->pkt.user_id->flags.mdc;
2372             break;
2373         }
2374     }    
2375     for(k=keyblock; k; k = k->next ) {
2376         if ( k->pkt->pkttype == PKT_PUBLIC_KEY
2377              || k->pkt->pkttype == PKT_PUBLIC_SUBKEY ) {
2378             PKT_public_key *pk = k->pkt->pkt.public_key;
2379             if (pk->prefs)
2380                 xfree (pk->prefs);
2381             pk->prefs = copy_prefs (prefs);
2382             pk->mdc_feature = mdc_feature;
2383         }
2384     }
2385 }
2386
2387
2388 /*
2389  * Merge the secret keys from secblock into the pubblock thereby
2390  * replacing the public (sub)keys with their secret counterparts Hmmm:
2391  * It might be better to get away from the concept of entire secret
2392  * keys at all and have a way to store just the real secret parts
2393  * from the key.
2394  */
2395 static void
2396 merge_public_with_secret ( KBNODE pubblock, KBNODE secblock )
2397 {
2398     KBNODE pub;
2399
2400     assert ( pubblock->pkt->pkttype == PKT_PUBLIC_KEY );
2401     assert ( secblock->pkt->pkttype == PKT_SECRET_KEY );
2402     
2403     for (pub=pubblock; pub; pub = pub->next ) {
2404         if ( pub->pkt->pkttype == PKT_PUBLIC_KEY ) {
2405              PKT_public_key *pk = pub->pkt->pkt.public_key;
2406              PKT_secret_key *sk = secblock->pkt->pkt.secret_key;
2407              assert ( pub == pubblock ); /* only in the first node */
2408              /* there is nothing to compare in this case, so just replace
2409               * some information */
2410              copy_public_parts_to_secret_key ( pk, sk );
2411              free_public_key ( pk );
2412              pub->pkt->pkttype = PKT_SECRET_KEY;
2413              pub->pkt->pkt.secret_key = copy_secret_key (NULL, sk);
2414         }
2415         else if ( pub->pkt->pkttype == PKT_PUBLIC_SUBKEY ) {
2416             KBNODE sec;
2417             PKT_public_key *pk = pub->pkt->pkt.public_key;
2418
2419             /* this is more complicated: it may happen that the sequence
2420              * of the subkeys dosn't match, so we have to find the
2421              * appropriate secret key */
2422             for (sec=secblock->next; sec; sec = sec->next ) {
2423                 if ( sec->pkt->pkttype == PKT_SECRET_SUBKEY ) {
2424                     PKT_secret_key *sk = sec->pkt->pkt.secret_key;
2425                     if ( !cmp_public_secret_key ( pk, sk ) ) {
2426                         copy_public_parts_to_secret_key ( pk, sk );
2427                         free_public_key ( pk );
2428                         pub->pkt->pkttype = PKT_SECRET_SUBKEY;
2429                         pub->pkt->pkt.secret_key = copy_secret_key (NULL, sk);
2430                         break;
2431                     }
2432                 }
2433             }
2434             if ( !sec ) 
2435                 BUG(); /* already checked in premerge */
2436         }
2437     }
2438 }
2439
2440 /* This function checks that for every public subkey a corresponding
2441  * secret subkey is available and deletes the public subkey otherwise.
2442  * We need this function because we can't delete it later when we
2443  * actually merge the secret parts into the pubring.
2444  * The function also plays some games with the node flags.
2445  */
2446 static void
2447 premerge_public_with_secret ( KBNODE pubblock, KBNODE secblock )
2448 {
2449     KBNODE last, pub;
2450
2451     assert ( pubblock->pkt->pkttype == PKT_PUBLIC_KEY );
2452     assert ( secblock->pkt->pkttype == PKT_SECRET_KEY );
2453     
2454     for (pub=pubblock,last=NULL; pub; last = pub, pub = pub->next ) {
2455         pub->flag &= ~3; /* reset bits 0 and 1 */
2456         if ( pub->pkt->pkttype == PKT_PUBLIC_SUBKEY ) {
2457             KBNODE sec;
2458             PKT_public_key *pk = pub->pkt->pkt.public_key;
2459
2460             for (sec=secblock->next; sec; sec = sec->next ) {
2461                 if ( sec->pkt->pkttype == PKT_SECRET_SUBKEY ) {
2462                     PKT_secret_key *sk = sec->pkt->pkt.secret_key;
2463                     if ( !cmp_public_secret_key ( pk, sk ) ) {
2464                         if ( sk->protect.s2k.mode == 1001 ) {
2465                             /* The secret parts are not available so
2466                                we can't use that key for signing etc.
2467                                Fix the pubkey usage */
2468                             pk->pubkey_usage &= ~(PUBKEY_USAGE_SIG
2469                                                   |PUBKEY_USAGE_AUTH);
2470                         }
2471                         /* transfer flag bits 0 and 1 to the pubblock */
2472                         pub->flag |= (sec->flag &3);
2473                         break;
2474                     }
2475                 }
2476             }
2477             if ( !sec ) {
2478                 KBNODE next, ll;
2479
2480                 if (opt.verbose)
2481                   log_info (_("no secret subkey"
2482                               " for public subkey %s - ignoring\n"),  
2483                             keystr_from_pk (pk));
2484                 /* we have to remove the subkey in this case */
2485                 assert ( last );
2486                 /* find the next subkey */
2487                 for (next=pub->next,ll=pub;
2488                      next && next->pkt->pkttype != PKT_PUBLIC_SUBKEY;
2489                      ll = next, next = next->next ) 
2490                     ;
2491                 /* make new link */
2492                 last->next = next;
2493                 /* release this public subkey with all sigs */
2494                 ll->next = NULL;
2495                 release_kbnode( pub );
2496                 /* let the loop continue */
2497                 pub = last;
2498             }
2499         }
2500     }
2501     /* We need to copy the found bits (0 and 1) from the secret key to
2502        the public key.  This has already been done for the subkeys but
2503        got lost on the primary key - fix it here *. */
2504     pubblock->flag |= (secblock->flag & 3);
2505 }
2506
2507
2508
2509 \f
2510 /* See see whether the key fits
2511  * our requirements and in case we do not
2512  * request the primary key, we should select
2513  * a suitable subkey.
2514  * FIXME: Check against PGP 7 whether we still need a kludge
2515  *        to favor type 16 keys over type 20 keys when type 20
2516  *        has not been explitely requested.
2517  * Returns: True when a suitable key has been found.
2518  *
2519  * We have to distinguish four cases:  FIXME!
2520  *  1. No usage and no primary key requested
2521  *     Examples for this case are that we have a keyID to be used
2522  *     for decrytion or verification.
2523  *  2. No usage but primary key requested
2524  *     This is the case for all functions which work on an
2525  *     entire keyblock, e.g. for editing or listing
2526  *  3. Usage and primary key requested
2527  *     FXME
2528  *  4. Usage but no primary key requested
2529  *     FIXME
2530  * FIXME: Tell what is going to happen here and something about the rationale
2531  * Note: We don't use this function if no specific usage is requested;
2532  *       This way the getkey functions can be used for plain key listings.
2533  *
2534  * CTX ist the keyblock we are investigating, if FOUNDK is not NULL this
2535  * is the key we actually found by looking at the keyid or a fingerprint and
2536  * may eitehr point to the primary or one of the subkeys.
2537  */
2538
2539 static int
2540 finish_lookup (GETKEY_CTX ctx)
2541 {
2542     KBNODE keyblock = ctx->keyblock;
2543     KBNODE k;
2544     KBNODE foundk = NULL;
2545     PKT_user_id *foundu = NULL;
2546 #define USAGE_MASK  (PUBKEY_USAGE_SIG|PUBKEY_USAGE_ENC|PUBKEY_USAGE_CERT)
2547     unsigned int req_usage = ( ctx->req_usage & USAGE_MASK );
2548     /* Request the primary if we're certifying another key, and also
2549        if signing data while --pgp6 or --pgp7 is on since pgp 6 and 7
2550        do not understand signatures made by a signing subkey.  PGP 8
2551        does. */
2552     int req_prim = (ctx->req_usage & PUBKEY_USAGE_CERT) ||
2553       ((PGP6 || PGP7) && (ctx->req_usage & PUBKEY_USAGE_SIG));
2554     u32 latest_date;
2555     KBNODE latest_key;
2556     u32 curtime = make_timestamp ();
2557
2558     assert( keyblock->pkt->pkttype == PKT_PUBLIC_KEY );
2559    
2560     ctx->found_key = NULL;
2561
2562     if (ctx->exact) {
2563         for (k=keyblock; k; k = k->next) {
2564             if ( (k->flag & 1) ) {
2565                 assert ( k->pkt->pkttype == PKT_PUBLIC_KEY
2566                          || k->pkt->pkttype == PKT_PUBLIC_SUBKEY );
2567                 foundk = k;
2568                 break;
2569             }
2570         }
2571     }
2572
2573     for (k=keyblock; k; k = k->next) {
2574         if ( (k->flag & 2) ) {
2575             assert (k->pkt->pkttype == PKT_USER_ID);
2576             foundu = k->pkt->pkt.user_id;
2577             break;
2578         }
2579     }
2580
2581     if ( DBG_CACHE )
2582         log_debug( "finish_lookup: checking key %08lX (%s)(req_usage=%x)\n",
2583                    (ulong)keyid_from_pk( keyblock->pkt->pkt.public_key, NULL),
2584                    foundk? "one":"all", req_usage);
2585
2586     if (!req_usage) {
2587         latest_key = foundk? foundk:keyblock;
2588         goto found;
2589     }
2590     
2591     if (!req_usage) {
2592         PKT_public_key *pk = foundk->pkt->pkt.public_key;
2593         if (pk->user_id)
2594             free_user_id (pk->user_id);
2595         pk->user_id = scopy_user_id (foundu);
2596         ctx->found_key = foundk;
2597         cache_user_id( keyblock );
2598         return 1; /* found */
2599     }
2600     
2601     latest_date = 0;
2602     latest_key  = NULL;
2603     /* do not look at subkeys if a certification key is requested */
2604     if ((!foundk || foundk->pkt->pkttype == PKT_PUBLIC_SUBKEY) && !req_prim) {
2605         KBNODE nextk;
2606         /* either start a loop or check just this one subkey */
2607         for (k=foundk?foundk:keyblock; k; k = nextk ) {
2608             PKT_public_key *pk;
2609             nextk = k->next;
2610             if ( k->pkt->pkttype != PKT_PUBLIC_SUBKEY )
2611                 continue;
2612             if ( foundk )
2613                 nextk = NULL;  /* what a hack */
2614             pk = k->pkt->pkt.public_key;
2615             if (DBG_CACHE)
2616                 log_debug( "\tchecking subkey %08lX\n",
2617                            (ulong)keyid_from_pk( pk, NULL));
2618             if ( !pk->is_valid ) {
2619                 if (DBG_CACHE)
2620                     log_debug( "\tsubkey not valid\n");
2621                 continue;
2622             }
2623             if ( pk->is_revoked ) {
2624                 if (DBG_CACHE)
2625                     log_debug( "\tsubkey has been revoked\n");
2626                 continue;
2627             }
2628             if ( pk->has_expired ) {
2629                 if (DBG_CACHE)
2630                     log_debug( "\tsubkey has expired\n");
2631                 continue;
2632             }
2633             if ( pk->timestamp > curtime && !opt.ignore_valid_from ) {
2634                 if (DBG_CACHE)
2635                     log_debug( "\tsubkey not yet valid\n");
2636                 continue;
2637             }
2638             
2639             if ( !((pk->pubkey_usage&USAGE_MASK) & req_usage) ) {
2640                 if (DBG_CACHE)
2641                     log_debug( "\tusage does not match: want=%x have=%x\n",
2642                                req_usage, pk->pubkey_usage );
2643                 continue;
2644             }
2645
2646             if (DBG_CACHE)
2647                 log_debug( "\tsubkey looks fine\n");
2648             if ( pk->timestamp > latest_date ) {
2649                 latest_date = pk->timestamp;
2650                 latest_key  = k;
2651             }
2652         }
2653     }
2654
2655     /* Okay now try the primary key unless we want an exact 
2656      * key ID match on a subkey */
2657     if ((!latest_key && !(ctx->exact && foundk != keyblock)) || req_prim) {
2658         PKT_public_key *pk;
2659         if (DBG_CACHE && !foundk && !req_prim )
2660             log_debug( "\tno suitable subkeys found - trying primary\n");
2661         pk = keyblock->pkt->pkt.public_key;
2662         if ( !pk->is_valid ) {
2663             if (DBG_CACHE)
2664                 log_debug( "\tprimary key not valid\n");
2665         }
2666         else if ( pk->is_revoked ) {
2667             if (DBG_CACHE)
2668                 log_debug( "\tprimary key has been revoked\n");
2669         }
2670         else if ( pk->has_expired ) {
2671             if (DBG_CACHE)
2672                 log_debug( "\tprimary key has expired\n");
2673         }
2674         else  if ( !((pk->pubkey_usage&USAGE_MASK) & req_usage) ) {
2675             if (DBG_CACHE)
2676                 log_debug( "\tprimary key usage does not match: "
2677                            "want=%x have=%x\n",
2678                            req_usage, pk->pubkey_usage );
2679         }
2680         else { /* okay */
2681             if (DBG_CACHE)
2682                 log_debug( "\tprimary key may be used\n");
2683             latest_key = keyblock;
2684             latest_date = pk->timestamp;
2685         }
2686     }
2687     
2688     if ( !latest_key ) {
2689         if (DBG_CACHE)
2690             log_debug("\tno suitable key found -  giving up\n");
2691         return 0;
2692     }
2693
2694  found:
2695     if (DBG_CACHE)
2696         log_debug( "\tusing key %08lX\n",
2697                 (ulong)keyid_from_pk( latest_key->pkt->pkt.public_key, NULL) );
2698
2699     if (latest_key) {
2700         PKT_public_key *pk = latest_key->pkt->pkt.public_key;
2701         if (pk->user_id)
2702             free_user_id (pk->user_id);
2703         pk->user_id = scopy_user_id (foundu);
2704     }    
2705         
2706     ctx->found_key = latest_key;
2707
2708     if (latest_key != keyblock && opt.verbose)
2709       {
2710         char *tempkeystr=
2711           xstrdup(keystr_from_pk(latest_key->pkt->pkt.public_key));
2712         log_info(_("using subkey %s instead of primary key %s\n"),
2713                  tempkeystr, keystr_from_pk(keyblock->pkt->pkt.public_key));
2714         xfree(tempkeystr);
2715       }
2716
2717     cache_user_id( keyblock );
2718     
2719     return 1; /* found */
2720 }
2721
2722
2723 static int
2724 lookup( GETKEY_CTX ctx, KBNODE *ret_keyblock, int secmode )
2725 {
2726     int rc;
2727     KBNODE secblock = NULL; /* helper */
2728     int no_suitable_key = 0;
2729     
2730     rc = 0;
2731     while (!(rc = keydb_search (ctx->kr_handle, ctx->items, ctx->nitems))) {
2732         /* If we are searching for the first key we have to make sure
2733            that the next iteration does not do an implicit reset.
2734            This can be triggered by an empty key ring. */
2735         if (ctx->nitems && ctx->items->mode == KEYDB_SEARCH_MODE_FIRST)
2736             ctx->items->mode = KEYDB_SEARCH_MODE_NEXT;
2737
2738         rc = keydb_get_keyblock (ctx->kr_handle, &ctx->keyblock);
2739         if (rc) {
2740             log_error ("keydb_get_keyblock failed: %s\n", g10_errstr(rc));
2741             rc = 0;
2742             goto skip;
2743         }
2744                        
2745         if ( secmode ) {
2746             /* find the correspondig public key and use this 
2747              * this one for the selection process */
2748             u32 aki[2];
2749             KBNODE k = ctx->keyblock;
2750             
2751             if (k->pkt->pkttype != PKT_SECRET_KEY)
2752                 BUG();
2753
2754             keyid_from_sk (k->pkt->pkt.secret_key, aki);
2755             k = get_pubkeyblock (aki);
2756             if( !k )
2757               {
2758                 if (!opt.quiet)
2759                   log_info(_("key %s: secret key without public key"
2760                              " - skipped\n"), keystr(aki));
2761                 goto skip;
2762               }
2763             secblock = ctx->keyblock;
2764             ctx->keyblock = k;
2765
2766             premerge_public_with_secret ( ctx->keyblock, secblock );
2767         }
2768
2769         /* warning: node flag bits 0 and 1 should be preserved by
2770          * merge_selfsigs.  For secret keys, premerge did tranfer the
2771          * keys to the keyblock */
2772         merge_selfsigs ( ctx->keyblock );
2773         if ( finish_lookup (ctx) ) {
2774             no_suitable_key = 0;
2775             if ( secmode ) {
2776                 merge_public_with_secret ( ctx->keyblock,
2777                                            secblock);
2778                 release_kbnode (secblock);
2779                 secblock = NULL;
2780             }
2781             goto found;
2782         }
2783         else
2784             no_suitable_key = 1;
2785         
2786       skip:
2787         /* release resources and continue search */
2788         if ( secmode ) {
2789             release_kbnode( secblock );
2790             secblock = NULL;
2791         }
2792         release_kbnode( ctx->keyblock );
2793         ctx->keyblock = NULL;
2794     }
2795
2796   found:
2797     if( rc && rc != -1 )
2798         log_error("keydb_search failed: %s\n", g10_errstr(rc));
2799
2800     if( !rc ) {
2801         *ret_keyblock = ctx->keyblock; /* return the keyblock */
2802         ctx->keyblock = NULL;
2803     }
2804     else if (rc == -1 && no_suitable_key)
2805         rc = secmode ? G10ERR_UNU_SECKEY : G10ERR_UNU_PUBKEY;
2806     else if( rc == -1 )
2807         rc = secmode ? G10ERR_NO_SECKEY : G10ERR_NO_PUBKEY;
2808
2809     if ( secmode ) {
2810         release_kbnode( secblock );
2811         secblock = NULL;
2812     }
2813     release_kbnode( ctx->keyblock );
2814     ctx->keyblock = NULL;
2815
2816     ctx->last_rc = rc;
2817     return rc;
2818 }
2819
2820
2821
2822
2823 /****************
2824  * FIXME: Replace by the generic function 
2825  *        It does not work as it is right now - it is used at 
2826  *        2 places:  a) to get the key for an anonyous recipient
2827  *                   b) to get the ultimately trusted keys.
2828  *        The a) usage might have some problems.
2829  *
2830  * set with_subkeys true to include subkeys
2831  * set with_spm true to include secret-parts-missing keys
2832  *
2833  * Enumerate all primary secret keys.  Caller must use these procedure:
2834  *  1) create a void pointer and initialize it to NULL
2835  *  2) pass this void pointer by reference to this function
2836  *     and provide space for the secret key (pass a buffer for sk)
2837  *  3) call this function as long as it does not return -1
2838  *     to indicate EOF.
2839  *  4) Always call this function a last time with SK set to NULL,
2840  *     so that can free it's context.
2841  */
2842 int
2843 enum_secret_keys( void **context, PKT_secret_key *sk,
2844                   int with_subkeys, int with_spm )
2845 {
2846     int rc=0;
2847     struct {
2848         int eof;
2849         int first;
2850         KEYDB_HANDLE hd;
2851         KBNODE keyblock;
2852         KBNODE node;
2853     } *c = *context;
2854
2855
2856     if( !c ) { /* make a new context */
2857         c = xmalloc_clear( sizeof *c );
2858         *context = c;
2859         c->hd = keydb_new (1);
2860         c->first = 1;
2861         c->keyblock = NULL;
2862         c->node = NULL;
2863     }
2864
2865     if( !sk ) { /* free the context */
2866         keydb_release (c->hd);
2867         release_kbnode (c->keyblock);
2868         xfree( c );
2869         *context = NULL;
2870         return 0;
2871     }
2872
2873     if( c->eof )
2874         return -1;
2875
2876     do {
2877         /* get the next secret key from the current keyblock */
2878         for (; c->node; c->node = c->node->next) {
2879             if ((c->node->pkt->pkttype == PKT_SECRET_KEY
2880                 || (with_subkeys
2881                     && c->node->pkt->pkttype == PKT_SECRET_SUBKEY) )
2882                 && !(c->node->pkt->pkt.secret_key->protect.s2k.mode==1001
2883                      && !with_spm)) {
2884                 copy_secret_key (sk, c->node->pkt->pkt.secret_key );
2885                 c->node = c->node->next;
2886                 return 0; /* found */
2887             }
2888         }
2889         release_kbnode (c->keyblock);
2890         c->keyblock = c->node = NULL;
2891         
2892         rc = c->first? keydb_search_first (c->hd) : keydb_search_next (c->hd);
2893         c->first = 0;
2894         if (rc) {
2895             keydb_release (c->hd); c->hd = NULL;
2896             c->eof = 1;
2897             return -1; /* eof */
2898         }
2899         
2900         rc = keydb_get_keyblock (c->hd, &c->keyblock);
2901         c->node = c->keyblock;
2902     } while (!rc);
2903
2904     return rc; /* error */
2905 }
2906
2907
2908 \f
2909 /*********************************************
2910  ***********  user ID printing helpers *******
2911  *********************************************/
2912
2913 /****************
2914  * Return a string with a printable representation of the user_id.
2915  * this string must be freed by xfree.
2916  */
2917 char*
2918 get_user_id_string( u32 *keyid )
2919 {
2920   user_id_db_t r;
2921   char *p;
2922   int pass=0;
2923   /* try it two times; second pass reads from key resources */
2924   do
2925     {
2926       for(r=user_id_db; r; r = r->next )
2927         {
2928           keyid_list_t a;
2929           for (a=r->keyids; a; a= a->next )
2930             {
2931               if( a->keyid[0] == keyid[0] && a->keyid[1] == keyid[1] )
2932                 {
2933                   p = xmalloc( keystrlen() + 1 + r->len + 1 );
2934                   sprintf(p, "%s %.*s", keystr(keyid), r->len, r->name );
2935                   return p;
2936                 }
2937             }
2938         }
2939     } while( ++pass < 2 && !get_pubkey( NULL, keyid ) );
2940   p = xmalloc( keystrlen() + 5 );
2941   sprintf(p, "%s [?]", keystr(keyid));
2942   return p;
2943 }
2944
2945
2946 char*
2947 get_user_id_string_native ( u32 *keyid )
2948 {
2949   char *p = get_user_id_string( keyid );
2950   char *p2 = utf8_to_native( p, strlen(p), 0 );
2951   xfree(p);
2952   return p2;
2953 }
2954
2955
2956 char*
2957 get_long_user_id_string( u32 *keyid )
2958 {
2959     user_id_db_t r;
2960     char *p;
2961     int pass=0;
2962     /* try it two times; second pass reads from key resources */
2963     do {
2964         for(r=user_id_db; r; r = r->next ) {
2965             keyid_list_t a;
2966             for (a=r->keyids; a; a= a->next ) {
2967                 if( a->keyid[0] == keyid[0] && a->keyid[1] == keyid[1] ) {
2968                     p = xmalloc( r->len + 20 );
2969                     sprintf(p, "%08lX%08lX %.*s",
2970                             (ulong)keyid[0], (ulong)keyid[1],
2971                             r->len, r->name );
2972                     return p;
2973                 }
2974             }
2975         }
2976     } while( ++pass < 2 && !get_pubkey( NULL, keyid ) );
2977     p = xmalloc( 25 );
2978     sprintf(p, "%08lX%08lX [?]", (ulong)keyid[0], (ulong)keyid[1] );
2979     return p;
2980 }
2981
2982 char*
2983 get_user_id( u32 *keyid, size_t *rn )
2984 {
2985     user_id_db_t r;
2986     char *p;
2987     int pass=0;
2988
2989     /* try it two times; second pass reads from key resources */
2990     do {
2991         for(r=user_id_db; r; r = r->next ) {
2992             keyid_list_t a;
2993             for (a=r->keyids; a; a= a->next ) {
2994                 if( a->keyid[0] == keyid[0] && a->keyid[1] == keyid[1] ) {
2995                     p = xmalloc( r->len );
2996                     memcpy(p, r->name, r->len );
2997                     *rn = r->len;
2998                     return p;
2999                 }
3000             }
3001         }
3002     } while( ++pass < 2 && !get_pubkey( NULL, keyid ) );
3003     p = xstrdup( user_id_not_found_utf8 () );
3004     *rn = strlen(p);
3005     return p;
3006 }
3007
3008 char*
3009 get_user_id_native( u32 *keyid )
3010 {
3011   size_t rn;
3012   char *p = get_user_id( keyid, &rn );
3013   char *p2 = utf8_to_native( p, rn, 0 );
3014   xfree(p);
3015   return p2;
3016 }
3017
3018 KEYDB_HANDLE
3019 get_ctx_handle(GETKEY_CTX ctx)
3020 {
3021   return ctx->kr_handle;
3022 }
3023
3024 static void
3025 free_akl(struct akl *akl)
3026 {
3027   if(akl->spec)
3028     free_keyserver_spec(akl->spec);
3029
3030   xfree(akl);
3031 }
3032
3033 void
3034 release_akl(void)
3035 {
3036   while(opt.auto_key_locate)
3037     {
3038       struct akl *akl2=opt.auto_key_locate;
3039       opt.auto_key_locate=opt.auto_key_locate->next;
3040       free_akl(akl2);
3041     }
3042 }
3043
3044 /* Returns false on error. */
3045 int
3046 parse_auto_key_locate(char *options)
3047 {
3048   char *tok;
3049
3050   while((tok=optsep(&options)))
3051     {
3052       struct akl *akl,*check,*last=NULL;
3053       int dupe=0;
3054
3055       if(tok[0]=='\0')
3056         continue;
3057
3058       akl=xmalloc_clear(sizeof(*akl));
3059
3060       if(ascii_strcasecmp(tok,"nodefault")==0)
3061         akl->type=AKL_NODEFAULT;
3062       else if(ascii_strcasecmp(tok,"local")==0)
3063         akl->type=AKL_LOCAL;
3064       else if(ascii_strcasecmp(tok,"ldap")==0)
3065         akl->type=AKL_LDAP;
3066       else if(ascii_strcasecmp(tok,"keyserver")==0)
3067         akl->type=AKL_KEYSERVER;
3068 #ifdef USE_DNS_CERT
3069       else if(ascii_strcasecmp(tok,"cert")==0)
3070         akl->type=AKL_CERT;
3071 #endif
3072 #ifdef USE_DNS_PKA
3073       else if(ascii_strcasecmp(tok,"pka")==0)
3074         akl->type=AKL_PKA;
3075 #endif
3076       else if((akl->spec=parse_keyserver_uri(tok,1,NULL,0)))
3077         akl->type=AKL_SPEC;
3078       else
3079         {
3080           free_akl(akl);
3081           return 0;
3082         }
3083
3084       /* We must maintain the order the user gave us */
3085       for(check=opt.auto_key_locate;check;last=check,check=check->next)
3086         {
3087           /* Check for duplicates */
3088           if(check->type==akl->type
3089              && (akl->type!=AKL_SPEC
3090                  || (akl->type==AKL_SPEC
3091                      && strcmp(check->spec->uri,akl->spec->uri)==0)))
3092             {
3093               dupe=1;
3094               free_akl(akl);
3095               break;
3096             }
3097         }
3098
3099       if(!dupe)
3100         {
3101           if(last)
3102             last->next=akl;
3103           else
3104             opt.auto_key_locate=akl;
3105         }
3106     }
3107
3108   return 1;
3109 }