Merge branch 'STABLE-BRANCH-2-2' into master
[gnupg.git] / g10 / keydb.h
1 /* keydb.h - Key database
2  * Copyright (C) 1998, 1999, 2000, 2001, 2002, 2003, 2004, 2005,
3  *               2006, 2010 Free Software Foundation, Inc.
4  * Copyright (C) 2015, 2016 g10 Code GmbH
5  *
6  * This file is part of GnuPG.
7  *
8  * GnuPG is free software; you can redistribute it and/or modify
9  * it under the terms of the GNU General Public License as published by
10  * the Free Software Foundation; either version 3 of the License, or
11  * (at your option) any later version.
12  *
13  * GnuPG is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
16  * GNU General Public License for more details.
17  *
18  * You should have received a copy of the GNU General Public License
19  * along with this program; if not, see <https://www.gnu.org/licenses/>.
20  */
21
22 #ifndef G10_KEYDB_H
23 #define G10_KEYDB_H
24
25 #include "../common/types.h"
26 #include "../common/util.h"
27 #include "packet.h"
28
29 /* What qualifies as a certification (key-signature in contrast to a
30  * data signature)?  Note that a back signature is special and can be
31  * made by key and data signatures capable subkeys.) */
32 #define IS_CERT(s)       (IS_KEY_SIG(s) || IS_UID_SIG(s) || IS_SUBKEY_SIG(s) \
33                          || IS_KEY_REV(s) || IS_UID_REV(s) || IS_SUBKEY_REV(s))
34 #define IS_SIG(s)        (!IS_CERT(s))
35 #define IS_KEY_SIG(s)    ((s)->sig_class == 0x1f)
36 #define IS_UID_SIG(s)    (((s)->sig_class & ~3) == 0x10)
37 #define IS_SUBKEY_SIG(s) ((s)->sig_class == 0x18)
38 #define IS_BACK_SIG(s)   ((s)->sig_class == 0x19)
39 #define IS_KEY_REV(s)    ((s)->sig_class == 0x20)
40 #define IS_UID_REV(s)    ((s)->sig_class == 0x30)
41 #define IS_SUBKEY_REV(s) ((s)->sig_class == 0x28)
42
43 struct getkey_ctx_s;
44 typedef struct getkey_ctx_s *GETKEY_CTX;
45 typedef struct getkey_ctx_s *getkey_ctx_t;
46
47 /****************
48  * A Keyblock is all packets which form an entire certificate;
49  * i.e. the public key, certificate, trust packets, user ids,
50  * signatures, and subkey.
51  *
52  * This structure is also used to bind arbitrary packets together.
53  */
54
55 struct kbnode_struct {
56     KBNODE next;
57     PACKET *pkt;
58     int flag;
59     int private_flag;
60     ulong recno;  /* used while updating the trustdb */
61 };
62
63 #define is_deleted_kbnode(a)  ((a)->private_flag & 1)
64 #define is_cloned_kbnode(a)   ((a)->private_flag & 2)
65
66
67 /* Bit flags used with build_pk_list.  */
68 enum
69   {
70     PK_LIST_ENCRYPT_TO = 1, /* This is an encrypt-to recipient.    */
71     PK_LIST_HIDDEN     = 2, /* This is a hidden recipient.         */
72     PK_LIST_CONFIG     = 4, /* Specified via config file.          */
73     PK_LIST_FROM_FILE  = 8  /* Take key from file with that name.  */
74   };
75
76 /* To store private data in the flags the private data must be left
77  * shifted by this value.  */
78 enum
79   {
80     PK_LIST_SHIFT = 4
81   };
82
83
84 /* Structure to hold a couple of public key certificates. */
85 typedef struct pk_list *PK_LIST;  /* Deprecated. */
86 typedef struct pk_list *pk_list_t;
87 struct pk_list
88 {
89   PK_LIST next;
90   PKT_public_key *pk;
91   int flags;           /* See PK_LIST_ constants. */
92 };
93
94 /* Structure to hold a list of secret key certificates.  */
95 typedef struct sk_list *SK_LIST;
96 struct sk_list
97 {
98   SK_LIST next;
99   PKT_public_key *pk;
100   int mark; /* not used */
101 };
102
103 /* structure to collect all information which can be used to
104  * identify a public key */
105 typedef struct pubkey_find_info *PUBKEY_FIND_INFO;
106 struct pubkey_find_info {
107     u32  keyid[2];
108     unsigned nbits;
109     byte pubkey_algo;
110     byte fingerprint[MAX_FINGERPRINT_LEN];
111     char userid[1];
112 };
113
114
115 /* Helper type for preference functions. */
116 union pref_hint
117 {
118   int digest_length;
119 };
120
121
122 /* Constants to describe from where a key was fetched or updated.  */
123 enum
124   {
125     KEYORG_UNKNOWN = 0,
126     KEYORG_KS      = 1, /* Public keyserver.    */
127     KEYORG_KS_PREF = 2, /* Preferred keysrver.  */
128     KEYORG_DANE    = 3, /* OpenPGP DANE.        */
129     KEYORG_WKD     = 4, /* Web Key Directory.   */
130     KEYORG_URL     = 5, /* Trusted URL.         */
131     KEYORG_FILE    = 6, /* Trusted file.        */
132     KEYORG_SELF    = 7  /* We generated it.     */
133   };
134
135
136 /*-- keydb.c --*/
137
138 #define KEYDB_RESOURCE_FLAG_PRIMARY  2  /* The primary resource.  */
139 #define KEYDB_RESOURCE_FLAG_DEFAULT  4  /* The default one.  */
140 #define KEYDB_RESOURCE_FLAG_READONLY 8  /* Open in read only mode.  */
141 #define KEYDB_RESOURCE_FLAG_GPGVDEF 16  /* Default file for gpgv.  */
142
143 /* Format a search term for debugging output.  The caller must free
144    the result.  */
145 char *keydb_search_desc_dump (struct keydb_search_desc *desc);
146
147 /* Register a resource (keyring or keybox).  */
148 gpg_error_t keydb_add_resource (const char *url, unsigned int flags);
149
150 /* Dump some statistics to the log.  */
151 void keydb_dump_stats (void);
152
153 /* Create a new database handle.  Returns NULL on error, sets ERRNO,
154    and prints an error diagnostic. */
155 KEYDB_HANDLE keydb_new (void);
156
157 /* Free all resources owned by the database handle.  */
158 void keydb_release (KEYDB_HANDLE hd);
159
160 /* Take a lock on the files immediately and not only during insert or
161  * update.  This lock is released with keydb_release.  */
162 gpg_error_t keydb_lock (KEYDB_HANDLE hd);
163
164 /* Set a flag on the handle to suppress use of cached results.  This
165    is required for updating a keyring and for key listings.  Fixme:
166    Using a new parameter for keydb_new might be a better solution.  */
167 void keydb_disable_caching (KEYDB_HANDLE hd);
168
169 /* Save the last found state and invalidate the current selection.  */
170 void keydb_push_found_state (KEYDB_HANDLE hd);
171
172 /* Restore the previous save state.  */
173 void keydb_pop_found_state (KEYDB_HANDLE hd);
174
175 /* Return the file name of the resource.  */
176 const char *keydb_get_resource_name (KEYDB_HANDLE hd);
177
178 /* Return the keyblock last found by keydb_search.  */
179 gpg_error_t keydb_get_keyblock (KEYDB_HANDLE hd, KBNODE *ret_kb);
180
181 /* Update the keyblock KB.  */
182 gpg_error_t keydb_update_keyblock (ctrl_t ctrl, KEYDB_HANDLE hd, kbnode_t kb);
183
184 /* Insert a keyblock into one of the underlying keyrings or keyboxes.  */
185 gpg_error_t keydb_insert_keyblock (KEYDB_HANDLE hd, kbnode_t kb);
186
187 /* Delete the currently selected keyblock.  */
188 gpg_error_t keydb_delete_keyblock (KEYDB_HANDLE hd);
189
190 /* Find the first writable resource.  */
191 gpg_error_t keydb_locate_writable (KEYDB_HANDLE hd);
192
193 /* Rebuild the on-disk caches of all key resources.  */
194 void keydb_rebuild_caches (ctrl_t ctrl, int noisy);
195
196 /* Return the number of skipped blocks (because they were to large to
197    read from a keybox) since the last search reset.  */
198 unsigned long keydb_get_skipped_counter (KEYDB_HANDLE hd);
199
200 /* Clears the current search result and resets the handle's position.  */
201 gpg_error_t keydb_search_reset (KEYDB_HANDLE hd);
202
203 /* Search the database for keys matching the search description.  */
204 gpg_error_t keydb_search (KEYDB_HANDLE hd, KEYDB_SEARCH_DESC *desc,
205                           size_t ndesc, size_t *descindex);
206
207 /* Return the first non-legacy key in the database.  */
208 gpg_error_t keydb_search_first (KEYDB_HANDLE hd);
209
210 /* Return the next key (not the next matching key!).  */
211 gpg_error_t keydb_search_next (KEYDB_HANDLE hd);
212
213 /* This is a convenience function for searching for keys with a long
214    key id.  */
215 gpg_error_t keydb_search_kid (KEYDB_HANDLE hd, u32 *kid);
216
217 /* This is a convenience function for searching for keys with a long
218    (20 byte) fingerprint.  */
219 gpg_error_t keydb_search_fpr (KEYDB_HANDLE hd, const byte *fpr);
220
221
222 /*-- pkclist.c --*/
223 void show_revocation_reason (ctrl_t ctrl, PKT_public_key *pk, int mode );
224 int  check_signatures_trust (ctrl_t ctrl, PKT_signature *sig);
225
226 void release_pk_list (PK_LIST pk_list);
227 int  build_pk_list (ctrl_t ctrl, strlist_t rcpts, PK_LIST *ret_pk_list);
228 gpg_error_t find_and_check_key (ctrl_t ctrl,
229                                 const char *name, unsigned int use,
230                                 int mark_hidden, int from_file,
231                                 pk_list_t *pk_list_addr);
232
233 int  algo_available( preftype_t preftype, int algo,
234                      const union pref_hint *hint );
235 int  select_algo_from_prefs( PK_LIST pk_list, int preftype,
236                              int request, const union pref_hint *hint);
237 int  select_mdc_from_pklist (PK_LIST pk_list);
238 aead_algo_t select_aead_from_pklist (pk_list_t pk_list);
239 void warn_missing_mdc_from_pklist (PK_LIST pk_list);
240 void warn_missing_aes_from_pklist (PK_LIST pk_list);
241
242 /*-- skclist.c --*/
243 int  random_is_faked (void);
244 void release_sk_list( SK_LIST sk_list );
245 gpg_error_t build_sk_list (ctrl_t ctrl, strlist_t locusr,
246                            SK_LIST *ret_sk_list, unsigned use);
247
248 /*-- passphrase.h --*/
249 unsigned char encode_s2k_iterations (int iterations);
250 int  have_static_passphrase(void);
251 const char *get_static_passphrase (void);
252 void set_passphrase_from_string(const char *pass);
253 void read_passphrase_from_fd( int fd );
254 void passphrase_clear_cache (const char *cacheid);
255 DEK *passphrase_to_dek_ext(u32 *keyid, int pubkey_algo,
256                            int cipher_algo, STRING2KEY *s2k, int mode,
257                            const char *tryagain_text,
258                            const char *custdesc, const char *custprompt,
259                            int *canceled);
260 DEK *passphrase_to_dek (int cipher_algo, STRING2KEY *s2k,
261                         int create, int nocache,
262                         const char *tryagain_text, int *canceled);
263 void set_next_passphrase( const char *s );
264 char *get_last_passphrase(void);
265 void next_to_last_passphrase(void);
266
267 void emit_status_need_passphrase (ctrl_t ctrl, u32 *keyid,
268                                   u32 *mainkeyid, int pubkey_algo);
269
270 #define FORMAT_KEYDESC_NORMAL  0
271 #define FORMAT_KEYDESC_IMPORT  1
272 #define FORMAT_KEYDESC_EXPORT  2
273 #define FORMAT_KEYDESC_DELKEY  3
274 char *gpg_format_keydesc (ctrl_t ctrl,
275                           PKT_public_key *pk, int mode, int escaped);
276
277
278 /*-- getkey.c --*/
279
280 /* Cache a copy of a public key in the public key cache.  */
281 void cache_public_key( PKT_public_key *pk );
282
283 /* Disable and drop the public key cache.  */
284 void getkey_disable_caches(void);
285
286 /* Return the public key with the key id KEYID and store it at PK.  */
287 int get_pubkey (ctrl_t ctrl, PKT_public_key *pk, u32 *keyid);
288
289 /* Similar to get_pubkey, but it does not take PK->REQ_USAGE into
290    account nor does it merge in the self-signed data.  This function
291    also only considers primary keys.  */
292 int get_pubkey_fast (PKT_public_key *pk, u32 *keyid);
293
294 /* Return the key block for the key with KEYID.  */
295 kbnode_t get_pubkeyblock (ctrl_t ctrl, u32 *keyid);
296
297 /* A list used by get_pubkeys to gather all of the matches.  */
298 struct pubkey_s
299 {
300   struct pubkey_s *next;
301   /* The key to use (either the public key or the subkey).  */
302   PKT_public_key *pk;
303   kbnode_t keyblock;
304 };
305 typedef struct pubkey_s *pubkey_t;
306
307 /* Free a single key.  This does not remove key from any list!  */
308 void pubkey_free (pubkey_t key);
309
310 /* Free a list of public keys.  */
311 void pubkeys_free (pubkey_t keys);
312
313 /* Returns all keys that match the search specification SEARCH_TERMS.
314    The returned keys should be freed using pubkeys_free.  */
315 gpg_error_t
316 get_pubkeys (ctrl_t ctrl,
317              char *search_terms, int use, int include_unusable, char *source,
318              int warn_possibly_ambiguous,
319              pubkey_t *r_keys);
320
321 /* Find a public key identified by NAME.  */
322 int get_pubkey_byname (ctrl_t ctrl,
323                        GETKEY_CTX *retctx, PKT_public_key *pk,
324                        const char *name,
325                        KBNODE *ret_keyblock, KEYDB_HANDLE *ret_kdbhd,
326                        int include_unusable, int no_akl );
327
328 /* Likewise, but only return the best match if NAME resembles a mail
329  * address.  */
330 gpg_error_t get_best_pubkey_byname (ctrl_t ctrl,
331                                     GETKEY_CTX *retctx, PKT_public_key *pk,
332                                     const char *name, KBNODE *ret_keyblock,
333                                     int include_unusable, int no_akl);
334
335 /* Get a public key directly from file FNAME.  */
336 gpg_error_t get_pubkey_fromfile (ctrl_t ctrl,
337                                  PKT_public_key *pk, const char *fname);
338
339 /* Return the public key with the key id KEYID iff the secret key is
340  * available and store it at PK.  */
341 gpg_error_t get_seckey (ctrl_t ctrl, PKT_public_key *pk, u32 *keyid);
342
343 /* Lookup a key with the specified fingerprint.  */
344 int get_pubkey_byfprint (ctrl_t ctrl, PKT_public_key *pk, kbnode_t *r_keyblock,
345                          const byte *fprint, size_t fprint_len);
346
347 /* This function is similar to get_pubkey_byfprint, but it doesn't
348    merge the self-signed data into the public key and subkeys or into
349    the user ids.  */
350 gpg_error_t get_pubkey_byfprint_fast (PKT_public_key *pk,
351                                       const byte *fprint, size_t fprint_len);
352
353 /* This function is similar to get_pubkey_byfprint, but it doesn't
354    merge the self-signed data into the public key and subkeys or into
355    the user ids.  */
356 gpg_error_t get_keyblock_byfprint_fast (kbnode_t *r_keyblock,
357                                         KEYDB_HANDLE *r_hd,
358                                         const byte *fprint, size_t fprint_len,
359                                         int lock);
360
361
362 /* Returns true if a secret key is available for the public key with
363    key id KEYID.  */
364 int have_secret_key_with_kid (u32 *keyid);
365
366 /* Parse the --default-key parameter.  Returns the last key (in terms
367    of when the option is given) that is available.  */
368 const char *parse_def_secret_key (ctrl_t ctrl);
369
370 /* Look up a secret key.  */
371 gpg_error_t get_seckey_default (ctrl_t ctrl, PKT_public_key *pk);
372 gpg_error_t get_seckey_default_or_card (ctrl_t ctrl, PKT_public_key *pk,
373                                         const byte *fpr, size_t fpr_len);
374
375 /* Search for keys matching some criteria.  */
376 gpg_error_t getkey_bynames (ctrl_t ctrl,
377                             getkey_ctx_t *retctx, PKT_public_key *pk,
378                             strlist_t names, int want_secret,
379                             kbnode_t *ret_keyblock);
380
381 /* Search for one key matching some criteria.  */
382 gpg_error_t getkey_byname (ctrl_t ctrl,
383                            getkey_ctx_t *retctx, PKT_public_key *pk,
384                            const char *name, int want_secret,
385                            kbnode_t *ret_keyblock);
386
387 /* Return the next search result.  */
388 gpg_error_t getkey_next (ctrl_t ctrl, getkey_ctx_t ctx,
389                          PKT_public_key *pk, kbnode_t *ret_keyblock);
390
391 /* Release any resources used by a key listing context.  */
392 void getkey_end (ctrl_t ctrl, getkey_ctx_t ctx);
393
394 /* Return the database handle used by this context.  The context still
395    owns the handle.  */
396 KEYDB_HANDLE get_ctx_handle(GETKEY_CTX ctx);
397
398 /* Enumerate some secret keys.  */
399 gpg_error_t enum_secret_keys (ctrl_t ctrl, void **context, PKT_public_key *pk);
400
401 /* Set the mainkey_id fields for all keys in KEYBLOCK.  */
402 void setup_main_keyids (kbnode_t keyblock);
403
404 /* This function merges information from the self-signed data into the
405    data structures.  */
406 void merge_keys_and_selfsig (ctrl_t ctrl, kbnode_t keyblock);
407
408 char *get_user_id_string_native (ctrl_t ctrl, u32 *keyid);
409 char *get_long_user_id_string (ctrl_t ctrl, u32 *keyid);
410 char *get_user_id (ctrl_t ctrl, u32 *keyid, size_t *rn, int *r_nouid);
411 char *get_user_id_native (ctrl_t ctrl, u32 *keyid);
412 char *get_user_id_byfpr (ctrl_t ctrl, const byte *fpr, size_t *rn);
413 char *get_user_id_byfpr_native (ctrl_t ctrl, const byte *fpr);
414
415 void release_akl(void);
416 int parse_auto_key_locate(const char *options);
417 int parse_key_origin (char *string);
418 const char *key_origin_string (int origin);
419
420 /*-- keyid.c --*/
421 int pubkey_letter( int algo );
422 char *pubkey_string (PKT_public_key *pk, char *buffer, size_t bufsize);
423 #define PUBKEY_STRING_SIZE 32
424 u32 v3_keyid (gcry_mpi_t a, u32 *ki);
425 void hash_public_key( gcry_md_hd_t md, PKT_public_key *pk );
426 char *format_keyid (u32 *keyid, int format, char *buffer, int len);
427
428 /* Return PK's keyid.  The memory is owned by PK.  */
429 u32 *pk_keyid (PKT_public_key *pk);
430
431 /* Return the keyid of the primary key associated with PK.  The memory
432    is owned by PK.  */
433 u32 *pk_main_keyid (PKT_public_key *pk);
434
435 /* Order A and B.  If A < B then return -1, if A == B then return 0,
436    and if A > B then return 1.  */
437 static int GPGRT_ATTR_UNUSED
438 keyid_cmp (const u32 *a, const u32 *b)
439 {
440   if (a[0] < b[0])
441     return -1;
442   if (a[0] > b[0])
443     return 1;
444   if (a[1] < b[1])
445     return -1;
446   if (a[1] > b[1])
447     return 1;
448   return 0;
449 }
450
451 /* Return whether PK is a primary key.  */
452 static int GPGRT_ATTR_UNUSED
453 pk_is_primary (PKT_public_key *pk)
454 {
455   return keyid_cmp (pk_keyid (pk), pk_main_keyid (pk)) == 0;
456 }
457
458 /* Copy the keyid in SRC to DEST and return DEST.  */
459 u32 *keyid_copy (u32 *dest, const u32 *src);
460
461 size_t keystrlen(void);
462 const char *keystr(u32 *keyid);
463 const char *keystr_with_sub (u32 *main_kid, u32 *sub_kid);
464 const char *keystr_from_pk(PKT_public_key *pk);
465 const char *keystr_from_pk_with_sub (PKT_public_key *main_pk,
466                                      PKT_public_key *sub_pk);
467
468 /* Return PK's key id as a string using the default format.  PK owns
469    the storage.  */
470 const char *pk_keyid_str (PKT_public_key *pk);
471
472 const char *keystr_from_desc(KEYDB_SEARCH_DESC *desc);
473 u32 keyid_from_pk( PKT_public_key *pk, u32 *keyid );
474 u32 keyid_from_sig (PKT_signature *sig, u32 *keyid );
475 u32 keyid_from_fingerprint (ctrl_t ctrl, const byte *fprint, size_t fprint_len,
476                             u32 *keyid);
477 byte *namehash_from_uid(PKT_user_id *uid);
478 unsigned nbits_from_pk( PKT_public_key *pk );
479
480 /* Convert an UTC TIMESTAMP into an UTC yyyy-mm-dd string.  Return
481  * that string.  The caller should pass a buffer with at least a size
482  * of MK_DATESTR_SIZE.  */
483 char *mk_datestr (char *buffer, size_t bufsize, u32 timestamp);
484 #define MK_DATESTR_SIZE 11
485
486 const char *datestr_from_pk( PKT_public_key *pk );
487 const char *datestr_from_sig( PKT_signature *sig );
488 const char *expirestr_from_pk( PKT_public_key *pk );
489 const char *expirestr_from_sig( PKT_signature *sig );
490 const char *revokestr_from_pk( PKT_public_key *pk );
491 const char *usagestr_from_pk (PKT_public_key *pk, int fill);
492 const char *colon_strtime (u32 t);
493 const char *colon_datestr_from_pk (PKT_public_key *pk);
494 const char *colon_datestr_from_sig (PKT_signature *sig);
495 const char *colon_expirestr_from_sig (PKT_signature *sig);
496 byte *fingerprint_from_pk( PKT_public_key *pk, byte *buf, size_t *ret_len );
497 char *hexfingerprint (PKT_public_key *pk, char *buffer, size_t buflen);
498 char *format_hexfingerprint (const char *fingerprint,
499                              char *buffer, size_t buflen);
500 gpg_error_t keygrip_from_pk (PKT_public_key *pk, unsigned char *array);
501 gpg_error_t hexkeygrip_from_pk (PKT_public_key *pk, char **r_grip);
502
503
504 /*-- kbnode.c --*/
505 KBNODE new_kbnode( PACKET *pkt );
506 KBNODE clone_kbnode( KBNODE node );
507 void release_kbnode( KBNODE n );
508 void delete_kbnode( KBNODE node );
509 void add_kbnode( KBNODE root, KBNODE node );
510 void insert_kbnode( KBNODE root, KBNODE node, int pkttype );
511 void move_kbnode( KBNODE *root, KBNODE node, KBNODE where );
512 void remove_kbnode( KBNODE *root, KBNODE node );
513 KBNODE find_prev_kbnode( KBNODE root, KBNODE node, int pkttype );
514 KBNODE find_next_kbnode( KBNODE node, int pkttype );
515 KBNODE find_kbnode( KBNODE node, int pkttype );
516 KBNODE walk_kbnode( KBNODE root, KBNODE *context, int all );
517 void clear_kbnode_flags( KBNODE n );
518 int  commit_kbnode( KBNODE *root );
519 void dump_kbnode( KBNODE node );
520
521 #endif /*G10_KEYDB_H*/