src/daemon/configfile.c

   1 /**
   2  * collectd - src/configfile.c
   3  * Copyright (C) 2005-2011  Florian octo Forster
   4  *
   5  * Permission is hereby granted, free of charge, to any person obtaining a
   6  * copy of this software and associated documentation files (the "Software"),
   7  * to deal in the Software without restriction, including without limitation
   8  * the rights to use, copy, modify, merge, publish, distribute, sublicense,
   9  * and/or sell copies of the Software, and to permit persons to whom the
  10  * Software is furnished to do so, subject to the following conditions:
  11  *
  12  * The above copyright notice and this permission notice shall be included in
  13  * all copies or substantial portions of the Software.
  14  *
  15  * THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR
  16  * IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY,
  17  * FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE
  18  * AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER
  19  * LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING
  20  * FROM, OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER
  21  * DEALINGS IN THE SOFTWARE.
  22  *
  23  * Authors:
  24  *   Florian octo Forster <octo at collectd.org>
  25  *   Sebastian tokkee Harl <sh at tokkee.org>
  26  **/
  27
  28 #include "collectd.h"
  29
  30 #include "liboconfig/oconfig.h"
  31
  32 #include "common.h"
  33 #include "configfile.h"
  34 #include "filter_chain.h"
  35 #include "plugin.h"
  36 #include "types_list.h"
  37
  38 #if HAVE_WORDEXP_H
  39 #include <wordexp.h>
  40 #endif /* HAVE_WORDEXP_H */
  41
  42 #if HAVE_FNMATCH_H
  43 #include <fnmatch.h>
  44 #endif /* HAVE_FNMATCH_H */
  45
  46 #if HAVE_LIBGEN_H
  47 #include <libgen.h>
  48 #endif /* HAVE_LIBGEN_H */
  49
  50 #define ESCAPE_NULL(str) ((str) == NULL ? "(null)" : (str))
  51
  52 /*
  53  * Private types
  54  */
  55 typedef struct cf_callback {
  56   const char *type;
  57   int (*callback)(const char *, const char *);
  58   const char **keys;
  59   int keys_num;
  60   plugin_ctx_t ctx;
  61   struct cf_callback *next;
  62 } cf_callback_t;
  63
  64 typedef struct cf_complex_callback_s {
  65   char *type;
  66   int (*callback)(oconfig_item_t *);
  67   plugin_ctx_t ctx;
  68   struct cf_complex_callback_s *next;
  69 } cf_complex_callback_t;
  70
  71 typedef struct cf_value_map_s {
  72   const char *key;
  73   int (*func)(oconfig_item_t *);
  74 } cf_value_map_t;
  75
  76 typedef struct cf_global_option_s {
  77   const char *key;
  78   char *value;
  79   _Bool from_cli; /* value set from CLI */
  80   const char *def;
  81 } cf_global_option_t;
  82
  83 /*
  84  * Prototypes of callback functions
  85  */
  86 static int dispatch_value_typesdb(oconfig_item_t *ci);
  87 static int dispatch_value_plugindir(oconfig_item_t *ci);
  88 static int dispatch_loadplugin(oconfig_item_t *ci);
  89 static int dispatch_block_plugin(oconfig_item_t *ci);
  90
  91 /*
  92  * Private variables
  93  */
  94 static cf_callback_t *first_callback = NULL;
  95 static cf_complex_callback_t *complex_callback_head = NULL;
  96
  97 static cf_value_map_t cf_value_map[] = {{"TypesDB", dispatch_value_typesdb},
  98                                         {"PluginDir", dispatch_value_plugindir},
  99                                         {"LoadPlugin", dispatch_loadplugin},
 100                                         {"Plugin", dispatch_block_plugin}};
 101 static int cf_value_map_num = STATIC_ARRAY_SIZE(cf_value_map);
 102
 103 static cf_global_option_t cf_global_options[] = {
 104     {"BaseDir", NULL, 0, PKGLOCALSTATEDIR},
 105     {"PIDFile", NULL, 0, PIDFILE},
 106     {"Hostname", NULL, 0, NULL},
 107     {"FQDNLookup", NULL, 0, "true"},
 108     {"Interval", NULL, 0, NULL},
 109     {"ReadThreads", NULL, 0, "5"},
 110     {"WriteThreads", NULL, 0, "5"},
 111     {"WriteQueueLimitHigh", NULL, 0, NULL},
 112     {"WriteQueueLimitLow", NULL, 0, NULL},
 113     {"Timeout", NULL, 0, "2"},
 114     {"AutoLoadPlugin", NULL, 0, "false"},
 115     {"CollectInternalStats", NULL, 0, "false"},
 116     {"PreCacheChain", NULL, 0, "PreCache"},
 117     {"PostCacheChain", NULL, 0, "PostCache"},
 118     {"MaxReadInterval", NULL, 0, "86400"}};
 119 static int cf_global_options_num = STATIC_ARRAY_SIZE(cf_global_options);
 120
 121 static int cf_default_typesdb = 1;
 122
 123 /*
 124  * Functions to handle register/unregister, search, and other plugin related
 125  * stuff
 126  */
 127 static cf_callback_t *cf_search(const char *type) {
 128   cf_callback_t *cf_cb;
 129
 130   if (type == NULL)
 131     return NULL;
 132
 133   for (cf_cb = first_callback; cf_cb != NULL; cf_cb = cf_cb->next)
 134     if (strcasecmp(cf_cb->type, type) == 0)
 135       break;
 136
 137   return cf_cb;
 138 }
 139
 140 static int cf_dispatch(const char *type, const char *orig_key,
 141                        const char *orig_value) {
 142   cf_callback_t *cf_cb;
 143   plugin_ctx_t old_ctx;
 144   char *key;
 145   char *value;
 146   int ret;
 147   int i = 0;
 148
 149   if (orig_key == NULL)
 150     return EINVAL;
 151
 152   DEBUG("type = %s, key = %s, value = %s", ESCAPE_NULL(type), orig_key,
 153         ESCAPE_NULL(orig_value));
 154
 155   if ((cf_cb = cf_search(type)) == NULL) {
 156     WARNING("Found a configuration for the `%s' plugin, but "
 157             "the plugin isn't loaded or didn't register "
 158             "a configuration callback.",
 159             type);
 160     return -1;
 161   }
 162
 163   if ((key = strdup(orig_key)) == NULL)
 164     return 1;
 165   if ((value = strdup(orig_value)) == NULL) {
 166     free(key);
 167     return 2;
 168   }
 169
 170   ret = -1;
 171
 172   old_ctx = plugin_set_ctx(cf_cb->ctx);
 173
 174   for (i = 0; i < cf_cb->keys_num; i++) {
 175     if ((cf_cb->keys[i] != NULL) && (strcasecmp(cf_cb->keys[i], key) == 0)) {
 176       ret = (*cf_cb->callback)(key, value);
 177       break;
 178     }
 179   }
 180
 181   plugin_set_ctx(old_ctx);
 182
 183   if (i >= cf_cb->keys_num)
 184     WARNING("Plugin `%s' did not register for value `%s'.", type, key);
 185
 186   free(key);
 187   free(value);
 188
 189   return ret;
 190 } /* int cf_dispatch */
 191
 192 static int dispatch_global_option(const oconfig_item_t *ci) {
 193   if (ci->values_num != 1)
 194     return -1;
 195   if (ci->values[0].type == OCONFIG_TYPE_STRING)
 196     return global_option_set(ci->key, ci->values[0].value.string, 0);
 197   else if (ci->values[0].type == OCONFIG_TYPE_NUMBER) {
 198     char tmp[128];
 199     snprintf(tmp, sizeof(tmp), "%lf", ci->values[0].value.number);
 200     return global_option_set(ci->key, tmp, 0);
 201   } else if (ci->values[0].type == OCONFIG_TYPE_BOOLEAN) {
 202     if (ci->values[0].value.boolean)
 203       return global_option_set(ci->key, "true", 0);
 204     else
 205       return global_option_set(ci->key, "false", 0);
 206   }
 207
 208   return -1;
 209 } /* int dispatch_global_option */
 210
 211 static int dispatch_value_typesdb(oconfig_item_t *ci) {
 212   assert(strcasecmp(ci->key, "TypesDB") == 0);
 213
 214   cf_default_typesdb = 0;
 215
 216   if (ci->values_num < 1) {
 217     ERROR("configfile: `TypesDB' needs at least one argument.");
 218     return -1;
 219   }
 220
 221   for (int i = 0; i < ci->values_num; ++i) {
 222     if (OCONFIG_TYPE_STRING != ci->values[i].type) {
 223       WARNING("configfile: TypesDB: Skipping %i. argument which "
 224               "is not a string.",
 225               i + 1);
 226       continue;
 227     }
 228
 229     read_types_list(ci->values[i].value.string);
 230   }
 231   return 0;
 232 } /* int dispatch_value_typesdb */
 233
 234 static int dispatch_value_plugindir(oconfig_item_t *ci) {
 235   assert(strcasecmp(ci->key, "PluginDir") == 0);
 236
 237   if (ci->values_num != 1)
 238     return -1;
 239   if (ci->values[0].type != OCONFIG_TYPE_STRING)
 240     return -1;
 241
 242   plugin_set_dir(ci->values[0].value.string);
 243   return 0;
 244 }
 245
 246 static int dispatch_loadplugin(oconfig_item_t *ci) {
 247   const char *name;
 248   _Bool global = 0;
 249   plugin_ctx_t ctx = {0};
 250   plugin_ctx_t old_ctx;
 251   int ret_val;
 252
 253   assert(strcasecmp(ci->key, "LoadPlugin") == 0);
 254
 255   if (ci->values_num != 1)
 256     return -1;
 257   if (ci->values[0].type != OCONFIG_TYPE_STRING)
 258     return -1;
 259
 260   name = ci->values[0].value.string;
 261   if (strcmp("libvirt", name) == 0)
 262     name = "virt";
 263
 264   /* default to the global interval set before loading this plugin */
 265   ctx.interval = cf_get_default_interval();
 266   ctx.flush_interval = 0;
 267   ctx.flush_timeout = 0;
 268
 269   for (int i = 0; i < ci->children_num; ++i) {
 270     oconfig_item_t *child = ci->children + i;
 271
 272     if (strcasecmp("Globals", child->key) == 0)
 273       cf_util_get_boolean(child, &global);
 274     else if (strcasecmp("Interval", child->key) == 0)
 275       cf_util_get_cdtime(child, &ctx.interval);
 276     else if (strcasecmp("FlushInterval", child->key) == 0)
 277       cf_util_get_cdtime(child, &ctx.flush_interval);
 278     else if (strcasecmp("FlushTimeout", child->key) == 0)
 279       cf_util_get_cdtime(child, &ctx.flush_timeout);
 280     else {
 281       WARNING("Ignoring unknown LoadPlugin option \"%s\" "
 282               "for plugin \"%s\"",
 283               child->key, ci->values[0].value.string);
 284     }
 285   }
 286
 287   old_ctx = plugin_set_ctx(ctx);
 288   ret_val = plugin_load(name, global);
 289   /* reset to the "global" context */
 290   plugin_set_ctx(old_ctx);
 291
 292   return ret_val;
 293 } /* int dispatch_value_loadplugin */
 294
 295 static int dispatch_value_plugin(const char *plugin, oconfig_item_t *ci) {
 296   char buffer[4096];
 297   char *buffer_ptr;
 298   int buffer_free;
 299
 300   buffer_ptr = buffer;
 301   buffer_free = sizeof(buffer);
 302
 303   for (int i = 0; i < ci->values_num; i++) {
 304     int status = -1;
 305
 306     if (ci->values[i].type == OCONFIG_TYPE_STRING)
 307       status =
 308           snprintf(buffer_ptr, buffer_free, " %s", ci->values[i].value.string);
 309     else if (ci->values[i].type == OCONFIG_TYPE_NUMBER)
 310       status =
 311           snprintf(buffer_ptr, buffer_free, " %lf", ci->values[i].value.number);
 312     else if (ci->values[i].type == OCONFIG_TYPE_BOOLEAN)
 313       status = snprintf(buffer_ptr, buffer_free, " %s",
 314                         ci->values[i].value.boolean ? "true" : "false");
 315
 316     if ((status < 0) || (status >= buffer_free))
 317       return -1;
 318     buffer_free -= status;
 319     buffer_ptr += status;
 320   }
 321   /* skip the initial space */
 322   buffer_ptr = buffer + 1;
 323
 324   return cf_dispatch(plugin, ci->key, buffer_ptr);
 325 } /* int dispatch_value_plugin */
 326
 327 static int dispatch_value(oconfig_item_t *ci) {
 328   int ret = 0;
 329
 330   for (int i = 0; i < cf_value_map_num; i++)
 331     if (strcasecmp(cf_value_map[i].key, ci->key) == 0) {
 332       ret = cf_value_map[i].func(ci);
 333       break;
 334     }
 335
 336   for (int i = 0; i < cf_global_options_num; i++)
 337     if (strcasecmp(cf_global_options[i].key, ci->key) == 0) {
 338       ret = dispatch_global_option(ci);
 339       break;
 340     }
 341
 342   return ret;
 343 } /* int dispatch_value */
 344
 345 static int dispatch_block_plugin(oconfig_item_t *ci) {
 346   const char *name;
 347
 348   if (strcasecmp(ci->key, "Plugin") != 0)
 349     return -1;
 350   if (ci->values_num < 1)
 351     return -1;
 352   if (ci->values[0].type != OCONFIG_TYPE_STRING)
 353     return -1;
 354
 355   name = ci->values[0].value.string;
 356   if (strcmp("libvirt", name) == 0) {
 357     /* TODO(octo): Remove this legacy. */
 358     WARNING("The \"libvirt\" plugin has been renamed to \"virt\" to avoid "
 359             "problems with the build system. "
 360             "Your configuration is still using the old name. "
 361             "Please change it to use \"virt\" as soon as possible. "
 362             "This compatibility code will go away eventually.");
 363     name = "virt";
 364   }
 365
 366   if (IS_TRUE(global_option_get("AutoLoadPlugin"))) {
 367     plugin_ctx_t ctx = {0};
 368     plugin_ctx_t old_ctx;
 369     int status;
 370
 371     /* default to the global interval set before loading this plugin */
 372     ctx.interval = cf_get_default_interval();
 373
 374     old_ctx = plugin_set_ctx(ctx);
 375     status = plugin_load(name, /* flags = */ 0);
 376     /* reset to the "global" context */
 377     plugin_set_ctx(old_ctx);
 378
 379     if (status != 0) {
 380       ERROR("Automatically loading plugin \"%s\" failed "
 381             "with status %i.",
 382             name, status);
 383       return status;
 384     }
 385   }
 386
 387   /* Check for a complex callback first */
 388   for (cf_complex_callback_t *cb = complex_callback_head; cb != NULL;
 389        cb = cb->next) {
 390     if (strcasecmp(name, cb->type) == 0) {
 391       plugin_ctx_t old_ctx;
 392       int ret_val;
 393
 394       old_ctx = plugin_set_ctx(cb->ctx);
 395       ret_val = (cb->callback(ci));
 396       plugin_set_ctx(old_ctx);
 397       return ret_val;
 398     }
 399   }
 400
 401   /* Hm, no complex plugin found. Dispatch the values one by one */
 402   for (int i = 0; i < ci->children_num; i++) {
 403     if (ci->children[i].children == NULL)
 404       dispatch_value_plugin(name, ci->children + i);
 405     else {
 406       WARNING("There is a `%s' block within the "
 407               "configuration for the %s plugin. "
 408               "The plugin either only expects "
 409               "\"simple\" configuration statements "
 410               "or wasn't loaded using `LoadPlugin'."
 411               " Please check your configuration.",
 412               ci->children[i].key, name);
 413     }
 414   }
 415
 416   return 0;
 417 }
 418
 419 static int dispatch_block(oconfig_item_t *ci) {
 420   if (strcasecmp(ci->key, "LoadPlugin") == 0)
 421     return dispatch_loadplugin(ci);
 422   else if (strcasecmp(ci->key, "Plugin") == 0)
 423     return dispatch_block_plugin(ci);
 424   else if (strcasecmp(ci->key, "Chain") == 0)
 425     return fc_configure(ci);
 426
 427   return 0;
 428 }
 429
 430 static int cf_ci_replace_child(oconfig_item_t *dst, oconfig_item_t *src,
 431                                int offset) {
 432   oconfig_item_t *temp;
 433
 434   assert(offset >= 0);
 435   assert(dst->children_num > offset);
 436
 437   /* Free the memory used by the replaced child. Usually that's the
 438    * `Include "blah"' statement. */
 439   temp = dst->children + offset;
 440   for (int i = 0; i < temp->values_num; i++) {
 441     if (temp->values[i].type == OCONFIG_TYPE_STRING) {
 442       sfree(temp->values[i].value.string);
 443     }
 444   }
 445   sfree(temp->values);
 446   temp = NULL;
 447
 448   /* If (src->children_num == 0) the array size is decreased. If offset
 449    * is _not_ the last element, (offset < (dst->children_num - 1)), then
 450    * we need to move the trailing elements before resizing the array. */
 451   if ((src->children_num == 0) && (offset < (dst->children_num - 1))) {
 452     int nmemb = dst->children_num - (offset + 1);
 453     memmove(dst->children + offset, dst->children + offset + 1,
 454             sizeof(oconfig_item_t) * nmemb);
 455   }
 456
 457   /* Resize the memory containing the children to be big enough to hold
 458    * all children. */
 459   if (dst->children_num + src->children_num - 1 == 0) {
 460     dst->children_num = 0;
 461     return 0;
 462   }
 463
 464   temp =
 465       realloc(dst->children, sizeof(oconfig_item_t) *
 466                                  (dst->children_num + src->children_num - 1));
 467   if (temp == NULL) {
 468     ERROR("configfile: realloc failed.");
 469     return -1;
 470   }
 471   dst->children = temp;
 472
 473   /* If there are children behind the include statement, and they have
 474    * not yet been moved because (src->children_num == 0), then move them
 475    * to the end of the list, so that the new children have room before
 476    * them. */
 477   if ((src->children_num > 0) && ((dst->children_num - (offset + 1)) > 0)) {
 478     int nmemb = dst->children_num - (offset + 1);
 479     int old_offset = offset + 1;
 480     int new_offset = offset + src->children_num;
 481
 482     memmove(dst->children + new_offset, dst->children + old_offset,
 483             sizeof(oconfig_item_t) * nmemb);
 484   }
 485
 486   /* Last but not least: If there are new children, copy them to the
 487    * memory reserved for them. */
 488   if (src->children_num > 0) {
 489     memcpy(dst->children + offset, src->children,
 490            sizeof(oconfig_item_t) * src->children_num);
 491   }
 492
 493   /* Update the number of children. */
 494   dst->children_num += (src->children_num - 1);
 495
 496   return 0;
 497 } /* int cf_ci_replace_child */
 498
 499 static int cf_ci_append_children(oconfig_item_t *dst, oconfig_item_t *src) {
 500   oconfig_item_t *temp;
 501
 502   if ((src == NULL) || (src->children_num == 0))
 503     return 0;
 504
 505   temp = realloc(dst->children, sizeof(oconfig_item_t) *
 506                                     (dst->children_num + src->children_num));
 507   if (temp == NULL) {
 508     ERROR("configfile: realloc failed.");
 509     return -1;
 510   }
 511   dst->children = temp;
 512
 513   memcpy(dst->children + dst->children_num, src->children,
 514          sizeof(oconfig_item_t) * src->children_num);
 515   dst->children_num += src->children_num;
 516
 517   return 0;
 518 } /* int cf_ci_append_children */
 519
 520 #define CF_MAX_DEPTH 8
 521 static oconfig_item_t *cf_read_generic(const char *path, const char *pattern,
 522                                        int depth);
 523
 524 static int cf_include_all(oconfig_item_t *root, int depth) {
 525   for (int i = 0; i < root->children_num; i++) {
 526     oconfig_item_t *new;
 527     oconfig_item_t *old;
 528
 529     char *pattern = NULL;
 530
 531     if (strcasecmp(root->children[i].key, "Include") != 0)
 532       continue;
 533
 534     old = root->children + i;
 535
 536     if ((old->values_num != 1) ||
 537         (old->values[0].type != OCONFIG_TYPE_STRING)) {
 538       ERROR("configfile: `Include' needs exactly one string argument.");
 539       continue;
 540     }
 541
 542     for (int j = 0; j < old->children_num; ++j) {
 543       oconfig_item_t *child = old->children + j;
 544
 545       if (strcasecmp(child->key, "Filter") == 0)
 546         cf_util_get_string(child, &pattern);
 547       else
 548         ERROR("configfile: Option `%s' not allowed in <Include> block.",
 549               child->key);
 550     }
 551
 552     new = cf_read_generic(old->values[0].value.string, pattern, depth + 1);
 553     sfree(pattern);
 554
 555     if (new == NULL)
 556       return -1;
 557
 558     /* Now replace the i'th child in `root' with `new'. */
 559     if (cf_ci_replace_child(root, new, i) < 0) {
 560       sfree(new->values);
 561       sfree(new);
 562       return -1;
 563     }
 564
 565     /* ... and go back to the new i'th child. */
 566     --i;
 567
 568     sfree(new->values);
 569     sfree(new);
 570   } /* for (i = 0; i < root->children_num; i++) */
 571
 572   return 0;
 573 } /* int cf_include_all */
 574
 575 static oconfig_item_t *cf_read_file(const char *file, const char *pattern,
 576                                     int depth) {
 577   oconfig_item_t *root;
 578   int status;
 579
 580   assert(depth < CF_MAX_DEPTH);
 581
 582   if (pattern != NULL) {
 583 #if HAVE_FNMATCH_H && HAVE_LIBGEN_H
 584     char *tmp = sstrdup(file);
 585     char *filename = basename(tmp);
 586
 587     if ((filename != NULL) && (fnmatch(pattern, filename, 0) != 0)) {
 588       DEBUG("configfile: Not including `%s' because it "
 589             "does not match pattern `%s'.",
 590             filename, pattern);
 591       free(tmp);
 592       return NULL;
 593     }
 594
 595     free(tmp);
 596 #else
 597     ERROR("configfile: Cannot apply pattern filter '%s' "
 598           "to file '%s': functions basename() and / or "
 599           "fnmatch() not available.",
 600           pattern, file);
 601 #endif /* HAVE_FNMATCH_H && HAVE_LIBGEN_H */
 602   }
 603
 604   root = oconfig_parse_file(file);
 605   if (root == NULL) {
 606     ERROR("configfile: Cannot read file `%s'.", file);
 607     return NULL;
 608   }
 609
 610   status = cf_include_all(root, depth);
 611   if (status != 0) {
 612     oconfig_free(root);
 613     return NULL;
 614   }
 615
 616   return root;
 617 } /* oconfig_item_t *cf_read_file */
 618
 619 static int cf_compare_string(const void *p1, const void *p2) {
 620   return strcmp(*(const char **)p1, *(const char **)p2);
 621 }
 622
 623 static oconfig_item_t *cf_read_dir(const char *dir, const char *pattern,
 624                                    int depth) {
 625   oconfig_item_t *root = NULL;
 626   DIR *dh;
 627   struct dirent *de;
 628   char **filenames = NULL;
 629   int filenames_num = 0;
 630   int status;
 631
 632   assert(depth < CF_MAX_DEPTH);
 633
 634   dh = opendir(dir);
 635   if (dh == NULL) {
 636     ERROR("configfile: opendir failed: %s", STRERRNO);
 637     return NULL;
 638   }
 639
 640   root = calloc(1, sizeof(*root));
 641   if (root == NULL) {
 642     ERROR("configfile: calloc failed.");
 643     closedir(dh);
 644     return NULL;
 645   }
 646
 647   while ((de = readdir(dh)) != NULL) {
 648     char name[1024];
 649     char **tmp;
 650
 651     if ((de->d_name[0] == '.') || (de->d_name[0] == 0))
 652       continue;
 653
 654     status = snprintf(name, sizeof(name), "%s/%s", dir, de->d_name);
 655     if ((status < 0) || ((size_t)status >= sizeof(name))) {
 656       ERROR("configfile: Not including `%s/%s' because its"
 657             " name is too long.",
 658             dir, de->d_name);
 659       closedir(dh);
 660       for (int i = 0; i < filenames_num; ++i)
 661         free(filenames[i]);
 662       free(filenames);
 663       free(root);
 664       return NULL;
 665     }
 666
 667     ++filenames_num;
 668     tmp = realloc(filenames, filenames_num * sizeof(*filenames));
 669     if (tmp == NULL) {
 670       ERROR("configfile: realloc failed.");
 671       closedir(dh);
 672       for (int i = 0; i < filenames_num - 1; ++i)
 673         free(filenames[i]);
 674       free(filenames);
 675       free(root);
 676       return NULL;
 677     }
 678     filenames = tmp;
 679
 680     filenames[filenames_num - 1] = sstrdup(name);
 681   }
 682
 683   if (filenames == NULL) {
 684     closedir(dh);
 685     return root;
 686   }
 687
 688   qsort((void *)filenames, filenames_num, sizeof(*filenames),
 689         cf_compare_string);
 690
 691   for (int i = 0; i < filenames_num; ++i) {
 692     oconfig_item_t *temp;
 693     char *name = filenames[i];
 694
 695     temp = cf_read_generic(name, pattern, depth);
 696     if (temp == NULL) {
 697       /* An error should already have been reported. */
 698       sfree(name);
 699       continue;
 700     }
 701
 702     cf_ci_append_children(root, temp);
 703     sfree(temp->children);
 704     sfree(temp);
 705
 706     free(name);
 707   }
 708
 709   closedir(dh);
 710   free(filenames);
 711   return root;
 712 } /* oconfig_item_t *cf_read_dir */
 713
 714 /*
 715  * cf_read_generic
 716  *
 717  * Path is stat'ed and either cf_read_file or cf_read_dir is called
 718  * accordingly.
 719  *
 720  * There are two versions of this function: If `wordexp' exists shell wildcards
 721  * will be expanded and the function will include all matches found. If
 722  * `wordexp' (or, more precisely, its header file) is not available the
 723  * simpler function is used which does not do any such expansion.
 724  */
 725 #if HAVE_WORDEXP_H
 726 static oconfig_item_t *cf_read_generic(const char *path, const char *pattern,
 727                                        int depth) {
 728   oconfig_item_t *root = NULL;
 729   int status;
 730   const char *path_ptr;
 731   wordexp_t we;
 732
 733   if (depth >= CF_MAX_DEPTH) {
 734     ERROR("configfile: Not including `%s' because the maximum "
 735           "nesting depth has been reached.",
 736           path);
 737     return NULL;
 738   }
 739
 740   status = wordexp(path, &we, WRDE_NOCMD);
 741   if (status != 0) {
 742     ERROR("configfile: wordexp (%s) failed.", path);
 743     return NULL;
 744   }
 745
 746   root = calloc(1, sizeof(*root));
 747   if (root == NULL) {
 748     ERROR("configfile: calloc failed.");
 749     return NULL;
 750   }
 751
 752   /* wordexp() might return a sorted list already. That's not
 753    * documented though, so let's make sure we get what we want. */
 754   qsort((void *)we.we_wordv, we.we_wordc, sizeof(*we.we_wordv),
 755         cf_compare_string);
 756
 757   for (size_t i = 0; i < we.we_wordc; i++) {
 758     oconfig_item_t *temp;
 759     struct stat statbuf;
 760
 761     path_ptr = we.we_wordv[i];
 762
 763     status = stat(path_ptr, &statbuf);
 764     if (status != 0) {
 765       WARNING("configfile: stat (%s) failed: %s", path_ptr, STRERRNO);
 766       continue;
 767     }
 768
 769     if (S_ISREG(statbuf.st_mode))
 770       temp = cf_read_file(path_ptr, pattern, depth);
 771     else if (S_ISDIR(statbuf.st_mode))
 772       temp = cf_read_dir(path_ptr, pattern, depth);
 773     else {
 774       WARNING("configfile: %s is neither a file nor a "
 775               "directory.",
 776               path);
 777       continue;
 778     }
 779
 780     if (temp == NULL) {
 781       oconfig_free(root);
 782       return NULL;
 783     }
 784
 785     cf_ci_append_children(root, temp);
 786     sfree(temp->children);
 787     sfree(temp);
 788   }
 789
 790   wordfree(&we);
 791
 792   return root;
 793 } /* oconfig_item_t *cf_read_generic */
 794 /* #endif HAVE_WORDEXP_H */
 795
 796 #else  /* if !HAVE_WORDEXP_H */
 797 static oconfig_item_t *cf_read_generic(const char *path, const char *pattern,
 798                                        int depth) {
 799   struct stat statbuf;
 800   int status;
 801
 802   if (depth >= CF_MAX_DEPTH) {
 803     ERROR("configfile: Not including `%s' because the maximum "
 804           "nesting depth has been reached.",
 805           path);
 806     return NULL;
 807   }
 808
 809   status = stat(path, &statbuf);
 810   if (status != 0) {
 811     ERROR("configfile: stat (%s) failed: %s", path, STRERRNO);
 812     return NULL;
 813   }
 814
 815   if (S_ISREG(statbuf.st_mode))
 816     return cf_read_file(path, pattern, depth);
 817   else if (S_ISDIR(statbuf.st_mode))
 818     return cf_read_dir(path, pattern, depth);
 819
 820   ERROR("configfile: %s is neither a file nor a directory.", path);
 821   return NULL;
 822 } /* oconfig_item_t *cf_read_generic */
 823 #endif /* !HAVE_WORDEXP_H */
 824
 825 /*
 826  * Public functions
 827  */
 828 int global_option_set(const char *option, const char *value, _Bool from_cli) {
 829   int i;
 830   DEBUG("option = %s; value = %s;", option, value);
 831
 832   for (i = 0; i < cf_global_options_num; i++)
 833     if (strcasecmp(cf_global_options[i].key, option) == 0)
 834       break;
 835
 836   if (i >= cf_global_options_num) {
 837     ERROR("configfile: Cannot set unknown global option `%s'.", option);
 838     return -1;
 839   }
 840
 841   if (cf_global_options[i].from_cli && (!from_cli)) {
 842     DEBUG("configfile: Ignoring %s `%s' option because "
 843           "it was overriden by a command-line option.",
 844           option, value);
 845     return 0;
 846   }
 847
 848   sfree(cf_global_options[i].value);
 849
 850   if (value != NULL)
 851     cf_global_options[i].value = strdup(value);
 852   else
 853     cf_global_options[i].value = NULL;
 854
 855   cf_global_options[i].from_cli = from_cli;
 856
 857   return 0;
 858 }
 859
 860 const char *global_option_get(const char *option) {
 861   int i;
 862   for (i = 0; i < cf_global_options_num; i++)
 863     if (strcasecmp(cf_global_options[i].key, option) == 0)
 864       break;
 865
 866   if (i >= cf_global_options_num) {
 867     ERROR("configfile: Cannot get unknown global option `%s'.", option);
 868     return NULL;
 869   }
 870
 871   return (cf_global_options[i].value != NULL) ? cf_global_options[i].value
 872                                               : cf_global_options[i].def;
 873 } /* char *global_option_get */
 874
 875 long global_option_get_long(const char *option, long default_value) {
 876   const char *str;
 877   long value;
 878
 879   str = global_option_get(option);
 880   if (NULL == str)
 881     return default_value;
 882
 883   errno = 0;
 884   value = strtol(str, /* endptr = */ NULL, /* base = */ 0);
 885   if (errno != 0)
 886     return default_value;
 887
 888   return value;
 889 } /* char *global_option_get_long */
 890
 891 cdtime_t global_option_get_time(const char *name, cdtime_t def) /* {{{ */
 892 {
 893   char const *optstr;
 894   char *endptr = NULL;
 895   double v;
 896
 897   optstr = global_option_get(name);
 898   if (optstr == NULL)
 899     return def;
 900
 901   errno = 0;
 902   v = strtod(optstr, &endptr);
 903   if ((endptr == NULL) || (*endptr != 0) || (errno != 0))
 904     return def;
 905   else if (v <= 0.0)
 906     return def;
 907
 908   return DOUBLE_TO_CDTIME_T(v);
 909 } /* }}} cdtime_t global_option_get_time */
 910
 911 cdtime_t cf_get_default_interval(void) {
 912   return global_option_get_time("Interval",
 913                                 DOUBLE_TO_CDTIME_T(COLLECTD_DEFAULT_INTERVAL));
 914 }
 915
 916 void cf_unregister(const char *type) {
 917   for (cf_callback_t *prev = NULL, *this = first_callback; this != NULL;
 918        prev = this, this = this->next)
 919     if (strcasecmp(this->type, type) == 0) {
 920       if (prev == NULL)
 921         first_callback = this->next;
 922       else
 923         prev->next = this->next;
 924
 925       free(this);
 926       break;
 927     }
 928 } /* void cf_unregister */
 929
 930 void cf_unregister_complex(const char *type) {
 931   for (cf_complex_callback_t *prev = NULL, *this = complex_callback_head;
 932        this != NULL; prev = this, this = this->next)
 933     if (strcasecmp(this->type, type) == 0) {
 934       if (prev == NULL)
 935         complex_callback_head = this->next;
 936       else
 937         prev->next = this->next;
 938
 939       sfree(this->type);
 940       sfree(this);
 941       break;
 942     }
 943 } /* void cf_unregister */
 944
 945 void cf_register(const char *type, int (*callback)(const char *, const char *),
 946                  const char **keys, int keys_num) {
 947   cf_callback_t *cf_cb;
 948
 949   /* Remove this module from the list, if it already exists */
 950   cf_unregister(type);
 951
 952   /* This pointer will be free'd in `cf_unregister' */
 953   if ((cf_cb = malloc(sizeof(*cf_cb))) == NULL)
 954     return;
 955
 956   cf_cb->type = type;
 957   cf_cb->callback = callback;
 958   cf_cb->keys = keys;
 959   cf_cb->keys_num = keys_num;
 960   cf_cb->ctx = plugin_get_ctx();
 961
 962   cf_cb->next = first_callback;
 963   first_callback = cf_cb;
 964 } /* void cf_register */
 965
 966 int cf_register_complex(const char *type, int (*callback)(oconfig_item_t *)) {
 967   cf_complex_callback_t *new;
 968
 969   new = malloc(sizeof(*new));
 970   if (new == NULL)
 971     return -1;
 972
 973   new->type = strdup(type);
 974   if (new->type == NULL) {
 975     sfree(new);
 976     return -1;
 977   }
 978
 979   new->callback = callback;
 980   new->next = NULL;
 981
 982   new->ctx = plugin_get_ctx();
 983
 984   if (complex_callback_head == NULL) {
 985     complex_callback_head = new;
 986   } else {
 987     cf_complex_callback_t *last = complex_callback_head;
 988     while (last->next != NULL)
 989       last = last->next;
 990     last->next = new;
 991   }
 992
 993   return 0;
 994 } /* int cf_register_complex */
 995
 996 int cf_read(const char *filename) {
 997   oconfig_item_t *conf;
 998   int ret = 0;
 999
1000   conf = cf_read_generic(filename, /* pattern = */ NULL, /* depth = */ 0);
1001   if (conf == NULL) {
1002     ERROR("Unable to read config file %s.", filename);
1003     return -1;
1004   } else if (conf->children_num == 0) {
1005     ERROR("Configuration file %s is empty.", filename);
1006     oconfig_free(conf);
1007     return -1;
1008   }
1009
1010   for (int i = 0; i < conf->children_num; i++) {
1011     if (conf->children[i].children == NULL) {
1012       if (dispatch_value(conf->children + i) != 0)
1013         ret = -1;
1014     } else {
1015       if (dispatch_block(conf->children + i) != 0)
1016         ret = -1;
1017     }
1018   }
1019
1020   oconfig_free(conf);
1021
1022   /* Read the default types.db if no `TypesDB' option was given. */
1023   if (cf_default_typesdb) {
1024     if (read_types_list(PKGDATADIR "/types.db") != 0)
1025       ret = -1;
1026   }
1027
1028   return ret;
1029
1030 } /* int cf_read */
1031
1032 /* Assures the config option is a string, duplicates it and returns the copy in
1033  * "ret_string". If necessary "*ret_string" is freed first. Returns zero upon
1034  * success. */
1035 int cf_util_get_string(const oconfig_item_t *ci, char **ret_string) /* {{{ */
1036 {
1037   char *string;
1038
1039   if ((ci->values_num != 1) || (ci->values[0].type != OCONFIG_TYPE_STRING)) {
1040     ERROR("cf_util_get_string: The %s option requires "
1041           "exactly one string argument.",
1042           ci->key);
1043     return -1;
1044   }
1045
1046   string = strdup(ci->values[0].value.string);
1047   if (string == NULL)
1048     return -1;
1049
1050   if (*ret_string != NULL)
1051     sfree(*ret_string);
1052   *ret_string = string;
1053
1054   return 0;
1055 } /* }}} int cf_util_get_string */
1056
1057 /* Assures the config option is a string and copies it to the provided buffer.
1058  * Assures null-termination. */
1059 int cf_util_get_string_buffer(const oconfig_item_t *ci, char *buffer, /* {{{ */
1060                               size_t buffer_size) {
1061   if ((ci == NULL) || (buffer == NULL) || (buffer_size < 1))
1062     return EINVAL;
1063
1064   if ((ci->values_num != 1) || (ci->values[0].type != OCONFIG_TYPE_STRING)) {
1065     ERROR("cf_util_get_string_buffer: The %s option requires "
1066           "exactly one string argument.",
1067           ci->key);
1068     return -1;
1069   }
1070
1071   strncpy(buffer, ci->values[0].value.string, buffer_size);
1072   buffer[buffer_size - 1] = 0;
1073
1074   return 0;
1075 } /* }}} int cf_util_get_string_buffer */
1076
1077 /* Assures the config option is a number and returns it as an int. */
1078 int cf_util_get_int(const oconfig_item_t *ci, int *ret_value) /* {{{ */
1079 {
1080   if ((ci == NULL) || (ret_value == NULL))
1081     return EINVAL;
1082
1083   if ((ci->values_num != 1) || (ci->values[0].type != OCONFIG_TYPE_NUMBER)) {
1084     ERROR("cf_util_get_int: The %s option requires "
1085           "exactly one numeric argument.",
1086           ci->key);
1087     return -1;
1088   }
1089
1090   *ret_value = (int)ci->values[0].value.number;
1091
1092   return 0;
1093 } /* }}} int cf_util_get_int */
1094
1095 int cf_util_get_double(const oconfig_item_t *ci, double *ret_value) /* {{{ */
1096 {
1097   if ((ci == NULL) || (ret_value == NULL))
1098     return EINVAL;
1099
1100   if ((ci->values_num != 1) || (ci->values[0].type != OCONFIG_TYPE_NUMBER)) {
1101     ERROR("cf_util_get_double: The %s option requires "
1102           "exactly one numeric argument.",
1103           ci->key);
1104     return -1;
1105   }
1106
1107   *ret_value = ci->values[0].value.number;
1108
1109   return 0;
1110 } /* }}} int cf_util_get_double */
1111
1112 int cf_util_get_boolean(const oconfig_item_t *ci, _Bool *ret_bool) /* {{{ */
1113 {
1114   if ((ci == NULL) || (ret_bool == NULL))
1115     return EINVAL;
1116
1117   if ((ci->values_num != 1) || ((ci->values[0].type != OCONFIG_TYPE_BOOLEAN) &&
1118                                 (ci->values[0].type != OCONFIG_TYPE_STRING))) {
1119     ERROR("cf_util_get_boolean: The %s option requires "
1120           "exactly one boolean argument.",
1121           ci->key);
1122     return -1;
1123   }
1124
1125   switch (ci->values[0].type) {
1126   case OCONFIG_TYPE_BOOLEAN:
1127     *ret_bool = ci->values[0].value.boolean ? 1 : 0;
1128     break;
1129   case OCONFIG_TYPE_STRING:
1130     WARNING("cf_util_get_boolean: Using string value `%s' for boolean option "
1131             "`%s' is deprecated and will be removed in future releases. "
1132             "Use unquoted true or false instead.",
1133             ci->values[0].value.string, ci->key);
1134
1135     if (IS_TRUE(ci->values[0].value.string))
1136       *ret_bool = 1;
1137     else if (IS_FALSE(ci->values[0].value.string))
1138       *ret_bool = 0;
1139     else {
1140       ERROR("cf_util_get_boolean: Cannot parse string value `%s' of the `%s' "
1141             "option as a boolean value.",
1142             ci->values[0].value.string, ci->key);
1143       return -1;
1144     }
1145     break;
1146   }
1147
1148   return 0;
1149 } /* }}} int cf_util_get_boolean */
1150
1151 int cf_util_get_flag(const oconfig_item_t *ci, /* {{{ */
1152                      unsigned int *ret_value, unsigned int flag) {
1153   int status;
1154   _Bool b;
1155
1156   if (ret_value == NULL)
1157     return EINVAL;
1158
1159   b = 0;
1160   status = cf_util_get_boolean(ci, &b);
1161   if (status != 0)
1162     return status;
1163
1164   if (b) {
1165     *ret_value |= flag;
1166   } else {
1167     *ret_value &= ~flag;
1168   }
1169
1170   return 0;
1171 } /* }}} int cf_util_get_flag */
1172
1173 /* Assures that the config option is a string or a number if the correct range
1174  * of 1-65535. The string is then converted to a port number using
1175  * `service_name_to_port_number' and returned.
1176  * Returns the port number in the range [1-65535] or less than zero upon
1177  * failure. */
1178 int cf_util_get_port_number(const oconfig_item_t *ci) /* {{{ */
1179 {
1180   int tmp;
1181
1182   if ((ci->values_num != 1) || ((ci->values[0].type != OCONFIG_TYPE_STRING) &&
1183                                 (ci->values[0].type != OCONFIG_TYPE_NUMBER))) {
1184     ERROR("cf_util_get_port_number: The \"%s\" option requires "
1185           "exactly one string argument.",
1186           ci->key);
1187     return -1;
1188   }
1189
1190   if (ci->values[0].type == OCONFIG_TYPE_STRING)
1191     return service_name_to_port_number(ci->values[0].value.string);
1192
1193   assert(ci->values[0].type == OCONFIG_TYPE_NUMBER);
1194   tmp = (int)(ci->values[0].value.number + 0.5);
1195   if ((tmp < 1) || (tmp > 65535)) {
1196     ERROR("cf_util_get_port_number: The \"%s\" option requires "
1197           "a service name or a port number. The number "
1198           "you specified, %i, is not in the valid "
1199           "range of 1-65535.",
1200           ci->key, tmp);
1201     return -1;
1202   }
1203
1204   return tmp;
1205 } /* }}} int cf_util_get_port_number */
1206
1207 int cf_util_get_service(const oconfig_item_t *ci, char **ret_string) /* {{{ */
1208 {
1209   int port;
1210   char *service;
1211   int status;
1212
1213   if (ci->values_num != 1) {
1214     ERROR("cf_util_get_service: The %s option requires exactly "
1215           "one argument.",
1216           ci->key);
1217     return -1;
1218   }
1219
1220   if (ci->values[0].type == OCONFIG_TYPE_STRING)
1221     return cf_util_get_string(ci, ret_string);
1222   if (ci->values[0].type != OCONFIG_TYPE_NUMBER) {
1223     ERROR("cf_util_get_service: The %s option requires "
1224           "exactly one string or numeric argument.",
1225           ci->key);
1226   }
1227
1228   port = 0;
1229   status = cf_util_get_int(ci, &port);
1230   if (status != 0)
1231     return status;
1232   else if ((port < 1) || (port > 65535)) {
1233     ERROR("cf_util_get_service: The port number given "
1234           "for the %s option is out of "
1235           "range (%i).",
1236           ci->key, port);
1237     return -1;
1238   }
1239
1240   service = malloc(6);
1241   if (service == NULL) {
1242     ERROR("cf_util_get_service: Out of memory.");
1243     return -1;
1244   }
1245   snprintf(service, 6, "%i", port);
1246
1247   sfree(*ret_string);
1248   *ret_string = service;
1249
1250   return 0;
1251 } /* }}} int cf_util_get_service */
1252
1253 int cf_util_get_cdtime(const oconfig_item_t *ci, cdtime_t *ret_value) /* {{{ */
1254 {
1255   if ((ci == NULL) || (ret_value == NULL))
1256     return EINVAL;
1257
1258   if ((ci->values_num != 1) || (ci->values[0].type != OCONFIG_TYPE_NUMBER)) {
1259     ERROR("cf_util_get_cdtime: The %s option requires "
1260           "exactly one numeric argument.",
1261           ci->key);
1262     return -1;
1263   }
1264
1265   if (ci->values[0].value.number < 0.0) {
1266     ERROR("cf_util_get_cdtime: The numeric argument of the %s "
1267           "option must not be negative.",
1268           ci->key);
1269     return -1;
1270   }
1271
1272   *ret_value = DOUBLE_TO_CDTIME_T(ci->values[0].value.number);
1273
1274   return 0;
1275 } /* }}} int cf_util_get_cdtime */