src/rrdcached.c

   1 /**
   2  * collectd - src/rrdcached.c
   3  * Copyright (C) 2008-2013  Florian octo Forster
   4  *
   5  * This program is free software; you can redistribute it and/or modify it
   6  * under the terms of the GNU General Public License as published by the
   7  * Free Software Foundation; only version 2 of the License is applicable.
   8  *
   9  * This program is distributed in the hope that it will be useful, but
  10  * WITHOUT ANY WARRANTY; without even the implied warranty of
  11  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  12  * General Public License for more details.
  13  *
  14  * You should have received a copy of the GNU General Public License along
  15  * with this program; if not, write to the Free Software Foundation, Inc.,
  16  * 51 Franklin St, Fifth Floor, Boston, MA  02110-1301 USA
  17  *
  18  * Authors:
  19  *   Florian octo Forster <octo at collectd.org>
  20  **/
  21
  22 #include "collectd.h"
  23 #include "plugin.h"
  24 #include "common.h"
  25 #include "utils_rrdcreate.h"
  26
  27 #undef HAVE_CONFIG_H
  28 #include <rrd.h>
  29 #include <rrd_client.h>
  30
  31 /*
  32  * Private variables
  33  */
  34 static char *datadir = NULL;
  35 static char *daemon_address = NULL;
  36 static int config_create_files = 1;
  37 static int config_collect_stats = 1;
  38 static rrdcreate_config_t rrdcreate_config =
  39 {
  40         /* stepsize = */ 0,
  41         /* heartbeat = */ 0,
  42         /* rrarows = */ 1200,
  43         /* xff = */ 0.1,
  44
  45         /* timespans = */ NULL,
  46         /* timespans_num = */ 0,
  47
  48         /* consolidation_functions = */ NULL,
  49         /* consolidation_functions_num = */ 0
  50 };
  51
  52 /*
  53  * Prototypes.
  54  */
  55 static int rc_write (const data_set_t *ds, const value_list_t *vl,
  56     user_data_t __attribute__((unused)) *user_data);
  57 static int rc_flush (__attribute__((unused)) cdtime_t timeout,
  58     const char *identifier, __attribute__((unused)) user_data_t *ud);
  59
  60 static int value_list_to_string (char *buffer, int buffer_len,
  61     const data_set_t *ds, const value_list_t *vl)
  62 {
  63   int offset;
  64   int status;
  65   int i;
  66   time_t t;
  67
  68   assert (0 == strcmp (ds->type, vl->type));
  69
  70   memset (buffer, '\0', buffer_len);
  71
  72   t = CDTIME_T_TO_TIME_T (vl->time);
  73   status = ssnprintf (buffer, buffer_len, "%lu", (unsigned long) t);
  74   if ((status < 1) || (status >= buffer_len))
  75     return (-1);
  76   offset = status;
  77
  78   for (i = 0; i < ds->ds_num; i++)
  79   {
  80     if ((ds->ds[i].type != DS_TYPE_COUNTER)
  81         && (ds->ds[i].type != DS_TYPE_GAUGE)
  82         && (ds->ds[i].type != DS_TYPE_DERIVE)
  83         && (ds->ds[i].type != DS_TYPE_ABSOLUTE))
  84       return (-1);
  85
  86     if (ds->ds[i].type == DS_TYPE_COUNTER)
  87     {
  88       status = ssnprintf (buffer + offset, buffer_len - offset,
  89           ":%llu", vl->values[i].counter);
  90     }
  91     else if (ds->ds[i].type == DS_TYPE_GAUGE)
  92     {
  93       status = ssnprintf (buffer + offset, buffer_len - offset,
  94           ":%f", vl->values[i].gauge);
  95     }
  96     else if (ds->ds[i].type == DS_TYPE_DERIVE) {
  97       status = ssnprintf (buffer + offset, buffer_len - offset,
  98           ":%"PRIi64, vl->values[i].derive);
  99     }
 100     else /* if (ds->ds[i].type == DS_TYPE_ABSOLUTE) */ {
 101       status = ssnprintf (buffer + offset, buffer_len - offset,
 102           ":%"PRIu64, vl->values[i].absolute);
 103
 104     }
 105
 106     if ((status < 1) || (status >= (buffer_len - offset)))
 107       return (-1);
 108
 109     offset += status;
 110   } /* for ds->ds_num */
 111
 112   return (0);
 113 } /* int value_list_to_string */
 114
 115 static int value_list_to_filename (char *buffer, int buffer_len,
 116     const data_set_t *ds, const value_list_t *vl)
 117 {
 118   int offset = 0;
 119   int status;
 120
 121   assert (0 == strcmp (ds->type, vl->type));
 122
 123   if (datadir != NULL)
 124   {
 125     status = ssnprintf (buffer + offset, buffer_len - offset,
 126         "%s/", datadir);
 127     if ((status < 1) || (status >= buffer_len - offset))
 128       return (-1);
 129     offset += status;
 130   }
 131
 132   status = ssnprintf (buffer + offset, buffer_len - offset,
 133       "%s/", vl->host);
 134   if ((status < 1) || (status >= buffer_len - offset))
 135     return (-1);
 136   offset += status;
 137
 138   if (strlen (vl->plugin_instance) > 0)
 139     status = ssnprintf (buffer + offset, buffer_len - offset,
 140         "%s-%s/", vl->plugin, vl->plugin_instance);
 141   else
 142     status = ssnprintf (buffer + offset, buffer_len - offset,
 143         "%s/", vl->plugin);
 144   if ((status < 1) || (status >= buffer_len - offset))
 145     return (-1);
 146   offset += status;
 147
 148   if (strlen (vl->type_instance) > 0)
 149     status = ssnprintf (buffer + offset, buffer_len - offset,
 150         "%s-%s", vl->type, vl->type_instance);
 151   else
 152     status = ssnprintf (buffer + offset, buffer_len - offset,
 153         "%s", vl->type);
 154   if ((status < 1) || (status >= buffer_len - offset))
 155     return (-1);
 156   offset += status;
 157
 158   strncpy (buffer + offset, ".rrd", buffer_len - offset);
 159   buffer[buffer_len - 1] = 0;
 160
 161   return (0);
 162 } /* int value_list_to_filename */
 163
 164 static const char *config_get_string (oconfig_item_t *ci)
 165 {
 166   if ((ci->children_num != 0) || (ci->values_num != 1)
 167       || ((ci->values[0].type != OCONFIG_TYPE_STRING)
 168         && (ci->values[0].type != OCONFIG_TYPE_BOOLEAN)))
 169   {
 170     ERROR ("rrdcached plugin: %s expects a single string argument.",
 171         ci->key);
 172     return (NULL);
 173   }
 174
 175   if (ci->values[0].type == OCONFIG_TYPE_BOOLEAN) {
 176     if (ci->values[0].value.boolean)
 177       return "true";
 178     else
 179       return "false";
 180   }
 181   return (ci->values[0].value.string);
 182 } /* const char *config_get_string */
 183
 184 static int rc_config (oconfig_item_t *ci)
 185 {
 186   int i;
 187
 188   for (i = 0; i < ci->children_num; ++i) {
 189     const char *key = ci->children[i].key;
 190     const char *value = config_get_string (ci->children + i);
 191
 192     if (value == NULL) /* config_get_strings prints error message */
 193       continue;
 194
 195     if (strcasecmp ("DataDir", key) == 0)
 196     {
 197       if (datadir != NULL)
 198         free (datadir);
 199       datadir = strdup (value);
 200       if (datadir != NULL)
 201       {
 202         int len = strlen (datadir);
 203         while ((len > 0) && (datadir[len - 1] == '/'))
 204         {
 205           len--;
 206           datadir[len] = '\0';
 207         }
 208         if (len <= 0)
 209         {
 210           free (datadir);
 211           datadir = NULL;
 212         }
 213       }
 214     }
 215     else if (strcasecmp ("DaemonAddress", key) == 0)
 216     {
 217       sfree (daemon_address);
 218       daemon_address = strdup (value);
 219       if (daemon_address == NULL)
 220       {
 221         ERROR ("rrdcached plugin: strdup failed.");
 222         continue;
 223       }
 224     }
 225     else if (strcasecmp ("CreateFiles", key) == 0)
 226     {
 227       if (IS_FALSE (value))
 228         config_create_files = 0;
 229       else
 230         config_create_files = 1;
 231     }
 232     else if (strcasecmp ("CollectStatistics", key) == 0)
 233     {
 234       if (IS_FALSE (value))
 235         config_collect_stats = 0;
 236       else
 237         config_collect_stats = 1;
 238     }
 239     else
 240     {
 241       WARNING ("rrdcached plugin: Ignoring invalid option %s.", key);
 242       continue;
 243     }
 244   }
 245
 246   if (daemon_address != NULL) {
 247     plugin_register_write ("rrdcached", rc_write, /* user_data = */ NULL);
 248     plugin_register_flush ("rrdcached", rc_flush, /* user_data = */ NULL);
 249   }
 250   return (0);
 251 } /* int rc_config */
 252
 253 static int rc_read (void)
 254 {
 255   int status;
 256   rrdc_stats_t *head;
 257   rrdc_stats_t *ptr;
 258
 259   value_t values[1];
 260   value_list_t vl = VALUE_LIST_INIT;
 261
 262   if (daemon_address == NULL)
 263     return (-1);
 264
 265   if (config_collect_stats == 0)
 266     return (-1);
 267
 268   vl.values = values;
 269   vl.values_len = 1;
 270
 271   if ((strncmp ("unix:", daemon_address, strlen ("unix:")) == 0)
 272       || (daemon_address[0] == '/'))
 273     sstrncpy (vl.host, hostname_g, sizeof (vl.host));
 274   else
 275     sstrncpy (vl.host, daemon_address, sizeof (vl.host));
 276   sstrncpy (vl.plugin, "rrdcached", sizeof (vl.plugin));
 277
 278   status = rrdc_connect (daemon_address);
 279   if (status != 0)
 280   {
 281     ERROR ("rrdcached plugin: rrdc_connect (%s) failed with status %i.",
 282         daemon_address, status);
 283     return (-1);
 284   }
 285
 286   head = NULL;
 287   status = rrdc_stats_get (&head);
 288   if (status != 0)
 289   {
 290     ERROR ("rrdcached plugin: rrdc_stats_get failed with status %i.", status);
 291     return (-1);
 292   }
 293
 294   for (ptr = head; ptr != NULL; ptr = ptr->next)
 295   {
 296     if (ptr->type == RRDC_STATS_TYPE_GAUGE)
 297       values[0].gauge = (gauge_t) ptr->value.gauge;
 298     else if (ptr->type == RRDC_STATS_TYPE_COUNTER)
 299       values[0].counter = (counter_t) ptr->value.counter;
 300     else
 301       continue;
 302
 303     if (strcasecmp ("QueueLength", ptr->name) == 0)
 304     {
 305       sstrncpy (vl.type, "queue_length", sizeof (vl.type));
 306       sstrncpy (vl.type_instance, "", sizeof (vl.type_instance));
 307     }
 308     else if (strcasecmp ("UpdatesWritten", ptr->name) == 0)
 309     {
 310       sstrncpy (vl.type, "operations", sizeof (vl.type));
 311       sstrncpy (vl.type_instance, "write-updates", sizeof (vl.type_instance));
 312     }
 313     else if (strcasecmp ("DataSetsWritten", ptr->name) == 0)
 314     {
 315       sstrncpy (vl.type, "operations", sizeof (vl.type));
 316       sstrncpy (vl.type_instance, "write-data_sets",
 317           sizeof (vl.type_instance));
 318     }
 319     else if (strcasecmp ("TreeNodesNumber", ptr->name) == 0)
 320     {
 321       sstrncpy (vl.type, "gauge", sizeof (vl.type));
 322       sstrncpy (vl.type_instance, "tree_nodes", sizeof (vl.type_instance));
 323     }
 324     else if (strcasecmp ("TreeDepth", ptr->name) == 0)
 325     {
 326       sstrncpy (vl.type, "gauge", sizeof (vl.type));
 327       sstrncpy (vl.type_instance, "tree_depth", sizeof (vl.type_instance));
 328     }
 329     else if (strcasecmp ("FlushesReceived", ptr->name) == 0)
 330     {
 331       sstrncpy (vl.type, "operations", sizeof (vl.type));
 332       sstrncpy (vl.type_instance, "receive-flush", sizeof (vl.type_instance));
 333     }
 334     else if (strcasecmp ("JournalBytes", ptr->name) == 0)
 335     {
 336       sstrncpy (vl.type, "counter", sizeof (vl.type));
 337       sstrncpy (vl.type_instance, "journal-bytes", sizeof (vl.type_instance));
 338     }
 339     else if (strcasecmp ("JournalRotate", ptr->name) == 0)
 340     {
 341       sstrncpy (vl.type, "counter", sizeof (vl.type));
 342       sstrncpy (vl.type_instance, "journal-rotates", sizeof (vl.type_instance));
 343     }
 344     else if (strcasecmp ("UpdatesReceived", ptr->name) == 0)
 345     {
 346       sstrncpy (vl.type, "operations", sizeof (vl.type));
 347       sstrncpy (vl.type_instance, "receive-update", sizeof (vl.type_instance));
 348     }
 349     else
 350     {
 351       DEBUG ("rrdcached plugin: rc_read: Unknown statistic `%s'.", ptr->name);
 352       continue;
 353     }
 354
 355     plugin_dispatch_values (&vl);
 356   } /* for (ptr = head; ptr != NULL; ptr = ptr->next) */
 357
 358   rrdc_stats_free (head);
 359
 360   return (0);
 361 } /* int rc_read */
 362
 363 static int rc_init (void)
 364 {
 365   if (config_collect_stats != 0)
 366     plugin_register_read ("rrdcached", rc_read);
 367
 368   return (0);
 369 } /* int rc_init */
 370
 371 static int rc_write (const data_set_t *ds, const value_list_t *vl,
 372     user_data_t __attribute__((unused)) *user_data)
 373 {
 374   char filename[PATH_MAX];
 375   char values[512];
 376   char *values_array[2];
 377   int status;
 378
 379   if (daemon_address == NULL)
 380   {
 381     ERROR ("rrdcached plugin: daemon_address == NULL.");
 382     plugin_unregister_write ("rrdcached");
 383     return (-1);
 384   }
 385
 386   if (strcmp (ds->type, vl->type) != 0)
 387   {
 388     ERROR ("rrdcached plugin: DS type does not match value list type");
 389     return (-1);
 390   }
 391
 392   if (value_list_to_filename (filename, sizeof (filename), ds, vl) != 0)
 393   {
 394     ERROR ("rrdcached plugin: value_list_to_filename failed.");
 395     return (-1);
 396   }
 397
 398   if (value_list_to_string (values, sizeof (values), ds, vl) != 0)
 399   {
 400     ERROR ("rrdcached plugin: value_list_to_string failed.");
 401     return (-1);
 402   }
 403
 404   values_array[0] = values;
 405   values_array[1] = NULL;
 406
 407   if (config_create_files != 0)
 408   {
 409     struct stat statbuf;
 410
 411     status = stat (filename, &statbuf);
 412     if (status != 0)
 413     {
 414       if (errno != ENOENT)
 415       {
 416         char errbuf[1024];
 417         ERROR ("rrdcached plugin: stat (%s) failed: %s",
 418             filename, sstrerror (errno, errbuf, sizeof (errbuf)));
 419         return (-1);
 420       }
 421
 422       status = cu_rrd_create_file (filename, ds, vl, &rrdcreate_config);
 423       if (status != 0)
 424       {
 425         ERROR ("rrdcached plugin: cu_rrd_create_file (%s) failed.",
 426             filename);
 427         return (-1);
 428       }
 429     }
 430   }
 431
 432   status = rrdc_connect (daemon_address);
 433   if (status != 0)
 434   {
 435     ERROR ("rrdcached plugin: rrdc_connect (%s) failed with status %i.",
 436         daemon_address, status);
 437     return (-1);
 438   }
 439
 440   status = rrdc_update (filename, /* values_num = */ 1, (void *) values_array);
 441   if (status != 0)
 442   {
 443     ERROR ("rrdcached plugin: rrdc_update (%s, [%s], 1) failed with "
 444         "status %i.",
 445         filename, values_array[0], status);
 446     return (-1);
 447   }
 448
 449   return (0);
 450 } /* int rc_write */
 451
 452 static int rc_flush (__attribute__((unused)) cdtime_t timeout, /* {{{ */
 453     const char *identifier,
 454     __attribute__((unused)) user_data_t *ud)
 455 {
 456   char filename[PATH_MAX + 1];
 457   int status;
 458
 459   if (identifier == NULL)
 460     return (EINVAL);
 461
 462   if (datadir != NULL)
 463     ssnprintf (filename, sizeof (filename), "%s/%s.rrd", datadir, identifier);
 464   else
 465     ssnprintf (filename, sizeof (filename), "%s.rrd", identifier);
 466
 467   status = rrdc_connect (daemon_address);
 468   if (status != 0)
 469   {
 470     ERROR ("rrdcached plugin: rrdc_connect (%s) failed with status %i.",
 471         daemon_address, status);
 472     return (-1);
 473   }
 474
 475   status = rrdc_flush (filename);
 476   if (status != 0)
 477   {
 478     ERROR ("rrdcached plugin: rrdc_flush (%s) failed with status %i.",
 479         filename, status);
 480     return (-1);
 481   }
 482   DEBUG ("rrdcached plugin: rrdc_flush (%s): Success.", filename);
 483
 484   return (0);
 485 } /* }}} int rc_flush */
 486
 487 static int rc_shutdown (void)
 488 {
 489   rrdc_disconnect ();
 490   return (0);
 491 } /* int rc_shutdown */
 492
 493 void module_register (void)
 494 {
 495   plugin_register_complex_config ("rrdcached", rc_config);
 496   plugin_register_init ("rrdcached", rc_init);
 497   plugin_register_shutdown ("rrdcached", rc_shutdown);
 498 } /* void module_register */
 499
 500 /*
 501  * vim: set sw=2 sts=2 et :
 502  */