a1fa9ea4967285824eecb4a6f5e696ca94fc0938
[collectd.git] / src / gmond.c
1 /**
2  * collectd - src/gmond.c
3  * Copyright (C) 2009,2010  Florian octo Forster
4  *
5  * This program is free software; you can redistribute it and/or modify it
6  * under the terms of the GNU General Public License as published by the
7  * Free Software Foundation; only version 2 of the License is applicable.
8  *
9  * This program is distributed in the hope that it will be useful, but
10  * WITHOUT ANY WARRANTY; without even the implied warranty of
11  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
12  * General Public License for more details.
13  *
14  * You should have received a copy of the GNU General Public License along
15  * with this program; if not, write to the Free Software Foundation, Inc.,
16  * 51 Franklin St, Fifth Floor, Boston, MA  02110-1301 USA
17  *
18  * Authors:
19  *   Florian octo Forster <octo at collectd.org>
20  **/
21
22 #include "collectd.h"
23 #include "plugin.h"
24 #include "common.h"
25 #include "configfile.h"
26 #include "utils_avltree.h"
27
28 #if HAVE_PTHREAD_H
29 # include <pthread.h>
30 #endif
31 #if HAVE_SYS_SOCKET_H
32 # include <sys/socket.h>
33 #endif
34 #if HAVE_NETDB_H
35 # include <netdb.h>
36 #endif
37 #if HAVE_NETINET_IN_H
38 # include <netinet/in.h>
39 #endif
40 #if HAVE_ARPA_INET_H
41 # include <arpa/inet.h>
42 #endif
43 #if HAVE_POLL_H
44 # include <poll.h>
45 #endif
46
47 #include <gm_protocol.h>
48
49 #ifndef IPV6_ADD_MEMBERSHIP
50 # ifdef IPV6_JOIN_GROUP
51 #  define IPV6_ADD_MEMBERSHIP IPV6_JOIN_GROUP
52 # else
53 #  error "Neither IP_ADD_MEMBERSHIP nor IPV6_JOIN_GROUP is defined"
54 # endif
55 #endif /* !IP_ADD_MEMBERSHIP */
56
57 #ifdef GANGLIA_MAX_MESSAGE_LEN
58 # define BUFF_SIZE GANGLIA_MAX_MESSAGE_LEN
59 #else
60 # define BUFF_SIZE 1400
61 #endif
62
63 struct socket_entry_s
64 {
65   int                     fd;
66   struct sockaddr_storage addr;
67   socklen_t               addrlen;
68 };
69 typedef struct socket_entry_s socket_entry_t;
70
71 struct staging_entry_s
72 {
73   char key[2 * DATA_MAX_NAME_LEN];
74   value_list_t vl;
75   int flags;
76 };
77 typedef struct staging_entry_s staging_entry_t;
78
79 struct metric_map_s
80 {
81   char *ganglia_name;
82   char *type;
83   char *type_instance;
84   char *ds_name;
85   int   ds_type;
86   int   ds_index;
87 };
88 typedef struct metric_map_s metric_map_t;
89
90 #define MC_RECEIVE_GROUP_DEFAULT "239.2.11.71"
91 static char          *mc_receive_group = NULL;
92 #define MC_RECEIVE_PORT_DEFAULT "8649"
93 static char          *mc_receive_port = NULL;
94
95 static struct pollfd *mc_receive_sockets = NULL;
96 static size_t         mc_receive_sockets_num = 0;
97
98 static socket_entry_t  *mc_send_sockets = NULL;
99 static size_t           mc_send_sockets_num = 0;
100 static pthread_mutex_t  mc_send_sockets_lock = PTHREAD_MUTEX_INITIALIZER;
101
102 static int            mc_receive_thread_loop    = 0;
103 static int            mc_receive_thread_running = 0;
104 static pthread_t      mc_receive_thread_id;
105
106 static metric_map_t metric_map_default[] =
107 { /*---------------+-------------+-----------+-------------+------+-----*
108    * ganglia_name  ! type        ! type_inst ! data_source ! type ! idx *
109    *---------------+-------------+-----------+-------------+------+-----*/
110   { "load_one",     "load",       "",         "shortterm",     -1,   -1 },
111   { "load_five",    "load",       "",         "midterm",       -1,   -1 },
112   { "load_fifteen", "load",       "",         "longterm",      -1,   -1 },
113   { "cpu_user",     "cpu",        "user",     "value",         -1,   -1 },
114   { "cpu_system",   "cpu",        "system",   "value",         -1,   -1 },
115   { "cpu_idle",     "cpu",        "idle",     "value",         -1,   -1 },
116   { "cpu_nice",     "cpu",        "nice",     "value",         -1,   -1 },
117   { "cpu_wio",      "cpu",        "wait",     "value",         -1,   -1 },
118   { "mem_free",     "memory",     "free",     "value",         -1,   -1 },
119   { "mem_shared",   "memory",     "shared",   "value",         -1,   -1 },
120   { "mem_buffers",  "memory",     "buffered", "value",         -1,   -1 },
121   { "mem_cached",   "memory",     "cached",   "value",         -1,   -1 },
122   { "mem_total",    "memory",     "total",    "value",         -1,   -1 },
123   { "bytes_in",     "if_octets",  "",         "rx",            -1,   -1 },
124   { "bytes_out",    "if_octets",  "",         "tx",            -1,   -1 },
125   { "pkts_in",      "if_packets", "",         "rx",            -1,   -1 },
126   { "pkts_out",     "if_packets", "",         "tx",            -1,   -1 }
127 };
128 static size_t metric_map_len_default = STATIC_ARRAY_SIZE (metric_map_default);
129
130 static metric_map_t *metric_map = NULL;
131 static size_t        metric_map_len = 0;
132
133 static c_avl_tree_t   *staging_tree;
134 static pthread_mutex_t staging_lock = PTHREAD_MUTEX_INITIALIZER;
135
136 static metric_map_t *metric_lookup (const char *key) /* {{{ */
137 {
138   metric_map_t *map;
139   size_t map_len;
140   size_t i;
141
142   /* Search the user-supplied table first.. */
143   map = metric_map;
144   map_len = metric_map_len;
145   for (i = 0; i < map_len; i++)
146     if (strcmp (map[i].ganglia_name, key) == 0)
147       break;
148
149   /* .. and fall back to the built-in table if nothing is found. */
150   if (i >= map_len)
151   {
152     map = metric_map_default;
153     map_len = metric_map_len_default;
154
155     for (i = 0; i < map_len; i++)
156       if (strcmp (map[i].ganglia_name, key) == 0)
157         break;
158   }
159
160   if (i >= map_len)
161     return (NULL);
162
163   /* Look up the DS type and ds_index. */
164   if ((map[i].ds_type < 0) || (map[i].ds_index < 0)) /* {{{ */
165   {
166     const data_set_t *ds;
167
168     ds = plugin_get_ds (map[i].type);
169     if (ds == NULL)
170     {
171       WARNING ("gmond plugin: Type not defined: %s", map[i].type);
172       return (NULL);
173     }
174
175     if ((map[i].ds_name == NULL) && (ds->ds_num != 1))
176     {
177       WARNING ("gmond plugin: No data source name defined for metric %s, "
178           "but type %s has more than one data source.",
179           map[i].ganglia_name, map[i].type);
180       return (NULL);
181     }
182
183     if (map[i].ds_name == NULL)
184     {
185       map[i].ds_index = 0;
186     }
187     else
188     {
189       int j;
190
191       for (j = 0; j < ds->ds_num; j++)
192         if (strcasecmp (ds->ds[j].name, map[i].ds_name) == 0)
193           break;
194
195       if (j >= ds->ds_num)
196       {
197         WARNING ("gmond plugin: There is no data source "
198             "named `%s' in type `%s'.",
199             map[i].ds_name, ds->type);
200         return (NULL);
201       }
202       map[i].ds_index = j;
203     }
204
205     map[i].ds_type = ds->ds[map[i].ds_index].type;
206   } /* }}} if ((map[i].ds_type < 0) || (map[i].ds_index < 0)) */
207
208   return (map + i);
209 } /* }}} metric_map_t *metric_lookup */
210
211 static int create_sockets (socket_entry_t **ret_sockets, /* {{{ */
212     size_t *ret_sockets_num,
213     const char *node, const char *service, int listen)
214 {
215   struct addrinfo  ai_hints;
216   struct addrinfo *ai_list;
217   struct addrinfo *ai_ptr;
218   int              ai_return;
219
220   socket_entry_t *sockets = NULL;
221   size_t          sockets_num = 0;
222
223   int status;
224
225   if (*ret_sockets != NULL)
226     return (EINVAL);
227
228   memset (&ai_hints, 0, sizeof (ai_hints));
229   ai_hints.ai_flags    = 0;
230 #ifdef AI_PASSIVE
231   ai_hints.ai_flags |= AI_PASSIVE;
232 #endif
233 #ifdef AI_ADDRCONFIG
234   ai_hints.ai_flags |= AI_ADDRCONFIG;
235 #endif
236   ai_hints.ai_family   = AF_UNSPEC;
237   ai_hints.ai_socktype = SOCK_DGRAM;
238   ai_hints.ai_protocol = IPPROTO_UDP;
239
240   ai_return = getaddrinfo (node, service, &ai_hints, &ai_list);
241   if (ai_return != 0)
242   {
243     char errbuf[1024];
244     ERROR ("gmond plugin: getaddrinfo (%s, %s) failed: %s",
245         (node == NULL) ? "(null)" : node,
246         (service == NULL) ? "(null)" : service,
247         (ai_return == EAI_SYSTEM)
248         ? sstrerror (errno, errbuf, sizeof (errbuf))
249         : gai_strerror (ai_return));
250     return (-1);
251   }
252
253   for (ai_ptr = ai_list; ai_ptr != NULL; ai_ptr = ai_ptr->ai_next) /* {{{ */
254   {
255     socket_entry_t *tmp;
256
257     tmp = realloc (sockets, (sockets_num + 1) * sizeof (*sockets));
258     if (tmp == NULL)
259     {
260       ERROR ("gmond plugin: realloc failed.");
261       continue;
262     }
263     sockets = tmp;
264
265     sockets[sockets_num].fd = socket (ai_ptr->ai_family, ai_ptr->ai_socktype,
266         ai_ptr->ai_protocol);
267     if (sockets[sockets_num].fd < 0)
268     {
269       char errbuf[1024];
270       ERROR ("gmond plugin: socket failed: %s",
271           sstrerror (errno, errbuf, sizeof (errbuf)));
272       continue;
273     }
274
275     assert (sizeof (sockets[sockets_num].addr) >= ai_ptr->ai_addrlen);
276     memcpy (&sockets[sockets_num].addr, ai_ptr->ai_addr, ai_ptr->ai_addrlen);
277     sockets[sockets_num].addrlen = ai_ptr->ai_addrlen;
278
279     /* Sending socket: Open only one socket and don't bind it. */
280     if (listen == 0)
281     {
282       sockets_num++;
283       break;
284     }
285     else
286     {
287       int yes = 1;
288
289       setsockopt (sockets[sockets_num].fd, SOL_SOCKET, SO_REUSEADDR,
290           (void *) &yes, sizeof (yes));
291     }
292
293     status = bind (sockets[sockets_num].fd, ai_ptr->ai_addr, ai_ptr->ai_addrlen);
294     if (status != 0)
295     {
296       char errbuf[1024];
297       ERROR ("gmond plugin: bind failed: %s",
298           sstrerror (errno, errbuf, sizeof (errbuf)));
299       close (sockets[sockets_num].fd);
300       continue;
301     }
302
303     if (ai_ptr->ai_family == AF_INET)
304     {
305       struct sockaddr_in *addr;
306       struct ip_mreq mreq;
307       int loop;
308
309       addr = (struct sockaddr_in *) ai_ptr->ai_addr;
310
311       if (!IN_MULTICAST (ntohl (addr->sin_addr.s_addr)))
312       {
313         sockets_num++;
314         continue;
315       }
316
317       loop = 1;
318       setsockopt (sockets[sockets_num].fd, IPPROTO_IP, IP_MULTICAST_LOOP,
319           (void *) &loop, sizeof (loop));
320
321       memset (&mreq, 0, sizeof (mreq));
322       mreq.imr_multiaddr.s_addr = addr->sin_addr.s_addr;
323       mreq.imr_interface.s_addr = htonl (INADDR_ANY);
324       setsockopt (sockets[sockets_num].fd, IPPROTO_IP, IP_ADD_MEMBERSHIP,
325           (void *) &mreq, sizeof (mreq));
326     } /* if (ai_ptr->ai_family == AF_INET) */
327     else if (ai_ptr->ai_family == AF_INET6)
328     {
329       struct sockaddr_in6 *addr;
330       struct ipv6_mreq mreq;
331       int loop;
332
333       addr = (struct sockaddr_in6 *) ai_ptr->ai_addr;
334
335       if (!IN6_IS_ADDR_MULTICAST (&addr->sin6_addr))
336       {
337         sockets_num++;
338         continue;
339       }
340
341       loop = 1;
342       setsockopt (sockets[sockets_num].fd, IPPROTO_IPV6, IPV6_MULTICAST_LOOP,
343           (void *) &loop, sizeof (loop));
344
345       memset (&mreq, 0, sizeof (mreq));
346       memcpy (&mreq.ipv6mr_multiaddr,
347           &addr->sin6_addr, sizeof (addr->sin6_addr));
348       mreq.ipv6mr_interface = 0; /* any */
349       setsockopt (sockets[sockets_num].fd, IPPROTO_IPV6, IPV6_ADD_MEMBERSHIP,
350           (void *) &mreq, sizeof (mreq));
351     } /* if (ai_ptr->ai_family == AF_INET6) */
352
353     sockets_num++;
354   } /* }}} for (ai_ptr = ai_list; ai_ptr != NULL; ai_ptr = ai_ptr->ai_next) */
355
356   freeaddrinfo (ai_list);
357
358   if (sockets_num == 0)
359   {
360     sfree (sockets);
361     return (-1);
362   }
363
364   *ret_sockets = sockets;
365   *ret_sockets_num = sockets_num;
366   return (0);
367 } /* }}} int create_sockets */
368
369 static int request_meta_data (const char *host, const char *name) /* {{{ */
370 {
371   Ganglia_metadata_msg msg;
372   char buffer[BUFF_SIZE];
373   unsigned int buffer_size;
374   XDR xdr;
375   size_t i;
376
377   memset (&msg, 0, sizeof (msg));
378
379   msg.id = gmetadata_request;
380   msg.Ganglia_metadata_msg_u.grequest.metric_id.host = strdup (host);
381   msg.Ganglia_metadata_msg_u.grequest.metric_id.name = strdup (name);
382
383   if ((msg.Ganglia_metadata_msg_u.grequest.metric_id.host == NULL)
384       || (msg.Ganglia_metadata_msg_u.grequest.metric_id.name == NULL))
385   {
386     sfree (msg.Ganglia_metadata_msg_u.grequest.metric_id.host);
387     sfree (msg.Ganglia_metadata_msg_u.grequest.metric_id.name);
388     return (-1);
389   }
390
391   memset (buffer, 0, sizeof (buffer));
392   xdrmem_create (&xdr, buffer, sizeof (buffer), XDR_ENCODE);
393
394   if (!xdr_Ganglia_metadata_msg (&xdr, &msg))
395   {
396     sfree (msg.Ganglia_metadata_msg_u.grequest.metric_id.host);
397     sfree (msg.Ganglia_metadata_msg_u.grequest.metric_id.name);
398     return (-1);
399   }
400
401   buffer_size = xdr_getpos (&xdr);
402
403   DEBUG ("gmond plugin: Requesting meta data for %s/%s.",
404       host, name);
405
406   pthread_mutex_lock (&mc_send_sockets_lock);
407   for (i = 0; i < mc_send_sockets_num; i++)
408     sendto (mc_send_sockets[i].fd, buffer, (size_t) buffer_size,
409         /* flags = */ 0,
410         (struct sockaddr *) &mc_send_sockets[i].addr,
411         mc_send_sockets[i].addrlen);
412   pthread_mutex_unlock (&mc_send_sockets_lock);
413
414   sfree (msg.Ganglia_metadata_msg_u.grequest.metric_id.host);
415   sfree (msg.Ganglia_metadata_msg_u.grequest.metric_id.name);
416   return (0);
417 } /* }}} int request_meta_data */
418
419 static staging_entry_t *staging_entry_get (const char *host, /* {{{ */
420     const char *name,
421     const char *type, const char *type_instance,
422     int values_len)
423 {
424   char key[2 * DATA_MAX_NAME_LEN];
425   staging_entry_t *se;
426   int status;
427
428   if (staging_tree == NULL)
429     return (NULL);
430
431   ssnprintf (key, sizeof (key), "%s/%s/%s", host, type,
432       (type_instance != NULL) ? type_instance : "");
433
434   se = NULL;
435   status = c_avl_get (staging_tree, key, (void *) &se);
436   if (status == 0)
437     return (se);
438
439   /* insert new entry */
440   se = (staging_entry_t *) malloc (sizeof (*se));
441   if (se == NULL)
442     return (NULL);
443   memset (se, 0, sizeof (*se));
444
445   sstrncpy (se->key, key, sizeof (se->key));
446   se->flags = 0;
447
448   se->vl.values = (value_t *) calloc (values_len, sizeof (*se->vl.values));
449   if (se->vl.values == NULL)
450   {
451     sfree (se);
452     return (NULL);
453   }
454   se->vl.values_len = values_len;
455
456   se->vl.time = 0;
457   se->vl.interval = 0;
458   sstrncpy (se->vl.host, host, sizeof (se->vl.host));
459   sstrncpy (se->vl.plugin, "gmond", sizeof (se->vl.plugin));
460   sstrncpy (se->vl.type, type, sizeof (se->vl.type));
461   if (type_instance != NULL)
462     sstrncpy (se->vl.type_instance, type_instance,
463         sizeof (se->vl.type_instance));
464
465   status = c_avl_insert (staging_tree, se->key, se);
466   if (status != 0)
467   {
468     ERROR ("gmond plugin: c_avl_insert failed.");
469     sfree (se->vl.values);
470     sfree (se);
471     return (NULL);
472   }
473
474   return (se);
475 } /* }}} staging_entry_t *staging_entry_get */
476
477 static int staging_entry_submit (const char *host, const char *name, /* {{{ */
478     staging_entry_t *se)
479 {
480   value_list_t vl;
481   value_t values[se->vl.values_len];
482
483   if (se->vl.interval == 0)
484   {
485     /* No meta data has been received for this metric yet. */
486     se->flags = 0;
487     pthread_mutex_unlock (&staging_lock);
488     request_meta_data (host, name);
489     return (0);
490   }
491
492   se->flags = 0;
493
494   memcpy (values, se->vl.values, sizeof (values));
495   memcpy (&vl, &se->vl, sizeof (vl));
496
497   /* Unlock before calling `plugin_dispatch_values'.. */
498   pthread_mutex_unlock (&staging_lock);
499
500   vl.values = values;
501
502   plugin_dispatch_values (&vl);
503
504   return (0);
505 } /* }}} int staging_entry_submit */
506
507 static int staging_entry_update (const char *host, const char *name, /* {{{ */
508     const char *type, const char *type_instance,
509     int ds_index, int ds_type, value_t value)
510 {
511   const data_set_t *ds;
512   staging_entry_t *se;
513
514   ds = plugin_get_ds (type);
515   if (ds == NULL)
516   {
517     ERROR ("gmond plugin: Looking up type %s failed.", type);
518     return (-1);
519   }
520
521   if (ds->ds_num <= ds_index)
522   {
523     ERROR ("gmond plugin: Invalid index %i: %s has only %i data source(s).",
524         ds_index, ds->type, ds->ds_num);
525     return (-1);
526   }
527
528   pthread_mutex_lock (&staging_lock);
529
530   se = staging_entry_get (host, name, type, type_instance, ds->ds_num);
531   if (se == NULL)
532   {
533     pthread_mutex_unlock (&staging_lock);
534     ERROR ("gmond plugin: staging_entry_get failed.");
535     return (-1);
536   }
537   if (se->vl.values_len != ds->ds_num)
538   {
539     pthread_mutex_unlock (&staging_lock);
540     return (-1);
541   }
542
543   if (ds_type == DS_TYPE_COUNTER)
544     se->vl.values[ds_index].counter += value.counter;
545   else if (ds_type == DS_TYPE_GAUGE)
546     se->vl.values[ds_index].gauge = value.gauge;
547   else if (ds_type == DS_TYPE_DERIVE)
548     se->vl.values[ds_index].derive += value.derive;
549   else if (ds_type == DS_TYPE_ABSOLUTE)
550     se->vl.values[ds_index].absolute = value.absolute;
551   else
552     assert (23 == 42);
553
554   se->flags |= (0x01 << ds_index);
555
556   /* Check if all values have been set and submit if so. */
557   if (se->flags == ((0x01 << se->vl.values_len) - 1))
558   {
559     /* `staging_lock' is unlocked in `staging_entry_submit'. */
560     staging_entry_submit (host, name, se);
561   }
562   else
563   {
564     pthread_mutex_unlock (&staging_lock);
565   }
566
567   return (0);
568 } /* }}} int staging_entry_update */
569
570 static int mc_handle_value_msg (Ganglia_value_msg *msg) /* {{{ */
571 {
572   const char *host;
573   const char *name;
574   metric_map_t *map;
575
576   value_t value_counter;
577   value_t value_gauge;
578   value_t value_derive;
579
580   /* Fill in `host', `name', `value_counter', and `value_gauge' according to
581    * the value type, or return with an error. */
582   switch (msg->id) /* {{{ */
583   {
584     case gmetric_uint:
585     {
586       Ganglia_gmetric_uint msg_uint;
587
588       msg_uint = msg->Ganglia_value_msg_u.gu_int;
589
590       host = msg_uint.metric_id.host;
591       name = msg_uint.metric_id.name;
592       value_counter.counter = (counter_t) msg_uint.ui;
593       value_gauge.gauge = (gauge_t) msg_uint.ui;
594       value_derive.derive = (derive_t) msg_uint.ui;
595       break;
596     }
597
598     case gmetric_string:
599     {
600       Ganglia_gmetric_string msg_string;
601       int status;
602
603       msg_string = msg->Ganglia_value_msg_u.gstr;
604
605       host = msg_string.metric_id.host;
606       name = msg_string.metric_id.name;
607
608       status = parse_value (msg_string.str, &value_derive, DS_TYPE_DERIVE);
609       if (status != 0)
610         value_derive.derive = -1;
611
612       status = parse_value (msg_string.str, &value_gauge, DS_TYPE_GAUGE);
613       if (status != 0)
614         value_gauge.gauge = NAN;
615
616       status = parse_value (msg_string.str, &value_counter, DS_TYPE_COUNTER);
617       if (status != 0)
618         value_counter.counter = 0;
619
620       break;
621     }
622
623     case gmetric_float:
624     {
625       Ganglia_gmetric_float msg_float;
626
627       msg_float = msg->Ganglia_value_msg_u.gf;
628
629       host = msg_float.metric_id.host;
630       name = msg_float.metric_id.name;
631       value_counter.counter = (counter_t) msg_float.f;
632       value_gauge.gauge = (gauge_t) msg_float.f;
633       value_derive.derive = (derive_t) msg_float.f;
634       break;
635     }
636
637     case gmetric_double:
638     {
639       Ganglia_gmetric_double msg_double;
640
641       msg_double = msg->Ganglia_value_msg_u.gd;
642
643       host = msg_double.metric_id.host;
644       name = msg_double.metric_id.name;
645       value_counter.counter = (counter_t) msg_double.d;
646       value_gauge.gauge = (gauge_t) msg_double.d;
647       value_derive.derive = (derive_t) msg_double.d;
648       break;
649     }
650     default:
651       DEBUG ("gmond plugin: Value type not handled: %i", msg->id);
652       return (-1);
653   } /* }}} switch (msg->id) */
654
655   assert (host != NULL);
656   assert (name != NULL);
657
658   map = metric_lookup (name);
659   if (map != NULL)
660   {
661     value_t val_copy;
662
663     if ((map->ds_type == DS_TYPE_COUNTER)
664         || (map->ds_type == DS_TYPE_ABSOLUTE))
665       val_copy = value_counter;
666     else if (map->ds_type == DS_TYPE_GAUGE)
667       val_copy = value_gauge;
668     else if (map->ds_type == DS_TYPE_DERIVE)
669       val_copy = value_derive;
670     else
671       assert (23 == 42);
672
673     return (staging_entry_update (host, name,
674           map->type, map->type_instance,
675           map->ds_index, map->ds_type,
676           val_copy));
677   }
678
679   DEBUG ("gmond plugin: Cannot find a translation for %s.", name);
680   return (-1);
681 } /* }}} int mc_handle_value_msg */
682
683 static int mc_handle_metadata_msg (Ganglia_metadata_msg *msg) /* {{{ */
684 {
685   switch (msg->id)
686   {
687     case gmetadata_full:
688     {
689       Ganglia_metadatadef msg_meta;
690       staging_entry_t *se;
691       const data_set_t *ds;
692       metric_map_t *map;
693
694       msg_meta = msg->Ganglia_metadata_msg_u.gfull;
695
696       if (msg_meta.metric.tmax <= 0)
697         return (-1);
698
699       map = metric_lookup (msg_meta.metric_id.name);
700       if (map == NULL)
701       {
702         DEBUG ("gmond plugin: Not handling meta data %s.",
703             msg_meta.metric_id.name);
704         return (0);
705       }
706
707       ds = plugin_get_ds (map->type);
708       if (ds == NULL)
709       {
710         WARNING ("gmond plugin: Could not find data set %s.", map->type);
711         return (-1);
712       }
713
714       DEBUG ("gmond plugin: Received meta data for %s/%s.",
715           msg_meta.metric_id.host, msg_meta.metric_id.name);
716
717       pthread_mutex_lock (&staging_lock);
718       se = staging_entry_get (msg_meta.metric_id.host,
719           msg_meta.metric_id.name,
720           map->type, map->type_instance,
721           ds->ds_num);
722       if (se != NULL)
723         se->vl.interval = TIME_T_TO_CDTIME_T (msg_meta.metric.tmax);
724       pthread_mutex_unlock (&staging_lock);
725
726       if (se == NULL)
727       {
728         ERROR ("gmond plugin: staging_entry_get failed.");
729         return (-1);
730       }
731
732       break;
733     }
734
735     default:
736     {
737       return (-1);
738     }
739   }
740
741   return (0);
742 } /* }}} int mc_handle_metadata_msg */
743
744 static int mc_handle_metric (void *buffer, size_t buffer_size) /* {{{ */
745 {
746   XDR xdr;
747   Ganglia_msg_formats format;
748
749   xdrmem_create (&xdr, buffer, buffer_size, XDR_DECODE);
750
751   xdr_Ganglia_msg_formats (&xdr, &format);
752   xdr_setpos (&xdr, 0);
753
754   switch (format)
755   {
756     case gmetric_ushort:
757     case gmetric_short:
758     case gmetric_int:
759     case gmetric_uint:
760     case gmetric_string:
761     case gmetric_float:
762     case gmetric_double:
763     {
764       Ganglia_value_msg msg;
765
766       memset (&msg, 0, sizeof (msg));
767       if (xdr_Ganglia_value_msg (&xdr, &msg))
768         mc_handle_value_msg (&msg);
769       break;
770     }
771
772     case gmetadata_full:
773     case gmetadata_request:
774     {
775       Ganglia_metadata_msg msg;
776       memset (&msg, 0, sizeof (msg));
777       if (xdr_Ganglia_metadata_msg (&xdr, &msg))
778         mc_handle_metadata_msg (&msg);
779       break;
780     }
781
782     default:
783       DEBUG ("gmond plugin: Unknown format: %i", format);
784       return (-1);
785   } /* switch (format) */
786
787
788   return (0);
789 } /* }}} int mc_handle_metric */
790
791 static int mc_handle_socket (struct pollfd *p) /* {{{ */
792 {
793   char buffer[BUFF_SIZE];
794   ssize_t buffer_size;
795
796   if ((p->revents & (POLLIN | POLLPRI)) == 0)
797   {
798     p->revents = 0;
799     return (-1);
800   }
801
802   buffer_size = recv (p->fd, buffer, sizeof (buffer), /* flags = */ 0);
803   if (buffer_size <= 0)
804   {
805     char errbuf[1024];
806     ERROR ("gmond plugin: recv failed: %s",
807         sstrerror (errno, errbuf, sizeof (errbuf)));
808     p->revents = 0;
809     return (-1);
810   }
811
812   mc_handle_metric (buffer, (size_t) buffer_size);
813   return (0);
814 } /* }}} int mc_handle_socket */
815
816 static void *mc_receive_thread (void *arg) /* {{{ */
817 {
818   socket_entry_t *mc_receive_socket_entries;
819   int status;
820   size_t i;
821
822   mc_receive_socket_entries = NULL;
823   status = create_sockets (&mc_receive_socket_entries, &mc_receive_sockets_num,
824       (mc_receive_group != NULL) ? mc_receive_group : MC_RECEIVE_GROUP_DEFAULT,
825       (mc_receive_port != NULL) ? mc_receive_port : MC_RECEIVE_PORT_DEFAULT,
826       /* listen = */ 1);
827   if (status != 0)
828   {
829     ERROR ("gmond plugin: create_sockets failed.");
830     return ((void *) -1);
831   }
832
833   mc_receive_sockets = (struct pollfd *) calloc (mc_receive_sockets_num,
834       sizeof (*mc_receive_sockets));
835   if (mc_receive_sockets == NULL)
836   {
837     ERROR ("gmond plugin: calloc failed.");
838     for (i = 0; i < mc_receive_sockets_num; i++)
839       close (mc_receive_socket_entries[i].fd);
840     free (mc_receive_socket_entries);
841     mc_receive_socket_entries = NULL;
842     mc_receive_sockets_num = 0;
843     return ((void *) -1);
844   }
845
846   for (i = 0; i < mc_receive_sockets_num; i++)
847   {
848     mc_receive_sockets[i].fd = mc_receive_socket_entries[i].fd;
849     mc_receive_sockets[i].events = POLLIN | POLLPRI;
850     mc_receive_sockets[i].revents = 0;
851   }
852
853   while (mc_receive_thread_loop != 0)
854   {
855     status = poll (mc_receive_sockets, mc_receive_sockets_num, -1);
856     if (status <= 0)
857     {
858       char errbuf[1024];
859       if (errno == EINTR)
860         continue;
861       ERROR ("gmond plugin: poll failed: %s",
862           sstrerror (errno, errbuf, sizeof (errbuf)));
863       break;
864     }
865
866     for (i = 0; i < mc_receive_sockets_num; i++)
867     {
868       if (mc_receive_sockets[i].revents != 0)
869         mc_handle_socket (mc_receive_sockets + i);
870     }
871   } /* while (mc_receive_thread_loop != 0) */
872
873   free (mc_receive_socket_entries);
874   return ((void *) 0);
875 } /* }}} void *mc_receive_thread */
876
877 static int mc_receive_thread_start (void) /* {{{ */
878 {
879   int status;
880
881   if (mc_receive_thread_running != 0)
882     return (-1);
883
884   mc_receive_thread_loop = 1;
885
886   status = plugin_thread_create (&mc_receive_thread_id, /* attr = */ NULL,
887       mc_receive_thread, /* args = */ NULL);
888   if (status != 0)
889   {
890     ERROR ("gmond plugin: Starting receive thread failed.");
891     mc_receive_thread_loop = 0;
892     return (-1);
893   }
894
895   mc_receive_thread_running = 1;
896   return (0);
897 } /* }}} int start_receive_thread */
898
899 static int mc_receive_thread_stop (void) /* {{{ */
900 {
901   if (mc_receive_thread_running == 0)
902     return (-1);
903
904   mc_receive_thread_loop = 0;
905
906   INFO ("gmond plugin: Stopping receive thread.");
907   pthread_kill (mc_receive_thread_id, SIGTERM);
908   pthread_join (mc_receive_thread_id, /* return value = */ NULL);
909   memset (&mc_receive_thread_id, 0, sizeof (mc_receive_thread_id));
910
911   mc_receive_thread_running = 0;
912
913   return (0);
914 } /* }}} int mc_receive_thread_stop */
915
916 /* 
917  * Config:
918  *
919  * <Plugin gmond>
920  *   MCReceiveFrom "239.2.11.71" "8649"
921  *   <Metric "load_one">
922  *     Type "load"
923  *     [TypeInstance "foo"]
924  *     [DataSource "bar"]
925  *   </Metric>
926  * </Plugin>
927  */
928 static int gmond_config_set_string (oconfig_item_t *ci, char **str) /* {{{ */
929 {
930   char *tmp;
931
932   if ((ci->values_num != 1) || (ci->values[0].type != OCONFIG_TYPE_STRING))
933   {
934     WARNING ("gmond plugin: The `%s' option needs "
935         "exactly one string argument.", ci->key);
936     return (-1);
937   }
938
939   tmp = strdup (ci->values[0].value.string);
940   if (tmp == NULL)
941   {
942     ERROR ("gmond plugin: strdup failed.");
943     return (-1);
944   }
945
946   sfree (*str);
947   *str = tmp;
948   return (0);
949 } /* }}} int gmond_config_set_string */
950
951 static int gmond_config_add_metric (oconfig_item_t *ci) /* {{{ */
952 {
953   metric_map_t *map;
954   int i;
955
956   if ((ci->values_num != 1) || (ci->values[0].type != OCONFIG_TYPE_STRING))
957   {
958     WARNING ("gmond plugin: `Metric' blocks need "
959         "exactly one string argument.");
960     return (-1);
961   }
962
963   map = realloc (metric_map, (metric_map_len + 1) * sizeof (*metric_map));
964   if (map == NULL)
965   {
966     ERROR ("gmond plugin: realloc failed.");
967     return (-1);
968   }
969   metric_map = map;
970   map = metric_map + metric_map_len;
971
972   memset (map, 0, sizeof (*map));
973   map->type = NULL;
974   map->type_instance = NULL;
975   map->ds_name = NULL;
976   map->ds_type = -1;
977   map->ds_index = -1;
978
979   map->ganglia_name = strdup (ci->values[0].value.string);
980   if (map->ganglia_name == NULL)
981   {
982     ERROR ("gmond plugin: strdup failed.");
983     return (-1);
984   }
985
986   for (i = 0; i < ci->children_num; i++)
987   {
988     oconfig_item_t *child = ci->children + i;
989     if (strcasecmp ("Type", child->key) == 0)
990       gmond_config_set_string (child, &map->type);
991     else if (strcasecmp ("TypeInstance", child->key) == 0)
992       gmond_config_set_string (child, &map->type_instance);
993     else if (strcasecmp ("DataSource", child->key) == 0)
994       gmond_config_set_string (child, &map->ds_name);
995     else
996     {
997       WARNING ("gmond plugin: Unknown configuration option `%s' ignored.",
998           child->key);
999     }
1000   }
1001
1002   if (map->type == NULL)
1003   {
1004     ERROR ("gmond plugin: No type is set for metric %s.",
1005         map->ganglia_name);
1006     sfree (map->ganglia_name);
1007     sfree (map->type_instance);
1008     return (-1);
1009   }
1010
1011   metric_map_len++;
1012   return (0);
1013 } /* }}} int gmond_config_add_metric */
1014
1015 static int gmond_config_set_address (oconfig_item_t *ci, /* {{{ */
1016     char **ret_addr, char **ret_port)
1017 {
1018   char *addr;
1019   char *port;
1020
1021   if ((ci->values_num != 1) && (ci->values_num != 2))
1022   {
1023     WARNING ("gmond plugin: The `%s' config option needs "
1024         "one or two string arguments.",
1025         ci->key);
1026     return (-1);
1027   }
1028   if ((ci->values[0].type != OCONFIG_TYPE_STRING)
1029       || ((ci->values_num == 2)
1030         && (ci->values[1].type != OCONFIG_TYPE_STRING)))
1031   {
1032     WARNING ("gmond plugin: The `%s' config option needs "
1033         "one or two string arguments.",
1034         ci->key);
1035     return (-1);
1036   }
1037
1038   addr = strdup (ci->values[0].value.string);
1039   if (ci->values_num == 2)
1040     port = strdup (ci->values[1].value.string);
1041   else
1042     port = NULL;
1043
1044   if ((addr == NULL) || ((ci->values_num == 2) && (port == NULL)))
1045   {
1046     ERROR ("gmond plugin: strdup failed.");
1047     sfree (addr);
1048     sfree (port);
1049     return (-1);
1050   }
1051
1052   sfree (*ret_addr);
1053   sfree (*ret_port);
1054
1055   *ret_addr = addr;
1056   *ret_port = port;
1057
1058   return (0);
1059 } /* }}} int gmond_config_set_address */
1060
1061 static int gmond_config (oconfig_item_t *ci) /* {{{ */
1062 {
1063   int i;
1064
1065   for (i = 0; i < ci->children_num; i++)
1066   {
1067     oconfig_item_t *child = ci->children + i;
1068     if (strcasecmp ("MCReceiveFrom", child->key) == 0)
1069       gmond_config_set_address (child, &mc_receive_group, &mc_receive_port);
1070     else if (strcasecmp ("Metric", child->key) == 0)
1071       gmond_config_add_metric (child);
1072     else
1073     {
1074       WARNING ("gmond plugin: Unknown configuration option `%s' ignored.",
1075           child->key);
1076     }
1077   }
1078
1079   return (0);
1080 } /* }}} int gmond_config */
1081
1082 static int gmond_init (void) /* {{{ */
1083 {
1084   create_sockets (&mc_send_sockets, &mc_send_sockets_num,
1085       (mc_receive_group != NULL) ? mc_receive_group : MC_RECEIVE_GROUP_DEFAULT,
1086       (mc_receive_port != NULL) ? mc_receive_port : MC_RECEIVE_PORT_DEFAULT,
1087       /* listen = */ 0);
1088
1089   staging_tree = c_avl_create ((void *) strcmp);
1090   if (staging_tree == NULL)
1091   {
1092     ERROR ("gmond plugin: c_avl_create failed.");
1093     return (-1);
1094   }
1095
1096   mc_receive_thread_start ();
1097
1098   return (0);
1099 } /* }}} int gmond_init */
1100
1101 static int gmond_shutdown (void) /* {{{ */
1102 {
1103   size_t i;
1104
1105   mc_receive_thread_stop ();
1106
1107   pthread_mutex_lock (&mc_send_sockets_lock);
1108   for (i = 0; i < mc_send_sockets_num; i++)
1109   {
1110     close (mc_send_sockets[i].fd);
1111     mc_send_sockets[i].fd = -1;
1112   }
1113   sfree (mc_send_sockets);
1114   mc_send_sockets_num = 0;
1115   pthread_mutex_unlock (&mc_send_sockets_lock);
1116
1117
1118   return (0);
1119 } /* }}} int gmond_shutdown */
1120
1121 void module_register (void)
1122 {
1123   plugin_register_complex_config ("gmond", gmond_config);
1124   plugin_register_init ("gmond", gmond_init);
1125   plugin_register_shutdown ("gmond", gmond_shutdown);
1126 }
1127
1128 /* vim: set sw=2 sts=2 et fdm=marker : */