contrib/collectd2html.pl: Allow generation of graphs from remote hosts or in an alter...
[collectd.git] / src / network.c
1 /**
2  * collectd - src/network.c
3  * Copyright (C) 2005-2007  Florian octo Forster
4  *
5  * This program is free software; you can redistribute it and/or modify it
6  * under the terms of the GNU General Public License as published by the
7  * Free Software Foundation; only version 2 of the License is applicable.
8  *
9  * This program is distributed in the hope that it will be useful, but
10  * WITHOUT ANY WARRANTY; without even the implied warranty of
11  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
12  * General Public License for more details.
13  *
14  * You should have received a copy of the GNU General Public License along
15  * with this program; if not, write to the Free Software Foundation, Inc.,
16  * 51 Franklin St, Fifth Floor, Boston, MA  02110-1301 USA
17  *
18  * Authors:
19  *   Florian octo Forster <octo at verplant.org>
20  **/
21
22 #include "collectd.h"
23 #include "plugin.h"
24 #include "common.h"
25 #include "configfile.h"
26 #include "utils_avltree.h"
27
28 #include "network.h"
29
30 #if HAVE_PTHREAD_H
31 # include <pthread.h>
32 #endif
33 #if HAVE_SYS_SOCKET_H
34 # include <sys/socket.h>
35 #endif
36 #if HAVE_NETDB_H
37 # include <netdb.h>
38 #endif
39 #if HAVE_NETINET_IN_H
40 # include <netinet/in.h>
41 #endif
42 #if HAVE_ARPA_INET_H
43 # include <arpa/inet.h>
44 #endif
45 #if HAVE_POLL_H
46 # include <poll.h>
47 #endif
48
49 /* 1500 - 40 - 8  =  Ethernet packet - IPv6 header - UDP header */
50 /* #define BUFF_SIZE 1452 */
51
52 #ifndef IPV6_ADD_MEMBERSHIP
53 # ifdef IPV6_JOIN_GROUP
54 #  define IPV6_ADD_MEMBERSHIP IPV6_JOIN_GROUP
55 # else
56 #  error "Neither IP_ADD_MEMBERSHIP nor IPV6_JOIN_GROUP is defined"
57 # endif
58 #endif /* !IP_ADD_MEMBERSHIP */
59
60 #define BUFF_SIZE 1024
61
62 /*
63  * Private data types
64  */
65 typedef struct sockent
66 {
67         int                      fd;
68         struct sockaddr_storage *addr;
69         socklen_t                addrlen;
70         struct sockent          *next;
71 } sockent_t;
72
73 /*                      1 1 1 1 1 1 1 1 1 1 2 2 2 2 2 2 2 2 2 2 3 3
74  *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
75  * +-------+-----------------------+-------------------------------+
76  * ! Ver.  !                       ! Length                        !
77  * +-------+-----------------------+-------------------------------+
78  */
79 struct part_header_s
80 {
81         uint16_t type;
82         uint16_t length;
83 };
84 typedef struct part_header_s part_header_t;
85
86 /*                      1 1 1 1 1 1 1 1 1 1 2 2 2 2 2 2 2 2 2 2 3 3
87  *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
88  * +-------------------------------+-------------------------------+
89  * ! Type                          ! Length                        !
90  * +-------------------------------+-------------------------------+
91  * : (Length - 4) Bytes                                            :
92  * +---------------------------------------------------------------+
93  */
94 struct part_string_s
95 {
96         part_header_t *head;
97         char *value;
98 };
99 typedef struct part_string_s part_string_t;
100
101 /*                      1 1 1 1 1 1 1 1 1 1 2 2 2 2 2 2 2 2 2 2 3 3
102  *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
103  * +-------------------------------+-------------------------------+
104  * ! Type                          ! Length                        !
105  * +-------------------------------+-------------------------------+
106  * : (Length - 4 == 2 || 4 || 8) Bytes                             :
107  * +---------------------------------------------------------------+
108  */
109 struct part_number_s
110 {
111         part_header_t *head;
112         uint64_t *value;
113 };
114 typedef struct part_number_s part_number_t;
115
116 /*                      1 1 1 1 1 1 1 1 1 1 2 2 2 2 2 2 2 2 2 2 3 3
117  *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
118  * +-------------------------------+-------------------------------+
119  * ! Type                          ! Length                        !
120  * +-------------------------------+---------------+---------------+
121  * ! Num of values                 ! Type0         ! Type1         !
122  * +-------------------------------+---------------+---------------+
123  * ! Value0                                                        !
124  * !                                                               !
125  * +---------------------------------------------------------------+
126  * ! Value1                                                        !
127  * !                                                               !
128  * +---------------------------------------------------------------+
129  */
130 struct part_values_s
131 {
132         part_header_t *head;
133         uint16_t *num_values;
134         uint8_t  *values_types;
135         value_t  *values;
136 };
137 typedef struct part_values_s part_values_t;
138
139 /*
140  * Private variables
141  */
142 static const char *config_keys[] =
143 {
144         "CacheFlush",
145         "Listen",
146         "Server",
147         "TimeToLive",
148         "Forward"
149 };
150 static int config_keys_num = STATIC_ARRAY_SIZE (config_keys);
151
152 static int network_config_ttl = 0;
153 static int network_config_forward = 0;
154
155 static sockent_t *sending_sockets = NULL;
156
157 static struct pollfd *listen_sockets = NULL;
158 static int listen_sockets_num = 0;
159 static pthread_t listen_thread = 0;
160 static int listen_loop = 0;
161
162 static char         send_buffer[BUFF_SIZE];
163 static char        *send_buffer_ptr;
164 static int          send_buffer_fill;
165 static value_list_t send_buffer_vl = VALUE_LIST_INIT;
166 static char         send_buffer_type[DATA_MAX_NAME_LEN];
167 static pthread_mutex_t send_buffer_lock = PTHREAD_MUTEX_INITIALIZER;
168
169 static avl_tree_t      *cache_tree = NULL;
170 static pthread_mutex_t  cache_lock = PTHREAD_MUTEX_INITIALIZER;
171 static time_t           cache_flush_last;
172 static int              cache_flush_interval = 1800;
173
174 /*
175  * Private functions
176  */
177 static int cache_flush (void)
178 {
179         char **keys = NULL;
180         int    keys_num = 0;
181
182         char **tmp;
183         int    i;
184
185         char   *key;
186         time_t *value;
187         avl_iterator_t *iter;
188
189         time_t curtime = time (NULL);
190
191         iter = avl_get_iterator (cache_tree);
192         while (avl_iterator_next (iter, (void *) &key, (void *) &value) == 0)
193         {
194                 if ((curtime - *value) <= cache_flush_interval)
195                         continue;
196                 tmp = (char **) realloc (keys,
197                                 (keys_num + 1) * sizeof (char *));
198                 if (tmp == NULL)
199                 {
200                         sfree (keys);
201                         avl_iterator_destroy (iter);
202                         ERROR ("network plugin: cache_flush: realloc"
203                                         " failed.");
204                         return (-1);
205                 }
206                 keys = tmp;
207                 keys[keys_num] = key;
208                 keys_num++;
209         } /* while (avl_iterator_next) */
210         avl_iterator_destroy (iter);
211
212         for (i = 0; i < keys_num; i++)
213         {
214                 if (avl_remove (cache_tree, keys[i], (void *) &key,
215                                         (void *) &value) != 0)
216                 {
217                         WARNING ("network plugin: cache_flush: avl_remove"
218                                         " (%s) failed.", keys[i]);
219                         continue;
220                 }
221
222                 sfree (key);
223                 sfree (value);
224         }
225
226         sfree (keys);
227
228         DEBUG ("network plugin: cache_flush: Removed %i %s",
229                         keys_num, (keys_num == 1) ? "entry" : "entries");
230         cache_flush_last = curtime;
231         return (0);
232 } /* int cache_flush */
233
234 static int cache_check (const char *type, const value_list_t *vl)
235 {
236         char key[1024];
237         time_t *value = NULL;
238         int retval = -1;
239
240         if (cache_tree == NULL)
241                 return (-1);
242
243         if (format_name (key, sizeof (key), vl->host, vl->plugin,
244                                 vl->plugin_instance, type, vl->type_instance))
245                 return (-1);
246
247         pthread_mutex_lock (&cache_lock);
248
249         if (avl_get (cache_tree, key, (void *) &value) == 0)
250         {
251                 if (*value < vl->time)
252                 {
253                         *value = vl->time;
254                         retval = 0;
255                 }
256                 else
257                 {
258                         DEBUG ("network plugin: cache_check: *value = %i >= vl->time = %i",
259                                         (int) *value, (int) vl->time);
260                         retval = 1;
261                 }
262         }
263         else
264         {
265                 char *key_copy = strdup (key);
266                 value = malloc (sizeof (time_t));
267                 if ((key_copy != NULL) && (value != NULL))
268                 {
269                         *value = vl->time;
270                         avl_insert (cache_tree, key_copy, value);
271                         retval = 0;
272                 }
273                 else
274                 {
275                         sfree (key_copy);
276                         sfree (value);
277                 }
278         }
279
280         if ((time (NULL) - cache_flush_last) > cache_flush_interval)
281                 cache_flush ();
282
283         pthread_mutex_unlock (&cache_lock);
284
285         DEBUG ("network plugin: cache_check: key = %s; time = %i; retval = %i",
286                         key, (int) vl->time, retval);
287
288         return (retval);
289 } /* int cache_check */
290
291 static int write_part_values (char **ret_buffer, int *ret_buffer_len,
292                 const data_set_t *ds, const value_list_t *vl)
293 {
294         part_values_t pv;
295         int i;
296
297         i = 6 + (9 * vl->values_len);
298         if (*ret_buffer_len < i)
299                 return (-1);
300         *ret_buffer_len -= i;
301
302         pv.head = (part_header_t *) *ret_buffer;
303         pv.num_values = (uint16_t *) (pv.head + 1);
304         pv.values_types = (uint8_t *) (pv.num_values + 1);
305         pv.values = (value_t *) (pv.values_types + vl->values_len);
306         *ret_buffer = (void *) (pv.values + vl->values_len);
307
308         pv.head->type = htons (TYPE_VALUES);
309         pv.head->length = htons (6 + (9 * vl->values_len));
310         *pv.num_values = htons ((uint16_t) vl->values_len);
311         
312         for (i = 0; i < vl->values_len; i++)
313         {
314                 if (ds->ds[i].type == DS_TYPE_COUNTER)
315                 {
316                         pv.values_types[i] = DS_TYPE_COUNTER;
317                         pv.values[i].counter = htonll (vl->values[i].counter);
318                 }
319                 else
320                 {
321                         pv.values_types[i] = DS_TYPE_GAUGE;
322                         pv.values[i].gauge = vl->values[i].gauge;
323                 }
324         } /* for (values) */
325
326         return (0);
327 } /* int write_part_values */
328
329 static int write_part_number (char **ret_buffer, int *ret_buffer_len,
330                 int type, uint64_t value)
331 {
332         part_number_t pn;
333
334         if (*ret_buffer_len < 12)
335                 return (-1);
336
337         pn.head = (part_header_t *) *ret_buffer;
338         pn.value = (uint64_t *) (pn.head + 1);
339
340         pn.head->type = htons (type);
341         pn.head->length = htons (12);
342         *pn.value = htonll (value);
343
344         *ret_buffer = (char *) (pn.value + 1);
345         *ret_buffer_len -= 12;
346
347         return (0);
348 } /* int write_part_number */
349
350 static int write_part_string (char **ret_buffer, int *ret_buffer_len,
351                 int type, const char *str, int str_len)
352 {
353         part_string_t ps;
354         int len;
355
356         len = 4 + str_len + 1;
357         if (*ret_buffer_len < len)
358                 return (-1);
359         *ret_buffer_len -= len;
360
361         ps.head = (part_header_t *) *ret_buffer;
362         ps.value = (char *) (ps.head + 1);
363
364         ps.head->type = htons ((uint16_t) type);
365         ps.head->length = htons ((uint16_t) str_len + 5);
366         if (str_len > 0)
367                 memcpy (ps.value, str, str_len);
368         ps.value[str_len] = '\0';
369         *ret_buffer = (void *) (ps.value + (str_len + 1));
370
371         return (0);
372 } /* int write_part_string */
373
374 static int parse_part_values (void **ret_buffer, int *ret_buffer_len,
375                 value_t **ret_values, int *ret_num_values)
376 {
377         char *buffer = *ret_buffer;
378         int   buffer_len = *ret_buffer_len;
379         part_values_t pv;
380         int   i;
381
382         uint16_t h_length;
383         uint16_t h_type;
384         uint16_t h_num;
385
386         if (buffer_len < (15))
387         {
388                 DEBUG ("network plugin: packet is too short: buffer_len = %i",
389                                 buffer_len);
390                 return (-1);
391         }
392
393         pv.head = (part_header_t *) buffer;
394         h_length = ntohs (pv.head->length);
395         h_type = ntohs (pv.head->type);
396
397         assert (h_type == TYPE_VALUES);
398
399         pv.num_values = (uint16_t *) (pv.head + 1);
400         h_num = ntohs (*pv.num_values);
401
402         if (h_num != ((h_length - 6) / 9))
403         {
404                 DEBUG ("`length' and `num of values' don't match");
405                 return (-1);
406         }
407
408         pv.values_types = (uint8_t *) (pv.num_values + 1);
409         pv.values = (value_t *) (pv.values_types + h_num);
410
411         for (i = 0; i < h_num; i++)
412                 if (pv.values_types[i] == DS_TYPE_COUNTER)
413                         pv.values[i].counter = ntohll (pv.values[i].counter);
414
415         *ret_buffer     = (void *) (pv.values + h_num);
416         *ret_buffer_len = buffer_len - h_length;
417         *ret_num_values = h_num;
418         *ret_values     = pv.values;
419
420         return (0);
421 } /* int parse_part_values */
422
423 static int parse_part_number (void **ret_buffer, int *ret_buffer_len,
424                 uint64_t *value)
425 {
426         part_number_t pn;
427         uint16_t len;
428
429         pn.head = (part_header_t *) *ret_buffer;
430         pn.value = (uint64_t *) (pn.head + 1);
431
432         len = ntohs (pn.head->length);
433         if (len != 12)
434                 return (-1);
435         if (len > *ret_buffer_len)
436                 return (-1);
437         *value = ntohll (*pn.value);
438
439         *ret_buffer = (void *) (pn.value + 1);
440         *ret_buffer_len -= len;
441
442         return (0);
443 } /* int parse_part_number */
444
445 static int parse_part_string (void **ret_buffer, int *ret_buffer_len,
446                 char *output, int output_len)
447 {
448         char *buffer = *ret_buffer;
449         int   buffer_len = *ret_buffer_len;
450         part_string_t ps;
451
452         uint16_t h_length;
453         uint16_t h_type;
454
455         DEBUG ("network plugin: parse_part_string: ret_buffer = %p;"
456                         " ret_buffer_len = %i; output = %p; output_len = %i;",
457                         *ret_buffer, *ret_buffer_len,
458                         (void *) output, output_len);
459
460         ps.head = (part_header_t *) buffer;
461
462         h_length = ntohs (ps.head->length);
463         h_type = ntohs (ps.head->type);
464
465         DEBUG ("network plugin: parse_part_string: length = %hu; type = %hu;",
466                         h_length, h_type);
467
468         if (buffer_len < h_length)
469         {
470                 DEBUG ("packet is too short");
471                 return (-1);
472         }
473         assert ((h_type == TYPE_HOST)
474                         || (h_type == TYPE_PLUGIN)
475                         || (h_type == TYPE_PLUGIN_INSTANCE)
476                         || (h_type == TYPE_TYPE)
477                         || (h_type == TYPE_TYPE_INSTANCE));
478
479         ps.value = buffer + 4;
480         if (ps.value[h_length - 5] != '\0')
481         {
482                 DEBUG ("String does not end with a nullbyte");
483                 return (-1);
484         }
485
486         if (output_len < (h_length - 4))
487         {
488                 DEBUG ("output buffer is too small");
489                 return (-1);
490         }
491         strcpy (output, ps.value);
492
493         DEBUG ("network plugin: parse_part_string: output = %s", output);
494
495         *ret_buffer = (void *) (buffer + h_length);
496         *ret_buffer_len = buffer_len - h_length;
497
498         return (0);
499 } /* int parse_part_string */
500
501 static int parse_packet (void *buffer, int buffer_len)
502 {
503         part_header_t *header;
504         int status;
505
506         value_list_t vl = VALUE_LIST_INIT;
507         char type[DATA_MAX_NAME_LEN];
508
509         DEBUG ("network plugin: parse_packet: buffer = %p; buffer_len = %i;",
510                         buffer, buffer_len);
511
512         memset (&vl, '\0', sizeof (vl));
513         memset (&type, '\0', sizeof (type));
514         status = 0;
515
516         while ((status == 0) && (buffer_len > sizeof (part_header_t)))
517         {
518                 header = (part_header_t *) buffer;
519
520                 if (ntohs (header->length) > buffer_len)
521                         break;
522                 /* Assure that this loop terminates eventually */
523                 if (ntohs (header->length) < 4)
524                         break;
525
526                 if (ntohs (header->type) == TYPE_VALUES)
527                 {
528                         status = parse_part_values (&buffer, &buffer_len,
529                                         &vl.values, &vl.values_len);
530
531                         if (status != 0)
532                         {
533                                 DEBUG ("parse_part_values failed.");
534                                 break;
535                         }
536
537                         if ((vl.time > 0)
538                                         && (strlen (vl.host) > 0)
539                                         && (strlen (vl.plugin) > 0)
540                                         && (strlen (type) > 0)
541                                         && (cache_check (type, &vl) == 0))
542                         {
543                                 DEBUG ("network plugin: parse_packet:"
544                                                 " dispatching values");
545                                 plugin_dispatch_values (type, &vl);
546                         }
547                         else
548                         {
549                                 DEBUG ("network plugin: parse_packet:"
550                                                 " NOT dispatching values");
551                         }
552                 }
553                 else if (ntohs (header->type) == TYPE_TIME)
554                 {
555                         uint64_t tmp = 0;
556                         status = parse_part_number (&buffer, &buffer_len, &tmp);
557                         if (status == 0)
558                                 vl.time = (time_t) tmp;
559                 }
560                 else if (ntohs (header->type) == TYPE_HOST)
561                 {
562                         status = parse_part_string (&buffer, &buffer_len,
563                                         vl.host, sizeof (vl.host));
564                         DEBUG ("network plugin: parse_packet: vl.host = %s", vl.host);
565                 }
566                 else if (ntohs (header->type) == TYPE_PLUGIN)
567                 {
568                         status = parse_part_string (&buffer, &buffer_len,
569                                         vl.plugin, sizeof (vl.plugin));
570                         DEBUG ("network plugin: parse_packet: vl.plugin = %s", vl.plugin);
571                 }
572                 else if (ntohs (header->type) == TYPE_PLUGIN_INSTANCE)
573                 {
574                         status = parse_part_string (&buffer, &buffer_len,
575                                         vl.plugin_instance, sizeof (vl.plugin_instance));
576                         DEBUG ("network plugin: parse_packet: vl.plugin_instance = %s", vl.plugin_instance);
577                 }
578                 else if (ntohs (header->type) == TYPE_TYPE)
579                 {
580                         status = parse_part_string (&buffer, &buffer_len,
581                                         type, sizeof (type));
582                         DEBUG ("network plugin: parse_packet: type = %s", type);
583                 }
584                 else if (ntohs (header->type) == TYPE_TYPE_INSTANCE)
585                 {
586                         status = parse_part_string (&buffer, &buffer_len,
587                                         vl.type_instance, sizeof (vl.type_instance));
588                         DEBUG ("network plugin: parse_packet: vl.type_instance = %s", vl.type_instance);
589                 }
590                 else
591                 {
592                         DEBUG ("network plugin: parse_packet: Unknown part"
593                                         " type: 0x%0hx", ntohs (header->type));
594                         buffer = ((char *) buffer) + ntohs (header->length);
595                 }
596         } /* while (buffer_len > sizeof (part_header_t)) */
597
598         return (0);
599 } /* int parse_packet */
600
601 static void free_sockent (sockent_t *se)
602 {
603         sockent_t *next;
604         while (se != NULL)
605         {
606                 next = se->next;
607                 free (se->addr);
608                 free (se);
609                 se = next;
610         }
611 } /* void free_sockent */
612
613 /*
614  * int network_set_ttl
615  *
616  * Set the `IP_MULTICAST_TTL', `IP_TTL', `IPV6_MULTICAST_HOPS' or
617  * `IPV6_UNICAST_HOPS', depending on which option is applicable.
618  *
619  * The `struct addrinfo' is used to destinguish between unicast and multicast
620  * sockets.
621  */
622 static int network_set_ttl (const sockent_t *se, const struct addrinfo *ai)
623 {
624         if ((network_config_ttl < 1) || (network_config_ttl > 255))
625                 return (-1);
626
627         DEBUG ("ttl = %i", network_config_ttl);
628
629         if (ai->ai_family == AF_INET)
630         {
631                 struct sockaddr_in *addr = (struct sockaddr_in *) ai->ai_addr;
632                 int optname;
633
634                 if (IN_MULTICAST (ntohl (addr->sin_addr.s_addr)))
635                         optname = IP_MULTICAST_TTL;
636                 else
637                         optname = IP_TTL;
638
639                 if (setsockopt (se->fd, IPPROTO_IP, optname,
640                                         &network_config_ttl,
641                                         sizeof (network_config_ttl)) == -1)
642                 {
643                         char errbuf[1024];
644                         ERROR ("setsockopt: %s",
645                                         sstrerror (errno, errbuf, sizeof (errbuf)));
646                         return (-1);
647                 }
648         }
649         else if (ai->ai_family == AF_INET6)
650         {
651                 /* Useful example: http://gsyc.escet.urjc.es/~eva/IPv6-web/examples/mcast.html */
652                 struct sockaddr_in6 *addr = (struct sockaddr_in6 *) ai->ai_addr;
653                 int optname;
654
655                 if (IN6_IS_ADDR_MULTICAST (&addr->sin6_addr))
656                         optname = IPV6_MULTICAST_HOPS;
657                 else
658                         optname = IPV6_UNICAST_HOPS;
659
660                 if (setsockopt (se->fd, IPPROTO_IPV6, optname,
661                                         &network_config_ttl,
662                                         sizeof (network_config_ttl)) == -1)
663                 {
664                         char errbuf[1024];
665                         ERROR ("setsockopt: %s",
666                                         sstrerror (errno, errbuf,
667                                                 sizeof (errbuf)));
668                         return (-1);
669                 }
670         }
671
672         return (0);
673 } /* int network_set_ttl */
674
675 static int network_bind_socket (const sockent_t *se, const struct addrinfo *ai)
676 {
677         int loop = 0;
678
679         DEBUG ("fd = %i; calling `bind'", se->fd);
680
681         if (bind (se->fd, ai->ai_addr, ai->ai_addrlen) == -1)
682         {
683                 char errbuf[1024];
684                 ERROR ("bind: %s",
685                                 sstrerror (errno, errbuf, sizeof (errbuf)));
686                 return (-1);
687         }
688
689         if (ai->ai_family == AF_INET)
690         {
691                 struct sockaddr_in *addr = (struct sockaddr_in *) ai->ai_addr;
692                 if (IN_MULTICAST (ntohl (addr->sin_addr.s_addr)))
693                 {
694                         struct ip_mreq mreq;
695
696                         DEBUG ("fd = %i; IPv4 multicast address found", se->fd);
697
698                         mreq.imr_multiaddr.s_addr = addr->sin_addr.s_addr;
699                         mreq.imr_interface.s_addr = htonl (INADDR_ANY);
700
701                         if (setsockopt (se->fd, IPPROTO_IP, IP_MULTICAST_LOOP,
702                                                 &loop, sizeof (loop)) == -1)
703                         {
704                                 char errbuf[1024];
705                                 ERROR ("setsockopt: %s",
706                                                 sstrerror (errno, errbuf,
707                                                         sizeof (errbuf)));
708                                 return (-1);
709                         }
710
711                         if (setsockopt (se->fd, IPPROTO_IP, IP_ADD_MEMBERSHIP,
712                                                 &mreq, sizeof (mreq)) == -1)
713                         {
714                                 char errbuf[1024];
715                                 ERROR ("setsockopt: %s",
716                                                 sstrerror (errno, errbuf,
717                                                         sizeof (errbuf)));
718                                 return (-1);
719                         }
720                 }
721         }
722         else if (ai->ai_family == AF_INET6)
723         {
724                 /* Useful example: http://gsyc.escet.urjc.es/~eva/IPv6-web/examples/mcast.html */
725                 struct sockaddr_in6 *addr = (struct sockaddr_in6 *) ai->ai_addr;
726                 if (IN6_IS_ADDR_MULTICAST (&addr->sin6_addr))
727                 {
728                         struct ipv6_mreq mreq;
729
730                         DEBUG ("fd = %i; IPv6 multicast address found", se->fd);
731
732                         memcpy (&mreq.ipv6mr_multiaddr,
733                                         &addr->sin6_addr,
734                                         sizeof (addr->sin6_addr));
735
736                         /* http://developer.apple.com/documentation/Darwin/Reference/ManPages/man4/ip6.4.html
737                          * ipv6mr_interface may be set to zeroes to
738                          * choose the default multicast interface or to
739                          * the index of a particular multicast-capable
740                          * interface if the host is multihomed.
741                          * Membership is associ-associated with a
742                          * single interface; programs running on
743                          * multihomed hosts may need to join the same
744                          * group on more than one interface.*/
745                         mreq.ipv6mr_interface = 0;
746
747                         if (setsockopt (se->fd, IPPROTO_IPV6, IPV6_MULTICAST_LOOP,
748                                                 &loop, sizeof (loop)) == -1)
749                         {
750                                 char errbuf[1024];
751                                 ERROR ("setsockopt: %s",
752                                                 sstrerror (errno, errbuf,
753                                                         sizeof (errbuf)));
754                                 return (-1);
755                         }
756
757                         if (setsockopt (se->fd, IPPROTO_IPV6, IPV6_ADD_MEMBERSHIP,
758                                                 &mreq, sizeof (mreq)) == -1)
759                         {
760                                 char errbuf[1024];
761                                 ERROR ("setsockopt: %s",
762                                                 sstrerror (errno, errbuf,
763                                                         sizeof (errbuf)));
764                                 return (-1);
765                         }
766                 }
767         }
768
769         return (0);
770 } /* int network_bind_socket */
771
772 static sockent_t *network_create_socket (const char *node,
773                 const char *service,
774                 int listen)
775 {
776         struct addrinfo  ai_hints;
777         struct addrinfo *ai_list, *ai_ptr;
778         int              ai_return;
779
780         sockent_t *se_head = NULL;
781         sockent_t *se_tail = NULL;
782
783         DEBUG ("node = %s, service = %s", node, service);
784
785         memset (&ai_hints, '\0', sizeof (ai_hints));
786         ai_hints.ai_flags    = 0;
787 #ifdef AI_PASSIVE
788         ai_hints.ai_flags |= AI_PASSIVE;
789 #endif
790 #ifdef AI_ADDRCONFIG
791         ai_hints.ai_flags |= AI_ADDRCONFIG;
792 #endif
793         ai_hints.ai_family   = AF_UNSPEC;
794         ai_hints.ai_socktype = SOCK_DGRAM;
795         ai_hints.ai_protocol = IPPROTO_UDP;
796
797         ai_return = getaddrinfo (node, service, &ai_hints, &ai_list);
798         if (ai_return != 0)
799         {
800                 char errbuf[1024];
801                 ERROR ("getaddrinfo (%s, %s): %s",
802                                 (node == NULL) ? "(null)" : node,
803                                 (service == NULL) ? "(null)" : service,
804                                 (ai_return == EAI_SYSTEM)
805                                 ? sstrerror (errno, errbuf, sizeof (errbuf))
806                                 : gai_strerror (ai_return));
807                 return (NULL);
808         }
809
810         for (ai_ptr = ai_list; ai_ptr != NULL; ai_ptr = ai_ptr->ai_next)
811         {
812                 sockent_t *se;
813
814                 if ((se = (sockent_t *) malloc (sizeof (sockent_t))) == NULL)
815                 {
816                         char errbuf[1024];
817                         ERROR ("malloc: %s",
818                                         sstrerror (errno, errbuf,
819                                                 sizeof (errbuf)));
820                         continue;
821                 }
822
823                 if ((se->addr = (struct sockaddr_storage *) malloc (sizeof (struct sockaddr_storage))) == NULL)
824                 {
825                         char errbuf[1024];
826                         ERROR ("malloc: %s",
827                                         sstrerror (errno, errbuf,
828                                                 sizeof (errbuf)));
829                         free (se);
830                         continue;
831                 }
832
833                 assert (sizeof (struct sockaddr_storage) >= ai_ptr->ai_addrlen);
834                 memset (se->addr, '\0', sizeof (struct sockaddr_storage));
835                 memcpy (se->addr, ai_ptr->ai_addr, ai_ptr->ai_addrlen);
836                 se->addrlen = ai_ptr->ai_addrlen;
837
838                 se->fd   = socket (ai_ptr->ai_family,
839                                 ai_ptr->ai_socktype,
840                                 ai_ptr->ai_protocol);
841                 se->next = NULL;
842
843                 if (se->fd == -1)
844                 {
845                         char errbuf[1024];
846                         ERROR ("socket: %s",
847                                         sstrerror (errno, errbuf,
848                                                 sizeof (errbuf)));
849                         free (se->addr);
850                         free (se);
851                         continue;
852                 }
853
854                 if (listen != 0)
855                 {
856                         if (network_bind_socket (se, ai_ptr) != 0)
857                         {
858                                 close (se->fd);
859                                 free (se->addr);
860                                 free (se);
861                                 continue;
862                         }
863                 }
864                 else /* listen == 0 */
865                 {
866                         network_set_ttl (se, ai_ptr);
867                 }
868
869                 if (se_tail == NULL)
870                 {
871                         se_head = se;
872                         se_tail = se;
873                 }
874                 else
875                 {
876                         se_tail->next = se;
877                         se_tail = se;
878                 }
879
880                 /* We don't open more than one write-socket per node/service pair.. */
881                 if (listen == 0)
882                         break;
883         }
884
885         freeaddrinfo (ai_list);
886
887         return (se_head);
888 } /* sockent_t *network_create_socket */
889
890 static sockent_t *network_create_default_socket (int listen)
891 {
892         sockent_t *se_ptr  = NULL;
893         sockent_t *se_head = NULL;
894         sockent_t *se_tail = NULL;
895
896         se_ptr = network_create_socket (NET_DEFAULT_V6_ADDR,
897                         NET_DEFAULT_PORT, listen);
898
899         /* Don't send to the same machine in IPv6 and IPv4 if both are available. */
900         if ((listen == 0) && (se_ptr != NULL))
901                 return (se_ptr);
902
903         if (se_ptr != NULL)
904         {
905                 se_head = se_ptr;
906                 se_tail = se_ptr;
907                 while (se_tail->next != NULL)
908                         se_tail = se_tail->next;
909         }
910
911         se_ptr = network_create_socket (NET_DEFAULT_V4_ADDR, NET_DEFAULT_PORT, listen);
912
913         if (se_tail == NULL)
914                 return (se_ptr);
915
916         se_tail->next = se_ptr;
917         return (se_head);
918 } /* sockent_t *network_create_default_socket */
919
920 static int network_add_listen_socket (const char *node, const char *service)
921 {
922         sockent_t *se;
923         sockent_t *se_ptr;
924         int se_num = 0;
925
926         if (service == NULL)
927                 service = NET_DEFAULT_PORT;
928
929         if (node == NULL)
930                 se = network_create_default_socket (1 /* listen == true */);
931         else
932                 se = network_create_socket (node, service, 1 /* listen == true */);
933
934         if (se == NULL)
935                 return (-1);
936
937         for (se_ptr = se; se_ptr != NULL; se_ptr = se_ptr->next)
938                 se_num++;
939
940         listen_sockets = (struct pollfd *) realloc (listen_sockets,
941                         (listen_sockets_num + se_num)
942                         * sizeof (struct pollfd));
943
944         for (se_ptr = se; se_ptr != NULL; se_ptr = se_ptr->next)
945         {
946                 listen_sockets[listen_sockets_num].fd = se_ptr->fd;
947                 listen_sockets[listen_sockets_num].events = POLLIN | POLLPRI;
948                 listen_sockets[listen_sockets_num].revents = 0;
949                 listen_sockets_num++;
950         } /* for (se) */
951
952         free_sockent (se);
953         return (0);
954 } /* int network_add_listen_socket */
955
956 static int network_add_sending_socket (const char *node, const char *service)
957 {
958         sockent_t *se;
959         sockent_t *se_ptr;
960
961         if (service == NULL)
962                 service = NET_DEFAULT_PORT;
963
964         if (node == NULL)
965                 se = network_create_default_socket (0 /* listen == false */);
966         else
967                 se = network_create_socket (node, service, 0 /* listen == false */);
968
969         if (se == NULL)
970                 return (-1);
971
972         if (sending_sockets == NULL)
973         {
974                 sending_sockets = se;
975                 return (0);
976         }
977
978         for (se_ptr = sending_sockets; se_ptr->next != NULL; se_ptr = se_ptr->next)
979                 /* seek end */;
980
981         se_ptr->next = se;
982         return (0);
983 } /* int network_get_listen_socket */
984
985 int network_receive (void)
986 {
987         char buffer[BUFF_SIZE];
988         int  buffer_len;
989
990         int i;
991         int status;
992
993         if (listen_sockets_num == 0)
994                 network_add_listen_socket (NULL, NULL);
995
996         if (listen_sockets_num == 0)
997         {
998                 ERROR ("network: Failed to open a listening socket.");
999                 return (-1);
1000         }
1001
1002         while (listen_loop == 0)
1003         {
1004                 status = poll (listen_sockets, listen_sockets_num, -1);
1005
1006                 if (status <= 0)
1007                 {
1008                         char errbuf[1024];
1009                         if (errno == EINTR)
1010                                 continue;
1011                         ERROR ("poll failed: %s",
1012                                         sstrerror (errno, errbuf, sizeof (errbuf)));
1013                         return (-1);
1014                 }
1015
1016                 for (i = 0; (i < listen_sockets_num) && (status > 0); i++)
1017                 {
1018                         if ((listen_sockets[i].revents & (POLLIN | POLLPRI)) == 0)
1019                                 continue;
1020                         status--;
1021
1022                         buffer_len = recv (listen_sockets[i].fd,
1023                                         buffer, sizeof (buffer),
1024                                         0 /* no flags */);
1025                         if (buffer_len < 0)
1026                         {
1027                                 char errbuf[1024];
1028                                 ERROR ("recv failed: %s",
1029                                                 sstrerror (errno, errbuf,
1030                                                         sizeof (errbuf)));
1031                                 return (-1);
1032                         }
1033
1034                         parse_packet (buffer, buffer_len);
1035                 } /* for (listen_sockets) */
1036         } /* while (listen_loop == 0) */
1037
1038         return (0);
1039 }
1040
1041 static void *receive_thread (void *arg)
1042 {
1043         return (network_receive () ? (void *) 1 : (void *) 0);
1044 } /* void *receive_thread */
1045
1046 static void network_send_buffer (const char *buffer, int buffer_len)
1047 {
1048         sockent_t *se;
1049         int status;
1050
1051         DEBUG ("network plugin: network_send_buffer: buffer_len = %i", buffer_len);
1052
1053         for (se = sending_sockets; se != NULL; se = se->next)
1054         {
1055                 while (42)
1056                 {
1057                         status = sendto (se->fd, buffer, buffer_len, 0 /* no flags */,
1058                                         (struct sockaddr *) se->addr, se->addrlen);
1059                         if (status < 0)
1060                         {
1061                                 char errbuf[1024];
1062                                 if (errno == EINTR)
1063                                         continue;
1064                                 ERROR ("network plugin: sendto failed: %s",
1065                                                 sstrerror (errno, errbuf,
1066                                                         sizeof (errbuf)));
1067                                 break;
1068                         }
1069
1070                         break;
1071                 } /* while (42) */
1072         } /* for (sending_sockets) */
1073 } /* void network_send_buffer */
1074
1075 static int add_to_buffer (char *buffer, int buffer_size,
1076                 value_list_t *vl_def, char *type_def,
1077                 const data_set_t *ds, const value_list_t *vl)
1078 {
1079         char *buffer_orig = buffer;
1080
1081         if (strcmp (vl_def->host, vl->host) != 0)
1082         {
1083                 if (write_part_string (&buffer, &buffer_size, TYPE_HOST,
1084                                         vl->host, strlen (vl->host)) != 0)
1085                         return (-1);
1086                 strcpy (vl_def->host, vl->host);
1087                 DEBUG ("network plugin: add_to_buffer: host = %s", vl->host);
1088         }
1089
1090         if (vl_def->time != vl->time)
1091         {
1092                 if (write_part_number (&buffer, &buffer_size, TYPE_TIME,
1093                                         (uint64_t) vl->time))
1094                         return (-1);
1095                 vl_def->time = vl->time;
1096                 DEBUG ("network plugin: add_to_buffer: time = %u",
1097                                 (unsigned int) vl->time);
1098         }
1099
1100         if (strcmp (vl_def->plugin, vl->plugin) != 0)
1101         {
1102                 if (write_part_string (&buffer, &buffer_size, TYPE_PLUGIN,
1103                                         vl->plugin, strlen (vl->plugin)) != 0)
1104                         return (-1);
1105                 strcpy (vl_def->plugin, vl->plugin);
1106                 DEBUG ("network plugin: add_to_buffer: plugin = %s",
1107                                 vl->plugin);
1108         }
1109
1110         if (strcmp (vl_def->plugin_instance, vl->plugin_instance) != 0)
1111         {
1112                 if (write_part_string (&buffer, &buffer_size, TYPE_PLUGIN_INSTANCE,
1113                                         vl->plugin_instance,
1114                                         strlen (vl->plugin_instance)) != 0)
1115                         return (-1);
1116                 strcpy (vl_def->plugin_instance, vl->plugin_instance);
1117                 DEBUG ("network plugin: add_to_buffer: plugin_instance = %s",
1118                                 vl->plugin_instance);
1119         }
1120
1121         if (strcmp (type_def, ds->type) != 0)
1122         {
1123                 if (write_part_string (&buffer, &buffer_size, TYPE_TYPE,
1124                                         ds->type, strlen (ds->type)) != 0)
1125                         return (-1);
1126                 strcpy (type_def, ds->type);
1127                 DEBUG ("network plugin: add_to_buffer: type = %s", ds->type);
1128         }
1129
1130         if (strcmp (vl_def->type_instance, vl->type_instance) != 0)
1131         {
1132                 if (write_part_string (&buffer, &buffer_size, TYPE_TYPE_INSTANCE,
1133                                         vl->type_instance,
1134                                         strlen (vl->type_instance)) != 0)
1135                         return (-1);
1136                 strcpy (vl_def->type_instance, vl->type_instance);
1137                 DEBUG ("network plugin: add_to_buffer: type_instance = %s",
1138                                 vl->type_instance);
1139         }
1140         
1141         if (write_part_values (&buffer, &buffer_size, ds, vl) != 0)
1142                 return (-1);
1143
1144         return (buffer - buffer_orig);
1145 } /* int add_to_buffer */
1146
1147 static void flush_buffer (void)
1148 {
1149         DEBUG ("network plugin: flush_buffer: send_buffer_fill = %i",
1150                         send_buffer_fill);
1151
1152         network_send_buffer (send_buffer, send_buffer_fill);
1153         send_buffer_ptr  = send_buffer;
1154         send_buffer_fill = 0;
1155         memset (&send_buffer_vl, '\0', sizeof (send_buffer_vl));
1156         memset (send_buffer_type, '\0', sizeof (send_buffer_type));
1157 }
1158
1159 static int network_write (const data_set_t *ds, const value_list_t *vl)
1160 {
1161         int status;
1162
1163         /* If the value is already in the cache, we have received it via the
1164          * network. We write it again if forwarding is activated. It's then in
1165          * the cache and should we receive it again we will ignore it. */
1166         status = cache_check (ds->type, vl);
1167         if ((network_config_forward == 0)
1168                         && (status != 0))
1169                 return (0);
1170
1171         pthread_mutex_lock (&send_buffer_lock);
1172
1173         status = add_to_buffer (send_buffer_ptr,
1174                         sizeof (send_buffer) - send_buffer_fill,
1175                         &send_buffer_vl, send_buffer_type,
1176                         ds, vl);
1177         if (status >= 0)
1178         {
1179                 /* status == bytes added to the buffer */
1180                 send_buffer_fill += status;
1181                 send_buffer_ptr  += status;
1182         }
1183         else
1184         {
1185                 flush_buffer ();
1186
1187                 status = add_to_buffer (send_buffer_ptr,
1188                                 sizeof (send_buffer) - send_buffer_fill,
1189                                 &send_buffer_vl, send_buffer_type,
1190                                 ds, vl);
1191
1192                 if (status >= 0)
1193                 {
1194                         send_buffer_fill += status;
1195                         send_buffer_ptr  += status;
1196                 }
1197         }
1198
1199         if (status < 0)
1200         {
1201                 ERROR ("network plugin: Unable to append to the "
1202                                 "buffer for some weird reason");
1203         }
1204         else if ((sizeof (send_buffer) - send_buffer_fill) < 15)
1205         {
1206                 flush_buffer ();
1207         }
1208
1209         pthread_mutex_unlock (&send_buffer_lock);
1210
1211         return ((status < 0) ? -1 : 0);
1212 } /* int network_write */
1213
1214 static int network_config (const char *key, const char *val)
1215 {
1216         char *node;
1217         char *service;
1218
1219         char *fields[3];
1220         int   fields_num;
1221
1222         if ((strcasecmp ("Listen", key) == 0)
1223                         || (strcasecmp ("Server", key) == 0))
1224         {
1225                 char *val_cpy = strdup (val);
1226                 if (val_cpy == NULL)
1227                         return (1);
1228
1229                 service = NET_DEFAULT_PORT;
1230                 fields_num = strsplit (val_cpy, fields, 3);
1231                 if ((fields_num != 1)
1232                                 && (fields_num != 2))
1233                         return (1);
1234                 else if (fields_num == 2)
1235                 {
1236                         if ((service = strchr (fields[1], '.')) != NULL)
1237                                 *service = '\0';
1238                         service = fields[1];
1239                 }
1240                 node = fields[0];
1241
1242                 if (strcasecmp ("Listen", key) == 0)
1243                         network_add_listen_socket (node, service);
1244                 else
1245                         network_add_sending_socket (node, service);
1246         }
1247         else if (strcasecmp ("TimeToLive", key) == 0)
1248         {
1249                 int tmp = atoi (val);
1250                 if ((tmp > 0) && (tmp < 256))
1251                         network_config_ttl = tmp;
1252                 else
1253                         return (1);
1254         }
1255         else if (strcasecmp ("Forward", key) == 0)
1256         {
1257                 if ((strcasecmp ("true", val) == 0)
1258                                 || (strcasecmp ("yes", val) == 0)
1259                                 || (strcasecmp ("on", val) == 0))
1260                         network_config_forward = 1;
1261                 else
1262                         network_config_forward = 0;
1263         }
1264         else if (strcasecmp ("CacheFlush", key) == 0)
1265         {
1266                 int tmp = atoi (val);
1267                 if (tmp > 0)
1268                         cache_flush_interval = tmp;
1269                 else return (1);
1270         }
1271         else
1272         {
1273                 return (-1);
1274         }
1275         return (0);
1276 } /* int network_config */
1277
1278 static int network_shutdown (void)
1279 {
1280         DEBUG ("Shutting down.");
1281
1282         listen_loop++;
1283
1284         if (listen_thread != (pthread_t) 0)
1285         {
1286                 pthread_kill (listen_thread, SIGTERM);
1287                 pthread_join (listen_thread, NULL /* no return value */);
1288                 listen_thread = (pthread_t) 0;
1289         }
1290
1291         listen_thread = 0;
1292
1293         if (cache_tree != NULL)
1294         {
1295                 void *key;
1296                 void *value;
1297
1298                 while (avl_pick (cache_tree, &key, &value) == 0)
1299                 {
1300                         sfree (key);
1301                         sfree (value);
1302                 }
1303                 avl_destroy (cache_tree);
1304                 cache_tree = NULL;
1305         }
1306
1307         /* TODO: Close `sending_sockets' */
1308
1309         plugin_unregister_config ("network");
1310         plugin_unregister_init ("network");
1311         plugin_unregister_write ("network");
1312         plugin_unregister_shutdown ("network");
1313
1314         return (0);
1315 } /* int network_shutdown */
1316
1317 static int network_init (void)
1318 {
1319         plugin_register_shutdown ("network", network_shutdown);
1320
1321         send_buffer_ptr  = send_buffer;
1322         send_buffer_fill = 0;
1323         memset (&send_buffer_vl, '\0', sizeof (send_buffer_vl));
1324         memset (send_buffer_type, '\0', sizeof (send_buffer_type));
1325
1326         cache_tree = avl_create ((int (*) (const void *, const void *)) strcmp);
1327         cache_flush_last = time (NULL);
1328
1329         /* setup socket(s) and so on */
1330         if (sending_sockets != NULL)
1331                 plugin_register_write ("network", network_write);
1332
1333         if ((listen_sockets_num != 0) && (listen_thread == 0))
1334         {
1335                 int status;
1336
1337                 status = pthread_create (&listen_thread, NULL /* no attributes */,
1338                                 receive_thread, NULL /* no argument */);
1339
1340                 if (status != 0)
1341                 {
1342                         char errbuf[1024];
1343                         ERROR ("network: pthread_create failed: %s",
1344                                         sstrerror (errno, errbuf,
1345                                                 sizeof (errbuf)));
1346                 }
1347         }
1348         return (0);
1349 } /* int network_init */
1350
1351 void module_register (void)
1352 {
1353         plugin_register_config ("network", network_config,
1354                         config_keys, config_keys_num);
1355         plugin_register_init   ("network", network_init);
1356 } /* void module_register */