README: Improved formatting.
[collectd.git] / README
1  collectd - System information collection daemon
2 =================================================
3 http://collectd.org/
4
5 About
6 -----
7
8   collectd is a small daemon which collects statistics about a computer's
9   usage and writes then into RRD files.
10
11
12 Features
13 --------
14
15   * collectd is able to collect the following data:
16
17     - apache
18       Apache server utilization: Number of bytes transfered, number of
19       requests handled and detailed scoreboard statistics
20
21     - apcups
22       APC UPS Daemon: UPS charge, load, input/output/battery voltage, etc.
23
24     - apple_sensors
25       Sensors in Macs running Mac OS X / Darwin: Temperature, fanspeed and
26       voltage sensors.
27
28     - battery
29       Batterycharge, -current and voltage of ACPI and PMU based laptop
30       batteries.
31
32     - cpu
33       CPU utilization: Time spent in the system, user, nice, idle, and related
34       states.
35
36     - cpufreq
37       CPU frequency (For laptops with speed step or a similar technology)
38
39     - df
40       Mountpoint usage (Basically the values `df(1)' delivers)
41
42     - disk
43       Disk utilization: Sectors read/written, number of read/write actions,
44       average time an IO-operation took to complete.
45
46     - dns
47       DNS traffic: Query types, response codes, opcodes and traffic/octets
48       transfered.
49
50     - email
51       Email statistics: Count, traffic, spam scores and checks.
52       See collectd-email(5).
53
54     - entropy
55       Amount of entropy available to the system.
56
57     - exec
58       Values gathered by a custom program or script.
59       See collectd-exec(5).
60
61     - hddtemp
62       Harddisk temperatures using hddtempd.
63
64     - interface
65       Interface traffic: Number of octets, packets and errors for each
66       interface.
67
68     - iptables
69       Iptables' counters: Number of bytes that were matched by a certain
70       iptables rule.
71
72     - irq
73       IRQ counters: Frequency in which certain interrupts occur.
74
75     - load
76       System load average over the last 1, 5 and 15 minutes.
77
78     - mbmon
79       Motherboard sensors: temperature, fanspeed and voltage information,
80       using mbmon(1).
81
82     - memory
83       Memory utilization: Memory occupied by running processes, page cache,
84       buffer cache and free.
85
86     - multimeter
87       Information provided by serial multimeters, such as the `Metex
88       M-4650CR'.
89
90     - mysql
91       MySQL server statistics: Commands issued, handlers triggered, thread
92       usage, query cache utilization and traffic/octets sent and received.
93
94     - netlink
95       Very detailed Linux network interface and routing statistics. You can get
96       (detailed) information on interfaces, qdiscs, classes, and, if you can
97       make use of it, filters.
98
99     - network
100       Receive values that were collected by other hosts. Large setups will
101       want to collect the data on one dedicated machine, and this is the
102       plugin of choice for that.
103
104     - nfs
105       NFS Procedures: Which NFS command were called how often. Only NFSv2 and
106       NFSv3 right now.
107
108     - ntp
109       NTP daemon statistics: Local clock drift, offset to peers, etc.
110
111     - nut
112       Network UPS tools: UPS current, voltage, power, charge, utilisation,
113       temperature, etc. See upsd(8).
114
115     - perl
116       The perl plugin implements a Perl-interpreter into collectd. You can
117       write your own plugins in Perl and return arbitrary values using this
118       API. See collectd-perl(5).
119
120       This plugin is still considered to be experimental and subject to change
121       between minor releases.
122
123     - ping
124       Network latency: Time to reach the default gateway or another given
125       host.
126
127     - processes
128       Process counts: Number of running, sleeping, zombie, ... processes.
129
130     - sensors
131       System sensors, accessed using lm_sensors: Voltages, temperatures and
132       fan rotation speeds.
133
134     - serial
135       RX and TX of serial interfaces. Linux only; needs root privileges.
136
137     - snmp
138       Read values from SNMP (Simple Network Management Protocol) enabled
139       network devices such as switches, routers, thermometers, rack monitoring
140       servers, etc. See collectd-snmp(5).
141
142     - swap
143       Pages swapped out onto harddisk or whatever is called `swap' by the OS..
144
145     - tape
146       Bytes and operations read and written on tape devices. Solaris only.
147
148     - users
149       Users currently logged in.
150
151     - vserver
152       System resources used by Linux VServers.
153       See <http://linux-vserver.org/>.
154
155     - wireless
156       Link quality of wireless cards. Linux only.
157
158     - xmms
159       Bitrate and frequency of music played with XMMS.
160
161   * Output can be written or send to various destinations by the following
162     plugins:
163
164     - csv
165       Write to comma separated values (CSV) files. This needs lots of
166       diskspace but is extremely portable and can be analysed with almost
167       every program that can analyse anything. Even Microsoft's Excel..
168
169     - network
170       Send the data to a remote host to save the data somehow. This is useful
171       for large setups where the data should be saved by a dedicated machine.
172
173     - perl
174       Of course the values are propagated to plugins written in Perl, too, so
175       you can easily do weird stuff with the plugins we didn't dare think of
176       ;) See collectd-perl(5).
177
178     - rrdtool
179       Output to round-robin-database (RRD) files using librrd. See rrdtool(1).
180       This is likely the most popular destination for such values. Since
181       updates to RRD-files are somewhat expensive this plugin can cache
182       updates to the files and write a bunch of updates at once, which lessens
183       system load a lot.
184
185     - unixsock
186       One can query the values from the unixsock plugin whenever they're
187       needed. Please read collectd-unixsock(5) for a description on how that's
188       done.
189
190   * Logging is, as everything in collectd, provided by plugins. The following
191     plugins keep up informed about what's going on:
192
193     - logfile
194       Writes logmessages to a file or STDOUT/STDERR.
195
196     - syslog
197       Logs to the standard UNIX logging mechanism, syslog.
198
199   * Performance: Since collectd is running as a daemon it doesn't spend much
200     time starting up again and again. With the exception of the exec plugin no
201     processes are forked. Caching in output plugins, such as the rrdtool and
202     network plugins, makes sure your resources are used efficiently. Also,
203     since collectd is programmed multithreaded it benefits from hyperthreading
204     and multicore processors and makes sure that the daemon isn't idle if only
205     one plugins waits for an IO-operation to complete.
206     
207   * Once set up, hardly any maintenance is necessary. Setup is kept as easy
208     as possible and the default values should be okay for most users.
209
210
211 Operation
212 ---------
213
214   * collectd's configuration file can be found at `sysconfdir'/collectd.conf.
215     Run `collectd -h' for a list of builtin defaults. See `collectd.conf(5)'
216     for a list of options and a syntax description.
217
218   * When the `csv' or `rrdtool' plugins are loaded they'll write the values to
219     files. The usual place for these files is beneath `/var/lib/collectd'.
220
221   * When using some of the plugins, collectd needs to run as user root, since
222     only root can do certain things, such as craft ICMP packages needed to ping
223     other hosts. collectd should NOT be installed setuid root since it can be
224     used to overwrite valuable files!
225
226   * Sample scripts to generate graphs reside in `contrib/' in the source
227     package or somewhere near `/usr/share/doc/collectd' in most distributions.
228     Please be aware that those script are meant as a starting point for your
229     own experiments.. Some of them require the `RRDs' Perl module.
230     (`librrds-perl' on Debian) If you have written a more sophisticated
231     solution please share it with us.
232
233   * The RRAs of the automatically created RRD files depend on the `step'
234     and `heartbeat' settings given. If change these settings you may need to
235     re-create the files, losing all data. Please be aware of that when changing
236     the values and read the rrdtool(1) manpage thoroughly.
237
238
239 collectd and chkrootkit
240 -----------------------
241
242   If you are using the `dns' plugin chkrootkit(1) will report collectd as a
243   packet sniffer ("<iface>: PACKET SNIFFER(/usr/sbin/collectd[<pid>])"). The
244   plugin captures all UDP packets on port 53 to analyze the DNS traffic. In
245   this case, collectd is a legitimate sniffer and the report should be
246   considered to be a false positive. However, you might want to check that
247   this really is collectd and not some other, illegitimate sniffer.
248
249
250 Prerequisites
251 -------------
252
253   To compile collectd from source you will need:
254
255   * Usual suspects: C compiler, linker, preprocessor, make, ...
256
257   * A POSIX-threads (pthread) implementation.
258     Since gathering some statistics is slow (network connections, slow devices,
259     etc) the collectd is parallelized. The POSIX threads interface is being
260     used and should be found in various implementations for hopefully all
261     platforms.
262
263   * libcurl (optional)
264     If you want to use the `apache' plugin
265
266   * libiptc (optional)
267     For querying iptables counters.
268
269   * libmysqlclient (optional)
270
271   * libnetlink (optional)
272
273   * libnetsnmp (optional)
274
275   * liboping (optional, if not found a version shipped with this distribution
276     can be used)
277     Used by the `ping' plugin to send and receive ICMP packets.
278
279   * libpcap (optional)
280     Used to capture packets by the `dns' plugin.
281
282   * librrd (optional; headers and library; rrdtool 1.0 and 1.2 both work fine)
283     If built without `librrd' the resulting binary will be `client only', i.e.
284     will send its values via multicast and not create any RRD files itself.
285     Alternatively you can chose to write CSV-files (Comma Separated Values)
286     instead.
287
288   * libsensors (optional)
289     To read from `lm_sensors'.
290
291   * libstatgrab may be used to collect statistics on systems other than Linux
292     and/or Solaris. Note that CPU- and disk-statistics, while being provided
293     by this library, are not supported in collectd right now..
294     <http://www.i-scream.org/libstatgrab/> 
295
296   * libupsclient/nut (optional)
297     For the `nut' plugin which queries nut's `upsd'.
298
299   * libxmms (optional)
300
301   * librt, libsocket, libkstat, libdevinfo
302     Various standard Solaris libraries which provide system functions.
303
304   * CoreFoundation.framework and IOKit.framework
305     For compiling on Darwin in general and the `apple_sensors' plugin in
306     particular.
307
308
309 Crosscompiling
310 --------------
311
312   To compile correctly collectd needs to be able to initialize static
313   variables to NAN (Not A Number). Some C libraries, especially the GNU
314   libc, have a problem with that.
315
316   Luckily, with GCC it's possible to work around that problem: One can define
317   NAN as being (0.0 / 0.0) and `isnan' as `f != f'. However, to test this
318   ``implementation'' the configure script needs to compile and run a short
319   test program. Obviously running a test program when doing a cross-
320   compilation is, well, challenging.
321
322   If you run into this problem, you can use the `--with-nan-emulation'
323   configure option to force the use of this implementation. We can't promise
324   that the compiled binary actually behaves as it should, but since NANs
325   are likely never passed to the libm you have a good chance to be lucky.
326
327
328 Contact
329 -------
330
331   For questions, bugreports, development information and basically all other
332   concerns please send an email to collectd's mailinglist at
333   <collectd at verplant.org>.
334
335   For live discussion and more personal contact visit us in IRC, we're in
336   channel #collectd on freenode.
337
338
339 Author
340 ------
341
342   Florian octo Forster <octo at verplant.org>,
343   Sebastian tokkee Harl <sh at tokkee.org>,
344   and many contributors (see `AUTHORS').
345
346   Please send bugreports and patches to the mailinglist, see `Contact' above.
347