49b8fc2f066180430303db826f951e144fe4bf59
[rrdtool.git] / doc / rrdfetch.pod
1 =head1 NAME
2
3 rrdfetch - Fetch data from an RRD.
4
5 =head1 SYNOPSIS
6
7 B<rrdtool> B<fetch> I<filename> I<CF>
8 S<[B<--resolution>|B<-r> I<resolution>]>
9 S<[B<--start>|B<-s> I<start>]>
10 S<[B<--end>|B<-e> I<end>]>
11 S<[B<--daemon> I<address>]>
12
13 =head1 DESCRIPTION
14
15 The B<fetch> function is normally used internally by the graph
16 function to get data from B<RRD>s. B<fetch> will analyze the B<RRD>
17 and try to retrieve the data in the resolution requested.
18 The data fetched is printed to stdout. I<*UNKNOWN*> data is often
19 represented by the string "NaN" depending on your OS's printf
20 function.
21
22 =over 8
23
24 =item I<filename>
25
26 the name of the B<RRD> you want to fetch the data from.
27
28 =item I<CF>
29
30 the consolidation function that is applied to the data you
31 want to fetch (AVERAGE,MIN,MAX,LAST)
32
33 =item B<--resolution>|B<-r> I<resolution> (default is the highest resolution)
34
35 the interval you want the values to have (seconds per
36 value). B<rrdfetch> will try to match your request, but it will return
37 data even if no absolute match is possible. B<NB.> See note below.
38
39 =item B<--start>|B<-s> I<start> (default end-1day)
40
41 start of the time series. A time in seconds since epoch (1970-01-01)
42 is required. Negative numbers are relative to the current time. By default,
43 one day worth of data will be fetched. See also AT-STYLE TIME SPECIFICATION
44 section for a detailed explanation on  ways to specify the start time.
45
46 =item B<--end>|B<-e> I<end> (default now)
47
48 the end of the time series in seconds since epoch. See also AT-STYLE
49 TIME SPECIFICATION section for a detailed explanation of how to
50 specify the end time.
51
52 =item B<--daemon> I<address>
53
54 Address of the L<rrdcached> daemon. If specified, a C<flush> command is sent
55 to the server before reading the RRD files. This allows B<rrdtool> to return
56 fresh data even if the daemon is configured to cache values for a long time.
57 For a list of accepted formats, see the B<-l> option in the L<rrdcached> manual.
58
59  rrdtool fetch --daemon unix:/var/run/rrdcached.sock /var/lib/rrd/foo.rrd AVERAGE
60
61 Please note that due to thread-safety reasons, the time specified with B<-s>
62 and B<-e> cannot use the complex forms described in
63 L<"AT-STYLE TIME SPECIFICATION">. The only accepted arguments are "simple
64 integers". Positive values are interpreted as seconds since epoch, negative
65 values (and zero) are interpreted as relative to I<now>. So "1272535035" refers
66 to "09:57:15 (UCT), April 29th 2010" and "-3600" means "one hour ago".
67
68 =back
69
70 =head2 RESOLUTION INTERVAL
71
72 In order to get RRDtool to fetch anything other than the finest resolution RRA
73 B<both> the start and end time must be specified on boundaries that are
74 multiples of the desired resolution. Consider the following example:
75
76  rrdtool create subdata.rrd -s 10 DS:ds0:GAUGE:300:0:U \
77   RRA:AVERAGE:0.5:30:3600 \
78   RRA:AVERAGE:0.5:90:1200 \
79   RRA:AVERAGE:0.5:360:1200 \
80   RRA:MAX:0.5:360:1200 \
81   RRA:AVERAGE:0.5:8640:600 \
82   RRA:MAX:0.5:8640:600
83
84 This RRD collects data every 10 seconds and stores its averages over 5
85 minutes, 15 minutes, 1 hour, and 1 day, as well as the maxima for 1 hour
86 and 1 day.
87
88 Consider now that you want to fetch the 15 minute average data for the
89 last hour.  You might try
90
91  rrdtool fetch subdata.rrd AVERAGE -r 900 -s -1h
92
93 However, this will almost always result in a time series that is
94 B<NOT> in the 15 minute RRA. Therefore, the highest resolution RRA,
95 i.e. 5 minute averages, will be chosen which in this case is not
96 what you want.
97
98 Hence, make sure that
99
100 =over 3
101
102 =item 1.
103
104 both start and end time are a multiple of 900
105
106 =item 2.
107
108 both start and end time are within the desired RRA
109
110 =back
111
112 So, if time now is called "t", do
113
114  end time == int(t/900)*900,
115  start time == end time - 1hour,
116  resolution == 900.
117
118 Using the bash shell, this could look be:
119
120  TIME=$(date +%s)
121  RRDRES=900
122  rrdtool fetch subdata.rrd AVERAGE -r $RRDRES \
123     -e $(($TIME/$RRDRES*$RRDRES)) -s e-1h
124
125 Or in Perl:
126
127  perl -e '$ctime = time; $rrdres = 900; \
128           system "rrdtool fetch subdata.rrd AVERAGE \
129                   -r $rrdres -e @{[int($ctime/$rrdres)*$rrdres]} -s e-1h"'
130
131
132 =head2 AT-STYLE TIME SPECIFICATION
133
134 Apart from the traditional I<Seconds since epoch>, RRDtool does also
135 understand at-style time specification. The specification is called
136 "at-style" after the Unix command at(1) that has moderately complex
137 ways to specify time to run your job at a certain date and time. The
138 at-style specification consists of two parts: the B<TIME REFERENCE>
139 specification and the B<TIME OFFSET> specification.
140
141 =head2 TIME REFERENCE SPECIFICATION
142
143 The time reference specification is used, well, to establish a reference
144 moment in time (to which the time offset is then applied to). When present,
145 it should come first, when omitted, it defaults to B<now>. On its own part,
146 time reference consists of a I<time-of-day> reference (which should come
147 first, if present) and a I<day> reference.
148
149 The I<time-of-day> can be specified as B<HH:MM>, B<HH.MM>,
150 or just B<HH>. You can suffix it with B<am> or B<pm> or use
151 24-hours clock. Some special times of day are understood as well,
152 including B<midnight> (00:00), B<noon> (12:00) and British
153 B<teatime> (16:00).
154
155 The I<day> can be specified as I<month-name> I<day-of-the-month> and
156 optional a 2- or 4-digit I<year> number (e.g. March 8 1999). Alternatively,
157 you can use I<day-of-week-name> (e.g. Monday), or one of the words:
158 B<yesterday>, B<today>, B<tomorrow>. You can also specify the I<day> as a
159 full date in several numerical formats, including B<MM/DD/[YY]YY>,
160 B<DD.MM.[YY]YY>, or B<YYYYMMDD>.
161
162 I<NOTE1>: this is different from the original at(1) behavior, where a
163 single-number date is interpreted as MMDD[YY]YY.
164
165 I<NOTE2>: if you specify the I<day> in this way, the I<time-of-day> is
166 REQUIRED as well.
167
168 Finally, you can use the words B<now>, B<start>, or B<end> as your time
169 reference. B<Now> refers to the current moment (and is also the default
170 time reference). B<Start> (B<end>) can be used to specify a time
171 relative to the start (end) time for those tools that use these
172 categories (B<rrdfetch>, L<rrdgraph>).
173
174 Month and day of the week names can be used in their naturally
175 abbreviated form (e.g., Dec for December, Sun for Sunday, etc.). The
176 words B<now>, B<start>, B<end> can be abbreviated as B<n>, B<s>, B<e>.
177
178 =head2 TIME OFFSET SPECIFICATION
179
180 The time offset specification is used to add/subtract certain time
181 intervals to/from the time reference moment. It consists of a I<sign>
182 (S<B<+> or B<->>) and an I<amount>. The following time units can be
183 used to specify the I<amount>: B<years>, B<months>, B<weeks>, B<days>,
184 B<hours>, B<minutes>, or B<seconds>. These units can be used in
185 singular or plural form, and abbreviated naturally or to a single
186 letter (e.g. +3days, -1wk, -3y). Several time units can be combined
187 (e.g., -5mon1w2d) or concatenated (e.g., -5h45min = -5h-45min =
188 -6h+15min = -7h+1h30m-15min, etc.)
189
190 I<NOTE3>: If you specify time offset in days, weeks, months, or years,
191 you will end with the time offset that may vary depending on your time
192 reference, because all those time units have no single well defined
193 time interval value (S<1 year> contains either 365 or 366 days, S<1 month>
194 is 28 to 31 days long, and even S<1 day> may be not equal to 24 hours
195 twice a year, when DST-related clock adjustments take place).
196 To cope with this, when you use days, weeks, months, or years
197 as your time offset units your time reference date is adjusted
198 accordingly without too much further effort to ensure anything
199 about it (in the hope that mktime(3) will take care of this later).
200 This may lead to some surprising (or even invalid!) results,
201 e.g. S<'May 31 -1month'> = S<'Apr 31'> (meaningless) = S<'May 1'>
202 (after mktime(3) normalization); in the EET timezone
203 '3:30am Mar 29 1999 -1 day' yields '3:30am Mar 28 1999' (Sunday)
204 which is an invalid time/date combination (because of 3am -> 4am DST
205 forward clock adjustment, see the below example).
206
207 In contrast, hours, minutes, and seconds are well defined time
208 intervals, and these are guaranteed to always produce time offsets
209 exactly as specified (e.g. for EET timezone, S<'8:00 Mar 27 1999 +2
210 days'> = S<'8:00 Mar 29 1999'>, but since there is 1-hour DST forward
211 clock adjustment that occurs around S<3:00 Mar 28 1999>, the actual
212 time interval between S<8:00 Mar 27 1999> and S<8:00 Mar 29 1999>
213 equals 47 hours; on the other hand, S<'8:00 Mar 27 1999 +48 hours'> =
214 S<'9:00 Mar 29 1999'>, as expected)
215
216 I<NOTE4>: The single-letter abbreviation for both B<months> and B<minutes>
217 is B<m>. To disambiguate them, the parser tries to read your S<mind :)>
218 by applying the following two heuristics:
219
220 =over 3
221
222 =item 1
223
224 If B<m> is used in context of (i.e. right after the) years,
225 months, weeks, or days it is assumed to mean B<months>, while
226 in the context of hours, minutes, and seconds it means minutes.
227 (e.g., in -1y6m or +3w1m B<m> is interpreted as B<months>, while in
228 -3h20m or +5s2m B<m> the parser decides for B<minutes>).
229
230 =item 2
231
232 Out of context (i.e. right after the B<+> or B<-> sign) the
233 meaning of B<m> is guessed from the number it directly follows.
234 Currently, if the number's absolute value is below 25 it is assumed
235 that B<m> means B<months>, otherwise it is treated as B<minutes>.
236 (e.g., -25m == -25 minutes, while +24m == +24 months)
237
238 =back
239
240 I<Final NOTES>: Time specification is case-insensitive.
241 Whitespace can be inserted freely or omitted altogether.
242 There are, however, cases when whitespace is required
243 (e.g., S<'midnight Thu'>). In this case you should either quote the
244 whole phrase to prevent it from being taken apart by your shell or use
245 '_' (underscore) or ',' (comma) which also count as whitespace
246 (e.g., midnight_Thu or midnight,Thu).
247
248
249 =head2 TIME SPECIFICATION EXAMPLES
250
251 I<Oct 12> -- October 12 this year
252
253 I<-1month> or I<-1m> -- current time of day, only a month before
254 (may yield surprises, see NOTE3 above).
255
256 I<noon yesterday -3hours> -- yesterday morning; can also be specified
257 as I<9am-1day>.
258
259 I<23:59 31.12.1999> -- 1 minute to the year 2000.
260
261 I<12/31/99 11:59pm> -- 1 minute to the year 2000 for imperialists.
262
263 I<12am 01/01/01> -- start of the new millennium
264
265 I<end-3weeks> or I<e-3w> -- 3 weeks before end time
266 (may be used as start time specification).
267
268 I<start+6hours> or I<s+6h> -- 6 hours after start time
269 (may be used as end time specification).
270
271 I<931225537> -- 18:45  July 5th, 1999
272 (yes, seconds since 1970 are valid as well).
273
274 I<19970703 12:45> -- 12:45  July 3th, 1997
275 (my favorite, and its even got an ISO number (8601)).
276
277 =head1 ENVIRONMENT VARIABLES
278
279 The following environment variables may be used to change the behavior of
280 C<rrdtoolE<nbsp>fetch>:
281
282 =over 4
283
284 =item B<RRDCACHED_ADDRESS>
285
286 If this environment variable is set it will have the same effect as specifying
287 the C<--daemon> option on the command line. If both are present, the command
288 line argument takes precedence.
289
290 =back
291
292 =head1 AUTHOR
293
294 Tobias Oetiker E<lt>tobi@oetiker.chE<gt>
295