testing: Don't run do-tests when hosts are not running
[strongswan.git] / testing / do-tests
1 #!/bin/bash
2 # Automatically execute the strongSwan test cases
3 #
4 # Copyright (C) 2004  Eric Marchionni, Patrik Rayo
5 # Zuercher Hochschule Winterthur
6 #
7 # This program is free software; you can redistribute it and/or modify it
8 # under the terms of the GNU General Public License as published by the
9 # Free Software Foundation; either version 2 of the License, or (at your
10 # option) any later version.  See <http://www.fsf.org/copyleft/gpl.txt>.
11 #
12 # This program is distributed in the hope that it will be useful, but
13 # WITHOUT ANY WARRANTY; without even the implied warranty of MERCHANTABILITY
14 # or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
15 # for more details.
16
17 DIR=$(dirname `readlink -f $0`)
18 . $DIR/testing.conf
19 . $DIR/scripts/function.sh
20 SSHCONF="-F $DIR/ssh_config"
21
22 [ -d $DIR/hosts ] || die "Directory 'hosts' not found"
23 [ -d $DIR/tests ] || die "Directory 'tests' not found"
24 [ -d $BUILDDIR ] ||
25         die "Directory '$BUILDDIR' does not exist, please run make-testing first"
26 running_any $STRONGSWANHOSTS || die "Please start test environment before running $0"
27
28 ln -sfT $DIR $TESTDIR/testing
29
30 ##############################################################################
31 # take care of new path and file variables
32 #
33
34 [ -d $TESTRESULTSDIR ] || mkdir $TESTRESULTSDIR
35
36 TESTDATE=`date +%Y%m%d-%H%M-%S`
37
38 TODAYDIR=$TESTRESULTSDIR/$TESTDATE
39 mkdir $TODAYDIR
40 TESTRESULTSHTML=$TODAYDIR/all.html
41 INDEX=$TODAYDIR/index.html
42 DEFAULTTESTSDIR=$TESTDIR/testing/tests
43
44 SOURCEIP_ROUTING_TABLE=220
45
46 testnumber="0"
47 failed_cnt="0"
48 passed_cnt="0"
49
50
51 ##############################################################################
52 # copy default tests to $BUILDDIR
53 #
54
55 TESTSDIR=$BUILDDIR/tests
56 [ -d $TESTSDIR ] || mkdir $TESTSDIR
57
58 ##############################################################################
59 # assign IP for each host to hostname
60 #
61
62 for host in $STRONGSWANHOSTS
63 do
64     eval ipv4_${host}="`echo $HOSTNAMEIPV4 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $1 }' | awk '{ print $1 }'`"
65     eval ipv6_${host}="`echo $HOSTNAMEIPV6 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $1 }' | awk '{ print $1 }'`"
66
67     case $host in
68     moon)
69         eval ipv4_moon1="`echo $HOSTNAMEIPV4 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
70         eval ipv6_moon1="`echo $HOSTNAMEIPV6 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
71         ;;
72     sun)
73         eval ipv4_sun1="`echo $HOSTNAMEIPV4 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
74         eval ipv6_sun1="`echo $HOSTNAMEIPV6 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
75         ;;
76     alice)
77         eval ipv4_alice1="`echo $HOSTNAMEIPV4 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
78         eval ipv6_alice1="`echo $HOSTNAMEIPV6 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
79         ;;
80     venus)
81         ;;
82     bob)
83         ;;
84     carol)
85         eval ipv4_carol1="`echo $HOSTNAMEIPV4 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
86         eval ipv6_carol1="`echo $HOSTNAMEIPV6 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
87          ;;
88     dave)
89         eval ipv4_dave1="`echo $HOSTNAMEIPV4 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
90         eval ipv6_dave1="`echo $HOSTNAMEIPV6 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
91         ;;
92     winnetou)
93         ;;
94     esac
95 done
96
97
98 ##############################################################################
99 # open ssh sessions
100 #
101 for host in $STRONGSWANHOSTS
102 do
103     ssh $SSHCONF -N root@`eval echo \\\$ipv4_$host` >/dev/null 2>&1 &
104     eval ssh_pid_$host="`echo $!`"
105     do_on_exit kill `eval echo \\\$ssh_pid_$host`
106 done
107
108
109 ##############################################################################
110 # create header for the results html file
111 #
112
113 ENVIRONMENT_HEADER=$(cat <<@EOF
114   <table border="0" cellspacing="2" cellpadding="2">
115     <tr valign="top">
116       <td><b>Host</b></td>
117       <td colspan="3">`uname -a`</td>
118     </tr>
119     <tr valign="top">
120       <td><b>Guest kernel</b></td>
121       <td colspan="3">$KERNELVERSION</td>
122     </tr>
123     <tr valign="top">
124       <td><b>strongSwan</b></td>
125       <td colspan="3">$SWANVERSION</td>
126     </tr>
127     <tr valign="top">
128       <td><b>Date</b></td>
129       <td colspan="3">$TESTDATE</td>
130     </tr>
131     <tr>
132       <td width="100">&nbsp;</td>
133       <td width="300">&nbsp;</td>
134       <td width=" 50">&nbsp;</td>
135       <td >&nbsp;</td>
136     </tr>
137 @EOF
138 )
139
140 cat > $INDEX <<@EOF
141 <html>
142 <head>
143   <title>strongSwan KVM Tests</title>
144 </head>
145 <body>
146   <h2>strongSwan KVM Tests</h2>
147   $ENVIRONMENT_HEADER
148 @EOF
149
150 cat > $TESTRESULTSHTML <<@EOF
151 <html>
152 <head>
153   <title>strongSwan KVM Tests - All Tests</title>
154 </head>
155 <body>
156   <div><a href="index.html">strongSwan KVM Tests</a> / All Tests</div>
157   <h2>All Tests</h2>
158   $ENVIRONMENT_HEADER
159     <tr align="left">
160       <th>Number</th>
161       <th>Test</th>
162       <th colspan="2">Result</th>
163     </tr>
164 @EOF
165
166 echo "Guest kernel : $KERNELVERSION"
167 echo "strongSwan   : $SWANVERSION"
168 echo "Date         : $TESTDATE"
169 echo
170
171
172 ##############################################################################
173 # enter specific test directory
174 #
175
176 if [ $# -gt 0 ]
177 then
178     TESTS=$*
179 else
180     # set internal field seperator
181     TESTS="`ls $DEFAULTTESTSDIR`"
182 fi
183
184 for SUBDIR in $TESTS
185 do
186     SUBTESTS="`basename $SUBDIR`"
187
188     if [ $SUBTESTS = $SUBDIR ]
189     then
190         SUBTESTS="`ls $DEFAULTTESTSDIR/$SUBDIR`"
191     else
192         SUBDIR="`dirname $SUBDIR`"
193     fi
194
195     if [ ! -d $TODAYDIR/$SUBDIR ]
196     then
197         mkdir $TODAYDIR/$SUBDIR
198         if [ $testnumber == 0 ]
199         then
200             FIRST="<b>Category</b>"
201         else
202             FIRST="&nbsp;"
203         fi
204         echo "    <tr>" >> $INDEX
205     echo "      <td>$FIRST</td>">> $INDEX
206     echo "      <td><a href=\"$SUBDIR/index.html\">$SUBDIR</a></td>" >> $INDEX
207     echo "      <td align=\"right\">x</td>" >> $INDEX
208     echo "      <td>&nbsp;</td>" >> $INDEX
209     echo "    </tr>" >> $INDEX
210         SUBTESTSINDEX=$TODAYDIR/$SUBDIR/index.html
211         cat > $SUBTESTSINDEX <<@EOF
212 <html>
213 <head>
214   <title>strongSwan $SUBDIR Tests</title>
215 </head>
216 <body>
217   <div><a href="../index.html">strongSwan KVM Tests</a> / $SUBDIR</div>
218   <h2>strongSwan $SUBDIR Tests</h2>
219   <table border="0" cellspacing="2" cellpadding="2">
220     <tr valign="top">
221       <td><b>Guest kernel</b></td>
222       <td colspan="3">$KERNELVERSION</td>
223     </tr>
224     <tr valign="top">
225       <td><b>strongSwan</b></td>
226       <td colspan="3">$SWANVERSION</td>
227     </tr>
228     <tr valign="top">
229       <td><b>Date</b></td>
230       <td colspan="3">$TESTDATE</td>
231     </tr>
232     <tr>
233       <td width="100">&nbsp;</td>
234       <td width="300">&nbsp;</td>
235       <td width=" 50">&nbsp;</td>
236       <td >&nbsp;</td>
237     </tr>
238     <tr align="left">
239        <th>Number</th>
240        <th>Test</th>
241        <th colspan="2">Result</th>
242     </tr>
243 @EOF
244     fi
245
246     for name in $SUBTESTS
247     do
248         let "testnumber += 1"
249         testname=$SUBDIR/$name
250         log_action " $testnumber $testname:"
251
252         if [ ! -d $DEFAULTTESTSDIR/${testname} ]
253         then
254             echo "is missing..skipped"
255             continue
256         fi
257
258         [ -f $DEFAULTTESTSDIR/${testname}/description.txt ] || die "!! File 'description.txt' is missing"
259         [ -f $DEFAULTTESTSDIR/${testname}/test.conf ]       || die "!! File 'test.conf' is missing"
260         [ -f $DEFAULTTESTSDIR/${testname}/pretest.dat ]     || die "!! File 'pretest.dat' is missing"
261         [ -f $DEFAULTTESTSDIR/${testname}/posttest.dat ]    || die "!! File 'posttest.dat' is missing"
262         [ -f $DEFAULTTESTSDIR/${testname}/evaltest.dat ]    || die "!! File 'evaltest.dat' is missing"
263
264         TESTRESULTDIR=$TODAYDIR/$testname
265         mkdir -p $TESTRESULTDIR
266         CONSOLE_LOG=$TESTRESULTDIR/console.log
267         touch $CONSOLE_LOG
268
269         TESTDIR=$TESTSDIR/${testname}
270         rm -rf $TESTDIR
271         mkdir -p $TESTDIR
272         cp -rfp $DEFAULTTESTSDIR/${testname}/* $TESTDIR
273
274
275         ##############################################################################
276         # replace IP wildcards with actual IPv4 and IPv6 addresses
277         #
278
279         for host in $STRONGSWANHOSTS
280         do
281             case $host in
282             moon)
283                 searchandreplace PH_IP_MOON1     $ipv4_moon1 $TESTDIR
284                 searchandreplace PH_IP_MOON      $ipv4_moon  $TESTDIR
285                 searchandreplace PH_IP6_MOON1    $ipv6_moon1 $TESTDIR
286                 searchandreplace PH_IP6_MOON     $ipv6_moon  $TESTDIR
287                 ;;
288             sun)
289                 searchandreplace PH_IP_SUN1      $ipv4_sun1 $TESTDIR
290                 searchandreplace PH_IP_SUN       $ipv4_sun  $TESTDIR
291                 searchandreplace PH_IP6_SUN1     $ipv6_sun1 $TESTDIR
292                 searchandreplace PH_IP6_SUN      $ipv6_sun  $TESTDIR
293                 ;;
294             alice)
295                 searchandreplace PH_IP_ALICE1    $ipv4_alice1 $TESTDIR
296                 searchandreplace PH_IP_ALICE     $ipv4_alice  $TESTDIR
297                 searchandreplace PH_IP6_ALICE1   $ipv6_alice1 $TESTDIR
298                 searchandreplace PH_IP6_ALICE    $ipv6_alice  $TESTDIR
299                 ;;
300             venus)
301                 searchandreplace PH_IP_VENUS     $ipv4_venus $TESTDIR
302                 searchandreplace PH_IP6_VENUS    $ipv6_venus $TESTDIR
303                 ;;
304             bob)
305                 searchandreplace PH_IP_BOB       $ipv4_bob $TESTDIR
306                 searchandreplace PH_IPV6_BOB     $ipv6_bob $TESTDIR
307                 ;;
308             carol)
309                 searchandreplace PH_IP_CAROL1    $ipv4_carol1 $TESTDIR
310                 searchandreplace PH_IP_CAROL     $ipv4_carol  $TESTDIR
311                 searchandreplace PH_IP6_CAROL1   $ipv6_carol1 $TESTDIR
312                 searchandreplace PH_IP6_CAROL    $ipv6_carol  $TESTDIR
313                 ;;
314             dave)
315                 searchandreplace PH_IP_DAVE1     $ipv4_dave1 $TESTDIR
316                 searchandreplace PH_IP_DAVE      $ipv4_dave  $TESTDIR
317                 searchandreplace PH_IP6_DAVE1    $ipv6_dave1 $TESTDIR
318                 searchandreplace PH_IP6_DAVE     $ipv6_dave  $TESTDIR
319                 ;;
320             winnetou)
321                 searchandreplace PH_IP_WINNETOU  $ipv4_winnetou $TESTDIR
322                 searchandreplace PH_IP6_WINNETOU $ipv6_winnetou $TESTDIR
323                 ;;
324             esac
325         done
326
327
328         ##########################################################################
329         # copy test specific configurations to uml hosts and clear auth.log files
330         #
331
332         $DIR/scripts/load-testconfig $testname
333         unset RADIUSHOSTS
334         unset IPV6
335         unset SWANCTL
336         source $TESTDIR/test.conf
337
338
339         ##########################################################################
340         # run tcpdump in the background
341         #
342
343         if [ "$TCPDUMPHOSTS" != "" ]
344         then
345             echo -e "TCPDUMP\n" >> $CONSOLE_LOG 2>&1
346
347             for host_iface in $TCPDUMPHOSTS
348             do
349                 host=`echo $host_iface | awk -F ":" '{print $1}'`
350                 iface=`echo $host_iface | awk -F ":" '{if ($2 != "") { print $2 } else { printf("eth0") }}'`
351                 tcpdump_cmd="tcpdump -i $iface not port ssh and not port domain > /tmp/tcpdump.log 2>&1 &"
352                 echo "${host}# $tcpdump_cmd" >> $CONSOLE_LOG
353                 ssh $SSHCONF root@`eval echo \\\$ipv4_$host '$tcpdump_cmd'`
354                 eval TDUP_${host}="true"
355             done
356         fi
357
358         ##########################################################################
359         # flush conntrack table on all hosts
360         #
361
362         for host in $STRONGSWANHOSTS
363         do
364                 ssh $SSHCONF root@`eval echo \\\$ipv4_$host` 'conntrack -F' >/dev/null 2>&1
365         done
366
367
368         ##########################################################################
369         # execute pre-test commands
370         #
371
372         echo -n "pre.."
373         echo -e "\nPRE-TEST\n" >> $CONSOLE_LOG 2>&1
374
375         eval `awk -F "::" '{
376             if ($2 != "")
377             {
378                 printf("echo \"%s# %s\"; ", $1, $2)
379                 printf("ssh \044SSHCONF root@\044ipv4_%s \"%s\"; ", $1, $2)
380                 printf("echo;\n")
381             }
382         }' $TESTDIR/pretest.dat` >> $CONSOLE_LOG 2>&1
383
384
385         ##########################################################################
386         # stop tcpdump
387         #
388
389         function stop_tcpdump {
390             echo "${1}# killall tcpdump" >> $CONSOLE_LOG
391             eval ssh $SSHCONF root@\$ipv4_${1} killall tcpdump
392             eval TDUP_${1}="false"
393             echo ""
394         }
395
396
397         ##########################################################################
398         # get and evaluate test results
399         #
400
401         echo -n "test.."
402         echo -e "\nTEST\n" >> $CONSOLE_LOG 2>&1
403
404         STATUS="passed"
405
406         eval `awk -F "::" '{
407             host=$1
408             command=$2
409             pattern=$3
410             hit=$4
411             if (command != "")
412             {
413                 if (command == "tcpdump")
414                 {
415                     printf("if [ \044TDUP_%s == \"true\" ]; then stop_tcpdump %s; fi; \n", host, host)
416                     printf("echo \"%s# cat /tmp/tcpdump.log | grep \047%s\047  [%s]\"; ", host, pattern, hit)
417                     printf("ssh \044SSHCONF root@\044ipv4_%s cat /tmp/tcpdump.log | grep \"%s\"; ", host, pattern)
418                 }
419                 else
420                 {
421                     printf("echo \"%s# %s | grep \047%s\047  [%s]\"; ", host, command, pattern, hit)
422                     printf("ssh \044SSHCONF root@\044ipv4_%s %s | grep \"%s\"; ",  host, command, pattern)
423                 }
424                 printf("cmd_exit=\044?; ")
425                 printf("echo; ")
426                 printf("if [ \044cmd_exit -eq 0 -a \"%s\" = \"NO\"  ] ", hit)
427                 printf("|| [ \044cmd_exit -ne 0 -a \"%s\" = \"YES\" ] ", hit)
428                 printf("; then STATUS=\"failed\"; fi; \n")
429             }
430         }' $TESTDIR/evaltest.dat` >> $CONSOLE_LOG 2>&1
431
432
433         ##########################################################################
434         # set counters
435         #
436
437         if [ $STATUS = "failed" ]
438         then
439             let "failed_cnt += 1"
440         else
441             let "passed_cnt += 1"
442         fi
443
444
445         ##########################################################################
446         # log statusall and listall output
447         # get copies of ipsec.conf, ipsec.secrets
448         # create index.html for the given test case
449
450         cat > $TESTRESULTDIR/index.html <<@EOF
451 <html>
452 <head>
453   <title>Test $testname</title>
454 </head>
455 <body>
456 <table border="0" cellpadding="0" cellspacing="0" width="600">
457   <tr><td>
458     <div><a href="../../index.html">strongSwan KVM Tests</a> / <a href="../index.html">$SUBDIR</a> / $name</div>
459     <h2>Test $testname</h2>
460     <h3>Description</h3>
461 @EOF
462
463         cat $TESTDIR/description.txt >> $TESTRESULTDIR/index.html
464
465         cat >> $TESTRESULTDIR/index.html <<@EOF
466     <ul>
467       <li><a href="console.log">console.log</a></li>
468     </ul>
469     <img src="../../images/$DIAGRAM" alt="$VIRTHOSTS">
470 @EOF
471
472         if [ -n "$IPV6" ]
473         then
474             IPROUTE_CMD="ip -6 route list table $SOURCEIP_ROUTING_TABLE"
475             IPROUTE_DSP=$IPROUTE_CMD
476             IPTABLES_CMD="ip6tables -v -n -L"
477             IPTABLES_DSP="ip6tables -L"
478         else
479             IPROUTE_CMD="ip route list table $SOURCEIP_ROUTING_TABLE"
480             IPROUTE_DSP=$IPROUTE_CMD
481             IPTABLES_CMD="iptables -v -n -L"
482             IPTABLES_DSP="iptables -L"
483         fi
484
485         if [ $name = "net2net-ip4-in-ip6-ikev2" -o $name = "net2net-ip6-in-ip4-ikev2" ]
486         then
487             IPROUTE_CMD="ip route list table $SOURCEIP_ROUTING_TABLE; echo; ip -6 route list table $SOURCEIP_ROUTING_TABLE"
488             IPROUTE_DSP="ip (-6) route list table $SOURCEIP_ROUTING_TABLE"
489             IPTABLES_CMD="iptables -v -n -L ; echo ; ip6tables -v -n -L"
490             IPTABLES_DSP="iptables -L ; ip6tables -L"
491         fi
492
493         for host in $IPSECHOSTS
494         do
495             eval HOSTLOGIN=root@\$ipv4_${host}
496
497                 scp $SSHCONF $HOSTLOGIN:/etc/strongswan.conf \
498                     $TESTRESULTDIR/${host}.strongswan.conf  > /dev/null 2>&1
499
500                 if [  -n "$SWANCTL" ]
501                 then
502                         scp $SSHCONF $HOSTLOGIN:/etc/swanctl/swanctl.conf \
503                         $TESTRESULTDIR/${host}.swanctl.conf  > /dev/null 2>&1
504
505                     ssh $SSHCONF $HOSTLOGIN swanctl --list-conns \
506                             > $TESTRESULTDIR/${host}.swanctl.conns 2>/dev/null
507
508                     ssh $SSHCONF $HOSTLOGIN swanctl --list-certs \
509                             > $TESTRESULTDIR/${host}.swanctl.certs 2>/dev/null
510
511                     ssh $SSHCONF $HOSTLOGIN swanctl --list-pools \
512                             > $TESTRESULTDIR/${host}.swanctl.pools 2>/dev/null
513
514                     ssh $SSHCONF $HOSTLOGIN swanctl --list-authorities \
515                             > $TESTRESULTDIR/${host}.swanctl.authorities 2>/dev/null
516
517                     ssh $SSHCONF $HOSTLOGIN swanctl --list-sas \
518                             > $TESTRESULTDIR/${host}.swanctl.sas 2>/dev/null
519
520                     ssh $SSHCONF $HOSTLOGIN swanctl --list-pols \
521                             > $TESTRESULTDIR/${host}.swanctl.pols 2>/dev/null
522
523                     ssh $SSHCONF $HOSTLOGIN swanctl --stats \
524                             > $TESTRESULTDIR/${host}.swanctl.stats 2>/dev/null
525                 else
526                     for file in ipsec.conf ipsec.secrets
527                     do
528                                 scp $SSHCONF $HOSTLOGIN:/etc/$file \
529                             $TESTRESULTDIR/${host}.$file  > /dev/null 2>&1
530                     done
531
532                     for command in statusall listall
533                     do
534                                 ssh $SSHCONF $HOSTLOGIN ipsec $command \
535                             > $TESTRESULTDIR/${host}.$command 2>/dev/null
536                     done
537
538                     scp $SSHCONF $HOSTLOGIN:/etc/ipsec.d/ipsec.sql \
539                         $TESTRESULTDIR/${host}.ipsec.sql  > /dev/null 2>&1
540                 fi
541
542             ssh $SSHCONF $HOSTLOGIN ip -s xfrm policy \
543                     > $TESTRESULTDIR/${host}.ip.policy 2>/dev/null
544             ssh $SSHCONF $HOSTLOGIN ip -s xfrm state \
545                     > $TESTRESULTDIR/${host}.ip.state 2>/dev/null
546             ssh $SSHCONF $HOSTLOGIN $IPROUTE_CMD \
547                     > $TESTRESULTDIR/${host}.ip.route 2>/dev/null
548             ssh $SSHCONF $HOSTLOGIN $IPTABLES_CMD \
549                     > $TESTRESULTDIR/${host}.iptables 2>/dev/null
550             chmod a+r $TESTRESULTDIR/*
551
552                 if [ -n "$SWANCTL" ]
553                 then
554                     cat >> $TESTRESULTDIR/index.html <<@EOF
555     <h3>$host</h3>
556       <table border="0" cellspacing="0" width="600">
557       <tr>
558         <td valign="top">
559           <ul>
560             <li><a href="$host.swanctl.conf">swanctl.conf</a></li>
561             <li><a href="$host.swanctl.conns">swanctl --list-conns</a></li>
562             <li><a href="$host.swanctl.certs">swanctl --list-certs</a></li>
563             <li><a href="$host.swanctl.pools">swanctl --list-pools</a></li>
564             <li><a href="$host.strongswan.conf">strongswan.conf</a></li>
565           </ul>
566         </td>
567         <td valign="top">
568           <ul>
569             <li><a href="$host.swanctl.sas">swanctl --list-sas</a></li>
570             <li><a href="$host.swanctl.pols">swanctl --list-pols</a></li>
571             <li><a href="$host.swanctl.authorities">swanctl --list-authorities</a></li>
572             <li><a href="$host.swanctl.stats">swanctl --stats</a></li>
573             <li><a href="$host.daemon.log">daemon.log</a></li>
574           </ul>
575       </td>
576         <td valign="top">
577           <ul>
578             <li><a href="$host.ip.policy">ip -s xfrm policy</a></li>
579             <li><a href="$host.ip.state">ip -s xfrm state</a></li>
580             <li><a href="$host.ip.route">$IPROUTE_DSP</a></li>
581             <li><a href="$host.iptables">$IPTABLES_DSP</a></li>
582             <li><a href="$host.auth.log">auth.log</a></li>
583           </ul>
584           &nbsp;
585       </td>
586     </tr>
587     </table>
588 @EOF
589
590                 else
591                     cat >> $TESTRESULTDIR/index.html <<@EOF
592     <h3>$host</h3>
593       <table border="0" cellspacing="0" width="600">
594       <tr>
595         <td valign="top">
596           <ul>
597             <li><a href="$host.ipsec.conf">ipsec.conf</a></li>
598             <li><a href="$host.ipsec.secrets">ipsec.secrets</a></li>
599             <li><a href="$host.ipsec.sql">ipsec.sql</a></li>
600             <li><a href="$host.strongswan.conf">strongswan.conf</a></li>
601           </ul>
602         </td>
603         <td valign="top">
604           <ul>
605             <li><a href="$host.statusall">ipsec statusall</a></li>
606             <li><a href="$host.listall">ipsec listall</a></li>
607             <li><a href="$host.auth.log">auth.log</a></li>
608             <li><a href="$host.daemon.log">daemon.log</a></li>
609           </ul>
610       </td>
611         <td valign="top">
612           <ul>
613             <li><a href="$host.ip.policy">ip -s xfrm policy</a></li>
614             <li><a href="$host.ip.state">ip -s xfrm state</a></li>
615             <li><a href="$host.ip.route">$IPROUTE_DSP</a></li>
616             <li><a href="$host.iptables">$IPTABLES_DSP</a></li>
617           </ul>
618       </td>
619     </tr>
620     </table>
621 @EOF
622                 fi
623         done
624
625         for host in $RADIUSHOSTS
626         do
627             eval HOSTLOGIN=root@\$ipv4_${host}
628
629             for file in clients.conf eap.conf radiusd.conf proxy.conf users
630             do
631                 scp $SSHCONF $HOSTLOGIN:/etc/freeradius/$file \
632                     $TESTRESULTDIR/${host}.$file  > /dev/null 2>&1
633             done
634
635                 scp $SSHCONF $HOSTLOGIN:/etc/strongswan.conf \
636                     $TESTRESULTDIR/${host}.strongswan.conf  > /dev/null 2>&1
637
638             scp $SSHCONF $HOSTLOGIN:/var/log/freeradius/radius.log \
639                 $TESTRESULTDIR/${host}.radius.log  > /dev/null 2>&1
640
641             ssh $SSHCONF $HOSTLOGIN grep imcv /var/log/daemon.log \
642                 >> $TESTRESULTDIR/${host}.daemon.log 2>/dev/null
643
644             chmod a+r $TESTRESULTDIR/*
645             cat >> $TESTRESULTDIR/index.html <<@EOF
646     <h3>$host</h3>
647       <table border="0" cellspacing="0" width="600">
648       <tr>
649         <td valign="top">
650           <ul>
651             <li><a href="$host.clients.conf">clients.conf</a></li>
652             <li><a href="$host.radiusd.conf">radiusd.conf</a></li>
653             <li><a href="$host.strongswan.conf">strongswan.conf</a></li>
654           </ul>
655         </td>
656         <td valign="top">
657           <ul>
658             <li><a href="$host.eap.conf">eap.conf</a></li>
659             <li><a href="$host.radius.log">radius.log</a></li>
660             <li><a href="$host.daemon.log">daemon.log</a></li>
661           </ul>
662       </td>
663         <td valign="top">
664           <ul>
665             <li><a href="$host.proxy.conf">proxy.conf</a></li>
666             <li><a href="$host.users">users</a></li>
667           </ul>
668       </td>
669     </tr>
670     </table>
671 @EOF
672
673         done
674
675         cat >> $TESTRESULTDIR/index.html <<@EOF
676         <h3>tcpdump</h3>
677         <ul>
678 @EOF
679
680         for host in $TCPDUMPHOSTS
681         do
682             eval HOSTLOGIN=root@\$ipv4_${host}
683
684                 scp $SSHCONF $HOSTLOGIN:/tmp/tcpdump.log \
685                         $TESTRESULTDIR/${host}.tcpdump.log > /dev/null 2>&1
686
687             cat >> $TESTRESULTDIR/index.html <<@EOF
688             <li><a href="$host.tcpdump.log">$host tcpdump.log</a></li>
689 @EOF
690
691         done
692
693         cat >> $TESTRESULTDIR/index.html <<@EOF
694         </ul>
695 @EOF
696
697         cat >> $TESTRESULTDIR/index.html <<@EOF
698   </td></tr>
699 </table>
700 </body>
701 </html>
702 @EOF
703
704
705         ##########################################################################
706         # execute post-test commands
707         #
708
709         echo -n "post"
710         echo -e "\nPOST-TEST\n" >> $CONSOLE_LOG 2>&1
711
712         eval `awk -F "::" '{
713             if ($2 != "")
714             {
715                 printf("echo \"%s# %s\"; ", $1, $2)
716                 printf("ssh \044SSHCONF root@\044ipv4_%s \"%s\"; ", $1, $2)
717                 printf("echo;\n")
718             }
719         }' $TESTDIR/posttest.dat` >> $CONSOLE_LOG 2>&1
720
721
722         ##########################################################################
723         # get a copy of /var/log/auth.log
724         #
725
726         for host in $IPSECHOSTS
727         do
728             eval HOSTLOGIN=root@\$ipv4_${host}
729             ssh $SSHCONF $HOSTLOGIN "grep -E 'charon|last message repeated|imcv|pt-tls-client' \
730                 /var/log/auth.log" >> $TESTRESULTDIR/${host}.auth.log
731         done
732
733
734         ##########################################################################
735         # get a copy of /var/log/daemon.log
736         #
737
738         for host in $IPSECHOSTS
739         do
740             eval HOSTLOGIN=root@\$ipv4_${host}
741             ssh $SSHCONF $HOSTLOGIN "grep -E 'charon|last message repeated|imcv' \
742                 /var/log/daemon.log" >> $TESTRESULTDIR/${host}.daemon.log
743         done
744
745
746         ##########################################################################
747         # stop tcpdump if necessary
748         #
749
750         for host in $TCPDUMPHOSTS
751         do
752             if [ "`eval echo \\\$TDUP_${host}`" = "true" ]
753             then
754                 echo "${host}# killall tcpdump" >> $CONSOLE_LOG
755                 eval ssh $SSHCONF root@\$ipv4_$host killall tcpdump
756                 eval TDUP_${host}="false"
757             fi
758         done
759
760
761         ##########################################################################
762         # copy default host config back if necessary
763         #
764
765         $DIR/scripts/restore-defaults $testname
766
767
768         ##########################################################################
769         # write test status to html file
770         #
771
772         if [ $STATUS = "passed" ]
773         then
774                 COLOR="green"
775                 log_status 0
776         else
777                 COLOR="red"
778                 log_status 1
779         fi
780
781         cat >> $TESTRESULTSHTML << @EOF
782   <tr>
783     <td>$testnumber</td>
784     <td><a href="$testname/index.html">$testname</a></td>
785     <td><a href="$testname/console.log"><font color="$COLOR">$STATUS</font></a></td>
786     <td>&nbsp;</td>
787   </tr>
788 @EOF
789         cat >> $SUBTESTSINDEX << @EOF
790   <tr>
791     <td>$testnumber</td>
792     <td><a href="$name/index.html">$name</a></td>
793     <td><a href="$name/console.log"><font color="$COLOR">$STATUS</font></a></td>
794     <td>&nbsp;</td>
795   </tr>
796 @EOF
797
798
799         ##########################################################################
800         # remove any charon.pid files that still may exist
801         #
802
803         for host in $IPSECHOSTS
804         do
805             eval HOSTLOGIN=root@\$ipv4_${host}
806             ssh $SSHCONF $HOSTLOGIN 'if [ -f /var/run/charon.pid ]; then rm /var/run/charon.pid; echo "    removed charon.pid on `hostname`"; fi'
807         done
808
809     done
810
811 done
812
813
814 ##############################################################################
815 # finish the results html file
816 #
817
818 cat >> $TESTRESULTSHTML << @EOF
819     <tr>
820       <td>&nbsp;</td><td>&nbsp;</td><td>&nbsp;</td><td>&nbsp;</td>
821     </tr>
822     <tr>
823       <td><b>Passed</b></td><td><b><font color="green">$passed_cnt</font></b></td><td>&nbsp;</td><td>&nbsp;</td>
824     </tr>
825     <tr>
826       <td><b>Failed</b></td><td><b><font color="red">$failed_cnt</font></b></td><td>&nbsp;</td><td>&nbsp;</td>
827     </tr>
828   </table>
829 </body>
830 </html>
831 @EOF
832
833 let "all_cnt = $passed_cnt + $failed_cnt"
834
835 cat >> $INDEX << @EOF
836     <tr>
837       <td>&nbsp;</td>
838       <td><a href="all.html"><b>all</b></a></td>
839       <td align="right"><b>$all_cnt</b></td>
840       <td>&nbsp;</td>
841     </tr>
842     <tr>
843       <td><b>Failed</b></td>
844       <td>&nbsp;</td>
845       <td align="right"><b><font color="red">$failed_cnt</font></b></td>
846       <td>&nbsp;</td>
847     </tr>
848   </table>
849 </body>
850 </html>
851 @EOF
852
853 echo
854 echo_ok     "Passed : $passed_cnt"
855 echo_failed "Failed : $failed_cnt"
856 echo
857
858
859 ##############################################################################
860 # copy the test results to the apache server
861 #
862
863 HTDOCS="/var/www"
864
865 ssh $SSHCONF root@${ipv4_winnetou} mkdir -p $HTDOCS/testresults > /dev/null 2>&1
866 scp $SSHCONF -r $TODAYDIR root@${ipv4_winnetou}:$HTDOCS/testresults > /dev/null 2>&1
867 ssh $SSHCONF root@${ipv4_winnetou} ln -s $HTDOCS/images $HTDOCS/testresults/$TESTDATE/images > /dev/null 2>&1
868 echo
869 echo "The results are available in $TODAYDIR"
870 echo "or via the link http://$ipv4_winnetou/testresults/$TESTDATE"
871
872 ENDDATE=`date +%Y%m%d-%H%M`
873 echo
874 echo "Finished : $ENDDATE"