Append seconds to TESTDATE
[strongswan.git] / testing / do-tests
1 #!/bin/bash
2 # Automatically execute the strongSwan test cases
3 #
4 # Copyright (C) 2004  Eric Marchionni, Patrik Rayo
5 # Zuercher Hochschule Winterthur
6 #
7 # This program is free software; you can redistribute it and/or modify it
8 # under the terms of the GNU General Public License as published by the
9 # Free Software Foundation; either version 2 of the License, or (at your
10 # option) any later version.  See <http://www.fsf.org/copyleft/gpl.txt>.
11 #
12 # This program is distributed in the hope that it will be useful, but
13 # WITHOUT ANY WARRANTY; without even the implied warranty of MERCHANTABILITY
14 # or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
15 # for more details.
16
17 DIR=$(dirname `readlink -f $0`)
18 . $DIR/testing.conf
19 . $DIR/scripts/function.sh
20
21 [ -d $DIR/hosts ] || die "Directory 'hosts' not found"
22 [ -d $DIR/tests ] || die "Directory 'tests' not found"
23 [ -d $BUILDDIR ] ||
24         die "Directory '$BUILDDIR' does not exist, please run make-testing first"
25
26 ln -sfT $DIR $TESTDIR/testing
27
28 ##############################################################################
29 # take care of new path and file variables
30 #
31
32 [ -d $TESTRESULTSDIR ] || mkdir $TESTRESULTSDIR
33
34 TESTDATE=`date +%Y%m%d-%H%M-%S`
35
36 TODAYDIR=$TESTRESULTSDIR/$TESTDATE
37 mkdir $TODAYDIR
38 TESTRESULTSHTML=$TODAYDIR/all.html
39 INDEX=$TODAYDIR/index.html
40 DEFAULTTESTSDIR=$TESTDIR/testing/tests
41
42 SOURCEIP_ROUTING_TABLE=220
43
44 testnumber="0"
45 failed_cnt="0"
46 passed_cnt="0"
47
48
49 ##############################################################################
50 # copy default tests to $BUILDDIR
51 #
52
53 TESTSDIR=$BUILDDIR/tests
54 [ -d $TESTSDIR ] || mkdir $TESTSDIR
55
56 ##############################################################################
57 # assign IP for each host to hostname
58 #
59
60 for host in $STRONGSWANHOSTS
61 do
62     eval ipv4_${host}="`echo $HOSTNAMEIPV4 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $1 }' | awk '{ print $1 }'`"
63     eval ipv6_${host}="`echo $HOSTNAMEIPV6 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $1 }' | awk '{ print $1 }'`"
64
65     case $host in
66     moon)
67         eval ipv4_moon1="`echo $HOSTNAMEIPV4 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
68         eval ipv6_moon1="`echo $HOSTNAMEIPV6 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
69         ;;
70     sun)
71         eval ipv4_sun1="`echo $HOSTNAMEIPV4 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
72         eval ipv6_sun1="`echo $HOSTNAMEIPV6 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
73         ;;
74     alice)
75         eval ipv4_alice1="`echo $HOSTNAMEIPV4 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
76         eval ipv6_alice1="`echo $HOSTNAMEIPV6 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
77         ;;
78     venus)
79         ;;
80     bob)
81         ;;
82     carol)
83         eval ipv4_carol1="`echo $HOSTNAMEIPV4 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
84         eval ipv6_carol1="`echo $HOSTNAMEIPV6 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
85          ;;
86     dave)
87         eval ipv4_dave1="`echo $HOSTNAMEIPV4 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
88         eval ipv6_dave1="`echo $HOSTNAMEIPV6 | sed -n -e "s/^.*${host},//gp" | awk -F, '{ print $2 }' | awk '{ print $1 }'`"
89         ;;
90     winnetou)
91         ;;
92     esac
93 done
94
95
96 ##############################################################################
97 # open ssh sessions
98 #
99 for host in $STRONGSWANHOSTS
100 do
101     ssh $SSHCONF -N root@`eval echo \\\$ipv4_$host` >/dev/null 2>&1 &
102     eval ssh_pid_$host="`echo $!`"
103     do_on_exit kill `eval echo \\\$ssh_pid_$host`
104 done
105
106
107 ##############################################################################
108 # create header for the results html file
109 #
110
111 ENVIRONMENT_HEADER=$(cat <<@EOF
112   <table border="0" cellspacing="2" cellpadding="2">
113     <tr valign="top">
114       <td><b>Host</b></td>
115       <td colspan="3">`uname -a`</td>
116     </tr>
117     <tr valign="top">
118       <td><b>Guest kernel</b></td>
119       <td colspan="3">$KERNELVERSION</td>
120     </tr>
121     <tr valign="top">
122       <td><b>strongSwan</b></td>
123       <td colspan="3">$SWANVERSION</td>
124     </tr>
125     <tr valign="top">
126       <td><b>Date</b></td>
127       <td colspan="3">$TESTDATE</td>
128     </tr>
129     <tr>
130       <td width="100">&nbsp;</td>
131       <td width="300">&nbsp;</td>
132       <td width=" 50">&nbsp;</td>
133       <td >&nbsp;</td>
134     </tr>
135 @EOF
136 )
137
138 cat > $INDEX <<@EOF
139 <html>
140 <head>
141   <title>strongSwan KVM Tests</title>
142 </head>
143 <body>
144   <h2>strongSwan KVM Tests</h2>
145   $ENVIRONMENT_HEADER
146 @EOF
147
148 cat > $TESTRESULTSHTML <<@EOF
149 <html>
150 <head>
151   <title>strongSwan KVM Tests - All Tests</title>
152 </head>
153 <body>
154   <div><a href="index.html">strongSwan KVM Tests</a> / All Tests</div>
155   <h2>All Tests</h2>
156   $ENVIRONMENT_HEADER
157     <tr align="left">
158       <th>Number</th>
159       <th>Test</th>
160       <th colspan="2">Result</th>
161     </tr>
162 @EOF
163
164 echo "Guest kernel : $KERNELVERSION"
165 echo "strongSwan   : $SWANVERSION"
166 echo "Date         : $TESTDATE"
167 echo
168
169
170 ##############################################################################
171 # enter specific test directory
172 #
173
174 if [ $# -gt 0 ]
175 then
176     TESTS=$*
177 else
178     # set internal field seperator
179     TESTS="`ls $DEFAULTTESTSDIR`"
180 fi
181
182 for SUBDIR in $TESTS
183 do
184     SUBTESTS="`basename $SUBDIR`"
185
186     if [ $SUBTESTS = $SUBDIR ]
187     then
188         SUBTESTS="`ls $DEFAULTTESTSDIR/$SUBDIR`"
189     else
190         SUBDIR="`dirname $SUBDIR`"
191     fi
192
193     if [ ! -d $TODAYDIR/$SUBDIR ]
194     then
195         mkdir $TODAYDIR/$SUBDIR
196         if [ $testnumber == 0 ]
197         then
198             FIRST="<b>Category</b>"
199         else
200             FIRST="&nbsp;"
201         fi
202         echo "    <tr>" >> $INDEX
203     echo "      <td>$FIRST</td>">> $INDEX
204     echo "      <td><a href=\"$SUBDIR/index.html\">$SUBDIR</a></td>" >> $INDEX
205     echo "      <td align=\"right\">x</td>" >> $INDEX
206     echo "      <td>&nbsp;</td>" >> $INDEX
207     echo "    </tr>" >> $INDEX
208         SUBTESTSINDEX=$TODAYDIR/$SUBDIR/index.html
209         cat > $SUBTESTSINDEX <<@EOF
210 <html>
211 <head>
212   <title>strongSwan $SUBDIR Tests</title>
213 </head>
214 <body>
215   <div><a href="../index.html">strongSwan KVM Tests</a> / $SUBDIR</div>
216   <h2>strongSwan $SUBDIR Tests</h2>
217   <table border="0" cellspacing="2" cellpadding="2">
218     <tr valign="top">
219       <td><b>Guest kernel</b></td>
220       <td colspan="3">$KERNELVERSION</td>
221     </tr>
222     <tr valign="top">
223       <td><b>strongSwan</b></td>
224       <td colspan="3">$SWANVERSION</td>
225     </tr>
226     <tr valign="top">
227       <td><b>Date</b></td>
228       <td colspan="3">$TESTDATE</td>
229     </tr>
230     <tr>
231       <td width="100">&nbsp;</td>
232       <td width="300">&nbsp;</td>
233       <td width=" 50">&nbsp;</td>
234       <td >&nbsp;</td>
235     </tr>
236     <tr align="left">
237        <th>Number</th>
238        <th>Test</th>
239        <th colspan="2">Result</th>
240     </tr>
241 @EOF
242     fi
243
244     for name in $SUBTESTS
245     do
246         let "testnumber += 1"
247         testname=$SUBDIR/$name
248         log_action " $testnumber $testname:"
249
250         if [ ! -d $DEFAULTTESTSDIR/${testname} ]
251         then
252             echo "is missing..skipped"
253             continue
254         fi
255
256         if [ $SUBDIR = "ipv6" -o $name = "rw-psk-ipv6" ]
257         then
258             IPROUTE_CMD="ip -6 route list table $SOURCEIP_ROUTING_TABLE"
259             IPROUTE_DSP=$IPROUTE_CMD
260             IPTABLES_CMD="ip6tables -v -n -L"
261             IPTABLES_DSP="ip6tables -L"
262         else
263             IPROUTE_CMD="ip route list table $SOURCEIP_ROUTING_TABLE"
264             IPROUTE_DSP=$IPROUTE_CMD
265             IPTABLES_CMD="iptables -v -n -L"
266             IPTABLES_DSP="iptables -L"
267         fi
268
269         if [ $name = "net2net-ip4-in-ip6-ikev2" -o $name = "net2net-ip6-in-ip4-ikev2" ]
270         then
271             IPROUTE_CMD="ip route list table $SOURCEIP_ROUTING_TABLE; echo; ip -6 route list table $SOURCEIP_ROUTING_TABLE"
272             IPROUTE_DSP="ip (-6) route list table $SOURCEIP_ROUTING_TABLE"
273             IPTABLES_CMD="iptables -v -n -L ; echo ; ip6tables -v -n -L"
274             IPTABLES_DSP="iptables -L ; ip6tables -L"
275         fi
276
277         [ -f $DEFAULTTESTSDIR/${testname}/description.txt ] || die "!! File 'description.txt' is missing"
278         [ -f $DEFAULTTESTSDIR/${testname}/test.conf ]       || die "!! File 'test.conf' is missing"
279         [ -f $DEFAULTTESTSDIR/${testname}/pretest.dat ]     || die "!! File 'pretest.dat' is missing"
280         [ -f $DEFAULTTESTSDIR/${testname}/posttest.dat ]    || die "!! File 'posttest.dat' is missing"
281         [ -f $DEFAULTTESTSDIR/${testname}/evaltest.dat ]    || die "!! File 'evaltest.dat' is missing"
282
283         TESTRESULTDIR=$TODAYDIR/$testname
284         mkdir -p $TESTRESULTDIR
285         CONSOLE_LOG=$TESTRESULTDIR/console.log
286         touch $CONSOLE_LOG
287
288         TESTDIR=$TESTSDIR/${testname}
289         rm -rf $TESTDIR
290         mkdir -p $TESTDIR
291         cp -rfp $DEFAULTTESTSDIR/${testname}/* $TESTDIR
292
293
294         ##############################################################################
295         # replace IP wildcards with actual IPv4 and IPv6 addresses
296         #
297
298         for host in $STRONGSWANHOSTS
299         do
300             case $host in
301             moon)
302                 searchandreplace PH_IP_MOON1     $ipv4_moon1 $TESTDIR
303                 searchandreplace PH_IP_MOON      $ipv4_moon  $TESTDIR
304                 searchandreplace PH_IP6_MOON1    $ipv6_moon1 $TESTDIR
305                 searchandreplace PH_IP6_MOON     $ipv6_moon  $TESTDIR
306                 ;;
307             sun)
308                 searchandreplace PH_IP_SUN1      $ipv4_sun1 $TESTDIR
309                 searchandreplace PH_IP_SUN       $ipv4_sun  $TESTDIR
310                 searchandreplace PH_IP6_SUN1     $ipv6_sun1 $TESTDIR
311                 searchandreplace PH_IP6_SUN      $ipv6_sun  $TESTDIR
312                 ;;
313             alice)
314                 searchandreplace PH_IP_ALICE1    $ipv4_alice1 $TESTDIR
315                 searchandreplace PH_IP_ALICE     $ipv4_alice  $TESTDIR
316                 searchandreplace PH_IP6_ALICE1   $ipv6_alice1 $TESTDIR
317                 searchandreplace PH_IP6_ALICE    $ipv6_alice  $TESTDIR
318                 ;;
319             venus)
320                 searchandreplace PH_IP_VENUS     $ipv4_venus $TESTDIR
321                 searchandreplace PH_IP6_VENUS    $ipv6_venus $TESTDIR
322                 ;;
323             bob)
324                 searchandreplace PH_IP_BOB       $ipv4_bob $TESTDIR
325                 searchandreplace PH_IPV6_BOB     $ipv6_bob $TESTDIR
326                 ;;
327             carol)
328                 searchandreplace PH_IP_CAROL1    $ipv4_carol1 $TESTDIR
329                 searchandreplace PH_IP_CAROL     $ipv4_carol  $TESTDIR
330                 searchandreplace PH_IP6_CAROL1   $ipv6_carol1 $TESTDIR
331                 searchandreplace PH_IP6_CAROL    $ipv6_carol  $TESTDIR
332                 ;;
333             dave)
334                 searchandreplace PH_IP_DAVE1     $ipv4_dave1 $TESTDIR
335                 searchandreplace PH_IP_DAVE      $ipv4_dave  $TESTDIR
336                 searchandreplace PH_IP6_DAVE1    $ipv6_dave1 $TESTDIR
337                 searchandreplace PH_IP6_DAVE     $ipv6_dave  $TESTDIR
338                 ;;
339             winnetou)
340                 searchandreplace PH_IP_WINNETOU  $ipv4_winnetou $TESTDIR
341                 searchandreplace PH_IP6_WINNETOU $ipv6_winnetou $TESTDIR
342                 ;;
343             esac
344         done
345
346
347         ##########################################################################
348         # copy test specific configurations to uml hosts and clear auth.log files
349         #
350
351         $DIR/scripts/load-testconfig $testname
352         unset RADIUSHOSTS
353         source $TESTDIR/test.conf
354
355
356         ##########################################################################
357         # run tcpdump in the background
358         #
359
360         if [ "$TCPDUMPHOSTS" != "" ]
361         then
362             echo -e "TCPDUMP\n" >> $CONSOLE_LOG 2>&1
363
364             for host_iface in $TCPDUMPHOSTS
365             do
366                 host=`echo $host_iface | awk -F ":" '{print $1}'`
367                 iface=`echo $host_iface | awk -F ":" '{if ($2 != "") { print $2 } else { printf("eth0") }}'`
368                 tcpdump_cmd="tcpdump -i $iface not port ssh and not port domain > /tmp/tcpdump.log 2>&1 &"
369                 echo "${host}# $tcpdump_cmd" >> $CONSOLE_LOG
370                 ssh $SSHCONF root@`eval echo \\\$ipv4_$host '$tcpdump_cmd'`
371                 eval TDUP_${host}="true"
372             done
373         fi
374
375
376         ##########################################################################
377         # execute pre-test commands
378         #
379
380         echo -n "pre.."
381         echo -e "\nPRE-TEST\n" >> $CONSOLE_LOG 2>&1
382
383         eval `awk -F "::" '{
384             if ($2 != "")
385             {
386                 printf("echo \"%s# %s\"; ", $1, $2)
387                 printf("ssh \044SSHCONF root@\044ipv4_%s \"%s\"; ", $1, $2)
388                 printf("echo;\n")
389             }
390         }' $TESTDIR/pretest.dat` >> $CONSOLE_LOG 2>&1
391
392
393         ##########################################################################
394         # stop tcpdump
395         #
396
397         function stop_tcpdump {
398             echo "${1}# killall tcpdump" >> $CONSOLE_LOG
399             eval ssh $SSHCONF root@\$ipv4_${1} killall tcpdump
400             eval TDUP_${1}="false"
401             echo ""
402         }
403
404
405         ##########################################################################
406         # get and evaluate test results
407         #
408
409         echo -n "test.."
410         echo -e "\nTEST\n" >> $CONSOLE_LOG 2>&1
411
412         STATUS="passed"
413
414         eval `awk -F "::" '{
415             host=$1
416             command=$2
417             pattern=$3
418             hit=$4
419             if (command != "")
420             {
421                 if (command == "tcpdump")
422                 {
423                     printf("if [ \044TDUP_%s == \"true\" ]; then stop_tcpdump %s; fi; \n", host, host)
424                     printf("echo \"%s# cat /tmp/tcpdump.log | grep \047%s\047  [%s]\"; ", host, pattern, hit)
425                     printf("ssh \044SSHCONF root@\044ipv4_%s cat /tmp/tcpdump.log | grep \"%s\"; ", host, pattern)
426                 }
427                 else
428                 {
429                     printf("echo \"%s# %s | grep \047%s\047  [%s]\"; ", host, command, pattern, hit)
430                     printf("ssh \044SSHCONF root@\044ipv4_%s %s | grep \"%s\"; ",  host, command, pattern)
431                 }
432                 printf("cmd_exit=\044?; ")
433                 printf("echo; ")
434                 printf("if [ \044cmd_exit -eq 0 -a \"%s\" = \"NO\"  ] ", hit)
435                 printf("|| [ \044cmd_exit -ne 0 -a \"%s\" = \"YES\" ] ", hit)
436                 printf("; then STATUS=\"failed\"; fi; \n")
437             }
438         }' $TESTDIR/evaltest.dat` >> $CONSOLE_LOG 2>&1
439
440
441         ##########################################################################
442         # set counters
443         #
444
445         if [ $STATUS = "failed" ]
446         then
447             let "failed_cnt += 1"
448         else
449             let "passed_cnt += 1"
450         fi
451
452
453         ##########################################################################
454         # log statusall and listall output
455         # get copies of ipsec.conf, ipsec.secrets
456         # create index.html for the given test case
457
458         cat > $TESTRESULTDIR/index.html <<@EOF
459 <html>
460 <head>
461   <title>Test $testname</title>
462 </head>
463 <body>
464 <table border="0" cellpadding="0" cellspacing="0" width="600">
465   <tr><td>
466     <div><a href="../../index.html">strongSwan KVM Tests</a> / <a href="../index.html">$SUBDIR</a> / $name</div>
467     <h2>Test $testname</h2>
468     <h3>Description</h3>
469 @EOF
470
471         cat $TESTDIR/description.txt >> $TESTRESULTDIR/index.html
472
473         cat >> $TESTRESULTDIR/index.html <<@EOF
474     <ul>
475       <li><a href="console.log">console.log</a></li>
476     </ul>
477     <img src="../../images/$DIAGRAM" alt="$UMLHOSTS">
478 @EOF
479
480         for host in $IPSECHOSTS
481         do
482             eval HOSTLOGIN=root@\$ipv4_${host}
483
484             for command in statusall listall
485             do
486                 ssh $SSHCONF $HOSTLOGIN ipsec $command \
487                     > $TESTRESULTDIR/${host}.$command 2>/dev/null
488             done
489
490             for file in strongswan.conf ipsec.conf ipsec.secrets
491             do
492                 scp $SSHCONF $HOSTLOGIN:/etc/$file \
493                     $TESTRESULTDIR/${host}.$file  > /dev/null 2>&1
494             done
495
496             scp $SSHCONF $HOSTLOGIN:/etc/ipsec.d/ipsec.sql \
497                 $TESTRESULTDIR/${host}.ipsec.sql  > /dev/null 2>&1
498
499             ssh $SSHCONF $HOSTLOGIN ip -s xfrm policy \
500                     > $TESTRESULTDIR/${host}.ip.policy 2>/dev/null
501             ssh $SSHCONF $HOSTLOGIN ip -s xfrm state \
502                     > $TESTRESULTDIR/${host}.ip.state 2>/dev/null
503             ssh $SSHCONF $HOSTLOGIN $IPROUTE_CMD \
504                     > $TESTRESULTDIR/${host}.ip.route 2>/dev/null
505             ssh $SSHCONF $HOSTLOGIN $IPTABLES_CMD \
506                     > $TESTRESULTDIR/${host}.iptables 2>/dev/null
507             chmod a+r $TESTRESULTDIR/*
508             cat >> $TESTRESULTDIR/index.html <<@EOF
509     <h3>$host</h3>
510       <table border="0" cellspacing="0" width="600">
511       <tr>
512         <td valign="top">
513           <ul>
514             <li><a href="$host.ipsec.conf">ipsec.conf</a></li>
515             <li><a href="$host.ipsec.secrets">ipsec.secrets</a></li>
516             <li><a href="$host.ipsec.sql">ipsec.sql</a></li>
517             <li><a href="$host.strongswan.conf">strongswan.conf</a></li>
518           </ul>
519         </td>
520         <td valign="top">
521           <ul>
522             <li><a href="$host.statusall">ipsec statusall</a></li>
523             <li><a href="$host.listall">ipsec listall</a></li>
524             <li><a href="$host.auth.log">auth.log</a></li>
525             <li><a href="$host.daemon.log">daemon.log</a></li>
526           </ul>
527       </td>
528         <td valign="top">
529           <ul>
530             <li><a href="$host.ip.policy">ip -s xfrm policy</a></li>
531             <li><a href="$host.ip.state">ip -s xfrm state</a></li>
532             <li><a href="$host.ip.route">$IPROUTE_DSP</a></li>
533             <li><a href="$host.iptables">$IPTABLES_DSP</a></li>
534           </ul>
535       </td>
536     </tr>
537     </table>
538 @EOF
539
540         done
541
542         for host in $RADIUSHOSTS
543         do
544             eval HOSTLOGIN=root@\$ipv4_${host}
545
546             for file in clients.conf eap.conf radiusd.conf proxy.conf users
547             do
548                 scp $SSHCONF $HOSTLOGIN:/etc/freeradius/$file \
549                     $TESTRESULTDIR/${host}.$file  > /dev/null 2>&1
550             done
551
552                 scp $SSHCONF $HOSTLOGIN:/etc/strongswan.conf \
553                     $TESTRESULTDIR/${host}.strongswan.conf  > /dev/null 2>&1
554
555             scp $SSHCONF $HOSTLOGIN:/var/log/freeradius/radius.log \
556                 $TESTRESULTDIR/${host}.radius.log  > /dev/null 2>&1
557
558             ssh $SSHCONF $HOSTLOGIN grep imcv /var/log/daemon.log \
559                 >> $TESTRESULTDIR/${host}.daemon.log
560
561             chmod a+r $TESTRESULTDIR/*
562             cat >> $TESTRESULTDIR/index.html <<@EOF
563     <h3>$host</h3>
564       <table border="0" cellspacing="0" width="600">
565       <tr>
566         <td valign="top">
567           <ul>
568             <li><a href="$host.clients.conf">clients.conf</a></li>
569             <li><a href="$host.radiusd.conf">radiusd.conf</a></li>
570             <li><a href="$host.strongswan.conf">strongswan.conf</a></li>
571           </ul>
572         </td>
573         <td valign="top">
574           <ul>
575             <li><a href="$host.eap.conf">eap.conf</a></li>
576             <li><a href="$host.radius.log">radius.log</a></li>
577             <li><a href="$host.daemon.log">daemon.log</a></li>
578           </ul>
579       </td>
580         <td valign="top">
581           <ul>
582             <li><a href="$host.proxy.conf">proxy.conf</a></li>
583             <li><a href="$host.users">users</a></li>
584           </ul>
585       </td>
586     </tr>
587     </table>
588 @EOF
589
590         done
591
592         cat >> $TESTRESULTDIR/index.html <<@EOF
593         <h3>tcpdump</h3>
594         <ul>
595 @EOF
596
597         for host in $TCPDUMPHOSTS
598         do
599             eval HOSTLOGIN=root@\$ipv4_${host}
600
601                 scp $SSHCONF $HOSTLOGIN:/tmp/tcpdump.log \
602                         $TESTRESULTDIR/${host}.tcpdump.log > /dev/null 2>&1
603
604             cat >> $TESTRESULTDIR/index.html <<@EOF
605             <li><a href="$host.tcpdump.log">$host tcpdump.log</a></li>
606 @EOF
607
608         done
609
610         cat >> $TESTRESULTDIR/index.html <<@EOF
611         </ul>
612 @EOF
613
614         cat >> $TESTRESULTDIR/index.html <<@EOF
615   </td></tr>
616 </table>
617 </body>
618 </html>
619 @EOF
620
621
622         ##########################################################################
623         # execute post-test commands
624         #
625
626         echo -n "post"
627         echo -e "\nPOST-TEST\n" >> $CONSOLE_LOG 2>&1
628
629         eval `awk -F "::" '{
630             if ($2 != "")
631             {
632                 printf("echo \"%s# %s\"; ", $1, $2)
633                 printf("ssh \044SSHCONF root@\044ipv4_%s \"%s\"; ", $1, $2)
634                 printf("echo;\n")
635             }
636         }' $TESTDIR/posttest.dat` >> $CONSOLE_LOG 2>&1
637
638
639         ##########################################################################
640         # get a copy of /var/log/auth.log
641         #
642
643         for host in $IPSECHOSTS
644         do
645             eval HOSTLOGIN=root@\$ipv4_${host}
646             ssh $SSHCONF $HOSTLOGIN "grep -E 'charon|last message repeated' \
647                 /var/log/auth.log" >> $TESTRESULTDIR/${host}.auth.log
648         done
649
650
651         ##########################################################################
652         # get a copy of /var/log/daemon.log
653         #
654
655         for host in $IPSECHOSTS
656         do
657             eval HOSTLOGIN=root@\$ipv4_${host}
658             ssh $SSHCONF $HOSTLOGIN "grep -E 'charon|last message repeated' \
659                 /var/log/daemon.log" >> $TESTRESULTDIR/${host}.daemon.log
660         done
661
662
663         ##########################################################################
664         # stop tcpdump if necessary
665         #
666
667         for host in $TCPDUMPHOSTS
668         do
669             if [ "`eval echo \\\$TDUP_${host}`" = "true" ]
670             then
671                 echo "${host}# killall tcpdump" >> $CONSOLE_LOG
672                 eval ssh $SSHCONF root@\$ipv4_$host killall tcpdump
673                 eval TDUP_${host}="false"
674             fi
675         done
676
677
678         ##########################################################################
679         # copy default host config back if necessary
680         #
681
682         $DIR/scripts/restore-defaults $testname
683
684
685         ##########################################################################
686         # write test status to html file
687         #
688
689         if [ $STATUS = "passed" ]
690         then
691                 COLOR="green"
692                 log_status 0
693         else
694                 COLOR="red"
695                 log_status 1
696         fi
697
698         cat >> $TESTRESULTSHTML << @EOF
699   <tr>
700     <td>$testnumber</td>
701     <td><a href="$testname/index.html">$testname</a></td>
702     <td><a href="$testname/console.log"><font color="$COLOR">$STATUS</font></a></td>
703     <td>&nbsp;</td>
704   </tr>
705 @EOF
706         cat >> $SUBTESTSINDEX << @EOF
707   <tr>
708     <td>$testnumber</td>
709     <td><a href="$name/index.html">$name</a></td>
710     <td><a href="$name/console.log"><font color="$COLOR">$STATUS</font></a></td>
711     <td>&nbsp;</td>
712   </tr>
713 @EOF
714
715
716         ##########################################################################
717         # remove any charon.pid files that still may exist
718         #
719
720         for host in $IPSECHOSTS
721         do
722             eval HOSTLOGIN=root@\$ipv4_${host}
723             ssh $SSHCONF $HOSTLOGIN 'if [ -f /var/run/charon.pid ]; then rm /var/run/charon.pid; echo "    removed charon.pid on `hostname`"; fi'
724         done
725
726     done
727
728 done
729
730
731 ##############################################################################
732 # finish the results html file
733 #
734
735 cat >> $TESTRESULTSHTML << @EOF
736     <tr>
737       <td>&nbsp;</td><td>&nbsp;</td><td>&nbsp;</td><td>&nbsp;</td>
738     </tr>
739     <tr>
740       <td><b>Passed</b></td><td><b><font color="green">$passed_cnt</font></b></td><td>&nbsp;</td><td>&nbsp;</td>
741     </tr>
742     <tr>
743       <td><b>Failed</b></td><td><b><font color="red">$failed_cnt</font></b></td><td>&nbsp;</td><td>&nbsp;</td>
744     </tr>
745   </table>
746 </body>
747 </html>
748 @EOF
749
750 let "all_cnt = $passed_cnt + $failed_cnt"
751
752 cat >> $INDEX << @EOF
753     <tr>
754       <td>&nbsp;</td>
755       <td><a href="all.html"><b>all</b></a></td>
756       <td align="right"><b>$all_cnt</b></td>
757       <td>&nbsp;</td>
758     </tr>
759     <tr>
760       <td><b>Failed</b></td>
761       <td>&nbsp;</td>
762       <td align="right"><b><font color="red">$failed_cnt</font></b></td>
763       <td>&nbsp;</td>
764     </tr>
765   </table>
766 </body>
767 </html>
768 @EOF
769
770 echo
771 echo_ok     "Passed : $passed_cnt"
772 echo_failed "Failed : $failed_cnt"
773 echo
774
775
776 ##############################################################################
777 # copy the test results to the apache server
778 #
779
780 HTDOCS="/var/www"
781
782 ssh $SSHCONF root@${ipv4_winnetou} mkdir -p $HTDOCS/testresults > /dev/null 2>&1
783 scp $SSHCONF -r $TODAYDIR root@${ipv4_winnetou}:$HTDOCS/testresults > /dev/null 2>&1
784 ssh $SSHCONF root@${ipv4_winnetou} ln -s $HTDOCS/images $HTDOCS/testresults/$TESTDATE/images > /dev/null 2>&1
785 echo
786 echo "The results are available in $TODAYDIR"
787 echo "or via the link http://$ipv4_winnetou/testresults/$TESTDATE"
788
789 ENDDATE=`date +%Y%m%d-%H%M`
790 echo
791 echo "Finished : $ENDDATE"