2022-12-03 14:48:14 +01:00
|
|
|
|
#!/bin/bash
|
|
|
|
|
|
|
|
|
|
if [ -z "$1" ]; then
|
|
|
|
|
>&2 echo "Sintassi: crawl.bash <directory in cui stanno crawl.php ecc.> [dopeers]"
|
|
|
|
|
exit 1
|
|
|
|
|
elif [ ! -d "$1" ]; then
|
|
|
|
|
>&2 echo "«$1» non esiste o non è una directory, muoio."
|
|
|
|
|
exit 1
|
|
|
|
|
fi
|
|
|
|
|
|
|
|
|
|
cd "$1"
|
2022-12-08 00:06:16 +01:00
|
|
|
|
MAILCFG="../conf/mail.conf"
|
2022-12-03 14:48:14 +01:00
|
|
|
|
LOGF="crawl.log"
|
|
|
|
|
MAILF="mail"
|
|
|
|
|
|
|
|
|
|
mailmta=`cat "$MAILCFG"|grep -P '^mta='|sed -e 's/^mta=//' -e 's/^"//' -e 's/"$//'`
|
|
|
|
|
mailfrom=`cat "$MAILCFG"|grep -P '^from='|sed -e 's/^from=//' -e 's/^"//' -e 's/"$//'`
|
|
|
|
|
mailto=`cat "$MAILCFG"|grep -P '^to='|sed -e 's/^to=//' -e 's/^"//' -e 's/"$//'`
|
|
|
|
|
|
|
|
|
|
# $1: oggetto del messaggio; $2: file col corpo del messaggio
|
|
|
|
|
function domail {
|
|
|
|
|
echo "" | s-nail -q "$2" -s "$1" -S v15-compat -S from="$mailfrom" -S smtp-use-starttls -S mta="$mailmta" "$mailto"
|
|
|
|
|
}
|
|
|
|
|
|
|
|
|
|
# $1: comando; $2: logfile per l'output del comando
|
|
|
|
|
function logcmd {
|
|
|
|
|
init="$(date)"
|
|
|
|
|
echo "$init: eseguo «$1»" >> $LOGF
|
2022-12-08 00:06:16 +01:00
|
|
|
|
$1 &> $2
|
2022-12-03 14:48:14 +01:00
|
|
|
|
ec=$?
|
|
|
|
|
endt="$(date)"
|
|
|
|
|
echo -n "$endt: fine esecuzione di «$1»: " >> $LOGF
|
|
|
|
|
if [ $ec -eq 0 ]; then
|
|
|
|
|
echo "riuscita!" >> $LOGF
|
|
|
|
|
#domail "L’esecuzione di «$1» è riuscita! :-)" "Ciao, l’esecuzione di «$1», cominciata $init e finita $endt, è riuscita senza prubblemi :-)"
|
|
|
|
|
else
|
|
|
|
|
echo "ERRORE: $ec" >> $LOGF
|
|
|
|
|
tail -n 20 $2 >> $LOGF
|
|
|
|
|
tail -n 20 $2 > $MAILF
|
|
|
|
|
domail "L’esecuzione di «$1», cominciata $init e finita $endt, NON È RIUSCITA (exit code: $ec) :-(" "$MAILF"
|
|
|
|
|
fi
|
2022-12-17 17:36:46 +01:00
|
|
|
|
echo "--------------------------" >> $LOGF
|
2022-12-03 14:48:14 +01:00
|
|
|
|
}
|
|
|
|
|
|
|
|
|
|
#logcmd "grep pippo gigi" "grepa.log"
|
|
|
|
|
#logcmd "grep pippo bibi" "grepb.log"
|
|
|
|
|
#exit
|
|
|
|
|
|
|
|
|
|
logcmd "php mustool.php updstats" "mustool.updstats.log"
|
|
|
|
|
|
|
|
|
|
if [ "$2" == "dopeers" ]; then
|
|
|
|
|
logcmd "php peerscrawl.php -e peerscrawl.exclude -E" "peerscrawl.log"
|
2022-12-17 17:36:46 +01:00
|
|
|
|
logcmd "php crawler.php -L none -p peers - -T warning" "crawler.log"
|
2022-12-03 14:48:14 +01:00
|
|
|
|
else
|
2022-12-17 17:36:46 +01:00
|
|
|
|
logcmd "php crawler.php -L none - -T warning" "crawler.log"
|
2022-12-03 14:48:14 +01:00
|
|
|
|
fi
|
|
|
|
|
|
|
|
|
|
logcmd "php mustool.php shuffle clean optimize" "mustool.shuffle-clean-optimize.log"
|
|
|
|
|
|
|
|
|
|
exit 0
|