62 line
1.9 KiB
Bash
Executable file
62 line
1.9 KiB
Bash
Executable file
#!/bin/bash
|
|
|
|
if [ -z "$1" ]; then
|
|
>&2 echo "Sintassi: crawl.bash <directory in cui stanno crawl.php ecc.> [dopeers]"
|
|
exit 1
|
|
elif [ ! -d "$1" ]; then
|
|
>&2 echo "«$1» non esiste o non è una directory, muoio."
|
|
exit 1
|
|
fi
|
|
|
|
cd "$1"
|
|
MAILCFG="../conf/mail.conf"
|
|
LOGF="crawl.log"
|
|
MAILF="mail"
|
|
|
|
mailmta=`cat "$MAILCFG"|grep -P '^mta='|sed -e 's/^mta=//' -e 's/^"//' -e 's/"$//'`
|
|
mailfrom=`cat "$MAILCFG"|grep -P '^from='|sed -e 's/^from=//' -e 's/^"//' -e 's/"$//'`
|
|
mailto=`cat "$MAILCFG"|grep -P '^to='|sed -e 's/^to=//' -e 's/^"//' -e 's/"$//'`
|
|
|
|
# $1: oggetto del messaggio; $2: file col corpo del messaggio
|
|
function domail {
|
|
echo "" | s-nail -q "$2" -s "$1" -S v15-compat -S from="$mailfrom" -S smtp-use-starttls -S mta="$mailmta" "$mailto"
|
|
}
|
|
|
|
# $1: comando; $2: logfile per l'output del comando
|
|
function logcmd {
|
|
init="$(date -R)"
|
|
echo "$init: eseguo «$1»" >> $LOGF
|
|
$1 &> $2
|
|
ec=$?
|
|
endt="$(date -R)"
|
|
echo -n "$endt: fine esecuzione di «$1»: " >> $LOGF
|
|
if [ $ec -eq 0 ]; then
|
|
echo "riuscita!" >> $LOGF
|
|
#domail "L’esecuzione di «$1» è riuscita! :-)" "Ciao, l’esecuzione di «$1», cominciata $init e finita $endt, è riuscita senza prubblemi :-)"
|
|
else
|
|
echo "ERRORE: $ec" >> $LOGF
|
|
tail -n 20 $2 >> $LOGF
|
|
tail -n 20 $2 > $MAILF
|
|
domail "L’esecuzione di «$1», cominciata $init e finita $endt, NON È RIUSCITA (exit code: $ec) :-(" "$MAILF"
|
|
fi
|
|
}
|
|
|
|
#logcmd "grep pippo gigi" "grepa.log"
|
|
#logcmd "grep pippo bibi" "grepb.log"
|
|
#exit
|
|
|
|
echo "----------[ inizio esecuzione crawl.bash ]----------" >> $LOGF
|
|
|
|
#tar cJf run-`date +%Y-%m-%d--%H.%M.%S`.tar.xz run/
|
|
|
|
rm run/*
|
|
|
|
logcmd "php mustool.php updstats" "mustool.updstats.log"
|
|
|
|
[ "$2" == "dopeers" ] && logcmd "php peerscrawl.php -e peerscrawl.exclude -E" "peerscrawl.log"
|
|
|
|
logcmd "php crawler.php -L none - -T warning" "crawler.log"
|
|
|
|
logcmd "php mustool.php shuffle clean optimize" "mustool.shuffle-clean-optimize.log"
|
|
|
|
exit 0
|