MastodonHelp/web/clitools/maintain/crawl.bash

62 lignes
1,9 Kio
Bash
Fichier exécutable

#!/bin/bash
if [ -z "$1" ]; then
>&2 echo "Sintassi: crawl.bash <directory in cui stanno crawl.php ecc.> [dopeers]"
exit 1
elif [ ! -d "$1" ]; then
>&2 echo "«$1» non esiste o non è una directory, muoio."
exit 1
fi
cd "$1"
MAILCFG="../conf/mail.conf"
LOGF="crawl.log"
MAILF="mail"
mailmta=`cat "$MAILCFG"|grep -P '^mta='|sed -e 's/^mta=//' -e 's/^"//' -e 's/"$//'`
mailfrom=`cat "$MAILCFG"|grep -P '^from='|sed -e 's/^from=//' -e 's/^"//' -e 's/"$//'`
mailto=`cat "$MAILCFG"|grep -P '^to='|sed -e 's/^to=//' -e 's/^"//' -e 's/"$//'`
# $1: oggetto del messaggio; $2: file col corpo del messaggio
function domail {
echo "" | s-nail -q "$2" -s "$1" -S v15-compat -S from="$mailfrom" -S smtp-use-starttls -S mta="$mailmta" "$mailto"
}
# $1: comando; $2: logfile per l'output del comando
function logcmd {
init="$(date -R)"
echo "$init: eseguo «$1»" >> $LOGF
$1 &> $2
ec=$?
endt="$(date -R)"
echo -n "$endt: fine esecuzione di «$1»: " >> $LOGF
if [ $ec -eq 0 ]; then
echo "riuscita!" >> $LOGF
#domail "L’esecuzione di «$1» è riuscita! :-)" "Ciao, l’esecuzione di «$1», cominciata $init e finita $endt, è riuscita senza prubblemi :-)"
else
echo "ERRORE: $ec" >> $LOGF
tail -n 20 $2 >> $LOGF
tail -n 20 $2 > $MAILF
domail "L’esecuzione di «$1», cominciata $init e finita $endt, NON È RIUSCITA (exit code: $ec) :-(" "$MAILF"
fi
}
#logcmd "grep pippo gigi" "grepa.log"
#logcmd "grep pippo bibi" "grepb.log"
#exit
echo "----------[ inizio esecuzione crawl.bash ]----------" >> $LOGF
#tar cJf run-`date +%Y-%m-%d--%H.%M.%S`.tar.xz run/
rm run/*
logcmd "php mustool.php updstats" "mustool.updstats.log"
[ "$2" == "dopeers" ] && logcmd "php peerscrawl.php -e peerscrawl.exclude -E" "peerscrawl.log"
logcmd "php crawler.php -L none - -T warning" "crawler.log"
logcmd "php mustool.php shuffle clean optimize" "mustool.shuffle-clean-optimize.log"
exit 0