Spamassassin : apprentissage et blacklist automatique - Historique des versions

Pierrick le 23 octobre 2012 à 12:21

2012-10-23T12:21:58Z

Frank le 14 septembre 2011 à 11:16

2011-09-14T11:16:53Z

Frank : Page créée avec « L'apprentissage des spams (sa-learn) et des hams (non-spams) est très aléatoir et très long sur Spamassassin. Il faut lui donner pratiquement un nombre égal de spams et d... »

2011-09-14T11:08:51Z

Page créée avec « L'apprentissage des spams (sa-learn) et des hams (non-spams) est très aléatoir et très long sur Spamassassin. Il faut lui donner pratiquement un nombre égal de spams et d... »

Nouvelle page

L'apprentissage des spams (sa-learn) et des hams (non-spams) est très aléatoir et très long sur Spamassassin. Il faut lui donner pratiquement un nombre égal de spams et de hams à apprendre pour qu'il commence à modifier son comportement.

Rien n'empêche de le mettre en place, mais il y a plus direct et plus rapide. Ce qui suit s'applique à des mailboxes au format Maildir.

Créer un répertoire "Junk" et un répertoire "Ham" sous la boîte de réception des utilisateurs. Dans Junk, l'utilisateur pousse les mails qu'il veut voir blacklisté. Dans Ham, il pousse soit les mails que spamassassin a noté spams par erreur (faux-positifs), soit les mails qui auraient été mis dans "Junk" par erreur, et qu'il faudrait donc "dé-blacklister".

Puis dans /etc/cron.daily, créer le script :
#!/bin/bash
date >> /var/log/sa/sa-learn.log
for homedir in $(cat /etc/passwd | awk -F ":" '{ print $6 }')
do
# Directories : ~/Maildir/.INBOX.{Junk,Ham}/{cur,new}
if [ -d $homedir/Maildir/.INBOX.Junk ]
then
echo $homedir >> /var/log/sa/sa-learn.log
sa-learn --showdots --no-sync --spam $homedir/Maildir/.INBOX.Junk/{cur,new} >> /var/log/sa/sa-learn.log 2>&1
if [ -d $homedir/Maildir/.INBOX.Ham ]
then
sa-learn --showdots --no-sync --ham $homedir/Maildir/.INBOX.Ham/{cur,new} >> /var/log/sa/sa-learn.log 2>&1
fi
fi

# Blacklisting address of mails manually moved to Junk dir

SADIR=$homedir/.spamassassin
JUNKMAIL=$homedir/Maildir/.INBOX.Junk
HAMMAIL=$homedir/Maildir/.INBOX.Ham

for r in cur new
do
for m in $(ls $JUNKMAIL/$r/* 2> /dev/null)
do
# Only the mails manually moved to Junk to avoid blacklisting Spamassassin false-positives
grep "^X-Spam-Status: No" $m > /dev/null
if [ $? -eq 0 ]
then
ADDR=$(grep "^From:" $m | grep -o "[\+\_\.[:alnum:]\-]*@[[:alnum:]\.\-]*" | tr "A-Z" "a-z" | sort -u)
# address successfully decoded
if [ "$ADDR" != "" ]
then
# already recorded ?
grep $ADDR $SADIR/user_prefs > /dev/null
if [ $? -eq 1 ]
then
echo "blacklist_from $ADDR" >> $SADIR/user_prefs
fi
fi
fi
done
done
# Now see if some blacklisted address need to be whitelisted again
for r in cur new
do
for m in $(ls $HAMMAIL/$r/* 2> /dev/null)
do
ADDR=$(grep "^From:" $m | grep -o "[\+\_\.[:alnum:]\-]*@[[:alnum:]\.\-]*" | tr "A-Z" "a-z" | sort -u)
# address successfully decoded
if [ "$ADDR" != "" ]
then
# Blacklisted ?
grep $ADDR $SADIR/user_prefs > /dev/null
if [ $? -eq 0 ]
then
cat $SADIR/user_prefs | grep -v $ADDR > $SADIR/_user_prefs
mv $SADIR/_user_prefs $SADIR/user_prefs
fi
fi
done
done

# Cleaning
find $homedir/Maildir/.INBOX.Ham/{cur,new} -type f -exec rm -f {} \; > /dev/null 2>&1
# disabled cleaning of spam directory : user must check spams for false-positives
# find $homedir/Maildir/.INBOX.Junk/{cur,new} -type f -exec rm -f {} \; > /dev/null 2>&1

done

← Version précédente		Version du 23 octobre 2012 à 12:21
Ligne 76 :		Ligne 76 :

	done		done
		+
		+
		+	Par ici mes petits robots spammeurs : eloh_maps@systea.net

@@ Ligne 11 : / Ligne 11 : @@
   do
   # Directories : ~/Maildir/.INBOX.{Junk,Ham}/{cur,new}
-     if [ -d $homedir/Maildir/.INBOX.Junk ]
      then
         echo $homedir >> /var/log/sa/sa-learn.log
-        sa-learn --showdots --no-sync --spam $homedir/Maildir/.INBOX.Junk/{cur,new} >> /var/log/sa/sa-learn.log 2>&1
+        sa-learn --showdots --no-sync --spam $JUNKMAIL/{cur,new} >> /var/log/sa/sa-learn.log 2>&1
-        if [ -d $homedir/Maildir/.INBOX.Ham ]
+        if [ -d $HAMMAIL ]
         then
-           sa-learn --showdots --no-sync --ham $homedir/Maildir/.INBOX.Ham/{cur,new} >> /var/log/sa/sa-learn.log 2>&1
+           sa-learn --showdots --no-sync --ham $HAMMAIL/{cur,new} >> /var/log/sa/sa-learn.log 2>&1
         fi
      fi
   # Blacklisting address of mails manually moved to Junk dir
      for r in cur new
@@ Ligne 70 : / Ligne 71 : @@
      # Cleaning
-     find $homedir/Maildir/.INBOX.Ham/{cur,new} -type f -exec rm -f {} \; > /dev/null 2>&1
+     find $HAMMAIL/{cur,new} -type f -exec rm -f {} \; > /dev/null 2>&1
      # disabled cleaning of spam directory : user must check spams for false-positives
-     # find $homedir/Maildir/.INBOX.Junk/{cur,new} -type f -exec rm -f {} \; > /dev/null 2>&1
+     # find $JUNKMAIL/{cur,new} -type f -exec rm -f {} \; > /dev/null 2>&1
   done