Outils personnels

Spamassassin : apprentissage et blacklist automatique : Différence entre versions

De wikiGite

(Page créée avec « L'apprentissage des spams (sa-learn) et des hams (non-spams) est très aléatoir et très long sur Spamassassin. Il faut lui donner pratiquement un nombre égal de spams et d... »)
 
 
(Une révision intermédiaire par un autre utilisateur non affichée)
Ligne 11 : Ligne 11 :
 
  do
 
  do
 
  # Directories : ~/Maildir/.INBOX.{Junk,Ham}/{cur,new}
 
  # Directories : ~/Maildir/.INBOX.{Junk,Ham}/{cur,new}
     if [ -d $homedir/Maildir/.INBOX.Junk ]
+
 +
     SADIR=$homedir/.spamassassin
 +
    JUNKMAIL=$homedir/Maildir/.INBOX.Junk
 +
    HAMMAIL=$homedir/Maildir/.INBOX.Ham
 +
 +
    if [ -d $JUNKMAIL ]
 
     then
 
     then
 
       echo $homedir >> /var/log/sa/sa-learn.log
 
       echo $homedir >> /var/log/sa/sa-learn.log
       sa-learn --showdots --no-sync --spam $homedir/Maildir/.INBOX.Junk/{cur,new} >> /var/log/sa/sa-learn.log 2>&1
+
       sa-learn --showdots --no-sync --spam $JUNKMAIL/{cur,new} >> /var/log/sa/sa-learn.log 2>&1
       if [ -d $homedir/Maildir/.INBOX.Ham ]
+
       if [ -d $HAMMAIL ]
 
       then
 
       then
           sa-learn --showdots --no-sync --ham $homedir/Maildir/.INBOX.Ham/{cur,new} >> /var/log/sa/sa-learn.log 2>&1
+
           sa-learn --showdots --no-sync --ham $HAMMAIL/{cur,new} >> /var/log/sa/sa-learn.log 2>&1
 
       fi
 
       fi
 
     fi
 
     fi
 
   
 
   
 
  # Blacklisting address of mails manually moved to Junk dir
 
  # Blacklisting address of mails manually moved to Junk dir
 
    SADIR=$homedir/.spamassassin
 
    JUNKMAIL=$homedir/Maildir/.INBOX.Junk
 
    HAMMAIL=$homedir/Maildir/.INBOX.Ham
 
 
   
 
   
 
     for r in cur new
 
     for r in cur new
Ligne 70 : Ligne 71 :
 
   
 
   
 
     # Cleaning
 
     # Cleaning
     find $homedir/Maildir/.INBOX.Ham/{cur,new} -type f -exec rm -f {} \; > /dev/null 2>&1
+
     find $HAMMAIL/{cur,new} -type f -exec rm -f {} \; > /dev/null 2>&1
 
     # disabled cleaning of spam directory : user must check spams for false-positives
 
     # disabled cleaning of spam directory : user must check spams for false-positives
     # find $homedir/Maildir/.INBOX.Junk/{cur,new} -type f -exec rm -f {} \; > /dev/null 2>&1
+
     # find $JUNKMAIL/{cur,new} -type f -exec rm -f {} \; > /dev/null 2>&1
 
   
 
   
 
  done
 
  done
 +
 +
 +
Par ici mes petits robots spammeurs : eloh_maps@systea.net

Version actuelle datée du 23 octobre 2012 à 12:21

L'apprentissage des spams (sa-learn) et des hams (non-spams) est très aléatoir et très long sur Spamassassin. Il faut lui donner pratiquement un nombre égal de spams et de hams à apprendre pour qu'il commence à modifier son comportement.

Rien n'empêche de le mettre en place, mais il y a plus direct et plus rapide. Ce qui suit s'applique à des mailboxes au format Maildir.

Créer un répertoire "Junk" et un répertoire "Ham" sous la boîte de réception des utilisateurs. Dans Junk, l'utilisateur pousse les mails qu'il veut voir blacklisté. Dans Ham, il pousse soit les mails que spamassassin a noté spams par erreur (faux-positifs), soit les mails qui auraient été mis dans "Junk" par erreur, et qu'il faudrait donc "dé-blacklister".

Puis dans /etc/cron.daily, créer le script :

#!/bin/bash
date >> /var/log/sa/sa-learn.log
for homedir in $(cat /etc/passwd | awk -F ":" '{ print $6 }')
do
# Directories : ~/Maildir/.INBOX.{Junk,Ham}/{cur,new}

   SADIR=$homedir/.spamassassin
   JUNKMAIL=$homedir/Maildir/.INBOX.Junk
   HAMMAIL=$homedir/Maildir/.INBOX.Ham

   if [ -d $JUNKMAIL ]
   then
      echo $homedir >> /var/log/sa/sa-learn.log
      sa-learn --showdots --no-sync --spam $JUNKMAIL/{cur,new} >> /var/log/sa/sa-learn.log 2>&1
      if [ -d $HAMMAIL ]
      then
         sa-learn --showdots --no-sync --ham $HAMMAIL/{cur,new} >> /var/log/sa/sa-learn.log 2>&1
      fi
   fi

# Blacklisting address of mails manually moved to Junk dir

   for r in cur new
   do
      for m in $(ls $JUNKMAIL/$r/* 2> /dev/null)
      do
   # Only the mails manually moved to Junk to avoid blacklisting Spamassassin false-positives
         grep "^X-Spam-Status: No" $m > /dev/null
         if [ $? -eq 0 ]
         then
            ADDR=$(grep "^From:" $m | grep -o "[\+\_\.[:alnum:]\-]*@[[:alnum:]\.\-]*" | tr "A-Z" "a-z" | sort -u)
   # address successfully decoded
            if [ "$ADDR" != "" ]
            then
   # already recorded ?
               grep $ADDR $SADIR/user_prefs > /dev/null
               if [ $? -eq 1 ]
               then
                  echo "blacklist_from $ADDR" >>  $SADIR/user_prefs
               fi
            fi
         fi
      done
   done
   # Now see if some blacklisted address need to be whitelisted again
   for r in cur new
   do
      for m in $(ls $HAMMAIL/$r/* 2> /dev/null)
      do
         ADDR=$(grep "^From:" $m | grep -o "[\+\_\.[:alnum:]\-]*@[[:alnum:]\.\-]*" | tr "A-Z" "a-z" | sort -u)
   # address successfully decoded
         if [ "$ADDR" != "" ]
         then
   # Blacklisted ?
            grep $ADDR $SADIR/user_prefs > /dev/null
            if [ $? -eq 0 ]
            then
              cat $SADIR/user_prefs | grep -v $ADDR > $SADIR/_user_prefs
              mv $SADIR/_user_prefs $SADIR/user_prefs
            fi
         fi
      done
   done

   # Cleaning
   find $HAMMAIL/{cur,new} -type f -exec rm -f {} \; > /dev/null 2>&1
   # disabled cleaning of spam directory : user must check spams for false-positives
   # find $JUNKMAIL/{cur,new} -type f -exec rm -f {} \; > /dev/null 2>&1

done


Par ici mes petits robots spammeurs : eloh_maps@systea.net