Le blog de Jean David TECHER, un Réunionnais à Saint-Priest/Lyon

Celà fait déjà une semaine que ma chère petite soeur est mariée à l'Ile de la Réunion. Une semaine déjà qu'elle s'appelle Madame FONTAINE. Je n'étais pas présent ce fameux vendredi 4 août mais j'étais présent par l'esprit. Vers 17h15 ici en métropole, j'ai eu une petite pensée pour elle ainsi que pour le reste de ma famille...

Celà a été une journée merveilleuse à ce que ma mère m'a racontée au téléphone. Tant mieux! C'est ce que je pouvais lui souhaiter de mieux! Mardi dernier a été un jour assez chargée en émotion pour moi! (chose que je ne compterais pas ici). Et de mon côté, quant est-il pour moi, suite à mes vacances!

Mes vacances ont été des plus relaxantes, je dois bien l'avouer! Il faut dire que tous ces après-midi et soirée passés le long du Lez m'ont fait un bien fou! Je n'aurais pas penser que le fait de me poser sur un banc, prendre un café à mon bar habituel à Castelnau serait pour moi un réel plaisir. Pourtant j'habite dans ce petit village depuis maintenant 5 ans!!! Ca a été un réel bonheur que de remonter au pays, même après un mois d'absence! On voit et on perçoit les choses différemment...C'est vrai que ca fait un bien fou!

A côté du côté fête de Juan-Les-Pins/Antibes, celà me change du tout au tout! C'est ce qui faut afin que celà ne devienne pas une routine que de remonter sur Montpellier. Fin du plaisir sinon

Ca fait du bien de temps en temps que de changer ses habitudes!

Par rapport à mon billet précédent sur spamassassinoù j'évoquais l'utilisation de Spamc, aujourd'hui j'ai découvert un script intéressant clamassassin qui permet d'utiliser clamav

1. Motivation

J'ai passé une bonne journée à essayer les diverses solutions fournies ci et là sur le Web (simscan, qsheff, qscanq ....) mais sans succès! L'installation de Qmail en elle même étant assez fastidieuse et ardue, ce n'est qu'en fin de soirée (jeudi 7 août 2008 en fin de soirée) que je suis parvenu à trouver cette solution assez intéressante et élégante car pas chère!. Personnellement, celà semble assez galère que d'essayer simscan et compagnie! D'où mon intérêt de l'avoir garder!

2. Installation de clamassassin 1.2.4

En pré-requis, il faut signaler que cette version de clamassassin est la seule qui fonctionnone conjointement pour ClamAV >= 0.90. Ce qui tombe bien car moi j'ai ClamAV 0.93 d'installé sur mon serveur-maison.

Le site est http://jameslick.com/clamassassin/

Pour l'installer, rien de plus simple que

wget http://jameslick.com/clamassassin/clamassassin-1.2.4.tar.gz
tar xvzf clamassassin-1.2.4.tar.gz 
cd clamassassin-1.2.4
./configure --enable-subject-rewrite
make
make install

L'option --enable-siubject-rewrite aura pour effet de mettre le motif "***VIRUS***" dans le sujet du maill.

Celà installe le script dans /usr/local/bin.

Par la suite pour l'utiliser conjointement avec spamc, on édite le script spamcheck.sh

vi /var/qmail/bin/spamcheck.sh

dont le nouveau contenu sera

/usr/local/bin/clamassassin|/usr/bin/spamc|/usr/local/bin/maildir ./Maildir/

3. Tests

Je vais maintenant procéder à 3 test pour vérifier le travail conjoint du spam et de l'antivirus:

1. test avec le virus eicar;
2. test pour un mail normal;
3. test avec un mail considéré comme du spam.

Remarque: Je détaillerais les commandes pour le premier test. Quant aux deux autres, je me contenterais d'afficher le rendu.

3.1 Test avec VIRUS EICAR

Le test eicar est assez connu pour tester les antivirus. Dans un fichier eicar.txt, on met le contenu suivant

root@olivia:~# cat eicar.txt 
X5O!P%@AP[4\PZX54(P^)7CC)7}$EICAR-STANDARD-ANTIVIRUS-TEST-FILE!$H+H*

Connecté en tant que root, je m'envois un petit mail en utilisant qmail-inject

 cat eicar.txt |/var/qmail/bin/qmail-inject david.techer

Depuis les logs de Qmail, j'ai le message suivant

2008-08-08 00:14:37.491745500 new msg 11748275
2008-08-08 00:14:37.491750500 info msg 11748275: bytes 276 from  qp 1252 uid 0
2008-08-08 00:14:37.497008500 starting delivery 45: msg 11748275 to local david.techer@davidgis.fr
2008-08-08 00:14:37.497013500 status: local 1/10 remote 0/20
2008-08-08 00:14:42.061792500 delivery 45: success: 1218147287.M519063P1259.olivia/did_0+0+1/
2008-08-08 00:14:42.061795500 status: local 0/10 remote 0/20
2008-08-08 00:14:42.061797500 end msg 11748275

Il ne reste plus qu'à visualiser le contenu du mail depuis mon Maildir

root@olivia:~# cat $(find /home/user/david.techer/Maildir/|grep 1218147287)
Return-Path: 
Delivered-To: david.techer@davidgis.fr
X-Spam-Checker-Version: SpamAssassin 3.1.7-deb (2006-10-05) on 
	olivia.davidgis.fr
X-Spam-Level: **
X-Spam-Status: No, score=2.8 required=5.0 tests=AWL,FM_MULTI_ODD2,
	MISSING_HEADERS,NO_REAL_NAME,NO_RELAYS autolearn=no version=3.1.7-deb
Received: (qmail 1252 invoked by uid 0); 7 Aug 2008 22:14:37 -0000
Date: 7 Aug 2008 22:14:37 -0000
Message-ID: <20080807221437.1251.qmail@davidgis.fr>
From: root@davidgis.fr
Cc: recipient list not shown: ;
Subject: *****VIRUS***** 
X-Virus-Status: Yes
X-Virus-Report: Eicar-Test-Signature FOUND 
X-Virus-Checker-Version: clamassassin 1.2.4 with clamscan / ClamAV 0.93.3/7962/Wed Aug  6 23:44:32 2008

X5O!P%@AP[4\PZX54(P^)7CC)7}$EICAR-STANDARD-ANTIVIRUS-TEST-FILE!$H+H*

On a donc bien un mail virusifié!

3.2 Avec un mail normal

Si on a compris les commandes utilisées dans la section précédente, on peut aussi faire ce qui suit. Je vais m'envoyer un simple mail contenant le message "Linux c'est de la balle..."

root@olivia:~# echo "Linux c'est de la balle..." |/var/qmail/bin/qmail-inject david.techer
root@olivia:~# qmail-log.sh 
2008-08-08 00:16:06.804082500 info msg 11748214: bytes 77442 from  qp 2508 uid 1004
2008-08-08 00:16:06.815372500 starting delivery 46: msg 11748214 to local david.techer@davidgis.fr
2008-08-08 00:16:06.815377500 status: local 1/10 remote 0/20
2008-08-08 00:16:18.208044500 delivery 46: success: 1218147376.M886955P2522.olivia/did_0+0+1/
2008-08-08 00:16:18.208048500 status: local 0/10 remote 0/20
2008-08-08 00:16:18.208050500 end msg 11748214
2008-08-08 00:33:11.677308500 new msg 11748214
2008-08-08 00:33:11.677313500 info msg 11748214: bytes 234 from  qp 6379 uid 0
2008-08-08 00:33:11.699261500 starting delivery 47: msg 11748214 to local david.techer@davidgis.fr
2008-08-08 00:33:11.699266500 status: local 1/10 remote 0/20
2008-08-08 00:33:16.587431500 delivery 47: success: 1218148401.M704201P6387.olivia/did_0+0+1/
2008-08-08 00:33:16.587435500 status: local 0/10 remote 0/20
2008-08-08 00:33:16.587436500 end msg 11748214
root@olivia:~# cat $(find /home/user/david.techer/Maildir/|grep  1218148401)
Return-Path: 
Delivered-To: david.techer@davidgis.fr
X-Spam-Checker-Version: SpamAssassin 3.1.7-deb (2006-10-05) on 
	olivia.davidgis.fr
X-Spam-Level: **
X-Spam-Status: No, score=2.9 required=5.0 tests=AWL,MISSING_HEADERS,
	MISSING_SUBJECT,NO_REAL_NAME,NO_RELAYS autolearn=no version=3.1.7-deb
Received: (qmail 6379 invoked by uid 0); 7 Aug 2008 22:33:11 -0000
Date: 7 Aug 2008 22:33:11 -0000
Message-ID: <20080807223311.6378.qmail@davidgis.fr>
From: root@davidgis.fr
Cc: recipient list not shown: ;
X-Virus-Status: No
X-Virus-Checker-Version: clamassassin 1.2.4 with clamscan / ClamAV 0.93.3/7962/Wed Aug  6 23:44:32 2008

Linux c'est de la balle...

Donc aucun souci! Reste à voir pour du spam.

Remarque: Dans les entêtes, on voit bien que les filtres sont appliqués.

3.3 Mail avec Spam

Dans les règles qui régissent mon spamassassin, il suffit par exemple que mon mail contienne "Bad erection" pour que ce dernier soit considéré comme du spam. C'est ce que nous allons faire ici.

root@olivia:~# echo "Linux c'est de la balle...Bad erection with MySQL" |/var/qmail/bin/qmail-inject david.techer
root@olivia:~# qmail-log.sh 
2008-08-08 00:33:11.677313500 info msg 11748214: bytes 234 from  qp 6379 uid 0
2008-08-08 00:33:11.699261500 starting delivery 47: msg 11748214 to local david.techer@davidgis.fr
2008-08-08 00:33:11.699266500 status: local 1/10 remote 0/20
2008-08-08 00:33:16.587431500 delivery 47: success: 1218148401.M704201P6387.olivia/did_0+0+1/
2008-08-08 00:33:16.587435500 status: local 0/10 remote 0/20
2008-08-08 00:33:16.587436500 end msg 11748214
2008-08-08 00:38:26.050703500 new msg 11748214
2008-08-08 00:38:26.050708500 info msg 11748214: bytes 257 from  qp 7685 uid 0
2008-08-08 00:38:26.067318500 starting delivery 48: msg 11748214 to local david.techer@davidgis.fr
2008-08-08 00:38:26.067323500 status: local 1/10 remote 0/20
2008-08-08 00:38:30.651123500 delivery 48: success: 1218148716.M092893P7699.olivia/did_0+0+1/
2008-08-08 00:38:30.651127500 status: local 0/10 remote 0/20
2008-08-08 00:38:30.651128500 end msg 11748214
root@olivia:~# cat $(find /home/user/david.techer/Maildir/|grep  1218148716)
Return-Path: 
Delivered-To: david.techer@davidgis.fr
Received: from localhost by olivia.davidgis.fr
	with SpamAssassin (version 3.1.7-deb);
	Fri, 08 Aug 2008 00:38:30 +0200
From: root@davidgis.fr
Cc: recipient list not shown: ;
Subject: *****SPAM***** 
Date: 7 Aug 2008 22:38:26 -0000
Message-Id: <20080807223826.7684.qmail@davidgis.fr>
X-Spam-Flag: YES
X-Spam-Checker-Version: SpamAssassin 3.1.7-deb (2006-10-05) on 
	olivia.davidgis.fr
X-Spam-Level: ********
X-Spam-Status: Yes, score=8.3 required=5.0 tests=AWL,FB_BAD_ERECT,
	MISSING_HEADERS,MISSING_SUBJECT,NO_REAL_NAME,NO_RELAYS autolearn=no 
	version=3.1.7-deb
MIME-Version: 1.0
Content-Type: multipart/mixed; boundary="----------=_489B7966.41094D1D"

This is a multi-part message in MIME format.

------------=_489B7966.41094D1D
Content-Type: text/plain
Content-Disposition: inline
Content-Transfer-Encoding: 8bit

Spam detection software, running on the system "olivia.davidgis.fr", has
identified this incoming email as possible spam.  The original message
has been attached to this so you can view it (if it isn't spam) or label
similar future email.  If you have any questions, see
the administrator of that system for details.

Content preview:  [...] 

Content analysis details:   (8.3 points, 5.0 required)

 pts rule name              description
---- ---------------------- --------------------------------------------------
 0.6 NO_REAL_NAME           From: does not include a real name
-0.0 NO_RELAYS              Informational: message was not relayed via SMTP
 0.2 MISSING_HEADERS        Missing To: header
  11 FB_BAD_ERECT           BODY: Phrase: Bad Erection
 1.3 MISSING_SUBJECT        Missing Subject: header
-4.6 AWL                    AWL: From: address is in the auto white-list



------------=_489B7966.41094D1D
Content-Type: message/rfc822; x-spam-type=original
Content-Description: original message before SpamAssassin
Content-Disposition: inline
Content-Transfer-Encoding: 8bit

Received: (qmail 7685 invoked by uid 0); 7 Aug 2008 22:38:26 -0000
Date: 7 Aug 2008 22:38:26 -0000
Message-ID: <20080807223826.7684.qmail@davidgis.fr>
From: root@davidgis.fr
Cc: recipient list not shown: ;
X-Virus-Status: No
X-Virus-Checker-Version: clamassassin 1.2.4 with clamscan / ClamAV 0.93.3/7962/Wed Aug  6 23:44:32 2008

Linux c'est de la balle...Bad erection with MySQL


------------=_489B7966.41094D1D--

Depuis plusieurs jours, j'ai ce mail qui traine dans mon serveur

2008-08-06 17:42:56.238200500 starting delivery 81: msg 11748527 to remote depressions@ideas-now.com
2008-08-06 17:42:56.238205500 status: local 0/10 remote 1/20
2008-08-06 17:42:57.712704500 delivery 81: deferral: Sorry,_I_wasn't_able_to_establish_an_SMTP_connection._(#4.4.1)/
2008-08-06 17:42:57.712710500 status: local 0/10 remote 0/20
2008-08-06 17:58:07.262245500 status: exiting

C'est ce que me confirme qmail-qstat

root@olivia:~/qmail-remove-0.95# qmail-qstat 
messages in queue:1
messages in queue but not yet preprocessed: 0

Il faut s'en débarasser!

Pour celà, il y a qmail-remove

Installation

Rien de plus simple que

wget http://www.linuxmagic.com/opensource/qmail/qmail-remove/qmail-remove-0.95.tar.gz
tar xvzf qmail-remove-0.95.tar.gz 
cd qmail-remove-0.95
   make
make install

Il faut aussi créer le répertoire nécessaire

mkdir /var/qmail/queue/yanked

Utilisation

Avant de le lancer, il faut arrêter le serveur

svc -d /service/*

Puis, on procède à une recherche sur le motif ideas

qmail-remove -r -p ideas

Puis on relance le serveur

svc -u /service/*

On vérifie que c'est bon avec qmail-qstat

root@olivia:~/qmail-remove-0.95# qmail-qstat 
messages in queue: 0
messages in queue but not yet preprocessed: 0

Source pour qmail-remove: http://www.debianadmin.com/delete-qmail-server-messages-queue.html

J'ai fait la modification suivante pour mon coloc' Ludo qui en a besoin ces temps-ci. Il a besoin d'une boite mails ces temps-ci. Normalement, une fois que Qmail et LDAP sont configurés, il faut ajouter les 3 entrées suivantes à l'annuaire pour chaque utilisateur

Champs	Valeur
qmailDotMode	ldapwithprog
deliveryProgramPath	/var/qmail/bin/spamcheck.sh
deliveryMode	nolocal

L'idée provient de http://www.mail-archive.com/qmail-ldap@argus.pipeline.ch/msg06122.html

Le contenu du script spamcheck.sh est

/usr/bin/spamc  |/usr/local/bin/maildir ./Maildir/

Rappel: SMBLDAP-QMAIL-TOOLS

Pour ceux qui ont un serveur Samba monté en PDC avec OpenLDAP et qui souhaitent configuré ce dernier avec un serveur de mail comme qmail, il existe aussi les smbldap-qmail-tools disponibles à http://smbldap-addons.sourceforge.net/smbldap-qmail-tools/

Pour monter un tel serveur, deux liens bien intéressant

• http://www.qmail-ldap.org/wiki/index.php/Documentation
• http://www.qmail-ldap.info/

Surtout beaucoup de patience pour le monter car il en faut en suivant les diverses manip'...mais le jeu en vaut la chandelle!

Spamc

Il faut aussi avoir installer spamc et spamassassin. Voici c un descriptif de spamc fourni par apt-cache sur Ubuntu

root@olivia:~# apt-cache show spamc
Package: spamc
Priority: optional
Section: mail
Installed-Size: 168
Maintainer: Duncan Findlay 
Architecture: i386
Source: spamassassin
Version: 3.2.3-0.volatile1
Depends: libc6 (>= 2.3.6-6), libssl0.9.8 (>= 0.9.8c-1), zlib1g (>= 1:1.2.1)
Suggests: spamassassin
Conflicts: spamassassin (<< 2.30-2)
Filename: pool/volatile/main/s/spamassassin/spamc_3.2.3-0.volatile1_i386.deb
Size: 70290
MD5sum: 4b5efc0020b846897d5afb0fdc814345
SHA1: ac81d80d098366b593895c3643b4cc1b7804306a
SHA256: ba8f2238d3cb55183362bfa6acff80d66f18349cf775f2329412e37e37486700
Description: Client for SpamAssassin spam filtering daemon
 spamc is the client to communicate with spamd, the daemonized form of
 SpamAssassin (see the spamassassin package). It is written in C for
 maximum speed and minimum loading overhead.
 .
 spamc is quite useful for integrating spamassassin into an MTA or
 into a .procmailrc file because of its speed.
 .
 This package is useless unless you have spamassassin installed,
 either on this machine or another local machine (i.e. a mail server).
 .
 Homepage: http://www.spamassassin.org

Package: spamc
Priority: optional
Section: universe/mail
Installed-Size: 164
Maintainer: Ubuntu MOTU Developers 
Original-Maintainer: Duncan Findlay 
Architecture: i386
Source: spamassassin
Version: 3.1.7-2ubuntu1
Depends: libc6 (>= 2.5-0ubuntu1), libssl0.9.8 (>= 0.9.8c-1)
Suggests: spamassassin
Conflicts: spamassassin (<< 2.30-2)
Filename: pool/universe/s/spamassassin/spamc_3.1.7-2ubuntu1_i386.deb
Size: 75272
MD5sum: d8e4cefa71dc5fe2c8bf1f46eedcedd4
SHA1: 528b8249b60177a1dbeeb8c8be6d8e4707ffb15b
SHA256: 065f90cec4111edfb529fb3206a0840aac24043d679031a5efaa189a45e6b831
Description: Client for SpamAssassin spam filtering daemon
 spamc is the client to communicate with spamd, the daemonized form of
 SpamAssassin (see the spamassassin package). It is written in C for
 maximum speed and minimum loading overhead.
 .
 spamc is quite useful for integrating spamassassin into an MTA or
 into a .procmailrc file because of its speed.
 .
 This package is useless unless you have spamassassin installed,
 either on this machine or another local machine (i.e. a mail server).
 .
 Homepage: http://www.spamassassin.org
Bugs: mailto:ubuntu-users@lists.ubuntu.com
Origin: Ubuntu

Script PHP pour ajouter les trois entrées requis

On partira ici du principe qu'on a un utilisateur déjà référencé sous qmail-ldap. Ici il s'appelle ludovic.pires. Si on a compilé PHP avec LDAP, on peut recourir au script suivant en utilisant ldap_modifiy()

<?
   $server = "localhost";
   $port = "389";
   $racine = "dc=chezdavid,dc=local";
 //  $rootdn = "uid=ludovic.pires,ou=Users,dc=chezdavid,dc=local";
   $rootdn = "cn=admin,dc=chezdavid,dc=local";
   $rootpw = "mot_de_passe";
   echo "Connexion...\n";
   $ds=ldap_connect($server);
if ($ds==1)
         {
                // on s'authentifie en tant que super-utilisateur, ici, ldap_admin
                $r=ldap_bind($ds,$rootdn,$rootpw);
                $entry["cn"]="ludovic.pires";
                $entry["sn"]="ludovic.pires";
                $entry["qmailDotMode"] = "ldapwithprog";
                $entry["deliveryProgramPath"] = "/var/qmail/bin/spamcheck.sh";
                $entry["deliveryMode"] = "nolocal";
                $r=ldap_modify($ds, "uid=ludovic.pires,ou=Users,dc=chezdavid,dc=local",$entry);
                echo "Deconnexion...\n";
                ldap_close($ds);
         }
else {
        echo  "Impossible de se connecter au serveur LDAP";

         }
?>

On l'exécute en ligne de commande en faisant

 /usr/lib/cgi-bin/php -q  php_qmail_spam_add.php

Pour vérifier que tout a été ajoutée sans souci

root@olivia:~# smbldap-usershow ludovic.pires|grep -e qmailDotMode -e delivery
qmailDotMode: ldapwithprog
deliveryProgramPath: /var/qmail/bin/spamcheck.sh
deliveryMode: nolocal

Test

Depuis mon bureau, je me suis envoyé deux fois le même mail à la maison, et en regardant les logs de spamd.log

root@olivia:~# tail -f /var/log/spamd.log 
Wed Aug  6 11:06:32 2008 [5488] info: prefork: child states: II
Wed Aug  6 13:31:29 2008 [5623] info: spamd: connection from olivia.davidgis.fr [127.0.0.1] at port 45032
Wed Aug  6 13:31:29 2008 [5623] info: spamd: setuid to ludovic.pires succeeded
Wed Aug  6 13:31:29 2008 [5623] info: spamd: creating default_prefs: /home/user/ludovic.pires/.spamassassin/user_prefs
Wed Aug  6 13:31:29 2008 [5623] warn: config: cannot write to /home/user/ludovic.pires/.spamassassin/user_prefs: No such file or directory
Wed Aug  6 13:31:29 2008 [5623] info: spamd: failed to create readable default_prefs: /home/user/ludovic.pires/.spamassassin/user_prefs
Wed Aug  6 13:31:29 2008 [5623] info: spamd: processing message <1218022003.7698.0.camel@jdtecher.xerus.net> for ludovic.pires:1016
Wed Aug  6 13:31:31 2008 [5623] info: spamd: identified spam (10.8/5.0) for ludovic.pires:1016 in 2.2 seconds, 1111 bytes.
Wed Aug  6 13:31:31 2008 [5623] info: spamd: result: Y 10 - FB_BAD_ERECT scantime=2.2,size=1111,user=ludovic.pires,uid=1016,required_score=5.0,rhost=olivia.davidgis.fr,raddr=127.0.0.1,rport=45032,mid=<1218022003.7698.0.camel@jdtecher.xerus.net>,autolearn=no
Wed Aug  6 13:31:31 2008 [5488] info: prefork: child states: II
Wed Aug  6 13:35:12 2008 [5623] info: spamd: connection from olivia.davidgis.fr [127.0.0.1] at port 45188
Wed Aug  6 13:35:12 2008 [5623] info: spamd: setuid to ludovic.pires succeeded
Wed Aug  6 13:35:12 2008 [5623] info: spamd: creating default_prefs: /home/user/ludovic.pires/.spamassassin/user_prefs
Wed Aug  6 13:35:12 2008 [5623] warn: config: created user preferences file: /home/user/ludovic.pires/.spamassassin/user_prefs
Wed Aug  6 13:35:12 2008 [5623] info: spamd: processing message <1218022229.7698.2.camel@jdtecher.xerus.net> for ludovic.pires:1016
Wed Aug  6 13:35:12 2008 [5623] warn: pyzor: check failed: internal error
Wed Aug  6 13:35:15 2008 [5623] info: spamd: identified spam (10.8/5.0) for ludovic.pires:1016 in 2.5 seconds, 1111 bytes.
Wed Aug  6 13:35:15 2008 [5623] info: spamd: result: Y 10 - FB_BAD_ERECT scantime=2.5,size=1111,user=ludovic.pires,uid=1016,required_score=5.0,rhost=olivia.davidgis.fr,raddr=127.0.0.1,rport=45188,mid=<1218022229.7698.2.camel@jdtecher.xerus.net>,autolearn=no

Finalement les sous-répertoires de .spamassassin sont proprement créés.