L'appartement

Une nouvelle version de sendNews

Yves Tannier — Thu, 04 Mar 2010 09:49:00 +0100

Après un certain nombre de tests et d'utilisations en production, voici une nouvelle version de mon script de mailing en PHP

En plus des habituelles corrections de bugs, celle-ci intègre une nouvelle fonctionnalité très demandée permettant de personnaliser les messages pour chaque expéditeur.

Le principe est simple : il suffit d'utiliser le marqueur {_(nom_du_champ)_} dans votre fichier HTML

Par exemple : dans ma table SQL, j'ai le champ "nom". Dans le fichier HTML qui compose mon message, je place donc "Bonjour, {_(nom)_}"

J'ai testé cette fonctionnalité sur des envois de plusieurs lettres de plus de 25000/30000 abonnés et je n'ai noté aucun problème.

Le script est téléchargeable sur github

Et je rappelle que le mini site est toujours en ligne (mais pas à jour)

Le développement continue au fur et à mesure de l'utilisation du script, et j'espère proposer prochainement quelques fonctionnalités sympathiques en cours de test...

[tips] Downgrade de Mysql 5.1 à Mysql 5.0 sur Ubuntu 9.10 Karmic

Yves Tannier — Thu, 28 Jan 2010 16:53:00 +0100

Sur un serveur de développement, j'ai du downgrader de Mysql 5.1 vers Mysql 5.0. Notamment le temps de modifier dans une application toutes les occurrences du mot "range" qui devient un mot réservé sur Mysql 5.1 (grrrr !).

Le downgrade ne fonctionne pas sur Ubuntu 9.10 si vous ne supprimez pas les fichiers debian-5.1.flag et mysql_upgrade_info du répertoire /var/lib/mysql

C'est bête mais c'est comme ça

[tips] Colonnes de la même hauteur avec jQuery

Yves Tannier — Tue, 19 Jan 2010 12:23:00 +0100

Un truc simple mais efficace pour obtenir des colonnes de tailles égales malgré des contenus de tailles différentes.

Voici une exemple avec trois colonnes : #colonne_un, #colonne_deux, #colonne_trois et la classe .colonne sur chacune.

var maxCol = Math.max($('#colonne_un').height(),$('#colonne_deux').height(),$('#colonne_trois').height());
$('.colonne').height(maxCol);

Les vidéos de votre site intégrées et lisibles directement sur Facebook

Yves Tannier — Fri, 27 Nov 2009 09:29:00 +0100

Vous souhaitez, à l'instar de Youtube ou Dailymotion, que vos visiteurs, également utilisateurs de Facebook, puissent ajouter directement les vidéos de votre site sur leur mur ? C'est très simple.

Première étape, intégrer les balises méta demandées par Facebook

Le ''wiki developer'' de Facebook est assez explicite sur les balises meta à intégrer dans le head de vos pages contenant des vidéos. (exemple dans le code source de cette page)

<meta name="title" content="video_title" /> 
<meta name="description" content="video_description" /> 
<link rel="image_src" href="video_screenshot_image_src url" /> 
<link rel="video_src" href="video_src url"/>
<meta name="video_height" content="video_height" />
<meta name="video_width" content="video_width" /> 
<meta name="video_type" content="Content-Type header field" />

Deuxième étape : demandez à facebook de whitelister votre domaine

Pour cette étape :

1. connectez vous sur l'application Facebook Developper

2. postez un message sur Developer Help Contact Form en précisant la catégorie de demande Embedding Videos On Facebook. Dans le champ Link, précisez bien le domaine sur lequel vous souhaitez cette autorisation.

3. patientez en attendant un message de Facedebouc

that's all folks !

Génération de graphiques de bilan énergétique avec Imagemagick

Yves Tannier — Tue, 03 Nov 2009 10:35:00 +0100

Dans le cadre de la réalisation du site d'une agence immobilière, J'ai codé une petite classe en PHP qui permet de générer les graphiques des bilans de performance énergétique.

Il s'agit simplement de placer correctement l'indicateur de valeur au bon endroit sur le graphique. Via l'excellent programme ImageMagick, j'effectue donc le "montage" entre l'image source et l'indicateur. La subtilité réside dans le calcul permettant le placement correct sur la bonne "lettre" (A,B,C,D,E,F). L'échelle de valeur n'est en effet pas progressive.

Vous pouvez télécharger cette classe ou générer vos graphiques sur la page dédiée.

J'en ai profité pour me lancer dans l'apprentissage de git en lieu et place de subversion et je ne suis pas déçu ! J'ai du même coup commencé à héberger certains projets sur github.

Une nouvelle version du script de mailing avec gestion des bounces

Yves Tannier — Tue, 13 Oct 2009 16:58:00 +0200

Disclaimer : Ce programme reste en version beta. Je l'utilise en production mais pas la peine de m'insulter si vous ne parvenez pas à l'utiliser !

Je suis heureux de proposer enfin une nouvelle version de mon script de mass mailing et d'analyse des bounces en PHP (CLI). Il y a pas mal d'améliorations et de corrections par rapport à la version précédente.

On peux déjà noter que pour plus de lisibilité, j'ai développé un mini-site avec pas mal d'informations utiles sur la chose.

Une des autres principales nouveautés réside dans l'analyse des mails invalides, via les « bounces ».

Rien n'est plus problématique qu'une liste d'abonnés à moitié fausse ! Il est de plus en plus fréquent que les fournisseurs blacklistent des adresses IP qui tentent d'expédier beaucoup trop de messages à destination d'adresses inexistantes.

Pour cette fonctionnalité, j'ai choisi d'analyser la boite qui reçoit les erreurs (celle précisée par l'entête return-path du mail).

Tant que tous les serveurs de mail ~~ne se donneront pas la main pour chanter en cœur~~ ne respecteront pas les RFCs à ce sujet, je ne pense pas qu'il y aura d'autre solution efficace !

Je me suis basé sur une classe trouvée sur Sourceforge ^[1] et mon collègue Zas a pas mal bricolé sur cette partie (corrections de bugs et optimisations) en plus des corrections sur le reste de sendNews

Cette version de sendNews est depuis quelques temps en production et je suis assez satisfait du résultat. Il manque un certain nombre de règles d'analyse des bounces pour être réellement exhaustif. Quoiqu'il en soit, mes listes de diffusion ne contiennent pas un nombre beaucoup trop important d'adresses non valide.

Tous les feedbacks sur ce script sont les bienvenus !

Le site mini-site sendNews

Précédemment sur le même sujet

Notes

[1] Le développement de cette classe (bmh) a repris sous la houlette des créateurs de PHPMailer, je n'ai pas encore eu le temps d'apprécier le refactoring qui a été réalisé

Documentation de certaines variables d'Amavisd-new

Yves Tannier — Mon, 28 Sep 2009 21:17:00 +0200

Une des particularités intéressantes d'Amavisd-new est de permettre le stockage des règles de filtrage dans une base de données (*SQL, LDAP... Mysql dans mon cas). Ceci est particulièrement pratique lorsqu'on souhaite appliquer une configuration différente par utilisateur et/ou par domaine concernant l'analyse antispam/antivirus.

Il existe plusieurs interfaces web pour la gestion de ces réglages. Cependant, souhaitant intégrer cette fonctionnalité à un panel déjà existant, j'ai développé la mienne (script non distribuable en l'état)

Pour cette réalisation, il était nécessaire de récapituler, en français, le rôle des différentes variables disponible. Voici le résultat. La version sous forme de tableau associatif PHP est à peine différente dans les formulations. Peut-être utile pour une personne souhaitant développer une interface de ce type.

Activer ou désactiver certaines analyses

virus_lover : Recevoir les mails détectés comme virus
spam_lover : Recevoir les mails détectés comme SPAM
banned_files_lover : Recevoir les mails qui contiennent des pièces jointes non autorisées

Liste des interdits

bad_header_lover : Recevoir les mails qui possèdent une mauvaise entête
bypass_virus_checks : Désactiver complètement l'analyse antivirus
bypass_spam_checks : Désactiver complètement l'antispam
bypass_banned_checks : Désactiver complètement l'analyse simple des pièces jointes
bypass_header_checks : Désactiver complètement l'analyse des entêtes de message

Modifier le comportement et le contenu des mails en fonction des résultats de l'analyse

spam_modifies_subj : Modifier le sujet du mail pour les SPAM
spam_tag_level : Score à partir duquel l'entête du mail contient le résultat de l'analyse (ne modifie pas le corps ou le sujet du mail. Seule l'entête est modifiée)
spam_tag2_level : Score à partir duquel le mail est marqué comme SPAM et délivré au destinataire
spam_kill_level : Score à partir duquel le mail est marqué comme SPAM et ne vous est pas délivré. Il est cependant mis en quarantaine sauf si vous avez modifié l'option spam_quarantine_cutoff_level
spam_dsn_cutoff_level : Score à partir duquel l'expéditeur n'est pas prévenu que son mail a été considéré comme du SPAM. Nous vous déconseillons fortement de changer cette valeur si vous ne souhaitez pas que votre adresse mail soit enregistrée comme valide par les spammeurs
spam_quarantine_cutoff_level : Score à partir duquel le mail est définitivement effacé (il n'est donc pas gardé en quarantaine pendant 30 jours)
spam_subject_tag : Terme ajouté dans le sujet des mails sains (non spam, virus ou bannis)
spam_subject_tag2 : Terme ajouté dans l'objet d'un mail soupçonné d'être un SPAM

Transférer les mails sur en fonction des résultats de l'analyse

virus_quarantine_to : Envoyer les mails soupçonnés d'être des virus vers l'adresse spécifiée
spam_quarantine_to : Envoyer les mails soupçonnés d'être des SPAM vers l'adresse spécifiée
banned_quarantine_to : Envoyer les mails contenant des fichiers bannis vers l'adresse spécifiée
bad_header_quarantine_to : Envoyer les mails avec une mauvaise entête vers l'adresse spécifiée
clean_quarantine_to : Envoyer les mails corrects soupçonnés vers l'adresse spécifiée (peut-être utilisé pour l'archivage de vos messages)
other_quarantine_to : Envoyer les mails soupçonnés d'être des SPAM vers l'adresse spécifiée
addr_extension_virus : Ajouter une extension dans l'adresse d'un mail soupçonné d'être un SPAM. Exemple : monadresse+spam@example.tld
addr_extension_spam : Ajouter une extension dans l'adresse d'un mail soupçonné d'être un SPAM. Exemple : monadresse+spam@example.tld
addr_extension_banned : Ajouter une extension dans l'adresse d'un mail soupçonné d'être un SPAM. Exemple : monadresse+spam@example.tld
addr_extension_bad_header : Ajouter une extension dans l'adresse d'un mail soupçonnés d'être un SPAM. Exemple : monadresse+spam@example.tld
warnvirusrecip : Avertir le destinataire de la réception d'un virus
warnbannedrecip : Avertir le destinataire de la réception d'un mail contenant un fichier banni
warnbadhrecip : Avertir le destinataire de la réception d'un mail contenant une mauvaise entête
newvirus_admin : Envoyer un rapport à cette adresse mail à la réception d'un mail supposé contenir un nouveau virus
virus_admin : Envoyer un rapport à cette adresse mail à la réception d'un mail supposé contenir un virus
banned_admin : Envoyer un rapport à cette adresse mail à la réception d'un mail contenant un fichier banni
spam_admin : Envoyer un rapport à cette adresse mail à la réception d'un mail contenant une mauvaise entête
banned_rulenames : Liste des types de fichiers bannis

Sensiblement la même chose mais sous forme de tableau PHP :

$array_amavis = array(

    'spam' => array(

        'name' => 'Antispam',

        'values' => array(

            'spam_lover' => array(

                'name' => 'Recevoir <strong>tous</strong> les mails détectés comme SPAM malgré les autres réglages',

                'default' => 'N',

                'type' => 'select',

                'values' => array('Y' => 'Oui', 'N' => 'Non'),

            ),

            'bypass_spam_checks' => array(

                'name' => 'Désactiver complètement l\'antispam (aucune analyse ne sera effectuée)',

                'default' => 'N',

                'type' => 'select',

                'values' => array('Y' => 'Oui', 'N' => 'Non'),

            ),

            'spam_modifies_subj' => array(

                'name' => 'Modifier le sujet des mails soupçonnés d'être des SPAM',

                'default' => 'N',

                'values' => array('Y' => 'Oui', 'N' => 'Non'),

            ),

            'spam_tag_level' => array(

                'name' => 'Score à partir duquel l\'entête des mails contiennent le résultat de l\'analyse (ne modifie pas le corps ou le sujet des mail. Seule les entêtes "cachées" sont modifiées)',

                'default' => '-9999.99',

                'type' => 'numeric',

                'values' => array('-9999.99' => '9999.99'),

            ),

            'spam_tag2_level' => array(

                'name' => 'Score à partir duquel les mails sont marqués comme SPAM <strong>et vous sont délivrés</strong>',

                'default' => '6.31',

                'type' => 'numeric',

                'values' => array('-9999.99' => '9999.99'),

            ),

            'spam_kill_level' => array(

                'name' => 'Score à partir duquel les mails sont marqués comme SPAM mais <strong>ne vous sont pas délivrés</strong>. Ils sont cependant <strong>mis en quarantaine</strong> sauf si vous avez modifié l\'option <i>spam_quarantine_cutoff_level</i>',

                'default' => '40',

                'type' => 'numeric',

                'values' => array('-9999.99' => '9999.99'),

            ),

            'spam_dsn_cutoff_level' => array(

                'name' => 'Score à partir duquel l\'expéditeur n\'est pas prévenu que son mail a été considéré comme du SPAM. Nous vous déconseillons fortement de changer cette valeur !',

                'default' => '10',

                'type' => 'numeric',

                'values' => array('-9999.99' => '9999.99'),

            ),

            'spam_quarantine_cutoff_level' => array(

                'name' => 'Score à partir duquel <strong>les mails sont définitivement effacés</strong> (ils ne sont donc pas gardés en quarantaine pendant 30 jours). IL EST IMPOSSIBLE DE LES RÉCUPÉRER ENSUITE.',

                'default' => '',

                'type' => 'numeric',

                'values' => array('-9999.99' => '9999.99'),

            ),

            'spam_subject_tag' => array(

                'name' => 'Terme ajouté dans le sujet des mails sains',

                'default' => '',

                'type' => 'string',

                'maxvalue' => 30,

            ),

            'spam_subject_tag2' => array(

                'name' => 'Terme ajouté dans l\'objet des mails soupçonnés d'être des SPAM',

                'default' => '[SPAM] ',

                'type' => 'string',

                'maxvalue' => 30,

            ),

            'spam_quarantine_to'  => array(

                'name' => 'Envoyer les mails soupçonnés d\'être des SPAM vers l\'adresse spécifiée',

                'default' => '',

                'type' => 'mail',

            ),

            'addr_extension_spam' => array(

                'name' => 'Ajouter une extension dans votre adresse à la réception des mails soupçonnés d\'être des SPAM. Exemple : monadresse+spam@example.tld',

                'default' => '',

                'type' => 'mail',

            ),

            'spam_admin' => array(

                'name' => 'Envoyer un rapport à cette adresse à la réception des mails soupçonnés d\'être des  SPAM',

                'default' => '',

                'type' => 'mail',

            ),

        ),

    ),

    'virus' => array(

        'name' => 'Antivirus',

        'values' => array(

            'virus_lover' => array(

                'name' => 'Recevoir les mails détectés comme virus',

                'default' => 'N',

                'type' => 'select',

                'values' => array('Y' => 'Oui', 'N' => 'Non'),

            ),

            'bypass_virus_checks' => array(

                'name' => 'Désactiver complètement l\'analyse antivirus',

                'default' => 'N',

                'type' => 'select',

                'values' => array('Y' => 'Oui', 'N' => 'Non'),

            ),

            'virus_quarantine_to' => array(

                'name' => 'Envoyer les mails soupçonnés d\'être des virus vers l\'adresse spécifiée',

                'default' => '',

                'type' => 'mail',

            ),

            'addr_extension_virus' => array(

                'name' => 'Ajouter une extension dans votre adresse à la réception des mails contenant des virus. Exemple : monadresse+virus@example.tld',

                'default' => 'virus',

                'type' => 'mail',

            ),

            'warnvirusrecip' => array(

                'name' => 'Avertir le destinataire de la réception d\'un mail contenant un virus',

                'default' => 'N',

                'type' => 'select',

                'values' => array('Y' => 'Oui', 'N' => 'Non'),

            ),

            'newvirus_admin' => array(

                'name' => 'Envoyer un rapport à cette adresse à la réception d\'un mail contenant un nouveau virus',

                'default' => '',

                'type' => 'mail',

            ),

            'virus_admin' => array(

                'name' => 'Envoyer un rapport à cette adresse à la réception d\'un mail contenant un virus connu',

                'default' => '',

                'type' => 'mail',

            ),

        ),

    ),

    'banned' => array(

        'name' => 'Extensions de fichier interdites',

        'values' => array(

            'banned_files_lover' => array(

                'name' => 'Recevoir les mails qui contiennent des pièces jointes non autorisées',

                'default' => 'N',

                'type' => 'select',

                'values' => array('Y' => 'Oui', 'N' => 'Non'),

            ),

           'bypass_banned_checks' => array(

                'name' => 'Désactiver complètement l\'analyse simple des pièces jointes',

                'default' => 'N',

                'type' => 'select',

                'values' => array('Y' => 'Oui', 'N' => 'Non'),

            ),

            'banned_quarantine_to' => array(

                'name' => 'Envoyer les mails contenant des fichiers bannis vers l\'adresse spécifiée',

                'default' => '',

                'type' => 'mail',

            ),

            'addr_extension_banned' => array(

                'name' => 'Ajouter une extension dans votre adresse à la réception des mails qui contiennent des fichiers bannis. Exemple : monadresse+banned@example.tld',

                'default' => 'banned',

                'type' => 'mail',

            ),

            'warnbannedrecip' => array(

                'name' => 'Avertir le destinataire de la réception d\'un mail contenant un fichier banni',

                'default' => 'N',

                'type' => 'select',

                'values' => array('Y' => 'Oui', 'N' => 'Non'),

            ),

            'banned_admin' => array(

                'name' => 'Envoyer un rapport à cette adresse à la réception des mails contenant des fichiers bannis',

                'default' => '',

                'type' => 'mail',

            ),

        ),

    ),

    'badh' => array(

        'name' => 'Entêtes de message non-valide',

        'values' => array(

             'bad_header_lover' => array(

                'name' => 'Recevoir les mails qui possèdent une mauvaise entête',

                'default' => 'N',

                'type' => 'select',

                'values' => array('Y' => 'Oui', 'N' => 'Non'),

            ),

            'bypass_header_checks' => array(

                'name' => 'Désactiver complètement l\'analyse des entêtes de message',

                'default' => 'N',

                'type' => 'select',

                'values' => array('Y' => 'Oui', 'N' => 'Non'),

            ),

            'bad_header_quarantine_to' => array(

                'name' => 'Envoyez les mails avec une mauvaise entête vers l\'adresse spécifiée',

                'default' => '',

                'type' => 'mail',

            ),

            'addr_extension_bad_header' => array(

                'name' => 'Ajouter une extension dans votre adresse à la réception des mails avec une mauvaise entête. Exemple : monadresse+badh@example.tld',

                'default' => 'badh',

                'type' => 'mail',

            ),

            'warnbadhrecip' => array(

                'name' => 'Avertir le destinataire de la réception des mails contenant une mauvaise entête',

                'default' => 'N',

                'type' => 'select',

                'values' => array('Y' => 'Oui', 'N' => 'Non'),

            ),

        ),

    ),

    'others' => array(

        'name' => 'Autres paramètres',

        'values' => array(

            'clean_quarantine_to' => array(

                'name' => 'Envoyez les mails corrects vers l\'adresse spécifiée (peut-être utilisé pour l\'archivage de vos messages)',

                'default' => '',

                'type' => 'mail',

            ),

            'banned_rulenames' => array(

                'name' => 'Liste des types de fichiers bannis',

            ),

        ),

    )

);

Je ne rentrerais pas dans le détail concernant la configuration d'Amavis. Vous trouverez plein d'infos sur le site de Tonio (qui m'a d'ailleurs éclairé sur le rôle de certains champs) ou avec une petite recherche web

Réflexion sur l'externalisation : l'exemple de l'hébergement de vidéo

Yves Tannier — Mon, 13 Apr 2009 16:08:00 +0200

Quand nous^[1] avons décidé le refactoring theatre-contemporain.tv, un débat interne s'est engagé sur l'intérêt de passer ou non par un service tiers (gratuit ou « low cost ») pour héberger les vidéos.

Le site existant depuis 2001 (quand même !) et disposant déjà de plus d'un millier de vidéos, nous avons été démarché par DailyMotion pour héberger nos vidéos chez eux. Entre la simplicité de mise en œuvre de cette solution et l'économie de bande passante réalisée, le choix aurait pu pencher en faveur de l'externalisation chez DM.

La mésaventure du site de vidéos Wat.tv (filiale de TF1) , resté indisponible un bon moment parce que quelqu'un a « oublié » de renouveler le nom de domaine, est cependant assez révélatrice des problèmes que peut poser le modèle du tout hébergé/externalisé^[2]

On peut les résumer ainsi :

Vous n'avez pas la main sur vos propres contenus
Vous devez vous contenter des fonctionnalités offertes par le service tiers. L'aspect "métier" de vos besoins n'est pas pris en compte.
Vous ne connaissez pas la pérennité de l'offre du service tiers (Alors que ces derniers jours, on lit ici ou là que Dailymotion et Youtube n'ont pas atteint le seuil de rentabilité, ou que de la pub est de plus en plus insérée dans la vidéo)
Vous êtes dépendant des changements d'humeur (et de CGU) du fournisseur que vous avez choisi

Certes, il existe tout de même quelques services qui proposent des contrats d'hébergements de vidéos disposant d'une vrai garantie de service (payants bien entendu), mais là encore, il faut être certain de la pérennité de leurs modèles économiques.

De notre côté, nous avons choisi de faire péter notre bande passante ;) ; Tout est développé/géré/hébergé en interne.

Il persiste un service tiers ; le processus d'encodage des vidéos passe par Heywatch qui propose une API REST très performante et ne fait - finalement - que nous fournir de la puissance de calcul. En fonction du succès, nous envisagerons de gérer le traitement directement sur notre infrastructure.

D'autre part, si Heywatch venait à fermer ou à changer ses conditions, la migration d'un webservice vers un autre resterait assez triviale et ne remettrait pas en cause toute notre conception.

Enfin, le CRIS, qui se positionne comme un "Centre de Ressources" pouvait-il se permettre de faire sous-traiter l'archivage à un service gratuit ou low-cost dont ce n'est pas forcément la vocation ?

Le site a été développé et mis en ligne dans un temps record. Dans 2 semaines, les internautes pourront poster leur vidéos. Finalement pas compliqué de faire un Youtube Like. Prochaine étape, concurrencer Google

Il convient donc de toujours bien peser le pour et le contre d'une externalisation. Même si elle semble souvent plus simple à mettre en oeuvre le gain à postériori n'est pas forcément avantageux !

Notes

[1] L'équipe de CRIS/theatre-contemporain.net

[2] idem d'ailleurs sur Gmail qui a aussi subit quelques soucis

Quelques conseils pour ne pas voir vos mails finir dans les dossiers Spam

Yves Tannier — Wed, 08 Apr 2009 17:04:00 +0200

Suite à plusieurs questions reçues par mail, voici quelques conseils tirés de mon expérience personnelle pour optimiser vos chances de ne pas voir vos messages finir leur course dans le tant redouté dossier « courrier indésirable » des différents « grands » fournisseurs de services (Yahoo, Gmail, Hotmail et consorts).

Avoir un Zonecheck parfait sur son domaine. Ce qui implique notamment - ce point semble important pour Gmail - une adresse postmaster valide et un contact de domaine valide;

Signer ses messages sortant avec DKIM et vérifier régulièrement son bon fonctionnement. Cette signature devient réellement essentielle !

Configurer correctement SPF (Sender Policy Framework) sur son domaine. Et ne pas oublier les machines qui relaient et autres MX secondaires;

Dans la mesure de vos possibilités, demandez à vos correspondant de vous ajouter dans leurs carnets d'adresses et/ou leurs listes blanches. Ceci peux-être particulièrement utile dans le cas d'une lettre d'information. Vous pouvez envisager de glisser dans un de vos mailings une phrase du style « Pour être sur de recevoir nos messages, ajoutez lettre@domain.tld à votre carnet d'adresses »;

Pour les newsletters en HTML, n'incluez pas les images dans le message mais linkez sur votre serveur. N'oubliez pas la version alternative pour les webmails qui ne supportent pas HTML;

Pour Yahoo et Hotmail, il peux-être intéressant de remplir leurs différents formulaires ^[1] pour signaler que vos messages sont marqués comme Spam chez eux. La réponse et le résultat ne sont pas garanties. Ils vous préciseront d'ailleurs que ce n'est pas une Whitelist. D'après moi, ça aide quand même;

Pour ceux qui ont les moyens ~~et qui aiment se faire racketter~~, Hotmail utilise également une sorte de whitelist officielle - et bien entendue payante - appelée SenderScore;

Dernière précision, et pas des moindre - ceci est également précisé sur le site de Yahoo - les fournisseurs utilisent également des filtres de réputation. En clair, tant que l'adresse IP de votre serveur n'est pas « connue », le risque de passer à la trappe est plus important.

Pour ce dernier point :

oubliez les adresses IP résidentielles
louez un serveur sur un réseau « connu »
prenez le temps de remplir les formulaires que j'évoquais plus haut

Si vous avez d'autres bonnes pratiques, je suis preneur

Notes

[1] Cherchez sur le site « postmaster » de Yahoo ou sur son équivalent chez Microsoft

Script pratique : rechercher/remplacer/patcher comme vous voulez

Yves Tannier — Thu, 05 Mar 2009 15:16:00 +0100

Dans votre vie quotidienne de développeur et/ou d'administrateur système vous êtes sans doute confronté à la nécessité de rechercher et remplacer des motifs par lots.

L'utilisation conjointe d'une multitude d'outils le permettent efficacement sous GNU/Linux : find, grep, sed, awk, perl, diff, patch... Votre éditeur préféré possède sans doute également ce type de fonctionnalité.

Le remplacement doit parfois être assorti d'une vérification visuelle et d'une validation manuelle des différentes occurrences. Si vous changez l'intégralité de vos serveurs de nom dans les fichiers de zone de BIND, vous ne souhaitez sans doute pas qu'un de vos sites à la configuration tordue ne fonctionne plus ?

Partant de ce constat, mon collègue Zas^[1] a sympathiquement concocté un script en pure bash habilement nommé search_replace ! C'est un savant mélange de find, sed, awk, diff(color) et patch qui a l'avantage de la simplicité (3 ko tout mouillé).

Comment ça marche ?!

On recherche un pattern donné sur un répertoire (exemple, la chaine « ma chaine » sur les fichiers .php du répertoire /var/www)
Pour chaque occurrence, un diff - en couleur, si vous avez installé colordiff - et dans le contexte vous permet de visualiser les changements qui seront appliqués
A chaque étape, vous choisissez :
- d'accepter ou pas cette modification et de passer à l'occurrence suivante
- de modifier manuellement via ~~votre éditeur préféré~~ VIM
- d'annuler les actions en cours
Vous pouvez bien sur choisir de remplacer le tout sans confirmation ni vérification
Au final, vous choisissez d'appliquer les modifications ou de garder le patch pour plus tard.
Cerise sur le pompon, l'utilisation du patch vous permet de revenir sur les modifications si vous avez tout cassé !

Télécharger search_replace (tar.gz / 3ko)

Notes

[1] Je vous invite à essayer geeqie, co-développé par Zas

Princesse Lego, le film d'animation !

Yves Tannier — Wed, 25 Feb 2009 09:42:00 +0100

Pour rompre avec l'activité de mon blog proche du vide intersidéral, je vous propose une activité pour occuper vos enfants pendant les week-end pluvieux et froids. La réalisation d'un film d'animation en stop motion avec des Lego.

Voici déjà le rendu final du film réalisé avec mon fiston Hugo

Au cas où vous souhaiteriez tenter l'expérience, je vous détaille la création

Le matériel

Le matériel est plutôt simple : un compact Canon (ici, un Ixus 850), un petit trépied qu'on peux tordre dans tous les sens, un ordinateur pour le montage.

L'équipe

Hugo (6 ans) et le papa. Et histoire d'être dans une démarche qui soit aussi un peu pédagogique, il faut faire bosser le fiston !

Le scénario

En CP, il faut s'appliquer sur l'écriture.

Le story board

SVP, on ne se moque pas de mon maaaaaagnifique story-board !

Les décors

Les plantes vertes de la maman pour le côté bucolique, des feuilles blanches, des feutres et, bien entendu, des Lego ! Évitez de faire des décors trop grands au risque de ne pas parvenir à cadrer correctement les scènes.

La réalisation

Quand la scène est prête et le cadrage correct, il y en a un qui prend les photos et l'autre qui déplace les Lego entre chaque photo. On fait ça scène par scène, avec une lumière naturelle pour ne pas avoir besoin du flash de l'appareil photo.

Le montage

Je l'ai fais sur Mac OSX avec une excellente application gratuite et très simple à utiliser : SAM Animation (disponible aussi pour Winchose). Sous GNU/Linux il existe aussi quelques applications que je n'ai pas testées. J'ai essayé au départ avec iMovie, mais il n'est pas possible de définir un timing par image inférieur à 0.40 seconde.

Les conseils

Évitez de vouloir faire des scènes avec un champ trop important. Trop difficile à cadrer et un rendu non garanti (à moins d'avoir du bon matériel photo, ce qui n'est pas mon cas).
Sauf si vous êtes vraiment motivé, n'essayez pas de faire marcher les Lego au risque d'énerver toute l'équipe du film (Papa ! Y tiens pas debout le bonhomme Lego !)
A la fin de chaque scène (surtout la première), transférez les photos sur votre ordinateur et montrez le résultat à votre enfant. Çà le motivera réellement pour la suite !

La durée de réalisation

Nous avons mis environ 3/4 après-midi réaliser le tout. La prochaine fois, le long métrage

Bonne année 2009

Yves Tannier — Mon, 05 Jan 2009 20:30:00 +0100

Ca, c'est fait

Script minimaliste : génération des clés DKIM et ajout de l'enregistrement DNS

Yves Tannier — Mon, 20 Oct 2008 18:20:00 +0200

Un script pour ajouter un domaine dont on veux signer les mails via DKIMproxy. Celui-ci est forcément lié à mon article sur le sujet : "Installer la signature DKIM sur Postfix avec DKIMproxy". Vous pouvez très facilement l'adapter à votre usage.

Que fait ce script :

crée la clé publique et la clé privée dans le répertoire keys de DKIMproxy
change les droits sur la clé privée
sur demande, ajoute l'enregistrement dans le fichier de zone du domaine
ajoute les informations qui vont bien dans le fichier sender_map de DKIMproxy

On le lance de la façon suivante

./generate_keys domain.tld

Il faut ensuite incrémenter le numéro de série de la zone, relancer BIND et DKIMproxy.

Le script

#!/bin/bash



# Yves Tannier [grafactory.net] 2008 GPL...



# private/public keys path

PATH_KEYS='/usr/local/dkimproxy/keys'



# sender_map file path

PATH_SENDER_MAP='/usr/local/dkimproxy/sender_map'



# dkimuser

USER_GROUP='dkim:dkim'



# domain on parametre

DOMAIN=$1



# bind file path (optional)

ZONE_PATH="/var/cache/bind/$DOMAIN.hosts"



openssl genrsa -out $PATH_KEYS/$DOMAIN.key 1024

openssl rsa -in $PATH_KEYS/$DOMAIN.key -pubout -out $PATH_KEYS/${DOMAIN}_pub.key



# chg right

chown $USER_GROUP $PATH_KEYS/$DOMAIN.key

chmod 640 $PATH_KEYS/$DOMAIN.key



# Adding DKIM key on BIND Zone ?

echo

echo -n "Add DKIM key on BIND zone file ? ([Y]/n) "

read ans

if [ ! _$ans = _y -o _$ans = _Y ]; then



    # bind file

    echo -n "BIND Zone filename ($ZONE_PATH) : "

    read ${ZONE_PATH_READ}



    if [ ! -z "$ZONE_PATH_READ" ]; then

        ZONE_PATH=${ZONE_PATH_READ}

    fi



    # public key one line

    PUBLIC_KEY=$(cat $PATH_KEYS/${DOMAIN}_pub.key | sed -n '/BEGIN PUBLIC KEY/,/END PUBLIC KEY/p' | sed '/PUBLIC KEY/d' | tr -d '\n')



    # write

    echo

    echo "_domainkey.$DOMAIN.               IN TXT      \"t=y; o=-;\"" >> $ZONE_PATH

    echo "$DOMAIN._domainkey.$DOMAIN.       IN TXT      \"k=rsa; t=s; p=$PUBLIC_KEY\"" >> $ZONE_PATH



fi



SM="$DOMAIN dkim(c=simple,s=$DOMAIN,a=rsa-sha1,key=$PATH_KEYS/$DOMAIN.key), domainkeys(c=nofws,s=$DOMAIN,key=$PATH_KEYS/$DOMAIN.key)"

echo $SM >> $PATH_SENDER_MAP



echo

echo "Please, restart DKIMproxy !"

echo

echo "... And maybe BIND with new serial on $ZONE_PATH !"

Au format compressé : generate_keys.tar.gz

N'hésitez pas à me proposer vos améliorations.

Script minimaliste : nettoyer une boite aux lettres avec une expression rationnelle

Yves Tannier — Fri, 11 Apr 2008 22:13:00 +0200

Dans la catégorie des scripts minimalistes (mais néanmoins utiles), je vous propose un petit script qui permet d'effacer, en ligne de commande avec PHP CLI, certains messages d'un compte mail en fonction d'une expression régulière précisée en paramètre et qui matche le sujet du mail.

Par exemple, effacer les centaines de messages de spam qui se trouvent dans une de vos nombreuses boites tant inutiles que nécessaires Autre exemple, j'exécute ce script via un cron pour nettoyer tous ce qui traine dans des boites genre postmaster, abuse (encore que cette dernière n'est pas trop pourrie par le SPAM), et autres bal « no-reply » qu'il reste quand même, pour certaines, nécessaires de consulter ~~tous les ans~~ régulièrement.

C'est un script clairement dédié à de la maintenance. Je vous déconseille de laisser trainer ce code n'importe ou accessible via le web.

Utilisation :

cleanmail -u=nom_utilisateur -p=mot_de_passe -s=imap.mondomain.tld:143 -e="/SPAM/i"

Pour être sur que tous le monde a compris :

-u= nom d'utilisateur du compte mail
-p= mot de passe du compte mail
-s= serveur (pop ou imap). Toutes les options disponibles sur la fonction imap_open de PHP sont disponible
-e= expression régulière qui sera « passée » à preg_match

Le script :

#!/usr/bin/php

<?php

// on supprime la limite d'éxecution d'un script php

set_time_limit(0);



/* vim: set expandtab tabstop=4 shiftwidth=4 softtabstop=4: */



/**

 * cleanmail supprimer des mails d'une boite imap avec une pattern définie

 *

 * PHP versions 5

 *

 * LICENSE: Ce programme est un logiciel libre distribue sous licence GNU/GPL

 *

 * @author     Yves Tannier <yvesSANSPAM grafactory.net>

 * @copyright  2008 Yves Tannier

 * @license    http://www.gnu.org/copyleft/lesser.html  LGPL License 2.1

 * @version    0.1.0 

 * @link       http://www.grafactory.net

 */



// aide contextuelle

$help_string = "Parametres :

                -u : utilisateur

                -p : mot de passe

                -s : serveur et port (localhost:143, localhost:110, localhost:143/novalidate-cert...)

                -e : expression régulière

                -h, --help : afficher cette aide...\n\n";



// recuperer les parametres passe en CLI

foreach($_SERVER['argv'] as $param) {

    // utilisateur

    if(strpos($param,"u=")) {

        $login_imap = str_replace("-u=","",$param);

        continue;

    }

    // mot de passe

    if(strpos($param,"p=")) {

        $passwd_imap = str_replace("-p=","",$param);

        continue;

    }

    // serveur et port

    if(strpos($param,"s=")) {

        $server_imap = str_replace("-s=","",$param);

        continue;

    }

    // expression reguliere

    if(strpos($param,"e=")) {

        $pattern = str_replace('-e=','',$param);

        continue;

    }

    switch($param) {

      case '-h' :

      case '--help' :

        echo $help_string;

        exit();

      case $_SERVER['SCRIPT_NAME'] :

        unset ($_SERVER['argv'][0]);

        break;

      default :

        echo "\nParamètre inconnu : ".$param."\n\n";

        exit();

    }

}



// pas d'argument

if (empty($_SERVER['argv'])) {

    echo "\nVeuillez preciser au moins un paramÃ¨tre !\n\n";

    echo $help_string;

    exit();

}



// connexion

$mbox = imap_open("{".$server_imap."}INBOX", $login_imap, $passwd_imap)

            or die("Impossible de se connecter : ".imap_last_error());



echo "Connexion...\n";



// recup des headers

$headers = imap_headers($mbox);



// parcourir les messages

if(!empty($headers)) {

    echo "Recherche avec l'expression : ".$pattern."\n";

        $msgnum = 0;

        foreach ($headers as $val) {

            $msgnum = $msgnum + 1;

            $header = imap_headerinfo($mbox, $msgnum);

            $subject = $header->subject;

            if (preg_match($pattern, $subject)) {

                $mailmarked = imap_delete($mbox, $msgnum);

                echo "Message ".$msgnum." supprimé\n";

            }

        }

} else {

    echo "Aucun message dans la boite\n";

}



echo "Fin de la transaction\n";



// quitter et vider en meme temps

imap_close($mbox,CL_EXPUNGE);

?>

Bientôt le même mais en perl

A la découverte de Jelix, l'essayer c'est l'adopter

Yves Tannier — Mon, 24 Mar 2008 09:31:00 +0100

Malgré tous les avantages que j'ai pu trouver à ~~mon framework~~ mes bouts de codes personnels basés sur plusieurs librairies PEAR, je me suis tourné vers quelques choses de plus "moderne" et plus homogène pour mes nouveaux développements. Après pas mal de recherches et d'essais, mon choix c'est porté sur Jelix.

Ca tombe bien. Un nouveau projet dont les contraintes correspondent parfaitement à l'utilisation de ce framework me permet donc actuellement de me frotter à la bête... Et je ne suis pas déçu !

Je ne vais pas rentrer dans le détail des fonctionnalités mais il y a tous ce qu'on peux rechercher dans un framework PHP5 orienté objet ~~et de classe américaine~~. Jelix ne pas fait le café comme Symfony (que j'ai essayé également et qui possède de nombreux avantages) et c'est justement pas ce que je lui demande car je souhaite garder la compréhension globale de ce que j'utilise. C'est léger, rapide et extensible. Bref, que du bon pour l'instant

Voici ce que j'en retiens principalement (liste non exhaustive). J'ai précisé, pour mémoire, les équivalents de ce que j'utilisais comme librairies PEAR :

ORM puissant. J'utilisais PEAR::MDB2 très efficace aussi. Surtout la gestion transactions
système de templates. Beaucoup mieux que PEAR::HTML_Template_Flexy pour lequel la syntaxe dans le template reste assez réduite (exemple : impossible d'utiliser des opérateurs de comparaisons)
localisation. PEAR::Translation2 ne m'a jamais réellement séduit.
génération de formulaire. Quand on a prit l'habitude d'utiliser PEAR::HTML_Quickform, on recherche forcément quelque chose de similaire.
système de cache. Je n'ai pas encore eu la possibilité de comparer avec les performances de PEAR::Cache_Lite mais ça semble équivalent.
Quelques modules bien utiles comme la génération de CRUD, le module d'authentification, les acls...

La présentation détaillée et une application de tests sont disponibles sur le site officiel. Il ne vous reste plus qu'à essayer

Si vous aviez l'intention de vous rendre aux Rencontres Mondiales du Logiciel Libre 2008 à Mont-de-Marsan, assistez à la conférence sur Jelix de Laurent Jouanneau et vous en apprendrez encore plus !

Installer la signature DKIM sur Postfix avec DKIMproxy

Yves Tannier — Wed, 12 Mar 2008 10:00:00 +0100

Je vous propose dans ce billet l'installation de la signature DKIM sur vos mails sortants. Ceci fait suite à mon billet concernant l'implémentation de DomainKeys avec Postfix et Amavis via Dkfilter.

Dkfilter ne gère en effet que le protocole DomainKeys de Yahoo! maintenant remplacé par DKIM (DomainKeys Identified Mail) , un protocole plus avancé et standardisé par la RFC 4871. Très très brièvement, DKIM permet de « renforcer » l'identité des expéditeurs.

En remplacement de dkfilter, l'auteur de ce programme nous propose DKIMproxy pour gérer la signature DKIM et/ou DomainKeys.

Si vous utilisez Amavis, comme c'est mon cas, sachez quelques petites choses :

Il semble que Amavisd-new gère la signature DKIM des mails sortants à partir de la version 2.6.0. Mais sur Debian Etch, nous en sommes à la version 2.4. C'est donc l'intérêt de ce billet. Je n'ai pas testé la version 2.6.0. je ne peux donc pas vous en dire plus.

DKIMproxy permet également une vérification des mails entrants. Cette vérification ne nous intéresse pas forcément puisque Amavis propose déjà cette fonctionnalité via Spamassassin qui utilise la librairie perl Mail::DKIM.

Comme pour mon précédent billet, c'est un howto « copié/collé » pour les informaticiens ~~fainéants~~ pressés. J'ai également fais pas mal de copié/collé de l'ancien billet puisque la configuration est sensiblement la même sur de nombreux points.

Installer DKIMproxy

Placez-vous dans /usr/src et téléchargez DKIMproxy

cd /usr/src
wget http://kent.dl.sourceforge.net/sourceforge/dkimproxy/dkimproxy-1.0.1.tar.gz

Décompressez l'archive et placez-vous dans le nouveau répertoire

tar zxvf dkimproxy-1.0.1.tar.gz
cd dkimproxy-1.0.1

Si vous n'avez pas encore le module perl Mail::Dkim, il faut l'installer via CPAN pour disposer d'une version suffisamment récente la version Debian Etch est trop ancienne).

perl -MCPAN -e shell
install Mail::DKIM
exit

Préparez l'installation de dkimproxy dans /usr/local/dkimproxy

mkdir /usr/local/dkimproxy
./configure --prefix=/usr/local/dkimproxy

Compilez et installez

make install

Déplacez-vous dans le répertoire dkimproxy et renommez les fichiers de configuration des daemons

cd /usr/local/dkimproxy
mv etc/dkimproxy_in.conf.example etc/dkimproxy_in.conf
mv etc/dkimproxy_out.conf.example etc/dkimproxy_out.conf

Créer l'utilisateur et le groupe dkim

adduser dkim --no-create-home --disabled-password --disabled-login

Installer le script de démarrage de dkimproxy

Copiez le script de démarrage proposé dans les sources de dkimproxy dans /etc/init.d/

cp /usr/src/dkimproxy-1.0.1/sample-dkim-init-script.sh /etc/init.d/dkimproxy

Editez-le. Normalement, il n'y a rien a changer dans ce fichier si on utilise les paramètres « standards »

vi /etc/init.d/dkimproxy

Créer une clé publique/privée

Chaque domaine possèdera sa propre clé. On crée un dossier dans lequel on stockera les clés.

mkdir /usr/local/dkimproxy/keys
cd /usr/local/dkimproxy/keys

On suppose que vous avez le paquet OpenSSL installé et que votre domaine est exemple.tld

La clé privée

openssl genrsa -out exempletld.key 1024

La clé publique

openssl rsa -in exempletld.key -pubout -out exempletld_pub.key

Changer les droits sur la clé privée pour la rendre uniquement accessible à l'utilisateur dkim

chown dkim:dkim exempletld.key
chmod 640 exempletld.key

Ajouter l'enregistrement TXT à la zone DNS

Une fois la clé générée, il va falloir ajouter un enregistrement TXT à la zone de chaque domaine. Prenons encore l'exemple du domaine exemple.tld

On édite le fichier de zone /var/cache/bind/exemple.tld.hosts et on ajoute l'enregistrement TXT suivant. La valeur de "p=" correspond à la clé publique sur une seule ligne. Notez également le nom exempletld qui sera utile pour la suite (nous l'appellerons "sélecteur"). Le t=y; signifie que votre installation est en test. Vous pourrez retirer cette information quand tout sera opérationnel

; DKIM
_domainkey.exemple.tld.                  IN TXT  "t=y; o=-;"
exempletld._domainkey.exemple.tld.    IN TXT "k=rsa; t=s; p=ici_la_cle_publique_hyper_longue"

N'oubliez pas d'incrémenter le numéro de série de votre zone pour que les changements soient pris en compte et relancer bind :

/etc/init.d/bind9 restart

Créer le fichier de configuration de DKIM

Il faut maintenant créer le fichier de configuration qu'utilisera DKIMproxy au lancement du service. Celui ci contient les différentes informations pour chacun des domaines signés.

vi /usr/local/dkimproxy/sender_map

Toujours l'exemple avec exemple.tld. Ici, on demande la signature DKIM et la signature DomainKeys. Il est possible de choisir l'un ou l'autre uniquement. Je vous renvois sur les spécifications de DKIM pour les autres paramètres ! Sachez simplement que le paramètre « s » correspond au nom du sélecteur utilisé dans votre fichier de zone.

exemple.tld dkim(c=simple,s=exempletld,a=rsa-sha1,key=/usr/local/dkimproxy/keys/exemple.tld.key), domainkeys(c=nofws,s=exempletld,key=/usr/local/dkimproxy/keys/exempletld.key)

A lire avant de continuer : un « problème » subsiste dans mon howto. En effet, je lance toujours dkimproxy.in qui s'occupe de l'analyse de messages entrants alors que ce travail est déjà effectué par SpamAssasin via Amavis comme je le précise au début de ce billet. Je n'ai simplement pas pris le temps de modifier le script de démarrage et mon implémentation dans Postfix. Je modifierais ce billet dés que j'aurais nettoyé tout ça ! Ami lecteur, si tu l'as fais pour ta configuration, n'hésites pas à me le signaler

Ceci étant, la signature fonctionne tout de même... alors on continue !

Lancer DKIMproxy

Avant d'envisager la configuration de Postfix, il faut vérifier que DKIMproxy se lance correctement :

/etc/init.d/dkimproxy start

Si il n'y a pas d'erreur on vérifie que le service est fonctionnel :

ps aux | grep dkim

Il doit y avoir des lignes avec dkimproxy.in et des lignes avec dkimproxy.out.

Maintenant que la zone est modifié, DKIMproxy installé et fonctionnel, passons enfin à la configuration de Postfix.

Configurer de Postfix

La configuration n'est pas différente de celle pour dkfilter. Je colle ici le contenu de mon précédent billet.

Dans ma configuration, avant l'installation de DKIM et DomainKeys, j'utilise déjà Amavisd-new pour le filtrage antivirus (clamav) et antispam (spamassassin et dspam). J'ajoute donc DKIMproxy dans le process avant l'analyse par Amavis.

Dans le main.cf, je remplace :

content_filter = amavis:[127.0.0.1]:10024

par :

content_filter = dksign:[127.0.0.1]:12027

[Je ne sais pas pourquoi mais si je ne précise pas le content_filter dans le main.cf, les mails envoyés par des processus locaux (par exemple, la fonction mail de PHP) ne passe pas par amavis et dksign]

Dans le master.cf, voici la configuration :

Au début du fichier

# relayer sur dksign sur le port 10028
smtp      inet  n       -       -       -       200     smtpd
        -o receive_override_options=no_address_mappings
        -o content_filter=dksign:[127.0.0.1]:12027

# Le smtp securise SSL
smtps     inet  n       -       -       -       -       smtpd
  -o smtpd_tls_wrappermode=yes
  -o smtpd_sasl_auth_enable=yes
  -o content_filter=dksign:[127.0.0.1]:12027
  -o receive_override_options=no_address_mappings
  -o smtpd_client_restrictions=permit_sasl_authenticated,reject

# envoyer directement a dksign
submission  inet  n     -       n       -       -       smtpd
    -o smtpd_etrn_restrictions=reject
    -o smtpd_sasl_auth_enable=yes
    -o content_filter=dksign:[127.0.0.1]:12027
    -o receive_override_options=no_address_mappings
    -o smtpd_recipient_restrictions=permit_sasl_authenticated,reject
    #-o smtpd_recipient_restrictions=permit_mynetworks,permit_sasl_authenticated,reject

A la fin

# Pour amavis
amavis  unix    -   -   -   -   20  smtp
        -o smtp_helo_timeout=300 
        -o smtp_data_done_timeout=1200
        -o smtp_send_xforward_command=yes
    -o disable_dns_lookups=yes
127.0.0.1:10025 inet n - - - - smtpd
        -o content_filter=
        -o local_recipient_maps=
        -o relay_recipient_maps=
        -o smtpd_restriction_classes=
        -o smtpd_client_restrictions=
        -o smtpd_helo_restrictions=
        -o smtpd_sender_restrictions=
        -o smtpd_recipient_restrictions=permit_mynetworks,reject
        -o mynetworks=127.0.0.0/8
        -o strict_rfc821_envelopes=yes
        -o receive_override_options=no_unknown_recipient_checks,no_header_body_checks
        -o smtpd_bind_address=127.0.0.1
    -o disable_dns_lookups=yes

#
# signature dkim/domainkeys
#
dksign    unix  -       -       n       -       10      smtp
    -o smtp_send_xforward_command=yes
    -o smtp_discard_ehlo_keywords=8bitmime

#
# signature dkim/domainkeys
#
127.0.0.1:12028 inet  n  -      n       -       10      smtpd
    -o content_filter=amavis:[127.0.0.1]:10024
    -o receive_override_options=no_unknown_recipient_checks,no_header_body_checks
    -o smtpd_helo_restrictions=
    -o smtpd_client_restrictions=
    -o smtpd_sender_restrictions=
    -o smtpd_recipient_restrictions=permit_mynetworks,reject
    -o mynetworks=127.0.0.0/8
    -o smtpd_authorized_xforward_hosts=127.0.0.0/8

Vous pouvez ensuite relancer postfix

/etc/init.d/postfix restart

Vérifier la signature

Envoyez un mail et regardez dans les logs :

tail -f /var/log/mail.info

Vous devez avoir pour un message envoyé par une adresse de exemple.tld :

... DKIM signing - signed; message-id=<47D7961B.6060505@exemple.tld>, signer=<yves@exemple.tld>, from=<yves@exemple.tld>

Pour les autres :

... DKIM signing - skipped; from=<test@autredomain.tld

Vous pouvez également vérifier votre configuration en envoyant un mail à l'adresse : check-auth ici_le_chez verifier.port25.com. Cette adresse vous renvoi les informations sur l'installation des différents protocoles d'authentification des mails sur votre domaine. Ainsi, si vous avez également configuré correctement SPF vous devez avoir tout bon :

==========================================================
Summary of Results
==========================================================
SPF check:          pass
DomainKeys check:   pass
DKIM check:         pass
Sender-ID check:    pass
SpamAssassin check: ham

Vous devez aussi avoir les informations sur DKIM et DomainKeys dans l'entête du message signé :

DKIM-Signature: v=1; a=rsa-sha1; c=simple; d=exemple.tld; h=
	message-id:date:from:mime-version:to:subject:content-type:
	content-transfer-encoding; q=dns/txt; s=exempletld; bh=clepublique=
DomainKey-Signature: a=rsa-sha1; c=nofws; d=exemple.tld; h=message-id:
	date:from:mime-version:to:subject:content-type:
	content-transfer-encoding; q=dns; s=exemple.tld; b=clepublique=

Il me reste encore à comprendre complètement les différentes options de la spécification DKIM mais c'est un bon début

Un script de monitoring ultra simpliste

Yves Tannier — Wed, 27 Feb 2008 13:41:00 +0100

Loin de Nagios et de ses innombrables possibilités, voici un script bash minimaliste pour tester la disponibilité d'une machine ou plusieurs machines via un ping et recevoir, en cas de non réponse, les alertes par SMS^[1] et/ou mail. Le principe est le suivant :

on teste toutes les X minutes la disponibilité des hôtes
si une machine est détectée down, on le note dans un fichier temporaire
si 5 minutes après la machine est toujours down, on lance les alertes
quand la machine est de nouveau up, on renvoi un mail (pas de SMS dans ce cas)

Pour configurer le script, il suffit de préciser les variables commentées au début du fichier.

#!/bin/bash



# pingTest par Yves et Thierry

# http://www.grafactory.net/blog/

# 2008 / Licence LGPL



# les hotes a tester 

HOSTS="domain.tld autredomaine.tld"



# sujets des mails

SUBJECT="machine down"

SUBJECT_UP="machine up"



# envoyer un SMS via tm4b.com

EMAILID="moi@domain.tld"

TELID="XXXXX"

PASSWD="XXXXX"



# envoyer un simple mail

EMAILSIMPLE="moi@domain.tld"



# nombre test

COUNT=4



for myHost in $HOSTS

do

    if ! ping -q -c $COUNT $myHost >> /dev/null

    # elle est KO

    then

        if [ ! -f /tmp/mail.$myHost ]

        # on n est pas encore au courant

        then

            if [ -f /tmp/ping.$myHost ]

                # elle etait KO cinq minutes avant, faut prevenir

            then

                # envoyer un SMS

                echo "To - $TELID\nFrom - $TELID\nMessage - La machine $myHost ne repond plus a $(date)\nPassword - $PASSWD" |\

                mail -s "[$myHost] $SUBJECT" $EMAILID

                # envoyer un mail normal

                echo "La machine $myHost ne repond plus a $(date)" |\

                mail -s "[$myHost] $SUBJECT" $EMAILSIMPLE

                #  creer le fichier pour indiquer que le mail a ete envoye

                touch /tmp/mail.$myHost

            fi

            touch /tmp/ping.$myHost

        fi

    else

        # elle n est pas KO

        if [ -f /tmp/ping.$myHost ]

        then

            rm /tmp/ping.$myHost

        fi

        if [ -f /tmp/mail.$myHost ]

        then

            rm /tmp/mail.$myHost

            # renvoyer un mail

            echo "La machine $myHost repond a nouveau a $(date)" |\

            mail -s "[$myHost] $SUBJECT_UP" $EMAILSIMPLE

        fi

    fi

done

Dans la crontab, on ajoute la ligne suivante (ici, un test toute les 5 minutes).

# faire un test de ping toutes les 5 min
*/5 * * * * /usr/local/sbin/pingtest >> /dev/null

(on suppose donc ici que le script est installé dans /usr/local/sbin/)

Toutes les améliorations sont les bienvenues

Notes

[1] Pour recevoir les alertes par SMS, j'utilise le service Email to SMS de TM4B . Les SMS peuvent être de prépayés via PayPal à un tarif très intéressant. Cette société propose aussi un API très complet pour l'envoi de SMS depuis un programme, un site Web...

Le déguisement de robot pour carnaval

Yves Tannier — Sun, 10 Feb 2008 11:45:00 +0100

Histoire de changer un peu, je vous propose un formidable "howto" pour la construction d'un déguisement pour le carnaval de votre enfant (papa geek inside). C'est le déguisement de robot digne d'un film de Ed Wood ("Plan 9 from Outer Space" par exemple). Alors décrochez un peu de votre écran et montrez que vous savez aussi utiliser vos dix doigts pour autre chose qu'un clavier

Matériel

Un enfant (le votre fera l'affaire)
Un carton (ici maxipack de couches) pour le "corps" du robot
Du carton souple pour les sur-bottes
Des circuits d'ordinateurs usagés
Du tuyau de conduit d'aération pour les bras
Des bouchons de bouteilles de lait, une petit bouteille d'eau minérale, 2 petites bouteilles genre "Yop-mini" pour les réacteurs et accessoires
Un peu de matériel pour de la petite électricité pas plus de 9V - N'allez pas électrocuter votre progéniture ! - (fils, douilles, ampoules...).
Les gadgets qui font pouet et qui trainent dans vos tiroirs

Outillage

Pistolet à colle
Ciseaux, cutteurs
Peinture grise métallisée
Gros scotch de bricolage gris
Quelques heures devant vous

Fabrication du robot

Voici quelques photos qui devrait vous aider suffisamment pour la réalisation du robot. Le succès est garanti !

Je ne décris donc pas la fabrication en détail mais n'hésitez pas à poser vos questions en commentaire

Comment remplacer 2007 par 2008 sur Debian Etch

Yves Tannier — Thu, 03 Jan 2008 21:25:00 +0100

apt-get remove --purge 2007
apt-get install 2008

OK, je sors ! Mais avant je vous souhaite une bonne année 2008

Petite mise à jour du script de mass mailing

Yves Tannier — Fri, 09 Nov 2007 14:26:00 +0100

C'est une mise à jour mineure. Les fonctionnalités sont les même que celles de la première version

J'ai eu quelques soucis avec la classe Zend_Mail. Lors d'un envoi, suite à une mise à jour de Zend_Mail, je me suis retrouvé avec des groupes de destinataires en copie au lieu d'un envoi unitaire (pas très sérieux !).

J'ai donc utilisé le "bon vieux" PHPMailer. J'en ai aussi profité pour remplacer PEAR::DB par PDO. Ce qui rend le script plus léger et plus simple à installer . Je l'ai également doté d'un fichier de configuration séparé.

Changelog :

Utilisation de PHPMailer à la place de Zend_Mail
Utilisation de PDO à la place de PEAR::DB
Changement esthétique.
Un fichier de configuration séparé.

Documentation

Vous devez télécharger PHPMailer, disposer de PHP5 et l'extension PDO.

Pour le reste, la documentation de la première mouture est toujours valable. Vous pouvez également utiliser toutes les options disponibles dans PHPMailer pour adapter ce script à votre convenance (je vous laisse chercher dans le script).

Important : Ce programme est fourni sans aucune garantie même si je l'utilise toutes les semaines pour une newsletter de 30 000 abonnés.

A faire :

une option pour préciser le chemin du fichier de configuration
en extra, toujours le gros boulot qui consiste à analyser les retours de mail (Delivery Error).

Téléchargement

télécharger le script