Blog d'Axelos

Detox : renommer en masse des fichiers

Axelos — 2025-12-24T13:33:47Z

À quoi sert Detox ?

Administrant des systèmes de fichiers sur des serveurs notamment à l'aide du logiciel Nextcloud, je suis souvent confronté au peu de rigueur des usagers qui nomme les fichiers avec des noms qui peuvent être ultérieurement sources d'erreurs. Outre l'usage du classique espace, est souvent utilisé des caractères spéciaux, partant de la ponctuation (é, ë, ç), à l'usage de symboles ({, [, $, %, ", '), parfois y compris des trucs qu'on n'utilise jamais comme §.
Certains usagers s'amusent même à renommer des fichiers à l'origine correctement formatés… Pourtant on rappelle les bonnes pratiques de temps en temps.

Bref, en cas de migration, sauvegarde, ou tous autres besoins de ce type, ces caractères peuvent générer des problèmes nécessitant parfois de devoir les renommer au préalable.

Il existe quelques outils graphiques (souvent propriétaires) capable de faire cela, mais dernièrement j'ai trouvé un outil en ligne de commandes finalement assez simple à utiliser et efficace : Detox.

Alors je précise que cet outil est utile uniquement sur du nommage technique, il n'est pas capable de supprimer par exemple les articles (de, du) ou formater correctement les dates selon le standard international (AAA-MM-JJ).

Installer Detox

Detox existe depuis 2017, mais d'après ce qui est indiqué sur la forge de développement, l'auteur l'a simplifié au fil des ans. Bref il n'est apparu dans les dépôts officiels de Debian que depuis cette année avec la version 13.

– Pour l'installer il suffit donc d'utiliser cette commande

apt install detox

S'il n'est pas disponible dans les dépôts, il faudra le compiler… je vous laisse regarder sur la forge du projet comment procéder.

Utiliser Detox

Par défaut, l'outil fait déjà de beaux miracles. Il sait remplacer les espaces par des tirets bas _, mais aussi remplacer la majorité des caractères spéciaux par ce même tiret ou le court -. Si présence de tirets successifs, alors il va supprimer le surplus pour en conserver qu'un.

Ensuite, il sait aussi remplacer des caractères accentués par leurs équivalences simples. Ainsi é et ë deviennent e et ç devient c.
Mais pour que cela fonctionne, il faut bien indiquer l'encodage souhaité (avec l'option -s). En France de nos jours on utilise principalement l'encodage UTF8, donc je vous conseille de bien l'indiquer dans la commande notamment pour la gestion des caractères accentués.

Renommer un ficher

– Simplement, la commande à utiliser est

detox -s utf_8 nom_fichier

Dans l'exemple ci-dessous, l'export de courriel nommé ainsi
Re: [groupe_mobilites] passerelle en bois, ça glisse ! - "Axel listes" - 2025-12-23 2054.eml

Deviens
Re-groupe_mobilites-passerelle_en_bois_ca_glisse-Axel_listes_axelos_domaine.fr-2025-12-23_2054.eml

Renommer en masse

En revanche, si l'idée est de renommer plusieurs fichiers dans un dossier ainsi que dans ses sous-dossiers, alors il faudra ajouter l'option de récursivité -r.

– La commande devient

detox -r -s utf_8 nom_dossier

Personnaliser Detox

Parfois, il arrive que certains caractères ne soient pas pris en charge. Cela peut se paramétrer assez facilement mais demande un petit réglage au préalable.

Configuration de Detox

L'idée est d'indiquer à Detox que l'on souhaite qu'il exploite un fichier personnalisé plutôt que celui utilisé par défaut. Ce fichier personnalisé intègre déjà les règles par défaut.

– Éditer ce fichier

nano /etc/detoxrc

– Dans la séquence sequence "utf_8" {, remplacer

 safe { builtin "safe"; };

– Par

 safe { filename "/usr/share/detox/safe.tbl"; };

Detox : configuration du fichier detoxrc

Axel BROMAN

Configuration de safe.tbl

– Éditer ce fichier

nano /usr/share/detox/safe.tbl

– Ajouter ces lignes dans le fichier entre start et end

# # Caractères ajoutés par Axel # 0x3d _ # = 0x2b _ # + 0x2c _ # , 0x7e _ # ~ 0x25 _ # % 0x5e _ # ^

Detox : Configuration du fichier safe.tbl

Axel BROMAN

Vous pouvez en ajouter librement ; l'Unicode correspondant au symbole est trouvable sur Wikipédia par exemple.

Redimensionner la partition LVM « local » dans Proxmox

Axelos — 2025-09-09T11:04:41Z

Méthodologie qui répond à la problématique faisant suite à l'installation de Proxmox suivant les recommandations : les sauvegardes ne peuvent être réalisées que dans la partition système de 100 go, ce qui peut vite devenir insuffisant. Cette manipulation est complexe lorsque l'on ne maîtrise pas la technologie Logical Volume Manager (LVM), utilisée pour le système de partitions.

Dans l'exemple on augmente de 100 go à 2 to, cela se traduit par 2T dans les commandes ; si exprimé en go, utiliser G (exemple 500G).

Voir la documentation pour plus de détails.

Via un terminal shell

– Création de la partition LVM sauv dans data

lvcreate -n sauv -V 2T pve/data

– La formater en ext4

mkfs.ext4 /dev/pve/sauv

– Éditer fstab pour monter au démarrage le dossier vz

nano /etc/fstab

– Ajouter la ligne suivante

/dev/pve/sauv /var/lib/vz/ ext4 defaults 0 2

– Monter le dossier vz

mount vz

– Redémarrer le processus de montage

systemctl daemon-reload

Désormais, en visualisation la partition local dans l'interface web de Proxmox, vous devriez constater que le stockage a augmenté à la taille demandée.

Partition « local » rédimensionnée dans Proxmox

Capture d'écran affichant un graphique de stockage relative à la partition qui est éditée dans l'article.

Axel BROMAN

Optimiser un fichier PDF

Axelos — 2019-05-26T15:27:58Z

Parfois il arrive que l'on veuille publier dans l'Internet, en général sur un site web, un fichier PDF (Portable Document Format) pour le rendre facilement accessible pour tous.

Seulement voilà, ces fichiers ont souvent tendances à avoir beaucoup d'embonpoint, ce qui rend compliqué la diffusion. D'une part à cause du réseau, car tout le monde n'a pas forcement une connexion réactive, d'autre part à cause des limitations matérielles, les ordiphones s'y prêtent assez mal lorsque le fichier possède une masse de plusieurs dizaines de mégaoctets.

À l'aide de commandes simples dans un terminal, je propose deux solutions alternatives afin de parvenir à un résultat.

Xpdf - Ps2pdf

La première solution est une compression avec peu de perte de qualité. Elle nécessite l'usage de deux commandes successives, d'abord l'encodage du format PDF en PS (PostScript [1]), puis le ré-encodage du fichier PS vers un nouveau PDF. Suite à de nombreux usages, la taille est divisé en général environ par quatre.
Cette solution reste à tester au cas par cas, car parfois elle a peu d'effet, elle peut aussi d'avantage alourdir le fichier original.

On passe à la moulinette le fichier original PDF pour le transformer en PS.
pdftops mon_gros_fichier.pdf

Puis, on transforme dans le sens inverse le nouveau fichier PS dans un autre fichier PDF pour eviter d'écraser l'original.
ps2pdf mon_gros_fichier.ps mon_fichier_maigri.pdf

Plus qu'à constater le résultat ...

Ps2pdf seul

La seconde solution, elle, est bien plus efficace. Peut-être même trop efficace ! Une compression extrême qui parfois ne conviendra pas pour l'usage qui sera fait du PDF. Je l'ai moins utilisé car découvert récemment, mais j'ai déjà récupéré un fichier de 4 mo à partir d'un original de 40 mo, celui-ci a donc réduit la taille du fichier par dix. Un autre fichier est passé de 18 à 1 mo !

ps2pdf -dPDFSETTINGS=/ebook mon_gros_fichier.pdf mon_fichier_maigri.pdf

[1] Il s'agit d'un format alternatif et antérieur à PDF

Génération d'un code QR

Axelos — 2019-03-02T20:26:25Z

Cet article ne traitera pas de l'intérêt d'un tel code, voir ici pour les détails, il s'agit plutôt de comment le générer.

J'ai ce besoin pour insérer un code QR (et probablement d'autres dans le futur) sur des supports de communications, y comprit des affiches.

J'ai longuement recherché sur le web des services web qui proposent ce type de code, mais plusieurs obstacles sont apparus :

Obligation d'inscription (généralement « gratuitement »),
Le code est récupérable uniquement en image bitmap, moi j'ai besoin de vectoriel pour ne pas avoir de soucis d'image floue,
Le code redirige vers un pisteur qui permet à l'utilisateur (moi) de savoir combien de personnes ont scannées le code, mais de ce fait le service peut le savoir aussi avec l'user agent et l'IP public, ce qui pose un souci d'ordre gestion de données personnelles.
Ensuite dans quel cas puis-je l'utiliser ? Une lecture des conditions s'impose, c'est embêtant car souvent en anglais.

J'ai fini par abandonné et j'ai cherché une solution alternative et radicale, le créé moi même !
Alors non je ne l'ai pas dessiné de A à Z, j'ai simplement utilisé un logiciel libre qui le fait très bien : qrencode. Pour l'installer sur Ubuntu, un petit :
sudo apt install qrencode
Ensuite pour générer un code QR qui envoie vers une page web, c'est :
qrencode "https://ledomaine/lapage" -o ledomaine_lapage.png

Oui je sais, on retrouve l'un des soucis précédents, le code QR est en Bitmap.
La seconde étape consiste donc logiquement à le transformer en vectoriel (et non pas convertir), j'utilise le logiciel Inkscape.

Avec Inkscape, ouvrez le fichier png, sélectionnez la représentation du code dans la fenêtre, puis sélectionnez dans les options chemin → Vectoriser le bitmap.
Rendez-vous dans l'onglet Options, décochez Adoucir les coins, enfin Valider.

Code QR

Transformation en image vectorielle du code QR avec Inkscape

CC-BY-SA Axelos

Votre code QR est désormais régénéré en vectoriel, en prenant le bitmap comme source.

Petit détail, la version bitmap est toujours affichée après cette manipulation, il faudra bien la supprimer pour ne garder que la version vectorielle.
Si besoin, vous pouvez recentrer proprement dans la page la version vectorielle avec le menu Aligner et distribuer depuis Objet.
Ensuite enregistrez le fichier en format svg (Inkscape ou simple peu importe).

Voilà VOTRE code QR est prêt à être utilisé (pensez quand même à le tester avant !).

Purification d'Omeka

Axelos — 2019-02-24T14:18:50Z

Vous voulez mettre à disposition sur le web de la culture numérisé (livres, audio, photos, documentations…), et pour cela vous vous tournez logiquement vers des solutions sous licence libre, parce que vous considérez comme important l'usage d'outils dont vous avez le contrôle total et qui assure que vos visiteurs viennent bien consulter VOTRE service web.

Logo d'Omeka

Pour cela je me suis tourné vers Omeka, un choix aidé du fait que j'ai suivis une petite formation sur l'outil en amont. Je me suis rapidement rendu compte que malheureusement le diable est dans les détails !

Pour comprendre, supposons que vous êtes dans la racine du dossier Omeka et que vous effectuez une recherche avec le mot clé googleapis pour constater qu'Omeka est vérolé jusqu'à la moelle (explication pour les Nuls : les fichiers suivants d'un serveur Omeka chargent des données depuis Google.

grep -lR "googleapis" *
admin/themes/default/upgrade/index.php
admin/themes/default/upgrade/migrate.php
admin/themes/default/common/header.php
admin/themes/default/common/login-header.php
application/views/scripts/functions.php
application/views/scripts/error/index.php
application/libraries/Zend/Mobile/Push/Gcm.php
application/libraries/Zend/Gdata/Analytics/AccountQuery.php
application/libraries/Zend/Gdata/Analytics/DataQuery.php
application/libraries/Zend/Gdata/Analytics.php
application/libraries/Zend/Dojo.php
application/libraries/globals.php
install/index.html
install/views/scripts/layout.phtml
themes/seasons/common/header.php
themes/default/common/header.php

Que dire ? C'est pas très sympa pour les visiteurs de donner à Google la possibilité de les pister.

Je vous propose quelques petites modifications à effectuer si vous rencontrez le même souci, en supposant que :
Vous et toutes autres personnes administrant le service savez déjà vous protéger de ces scripts (uMatrix ?), pour ne pas avoir à toucher la partie non publique du logiciel, et que les thèmes basiques proposés par défaut vous suffise, sinon c'est à insérer dans le cahier des charges de l'éventuel prestataire.
Peu de modification car en cas de mise à jour d'Omeka et/ou de thème, ces manipulations seront probablement à refaire …
Il n'y a finalement que deux de ces fichiers à modifier.

Fonts

Des règles css chargent des polices sur les serveurs de Google. Il est possible d'importer en local ces polices, toutefois cela demande plusieurs manipulations rébarbatifs … et pas vraiment utile ; Si la police n'est pas chargée, alors le navigateur la remplace par une autre et limite donc l'impacte à un détail graphique superficiel. C'est sur le thème qu'il faut faire la modification.
J'utilise le thème seasons, mais si vous utilisez le thème par défaut, il faudra modifier le fichier correspondant.

themes/seasons/common/header.php

Remplacez la ligne
queue_css_url('//fonts.googleapis.com/css?family=Ubuntu:300,400,500,700,300italic,400italic,500italic,700italic');
Par
queue_css_url('');

APIs

Sont aussi exploités des APIs, chargés cette fois directement depuis le cœur d'Omeka… Il est préférable de les conserver car risquerait de désactiver quelques fonctionnalités.

Créez un répertoire apis dans le dossier omeka du serveur web.
Y copier les deux fichiers chargés sur le serveur googleapis depuis ce fichier application/libraries/globals.php (vois ci-dessous)
Ensuite modifiez ce même fichier pour prendre en charge vos imports.

application/libraries/globals.php

Remplacez la ligne
->prependFile('//ajax.googleapis.com/ajax/libs/jqueryui/1.11.2/jquery-ui.min.js')
Par
->prependFile('/omeka/apis/jquery-ui.min.js')

Et la ligne
->prependFile('//ajax.googleapis.com/ajax/libs/jquery/1.12.4/jquery.min.js');
Par
->prependFile('/omeka/apis/jquery.min.js');

Notez que l'article concerne la version 2.6.1, il peut y avoir des différences sur les autres versions.

ActivityPub, le renouveau du courriel ?

Axelos — 2019-02-11T09:05:00Z

Aussi appelé courrier électronique, ou en anglais e-mail, le courriel est encore aujourd'hui le moyen de communication par écrit le plus utilisé, pratique et ouvert.

Seul le moyen de télécommunication SMS (Short Message Service), est une solution alternative concrète.

Qu'ont-ils en rapport ?

La décentralisation, j'en avais déjà vaguement fait référence dans l'un de mes premiers articles de ce même blog, le principal intérêt du courriel est qu'il est possible de pouvoir utiliser un service chez le fournisseur de son choix, la technologie étant standardisé et donc compatible entre chaque acteur.
Si j'ai une adresse chez le fournisseur laposte.net, je peux échanger avec un usager de free.fr.

SMS

CC-BY-SA MicroZesTo

Le SMS retrouve plus ou moins les même avantages, que vous soyez chez n'importe quel opérateur de téléphonie mobile et que vous possédiez un téléphone portable basique ou un ordiphone (smartphone), les usagers peuvent librement s'envoyer des messages.

Désuétude

Depuis quelques années, le courriel, et c'est encore plus vrai pour les SMS, tombent peu à peu en désuétude, ils sont progressivement abandonnés à l'avantage d'autres moyens alternatifs.

En ce qui concerne le SMS, son abandon progressif est en général lié à l'extension intrinsèque de l'Internet et de ses objets connectés, il s'agit simplement d'une évolution naturelle liées aux technologies. Bien que le nouveau standard RCS (Rich Communication Services) pourrait peut-être lui donner une chance de survie ?

Pour en revenir au courriel, sujet de cet article, celui-ci est donc progressivement abandonné par les particuliers au profit principalement des réseaux alternatifs proposées par les médias sociaux.
Toutefois, sa particularité est que l'abandon n'est jamais définitif, de nombreuses démarches commerciales et administratives nécessitent une adresse pour validation.

Les nouveaux usages

Ces solutions alternatives sont nombreuses, contemporainement, on citera principalement Facebook, Twitter, Snapchat, Instangram, ou encore, plus spécialisés pour la visio Skype et Hangout, Youtube pour la vidéo.
Cependant, ces réseaux partagent tous un point commun, qui à l'inverse du courriel, ont une tendance à limiter les correspondances. En effet, porté par des sociétés privées qui ont seul contrôle de ces technologies, celles-ci, les sociétés, verrouillent l'accès à leurs concurrentes et donc rendent inopérable toute possibilité de compatibilité entre ces mêmes services.
En clair, en choisissant l'un de ces réseaux, vous vous coupez naturellement de tout contact avec les usagers des autres réseaux.

Si j'utilise Facebook Messenger, je ne pourrais pas communiquer avec un usager de Snapchat.
La solution peut être bien sur de m'inscrire sur ces deux services parallèlement, mais dans cette même logique, j'en arriverais à m'inscrire au final sur tout ces services cités, ce qui n'est forcement pas pratique.

Mastodon

AGPL Jin Nguyen

Des solutions ont été envisagés comme alternatives à ces réseaux, en y intégrant un concept technologique semblable au courriel, Jabber pour la pure messagerie instantanée, Mastodon pour du micro-blogage, et Diaspora pour un véritable écosystème social. Des technologies standards, non liées à une société spécifique, etc.
Seulement voilà, cela pose un autre souci qui n'a pas permis à ces solutions alternatives de décoller : l'effet de réseaux. Moi je préfère appeler cela l'effet de masse.

Effet de masse

C'est le fait qu'un nombre de personnes se rassemble sur le même média afin de constituer un socle, une base d'utilisateurs, une masse, sans quoi la plateforme est vouée à ne jamais réellement décoller.
Il est probable que les réseaux précédemment cités, n'étant que des alternatives à ce qui existait déjà, n'ont pas suscité d'intérêt quant à leurs usages (effet marketing, voir plus bas), la masse restant auprès de la masse.

Cet effet sur les réseaux « fermés »

Pour ceux qui ont connu les débuts de l'informatique avant même l'arrivée d'Internet, vous vous souviendrez probablement d'Usenet et d'IRC (qui existent toujours d'ailleurs), puis durant les années 2000 Lycos Caramail et Microsoft Messenger (MSN), d'autres encore moins connus. Ces réseaux antérieurs à l'arrivée de Facebook ont un point commun : Ils furent tous successivement abandonnés à l'avantage de la plateforme suivante.
Facebook aura été un peu l'exception à la règle, car sera resté pendant près de 10 ans comme la référence dans ce domaine, dominance supermassive sur toutes alternatives qui s'échangent les miettes restantes. Cependant, depuis quelques années, l'effet se reproduit, les plus jeunes considérant Facebook comme un réseau pour « vieux » [1], se retrouvent alors sur les nouveaux réseaux que sont Snapchat et Instagram. Ces nouveaux réseaux, qui dans le fond proposent des services similaires aux ténors actuels, disposent d'une interface utilisateur plus en adéquation avec la mode actuelle, et donc ce que recherche l'utilisateur. Ces migrations répétées sont principalement le fruit de marketing et non pas technologique.
Facebook sera inexorablement lui aussi abandonné comme le furent tous les réseaux antérieurs suite aux effets de masse successifs.

Le cloisonnement des réseaux coupant toutes compatibilité inter-réseau donne donc lieu à un usage éphémère de ceux-ci.
Pour comparaison, le courriel lui existait déjà avant Internet, et existe encore aujourd'hui. C'est d'ailleurs probablement pour cette raison qu'il reste encore largement employé dans le monde professionnel.

Le marketing du courriel

La survie du courriel est donc exclusivement dû à son ouverture inter-réseaux et non pas pour sa praticité technologique : il est pratique uniquement car il est ouvert. Si le courriel ne serait pas ouvert, une autre technologie, probablement ouverte, l'aurait fait disparaître.

Somme-nous condamnées à utiliser indéfiniment le courriel ?

Ce qui est certain, c'est que cette technologie qui sera devenue durant plusieurs décennies la plus utilisée pour communiquer par écrit, le restera encore de nombreuses années, qu'il y a ou pas d'alternatives viables pour la remplacer. En effet, pour l'exemple de Facebook, le fait que les plus jeunes ne l'utilisent pas depuis quelques années, ne change pas le fait que ce réseau reste encore aujourd'hui le plus utilisé parmi les médias sociaux, la migration de la masse d'utilisateur ne se fait pas instantanément, et plus la technologie est ancré dans nos pratiques plus il est difficile de s'en défaire.

On notera également l'écosystème qui gravite indépendamment autour du courriel, les listes de diffusions et de discussions.

Sympa

Service de listes de diffusion

CC-BY-SA David Verdin

ActivityPub

La majeure différence entre l'époque ou j'écris cet article et celui que j'avais rédigé il y a maintenant trois ans, c'est la publication officielle d'une nouvelle technologie standardisé en 2018 nommé ActivityPub [2]. En français, on peut la traduire simplement en « publication d'activités ».

Encore très peu déployé car très récente, cette technologie pourrait être la clef pour la réponse aux besoins « marketing » des nouveaux usages liées aux médias sociaux : L'inter-connexion dans l'inter-connexion !

Imaginez qu'un jour, Facebook, Twitter, Instagram, Snapchat, Youtube, Skype … soient dans la capacité de communiquer les uns avec les autres, ou une information posée sur l'un de ces médias puissent être automatiquement relayé sur les autres ! Il s'agit d'une vision utopique concernant ces médias cités proposées par des sociétés concurrentes, toutefois, cela est possible avec les réseaux ouverts que sont Diaspora, Mastodon ou Jabber … et le courriel !

Voilà peut être la magie « Marketing » qui manquait pour les technologies de communication par écrit ouverte, le courriel pourrait être remplacé par tout un écosystème indépendant et ouvert capable de répondre à tous les besoins et préférences simultanément. Un seul et unique effet de masse, peut-on encore le considérer comme tel ?

[1] https://www.numerama.com/tech/329089-vieillissant-facebook-le-reseau-social-naurait-plus-la-cote-aupres-des-jeunes.html Article Numerama 13 juillet 2018

[2] https://www.w3.org/TR/2018/REC-activitypub-20180123/ Standard ActivityPub

uMatrix

Axelos — 2018-09-01T15:09:36Z

Je vais vous présenter le module complémentaire uMatrix à ajouter sur Firefox. Il existe déjà depuis quelques années, mais est compatibles avec Firefox/Fennec pour Android depuis plus récemment.

Cet article est intégré dans le thème du pistage numérique.

À quoi sert uMatrix ?

Comme vous l'avez certainement déjà remarqué, le blog sur lequel vous lisez cet article ne contient pas de script, cookies et css provenant de sites tiers. Sauf de rares exceptions tel que la position géographique à l'aide de la carte OpenStreetMap.
Ce choix est volontaire, ne voulant pas être pisté, en toutes logiques je prends soins à ce que vous aussi ne soyez pas pistés !

Mais les autres webmestres en général, ne sont pas aussi bienveillant à votre égard. Eux n'hésitent pas à user, et même en abuser à outrance, de ces différentes ressources tiers !

uMatrix à pour tache principale de bloquer toutes ces ressources tierces, on ne parle donc pas d'un adblocker qui veut dire littéralement bloqueur de publicités en français.
La différence réside sur l'utilité, le bloqueur de publicités à un intérêt de confort, le bloqueur de sites tiers un intérêt de réelle protection, au détriment du confort.

Avant d'utiliser uMatrix

Pour bien poser le contexte, j'ai décidé de publier cet article après avoir remarqué que le module est devenu compatible avec Firefox pour Android.
C'est un détail important, car prenez bien en compte que la majorité des applications que vous êtes susceptible d'installer sur votre ordiphone, proposent des services également disponibles sous format web … ne nécessitant donc qu'un simple navigateur web.
En claire, préférez utiliser le navigateur web libre (si possible Fennec sur F-Droid qui est Firefox sans passer par Google) que vous pouvez contrôler, plutôt que dix applications propriétaires dont vous n'avez aucun contrôle.

Installer uMatrix

Firefox propose un site web qui regroupe les modules complémentaires. Allez simplement sur la page uMatrix, et cliquez sur le bouton + Ajouter à Firefox.
Voilà, c'est installé !

Les explications seront illustrées par des captures d'écrans. Ces captures sont réalisées sur un ordinateur, mais l'usage sur ordiphone diffère peu.

Configurer uMatrix

Avant de l'utiliser, une petite configuration est nécessaire pour le rendre totalement étanche aux sites tiers.
Allez au gestionnaire de modules (Ctrl + Maj + a), puis cliquez sur Préférences de uMarix.

Cliquez sur l'onglet Mes règles, ajoutez deux lignes dans la case Règles temporaires :

* * css inherit
* * image inherit

Enregistrer, <- Appliquer.

Utilisez uMatrix

Une icône apparaît. Si vous cliquez dessus alors que vous êtes sur mon site web, alors vous verrez que toutes les options sont au vert : rien n'est bloqué. C'est normal puisqu'il n'y a aucune ressources provenant de site tiers.

En revanche, si vous vous rendez sur le site leboncoin.fr, vous verrez apparaître quelques sites tiers. Google, dont on ne sait pas trop ce qu'il fait ici, et Criteo qui est entreprise qui constitue des profils utilisateurs pour la publicité.
Prenez en compte que la gestion des scripts est bien souvent pyramidale, plus vous les débloquer et plus vous en voyez apparaître qui seront dépendants de ceux précédemment débloqués.

Débloquer un site tiers

Parfois vous devrez donc débloquer certains sites tiers. Sans quoi certaines informations capitales ne s'afficheront pas, ou la mise en page sera trop difficilement exploitable. C'est là que certains utilisateurs décrochent et se contente d'un simple bloqueur de publicités.

C'est le cas pour le site web 20minutes.fr, ou il faut désactiver le blocage du nom de domaine tiers 20mn.fr, en cliquant sur la partie haute du nom de domaine puis en actualisant la page (touche F5). Sur la capture d'écran, si vous visualisez bien la barre de défilement, vous pouvez constater que la liste de sites tiers est extrêmement longue ... Clairement, pour ce type de site web, uMatrix est très utile !

C'est parfois plus fastidieux, il faut tâter en désactivant un par un les noms de domaines pour espérer trouver le bon ou les bons. Mais avec l'expérience on trouve plus facilement.

À l'usage courant, vous êtes amené à retourner plusieurs fois sur les mêmes sites webs. Pour éviter de régler à chaque visite les sites à débloquer, utilisez le petit cadenas qui conservera vos réglages.

uMatrix propose d'autres options et personnalisations, je vous laisse les découvrir lors que vous aurez saisi le concept général de module.

Conclusion

uMatrix est donc un excellent logiciel pour peu que l'on se donne la peine de consacrer du temps à sa configuration pour son propre usage.
Gardez cependant en tête qu'il n'est pas miraculeux, dans quelques rares cas, vous serez obligé de vous faire épier pour utiliser les services web, à l'image de ce site gouvernementale français qui vous oblige à activer le captcha Google pour vous créer un compte.

Libvirt : sauvegardes des VM

Axelos — 2017-07-16T16:53:51Z

Un article très technique sur de l'administration système Linux.

Prologue

Logo de Debian

Wikimedia

J'utilise un petit serveur dédié tournant sous Debian 7 depuis quelques années ou y sont installé mes programmes, tel que serveur web sur lequel tourne ce blog.
C'était mon premier, et je trouve que je m'en suis plutôt pas mal sorti, vu le nombre de services y tournant.

Durant ces années j'ai donc acquis pas mal de connaissances en tout genre, à force de me retrouver devant des impasses et donc consulter les documentations. Je suis donc en mesure de me lancer dans des gros projets, qui désormais commencent sérieusement à côtoyer ce que savent faire certains informaticiens chevronnés, des trucs bien balaises.

Mais, sur ce serveur il manque un truc, qui vu les nouveaux projets que je voudrais mettre en place me semble aujourd'hui hyper important : la sauvegarde.
En effet comme déjà écris précédemment il s'agit d'un petit serveur peu performant, je fus donc limité par ses capacités techniques. Pas de miroir RAID, pas de virtualisation, juste un simple programme de sauvegarde de fichier basique, que j'exploite manuellement, rien n'est donc automatisé.
Si demain mon serveur crame, ça peut arriver, alors certes j'aurais encore les fichiers, mais il me faudra du temps avant de le remettre totalement en service, des semaines voir des mois.

J'ai donc décidé de me prendre un serveur dédié plus balaise, dont le processeur sait gérer l'accélération matérielle concernant la virtualisation.

Logo de KVM

Wikimedia

Je me suis logiquement tourné vers KVM sur Debian 9, qui est déjà partiellement implémenté dans le noyau Linux, en utilisant l'interface graphique Virt-Manager.
Une interface plutôt pratique et simpliste (c'est relatif) pour installer et manipuler les machines. Seul bémol et c'est un peu logique, Virt-Manager ne sait pas gérer tout ce qui est automatisation de sauvegarde.

Voici donc ce pour quoi je rédige cet article, car l'automatisation des sauvegardes, quand on a jamais fait de virtualisation, c'est un peu chaud. Si demain un autre autodidacte veut se lancer dans la même aventure, il aura déjà une base à disposition.

Je fais le choix de sauvegarder à la fois en local mais aussi sur un autre serveur à distance en SSH. En cas de défaillance dans une VM, je pourrais la restaurer très rapidement, quelques minutes, et si c'est le serveur qui est défaillant, alors j'aurais une copie des VM qui pourront être recopié ailleurs, ce qui ne prendra que quelques jours. Toutefois le risque de subir un disque dur qui crame est faible, puisque le serveur est configuré en RAID 1.

Installation de Libvirt

Je ne vais pas vous expliquer de A à Z comment procéder, puisque de toutes façons une documentation y est dédié sur le wiki de Debian, mais je vais y ajouter deux-trois détails concernant des manipulations à faire en supplément sans quoi Libvirt refusera de démarrer convenablement, et il sera alors impossible de vous y connecter.

Virt-Manager

ubuntu.fr

L'heure du système. Truc vraiment très con qui fou bien la merde, l'heure de mon système Debian fraîchement installé n'était pas configuré sur le bon fuseau horaire ! Un petit coup de dpkg-reconfigure tzdata et le problème n'est plus.

Aussi, il manquait deux paquets, l'un pour gérer le par-feu (je ne connais pas son utilité exacte), et le second pour la connexion sécurisé SSH : apt install ebtable netcat-openbsd

Automatisation des sauvegardes

Dans l'exemple, la machine virtuelle s'appelle « respond », ces commandes sont à intégrer dans crontab. Les arborescences sont aussi évidemment à adapter.

Sauvegardes légères

Snapshots à chaud, c'est-à-dire sans couper la VM. On peut se lâcher, au minima un par jour. Avec l'utilitaire date on lui attribue la date du jour au format JJ-MM-AAAA.

Création d'un snapshot
virsh snapshot-create-as respond snapshot-date +%d-%m-%Y

Suppression des snapshots âgés de plus de 7 jours
virsh snapshot-delete respond snapshot-date -dlast-week +%d-%m-%Y

Sauvegardes lourdes

Copie de la VM à froid, elle doit être momentanément coupée pour éviter toute corruption du fichier. Au minima une fois pas semaine.

Suspension de la VM
virsh suspend respond

Copie du fichier respond.qcow2 en local pour aller vite
qemu-img convert -O qcow2 /home/utilisateur/kvm/respond.qcow2 /home/utilisateur/sauv/respond.qcow2

Relance de la VM
virsh resume respond

Copie du fichier sur un autre serveur
rsync -e "ssh -p 22" -av --delete-after /home/utilisateur/sauv/respond.qcow2 utilisateur@domaine:/home/utilisateur/sauv_server_kvm
Voir ici pour l'identification sans mot de passe.

Exemple de fichier crontab

Fichier qui reprend ces différentes commandes et les exécute automatiquement à des temps déterminés (/etc/crontab)

00 01 * * * root virsh snapshot-delete respond snapshot-date -dlast-week +%d-%m-%Y 05 01 * * * root virsh snapshot-create-as respond snapshot-date +%d-%m-%Y
10 01 * * 0 root virsh suspend respond && qemu-img convert -O qcow2 /home/utilisateur/kvm/respond.qcow2 /home/utilisateur/sauv/respond.qcow2 && virsh resume respond
00 03 * * 0 root rsync -e "ssh -p 22" -av --delete-after /home/utilisateur/sauv/respond.qcow2 utilisateur@domaine:/home/utilisateur/sauv_server_kvm/respond.qcow2

Problème rencontré

Il se peut que cron a des difficultés à lancer les commandes contenant l'insertion des dates dans les noms des sauvegardes. J'en ignore la raison qui est certainement très technique, mais je sais comment contourner le problème : Insérer ces commandes dans des scripts shell appelés par cron.

Exemple pour la commande de création d'un snapshot dans le crontab :

05 01 * * * root /bin/sh /etc/cron.d/snapshot-create-respond.sh

Et dans le fichier snapshot-create-respond.sh que vous créez :

#!/bin/bash
virsh snapshot-create-as respond snapshot-date +%d-%m-%Y

Le pistage numérique

Axelos — 2017-06-11T19:41:57Z

Il s'agit là d'un article prologue, d'autres en découleront ces prochains mois, peut être même années sur des solutions pour contrer les différents pratiques cités ci-dessous.

Présentation

Le pistage numérique, en anglicisme tracking, est le fait de récupérer un maximum de données sur les utilisateurs exploitants les services numériques mis à disposition. Au départ principalement utilisé par des services dits « gratuits » (puisqu'il y a une contrepartie, peut-on encore les considérer comme étant gratuit ?), l'usage du pistage s'est depuis généralisé sur l'ensemble des services, c'est-à-dire y compris ceux payants économiquement parlant.

Le Big Data

L‘intérêt est donc de récupérer le maximum d'informations diverses et variées concernant chaque individu, afin de :

revendre ces données,
constituer une base de données exploitable sur le moment,
constituer une base de données exploitable éventuellement plus tard (le Big Data).

Ces données servent principalement pour le ciblage publicitaire (Criteo, Google, Facebook), des statistiques divers et variés (Proxem), et de la surveillance (NSA, DGSI).

Il y a également des échanges de données entre sociétés, comprenant également des administrations publiques. Par exemple, Google et Facebook fournissent leurs données à la NSA selon le programme PRISM.
D'autres accords non officiellement connus existent certainement.

Le web

Le pistage est arrivé avec Internet. Au départ se cantonnant sur quelques sites web, cela s'est généralisé sur l'ensemble du web durant les années 2000.
Aujourd'hui, hors une partie des petits sites internets personnels comme celui sur lequel vous lisez cet article, plus de 90 % sont concernés.
Oui un Français qui navigue sur le web se fait pister sur quasiment tous les sites qu'il consulte !

L'ordiphone

Il y a ensuite les ordiphones (smartphones), qui a normalisé la pratique. Selon une étude réalisée par la CNIL et l'Inria en 2014, environ la moitié des applications pistes leurs utilisateurs, c'est-à-dire récupère des informations qui n'ont pas d'intérêts pour les usages. Depuis, la situation à probablement empiré.

L'ordinateur

Puis enfin, suite au peu d'intérêt que portent les usagers - d'ordiphones et de services tels que Google et Facebook- pour leur vie privée, se généralise alors désormais le pistage sur les ordinateurs. En bref, dès que vous allumez votre ordinateur, vous êtes pistés !

Le meilleur exemple est sans doute le navigateur internet Google Chrome. Il est devenu en quelques années le navigateur le plus utilisé en France, et de loin. Pourtant techniquement, d'autres alternatives sont plus performantes.
Nous passerons sur ses méthodes de propagation typique de logiciel malveillant (spyware)
puisque l'on sort du sujet, mais la fonction principale de Chrome ne profite pas à l'utilisateur mais plutôt à Google : La société grâce à ce fabuleux logiciel sait exactement ce que font ses utilisateurs sur le web, toutes leurs actions sont envoyées sur les serveurs de Google !

Suite au succès incontestable de la stratégie de Google, Microsoft a fait le choix de rentrer officiellement dans la danse.

Bien que de nombreux experts avaient déjà alerté sur de précédentes versions de Windows, que ces derniers renvoyaient des données étranges sur les serveurs de Microsoft, la société a décidé d'ajouter des closes dans leurs conditions d'utilisation, comme Google auparavant, qui explique en version simplisme, qu'ils se resservent le droit de pister leurs utilisateurs.
Puisque Microsoft Windows 10 se déploie progressivement sans obstacle, la société ne fera certainement jamais marche arrière.

je vous laisse consulter par vous-même ces fameuses conditions d'utilisation trouvable facilement à partir d'un moteur de recherche, je préfère par conviction ne pas mettre de lien pointant vers leurs noms de domaine depuis mon blog.

Conclusion

La conclusion à cette histoire, c'est que le pistage c'est récent, très récent. Ça a débuté il y a 15 ans, et s'est progressivement généralisé sur tous les supports. Microsoft Windows c'était il y a seulement 2 ans !
Mais qu'en sera-t-il dans 30 ans, lorsque des innombrables quantités de données auront été collectés et seront réutilisés au paroxysme de leur potentialité ?
En attendant de connaître la réponse à cette question existentielle, nous pouvons soit fermer les yeux comme visiblement la grande majorité des Français le font déjà, ou soit trouver des solutions pour minimiser notre « emprunte numérique ». Ce qui n'est en pratique pas si compliqué, cela demande juste un peu de motivation…

Articles qui découlent de ce thème :

Bloqueur de sites tiers

PDF Hybride

Axelos — 2017-03-09T13:34:26Z

Et encore un petit article sur Libre Office !

Logo de Libre Office

Membre de diverses associations, je contribue au bon fonctionnement de celles-ci en m'impliquant entre autre dans les parties administratives. De ce fait, je dois alors y partager certains documents, comptes rendus, bilans …

OpenDocument

La question du format de document à utiliser pour le partage de ces documents est plutôt important. En effet, défendeur de l'utilisation des formats ouvert (voir ce mini site web proposé par l'April pour comprendre cet intérêt), je me dois alors d'utiliser le format Open Document Format (ODF), utilisé par défaut par la majorité des logiciels libres de bureautique.

Mais voilà, certains membres utilisent la suite bureautique de Microsoft, qui bien qu'ayant réalisé des efforts de compatibilité depuis 2013, ne permet pas encore aujourd'hui d'exploiter totalement les formats ODF, ce qui est assez étrange puisque ces formats sont totalement documentés…

Logo PDF

Ils sont donc dans l'incapacité de pouvoir les visualiser correctement. Lors de mes partages de document, j'ai donc pris l'habitude d'exporter une version Portable Document Format (PDF), qui permet à ces utilisateurs de consulter ce fichier avec un simple lecteur PDF → https://pdfreaders.org/

Est alors envoyé donc deux fichiers, une version modifiable en format ouvert et libre (on ne peut faire mieux !), et un second format ouvert, mais non modifiable, adapté pour la lecture uniquement.

Par hasard, je suis tombé sur une fonction en bidouillant récemment Libre Office, qui permet de générer des fichiers PDF « Hybride ». Le concept consiste à générer un fichier PDF traditionnel, donc lisible comme habituellement avec un simple lecteur PDF, mais contenant une version encapsulée ODF, qui lui permet donc d'être ouvert avec Libre Office ou tout autre logiciel sachant exploiter le format standardisé, et donc le modifier.

Ainsi, avec cette fonction, je peux désormais envoyer uniquement le format PDF Hybride, qui permet au fichier d'être tout de même modifiable sans aucune limitation technique.

Bien sur, à n'utiliser que lorsque le fichier n'a pas spécialement pour vocation d'être modifié, c'est juste pour du « au cas où ». Si non il vaut mieux continuer à travailler exclusivement avec du format ODF.

Menu export PDF

La méthode : Il faut cliquer sur Fichier puis Exporter au format PDF,
Dans l'onglet Général, cocher la case PDF Hybride (fichier ODF incorporé).

Ainsi, si un jour une modification devra y être réalisé, le fichier pourra être ouvert avec Libre Office.
Il faudra cliquer sur Fichier puis Ouvrir … et sélectionner le fichier PDF.