Carnet de notes

Catégorie : Geek

Un petit programme par l’IA
J’avance sur mes outils de sauvegarde mais aussi sur mes explorations IA.

J’ai eu besoin d’un second programme qui va lire tous les emails d’une boite au format maildir, regarder l’année du mail, et le déplacer dans une boite maildir spécifique à cette année là.

J’aurais pu le faire en Javascript ou en Ruby mais vu ce que m’a fait l’IA en quelques minutes précédemment, je me suis dit que j’allais continuer et refaire un script Go (je n’ai jamais codé une seule ligne de Go).

Voici le résultat : github.com/edas/split-maildir-by-year.

Les 300 lignes de Go ont analysé l’intégralité de mon archive Gmail (537 000 emails quand même).
- Je ne crois pas avoir touché le code source à la main
- Le code a toujours compilé du premier coup
- Le code a toujours fait ce que je souhaitais, sans erreur
Le code est correctement structuré, des fonctions ont été créées au fur et à mesure des besoins quand le code a évolué. Quand une fonction est un peu longue, il sépare en blocs et ajoute une ligne de commentaire pour dire ce que fait le bloc, ce qui me permet de ne pas avoir à décoder un code dans un langage que je ne connais pas.

10 demandes courtes pour avoir le programme et le faire évoluer vers mes besoins, questions de relecture incluses. 17 ajouts par la suite pour traiter des cas spécifiques rencontrés.

Je n’aurais pas fait plus vite moi-même, ni en Go ni dans un langage que je connais très bien. Peut-être que ça aurait été un peu plus difficile pour un non-développeur, mais je vois mal ce que j’aurais eu à y gagner à le coder à la main.

À chaque modification j’ai le diff à valider mais aussi une bonne explication de l’IA sur ce qui a été modifié, comment et pourquoi. Ma relecture s’est souvent faite en diagonale sur la base des commentaires de code. L’IA a su répondre à mes questions quand j’ai rencontré des éléments moins évide

Plutôt que lister les étapes, je copie directement mes prompts.
```
I have hundreds thousands of files in the "maildir/new" directory. Each file contains a raw email with headers.

I want a program which reads all emails one by one, look for the "Date" header, return an error in the header doesn't exists or is unreadable, and otherwise move the email file in the directory "by-year/{year}/new" where {year} is the year in the Date header.
```
Je relis parce que ça va toucher des données réelles et que j’ai la flemme de faire des données de tests.

Je vois qu’il retourne toujours une date même quand il y a une erreur. Inhabitué de Go, j’ai peur de certaines erreurs de débutants en PHP ou en JS, où on utilise une date du jour plutôt que gérer l’erreur. Je pose ma question et je suis rassuré par sa réponse (que je trouve logique après coup vu le fonctionnement des erreurs en Go)
```
can the parseEmailDate return nil when it doesn't find a Date header ?
```
Je vois aussi un mkdir sans test d’existence préalable. Dans d’autres langages ça jette une erreur si le répertoire existe. Je pose la question et là aussi je suis rassuré par sa réponse.
```
what if the directory already exists line 63 ?
```
Je demande une adaptation, non strictement nécessaire, pour que chaque répertoire soit bien une boite maildir avec les 3 répertoires obligatoires. Ce n’est pas nécessaire à ma sauvegarde mais je préfère, au cas où ça m’évite des erreurs un jour.

Oui, j’ai parfois basculé en français. Je ne sais ni pourquoi j’ai du français ici, ni pourquoi j’ai mis de l’anglais avant. L’IA est configurée pour toujours me répondre en français. Le code est toujours commenté en anglais. Je pense que propres entrées dépendent ce sur quoi mon attention était à ce moment là (code, page web, etc.)
```
Si le répertoire "by-year/{year}" n'existe pas, il faut aussi créer "by-year/{year}/cur" et "by-year/{year}/tmp", même si nous ne nous en servons pas
```
Seconde adaptation : L’IA m’a dit plus haut qu’elle avait un code de gestion de conflit. Je vois le commentaire dans le code qui dit qu’en cas de conflit le code ajoute un suffixe avec le timestamp du moment pour éviter d’écraser un fichier existant. Normalement ça ne devrait jamais arriver mais un suffixe risquerait de casser le format de nommage des fichiers maildir donc je préfère qu’on s’arrête avec une erreur et que j’avise.
```
if there is a conflict, to not append a timestamp to make it unique. Return an error.
```
Troisième adaptation. Je traite un demi-million de fichiers. Je préfère que ça traite les fichiers au fil de l’eau plutôt qu’avoir la liste d’un demi-million de fichiers en mémoire.

Au départ c’est d’abord une question. Je ne sais pas si Go retourne un tableau ou un itérateur (oui, j’ai été flemmard jusqu’à ne même pas faire attention au typage). Je m’attendais à demander la correction dans le premier cas. Au final il modifie de lui-même le code à partir de la seconde question pour faire des itérations par lots 100 fichiers, sans que je ne le demande explicitement.

En réalité c’est du script maison, qui sera lancé juste une poignée de fois. L’optimisation est totalement inutile mais je n’ai pas encore appris à totalement lâcher prise vis-a-vis de ce que j’aurais codé moi-même.
```
What does return ReadDir in line 88 ?
```
```
Si le répertoire contient des millions de fichiers, est-ce que la variable files ligne 88 va tout avoir en mémoire ?
```
Je vais jouer avec de vraies données. Je veux voir les erreurs et m’arrêter pour corriger, pas que ça continue et que j’ai à remonter voir s’il y a eu des erreurs.
```
The programm should stop at the first error, not continue with the next file
```
Et, parce que je n’y avais pas pensé avant :
```
Le programme doit aussi prendre un chemin en argument. C'est là que se trouveront les différents répertoires prévus.
```
La première phase est faite. Je passe au test en conditions réelles, sur le demi-million d’email de mon archive. Chaque fois que j’ai une erreur, je lui indique et j’avance.

C’est là que je vois que chaque client email fait bien ce qu’il veut avec les entêtes. J’ai croisé un nombre inattendu de formats différents et d’erreurs dans les entêtes. Chaque fois le programme m’affiche l’erreur, je copie-colle la date problématique, l’IA corrige, et je relance jusqu’à l’erreur suivante.
```
We should also parse the format for "Mon, 21 Aug 2006 16:47:08 +0200 (CEST)"
```
```
We should also parse the date "Mon, 1 Dec 2008 10:57:10 UT"
```
Sur une erreur étrange, j’ouvre l’email et je me rends compte qu’il prend en compte la continuation d’une entête Received comme si c’était une date, parce qu’il ne prend pas en compte les espaces avant le mot clé Date.
```
TrimSpave at line 30 should only trim right space, not left space
```
Particularité Gmail, quand il récupère un email d’une boite tierce (via POP3 ou IMAP), il crée des entêtes à lui, saute une ligne et après pose le vrai email. Rétrospectivement je pense que j’aurais dû retirer la section ajoutée par Gmail pour retrouver un email normal. Je le ferais peut-être plus tard. Là je me suis contenté de lui faire contourner le problème.
```
When we find the header "X-Gmail-fetch-Info", we should ignore the blank line following if it exists
```
Encore des questions de dates…
```
We should be able to parse the Date "Tuesday 29 May 2007, 16:03"
```
```
We should also parse "Wed, 03 Mar 2010 22:36:13 +0100 CET"
```
```
We should also parse "Thu, 22 Jul 2010 23:02:50"
```
```
We should also parse "Mon, 30 Mar 2009 20:11:22 +0100"
```
Ce coup-ci ça ne corrige pas mon problème. Rétrospectivement j’aurais pu le comprendre parce que le message d’erreur n’était pas exactement le même, mais je le laisse trouver seul. Le mot clé DATE était en majuscules, c’était la première fois.
```
pourtant le script fait une erreur sur la ligne "DATE: Mon, 30 Mar 2009 20:11:22 +0100". Pourquoi ?
```
Le code qu’il me génère imbrique quatre fonctions de manipulation de texte sur une seule ligne. Je ne trouve pas ça lisible. Je pose la question.
```
que fait la ligne 49 ?
```
Ça semble redondant avec la ligne suivante, pré-existante. Effectivement, quand je pose la question il identifie le doublon et le supprime.

Il faut penser à relire (même si l’erreur aurait juste était du code inutile). Cursor me fait valider chaque changement sous forme de diff donc c’est assez rapide et facile à faire.
```
que fait la ligne 50 ?
```
Encore des formats de date…
```
Encore un format : "mon, 10 jul 2006 01:02:08 gmt"
```
```
encore un : "wed, 23 jun 2004 01:19:32 cest"
```
```
encore un "mon, 22 mar 2010 14:20:15 +0100 +0100". C'est probablement une erreur d'écriture mais il faut la prendre en compte
```
```
"wen, 16 jul 2008 22:09:05 +0200"
```
Les deux derniers cas sont forcément des erreurs de la part de clients emails. Pour la première erreur il choisit d’ignorer toutes les répétitions du décalage horaire.

La seconde erreur est intéressante parce que « wen » est probablement là pour « wed » (wednesday). Il identifie l’erreur et ajoute un code qui remplace toute une liste d’erreurs de frappes habituelles pour les code courts de jour de la semaine. Parfait.
```
"wed, 19 apr 2006 12:15 -0800"
```
J’ai mon premier cas d’email sans entête « Date ». Je ne sais pas si c’est autorisé ou non mais peu importe. Je lui dis de fouiller les entêtes « Received » à la place. Je sais que ces entêtes peuvent être sur plusieurs lignes.

L’IA va plus loin que moi, sait que la date est en seconde position dans ces entêtes, et regarde uniquement après le premier point virgule. Elle sais aussi comment s’appellent ses entêtes sur plusieurs lignes (lignes de continuation). Mieux que ce que j’aurais fait.

Je note que je tape vite, avec des erreurs de frappe, un guillemet en trop, etc. Peu importe, c’est destiné à l’IA. Me relire est superflu : je peux revenir en arrière si c’est mal compris.
```
If you don't find any Date header, try again to look if you can find a date somewhere in a "Received" header (theere may be multiple "Received" headers") or in the lines begining with a space and following a "Received" header
```
23 mars 2025
Disque de sauvegarde
J’ai un SSD de 8 To dédié à ça. L’idée c’est de me donner un peu de mou sachant que j’en utilise au moins 3 To.

Je l’ai branché sur un Mac mini, qui est la seule machine fixe chez moi et je n’ai pas envie d’aller acheter un NAS en plus.

Le tout sera aussi sauvegardé en ligne au cas où le disque fait défaillance (mauvaise manipulation, panne, vol, incendie, dégât des eaux) mais j’ai besoin que ce soit d’abord en local et pas uniquement dépendant d’un service en ligne.

Outre la défiance vis-a-vis des services en ligne, ça me permettra de tout remonter sans attendre des jours à tout télécharger.

Montage du disque

C’est une machine partagée, donc il faut des droits d’accès. Macos monte par défaut tous les disques USB avec un paramètre noowners qui fait que tout le monde a les mêmes droits sur tous les fichiers.

Pour corriger ça il faut l’empêcher de monter le disque automatiquement et le faire à la main avec l’option owners. Je ne sais pas si c’est redondant mais j’ai eu des succès en ajoutant la commande diskutil enableOwnership avec l’identifiant du disque;

C’est un disque de sauvegarde, je fais déjà écrire beaucoup dessus en permanence, il faut bien penser à ajouter le noatime pour éviter de générer des écritures inutiles.

Au final :
```
# GUID du disque, les /dev/disk* ne sont pas stables
GUID="xxxxx"
# Point de montage
DIR="/Volumes/data"
mkdir -m 0750 $DIR 2> /dev/null
diskutil mount -mountOptions noauto,nosuid,nodev,noatime,nobrowse,owners -mountPoint $DIR $GUID && diskutil enableOwnership $GUID
```
On chiffre

Le disque est chiffré. Pour moi c’est indispensable en cas de vol. C’est aussi nécessaire si le disque semble avoir des défaillance, que je ne peux l’effacer mais que quelqu’un risque de réussir à relire quand même. Je ne veux ni ne peux me permettre que tout se balade n’importe où.

Je pourrais enregistrer la clé de chiffrement dans le gestionnaire natif de Macos comme il m’invite à le faire mais je vais avoir besoin plus tard que le montage se fasse au démarrage du disque, hors de toute session utilisateur.

Je me permets donc de mettre en clair le mot de passe du disque. Tant que le script en question n’est accessible que par root, ça me va.
```
# GUID du disque, les /dev/disk* ne sont pas stables
GUID="xxxxx"
# Point de montage
DIR="/Volumes/data"
# Mot de passe du système de fichier
PASS="xxxxxx"
diskutil apfs unlockVolume $GUID -passphrase $PASS -nomount
mkdir -m 0750 $DIR 2> /dev/null
diskutil mount -mountOptions noauto,nosuid,nodev,noatime,nobrowse,owners -mountPoint $DIR $GUID && diskutil enableOwnership $GUID
RES=$?
sudo chgrp Famille $DIR
sudo chmod 750 $DIR
```
On garde actif

Par défaut Macos démonte tous les disques USB quand on ferme la session utilisateur. C’est aussi vrai pour les partitions chiffrées, y compris celles qu’on aurait montées à la main.

Bref, il suffit que n’importe qui utilise le poste et se déconnecte pour que mon disque de sauvegarde soit aux abonnés absents, impossible à remonter vu que seul root peut accéder au mot de passe du disque.

J’ai ajouté en fin de script une petite boucle qui « occupe » le disque et empêche qu’il soit démonté. Ça a l’air de fonctionner.
```
cd $DIR
while true; do
   sleep 10;
done
```
Il faut quand même pouvoir arrêter le système, donc le script doit savoir réagir à un signal d’interruption.
```
trap 'bye' SIGINT SIGTERM SIGKILL
function bye() {
 cd /Volumes
 exit 1;
}
```
Lancement au démarrage

Je n’ai pas trouvé d’autres méthodes qu’un fichier plist dans /Library/LaunchDaemons.
```
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE plist PUBLIC "-//Apple Computer//DTD PLIST 1.0//EN" "http://www.apple.com/DTDs/PropertyList-1.0.dtd">
<plist version="1.0">
<dict>
  <key>Label</key>
  <string>xxxx.backup-disk</string>
  <key>OnDemand</key>
  <false/>
  <key>UserName</key>
  <string>root</string>
  <key>GroupName</key>
  <string>wheel</string>
  <key>ProgramArguments</key>
  <array>
    <string>/usr/local/sbin/mount-data.sh</string>
  </array>
  <key>RunAtLoad</key>
  <true />
  <key>KeepAlive</key>
  <false/>
  <key>LaunchOnlyOnce</key>
  <true/>
</dict>
</plist>
```
Le script de montage complet est dans /usr/local/sbin, en lecture uniquement pour root.
```
#!/bin/sh
# GUID du disque, les /dev/disk* ne sont pas stables
GUID="xxxxx"
# Point de montage
DIR="/Volumes/data"
# Mot de passe du système de fichier
PASS="xxxxxx"
trap 'bye' SIGINT SIGTERM SIGKILL
function bye() {
 cd /Volumes
 exit 1;
}
diskutil apfs unlockVolume $GUID -passphrase $PASS -nomount
mkdir -m 0750 $DIR 2> /dev/null
diskutil mount -mountOptions noauto,nosuid,nodev,noatime,nobrowse,owners -mountPoint $DIR $GUID && diskutil enableOwnership $GUID
RES=$?
sudo chgrp Famille $DIR
sudo chmod 750 $DIR
cd $DIR
while true; do
   sleep 10;
done
```
23 mars 2025
Sauvegarder Gmail
J’ai un historique de 25 ans d’emails et j’y tiens. Il m’arrive encore régulièrement d’aller fouiller pour retrouver trace de contacts ou d’échanges d’il y a 10 ans. Je l’ai fait encore ce matin.

Je tiens donc à assurer la pérennité de tout ça. J’ai confiance en Google¹ mais j’ai déjà lu les récits de personnes qui se sont vus clôturer leur compte sans préavis ni possibilité de récupération. Je ne suis pas non plus à l’abri de faire moi-même des bêtises dans mon compte.

J’ai déjà utilisé Getmail par le passé pour télécharger un à un tous mes emails en provenance de Google. Il n’a cependant pas été mis à jour pour Python3. Getmail6 semble avoir pris le relai et il a la bonne idée d’être disponible sous macos via homebrew.

POP3

Mon compte dépasse le demi-million d’emails archivés. La synchronisation IMAP semble prendre des années à balayer tous les emails pour savoir lesquels sont nouveaux depuis la dernière fois. C’est jouable si vous avez juste quelques dizaines de milliers d’emails. Au-delà il faut utiliser le bon vieux POP3.
1. Activer POP3 dans les options de Gmail
2. S’assurer de le configurer pour récupérer tous les emails et pas uniquement ceux qui arrivent à partir d’aujourd’hui.
Si vous aviez déjà utiliser POP3 par le passé, il faut lui demander de réactiver le téléchargement de tous les emails, y compris ceux qui ont déjà été téléchargés.

Si vous avez déjà un client email qui se connecte en POP3, passez-le en IMAP. Ils se feraient concurrence. Vous auriez une partie des emails d’un côté et une partie de l’autre.

Configuration

Ma configuration getmailrc ressemble à ça :
```
[retriever]
type = SimplePOP3SSLRetriever
server = pop.gmail.com
username = xxxx@xxxxx.xxx
password = xxxxxxxxxx

[destination]
type = Maildir
path = /xxxxxxx/maildir/
user = xxx
filemode = 0600

[options]
read_all = true
received = false
delivered_to = false
verbose = 0
message_log = /xxxxx/pop.log
```
L’utilisateur est l’adresse email complète. N’utilisez pas votre mot de passe Google et créez un mot de passe d’application dédié, ça vous permettra de le révoquer un jour. Pensez à protéger ce fichier de configuration parce que celui qui y aura accès aura aussi accès à votre compte Google.

Le paramètre received assure que Getmail récupère le message tel quel, sans ajouter d’entête.

Erreurs de synchronisation

Google envoie tous les emails par groupes de 200 à 1000 non téléchargés à chaque appel POP3. Si le paramètre read_all est à false, Getmail ne télécharge pas les emails qu’il a déjà vu.

Pour une raison ou une autre, ça peut partir en boucle si Getmail pense avoir déjà vu un email que Google pense pourtant ne pas être déjà téléchargé : L’email va être reproposé à chaque fois. Si ça fait ça sur plusieurs centaines d’emails, vous prenez le risque que vous restiez bloqué sur le même groupe d’emails indéfiniment à chaque appel.

Vérifiez bien que le read_all est à true. Si le problème persiste, une solution est de passer par le type BrokenUIDLPOP3SSLRetriever plutôt que SimplePOP3SSLRetriever. Getmail télécharge alors systématiquement les messages sans se préoccuper de ce qu’il a déjà lu ou non.

Quota

Gmail a des quota sur ses APIs. Pour initialiser mon demi-million d’emails j’ai lancé Getmail en boucle et je suis tombé sur des erreurs 403. Si vous devez comme moi initialiser plusieurs dizaines de Go, ça demande un peu de surveillance.

Le quota semble toutefois très très large. En rythme de croisière je compte probablement synchroniser 1 à 2 fois par jours mais on peut sans problèmes faire plusieurs synchronisation par heures si ça vous semble indispensable.

Maildir

Il y a deux formats, mbox et maildir. Mbox c’est un unique gros fichier, un peu comme une archive tar. Maildir c’est un répertoire avec un fichier par email, ce qui me semble plus adapté pour des sauvegardes avec de nouveaux emails tous les jours.

Initialiser un maildir c’est juste un répertoire qui contient un sous-répertoire tmp, un new, et un cur. Tous les emails envoyés par Getmail iront dans new.

Il reste que pour mon demi-million d’emails ça commence à faire beaucoup de fichiers dans un seul répertoire. J’ai fait un petit script qui parcourt l’intégralité des emails, lit la date², et les répartit dans des maildir spécifiques par année. Ça facilitera aussi la sauvegarde et me permettra éventuellement de faire un zip pour les vieilles années.

Emails envoyés

Le problème du POP3 c’est que ça ne télécharge que les emails reçus, pas les emails envoyés. J’ai donc dû ajouter une seconde synchronisation IMAP sur le dossier des emails envoyés. Là j’ai dans les 30 000 emails. C’est long à parcourir mais encore jouable tant que je ne lance pas la récupération toutes les deux minutes.

J’ai donc deux fichiers getmailrc, un pop.getmailrc (emails reçus) et un imap.getmailrc (emails envoyés). Je dois donc manuellement spécifier les paramètres –rcfile= quand j’appelle Getmail. On peut spécifier plusieurs fois le paramètre, les synchronisations sont alors lancées l’une après l’autre.
```
[retriever]
type = SimpleIMAPSSLRetriever
server = imap.gmail.com
username = xxxx@xxxxx.xxxx
password = xxxxxx
mailboxes = ("[Gmail]/Sent Mail",)

[destination]
type = Maildir
path = /xxxxxx/maildir/
user = xxxx
filemode = 0600

[options]
read_all = false
received = false
delivered_to = false
verbose = 0
message_log = /xxxxxx/imap.log
```
J’envois ça vers le même dossier maildir, puis fais la même répartition par année.

Enregistrer en tâche planifiée

Sous Linux il suffit probablement de faire une entrée dans le cron.

Sous Macos, si je veux que la synchronisation s’exécute même quand je ne suis pas connecté, il faut enregistrer le script dans /Library/LaunchDaemons.

Comme le répertoire destination de mes sauvegarde est hors de mon disque principal, Macos impose aussi que le programme lancé ait la permission spéciale « full disk access ». Getmail n’est qu’un script Python et je n’ai pas voulu donner des droits larges à tout Python. J’ai dû faire un programme natif qui lance mon script Getmail et donner les droits sur le disque à ce script là.

Je ferai probablement un billet dédié à tout ça.

Entre temps j’ai presque 40 Go d’historique email à synchroniser depuis Google par batch de 200 à 1000 mails. Ça va me prendre un peu de temps.
1. Oui, j’utilise Google. J’ai soupesé plein de fois les alternatives mais toutes auraient demandé un compromis significatif et je ne suis pas encore passé à l’action. Ça viendra. J’ai besoin de trouver le bon équilibre et de ne pas perdre la recherche dans le passé. ↩︎
2. Je ferais un billet spécifique, ça s’est révélé bien moins évident que je ne l’imaginais naïvement. ↩︎
18 mars 2025
Organisation des sauvegardes

Je me suis remis à mes sauvegardes. Le dernier épisode était en septembre et ça commence à faire presque deux ans que rien n’est finalisé.

Je reste sur mon plan précédent. J’ai juste abandonné l’idée d’utiliser Crashplan. Ça part de messages sur des forums où ils disent explicitement qu’ils ne pouvaient pas garantir le bon fonctionnement quand on dépasse quelques To de sauvegarde. Derrière j’ai exploré plus et les débits faméliques rendent de toutes façons illusoire une restauration complète sur des volumes de cet ordre de grandeur en cas de défaillance disque.

J’irai chez BorgBase ou Hetzner, probablement Hetzner parce que même en coupant l’inutile j’ai quand même au moins 3 To aujourd’hui et que va commencer à faire cher chez BorgBase avec l’augmentation naturelle.

Disque externe – Disque interne

Le vrai sujet de ce week-end, c’est comment monter une partition chiffrée depuis un disque externe. C’était déjà mon problème en septembre.

Macos considère que les disques externes sont comme des clés usb, lisibles par tous les utilisateurs, sans droits d’accès, et démontées dès qu’on se déconnecte de sa session.

Passer à un système chiffré empêche qu’il soit montable par tout le monde tant qu’on n’ajoute pas la clé de chiffrement dans le trousseau.

Si c’est monté manuellement, on peut ajouter le paramètre owners pour faire en sorte que le système respecte les permissions sur les fichiers et n’ouvre pas tout à tout le monde.

J’ai pu faire monter le disque au démarrage en ajoutant un plist dans /Library/LaunchDeamons et en le chargeant avec un launchctl load. Le plist exécute un script au démarrage qui déverrouille le disque et le monte avec les bonnes options. Ça veut dire que la clé de chiffrement est en clair dans un fichier du disque interne. Le disque interne est chiffré lui aussi, le fichier n’est lisible que par root. Ce n’est pas parfait mais suffisant pour mon usage.

Ça reste visible comme un disque externe, donc tout le monde peut demander à l’éjecter. J’ai palier au problème ajoutant un petit code dans le script de démarrage qui entre dans le disque et attend indéfiniment. Le disque étant occupé, personne ne peut l’éjecter.

J’ai l’impression de batailler à faire du bricolage sur ce qui m’aurait pris quelques minutes sous Linux mais ça fonctionne.

L’étape suivante ça va être de s’assurer que tous les fichiers se retrouvent sur le disque prévu pour, en synchronisant tous les comptes Google Drive et Tresorit. Ensuite je vais installer un getmail pour archiver en temps réel les boites email, probablement un script pour archiver le Github. La dernière étape sera de brancher Borg pour envoyer le backup en ligne et d’attendre un bon mois qu’il finisse la synchronisation initiale.

24 février 2025
Objets déconnectés

Un péché d’orgueil d’avoir fait fabriquer en France

Libération

J’en ai marre d’être pris pour un jambon. Le problème, très bien noté dans l’article, c’est qu’il y a eu un défaut sur des milliers de cadres, qu’il a fallu un rappel, et qu’ils n’ont pas su le financer.

La fabrication en France elle a bon dos.

France ou Chine, le problème est surtout qu’ils ont préféré ne pas s’assurer contre ce risque, ou mal.

Je note aussi qu’on se retrouve dans le même cas que VanMoof, c’est à dire que l’entreprise n’a pas pris la peine de penser à la pérennité des vélos vendus en cas de cessation d’activité. Sachant qu’il y a eu un précédent avec VanMoof, cette impasse est un choix de leur part.

Bref, on a juste une classique enterprise qui a rogné des choses qu’elle n’aurait pas dû et qui tente de reporter la faute ensuite.

Il est peut-être temps d’avoir une législation adaptée aux objets connectés, avec une obligation de pérennité sur une durée de vie cible, dont au minimum la divulgation des protocoles, api et signatures en cas de cessation d’activité.

24 janvier 2025
SMS Backup+

Je ne comprends toujours pas qu’Android n’ait rien prévu pour migrer la réception des SMS dans le cloud.

J’utilise SMS Backup+. Il y a peut-être des alternatives, d’autant plus maintenant qu’il n’est plus maintenu dans les stores, mais c’est mon historique depuis facilement une décennie.

Ce petit outil récupère chaque SMS reçu pour l’ajouter dans les archives de mon compte email. Ça me permet de résister à la perte de mon téléphone mais aussi de fouiller dans les archives.

Bonus, il fait de même avec les appels (mais sans le contenu audio). Pour les appels je peux même les poser dans le calendrier pour retrouver facilement qui m’a appelé quand avec quel numéro.

Mise à jour : Il semble que ça ne sauvegarde pas les messages RCS chiffrés qui sont envoyés entre personnes qui utilisent Google Message. Il va falloir chercher un peu plus loin.

19 décembre 2024
Réparer son smartphone

Je suis assez fier, j’ai donné 18 mois de vie en plus à mon smartphone.

Je me suis résolu à tenter d’ouvrir moi-même la bête pour changer le connecteur de charge. Retour d’expérience.

Le matériel

Les pièces détachées se trouvent assez facilement sur Amazon, même pour un vieux modèle peu répandu. Les prix n’ont rien à voir avec ceux des ateliers de réparation. Le connecteur de charge je l’ai trouvé à moins de 10 €, avec un mini tournevis cruciforme et quelques outils en plastique destinés à ouvrir le capot.

J’ai ajouté un gros tube de colle smartphone à 10 € dont la contenance me servira pendant des années.

Le seul vrai pré-requis c’est le pistolet à chaleur. Ma femme avait ça pour ses loisirs créatifs mais sinon ça coûte une vingtaine d’euros en boutique. Il parait que ça peut se faire au sèche cheveux mais je ne sais pas si j’ai envie de tenter (moins de puissance et moins de directivité).

La procédure

J’ai suivi deux vidéos, une pour ouvrir le panneau arrière et une pour le remplacement de la pièce elle-même. Une recherche sur Youtube avec le modèle de téléphone et la réparation souhaitée donne plusieurs vidéos même sur des modèles confidentiels.

Le panneau arrière ça semble être assez similaire partout : On chauffe pour décoller et on ouvre sans forcer pour ne rien casser. La première fois c’est délicat. La seconde fois on fait ça vite et sans difficultés.

Le remplacement de pièce se résume presque à retirer des vis et débrancher des nappes puis tout remettre en place. Le plus difficile c’est réussir à rebrancher les nappes avec mes gros doigts.

Astuce : On m’a conseillé de prendre une photo à chaque étape pour bien m’assurer que je remets tout exactement au même endroit sans rien oublier. C’est assez rassurant. J’ai imprimé la première photo sur un A4 et à ça m’a permis de scotcher les vis sur le papier une à une, pour ne rien oublier et remettre la bonne vis au bon endroit.

Le recollage du panneau arrière n’était pas plus compliqué mais étonnamment je n’ai pas trouvé de vidéo, et du coup j’avais oublié d’acheter de la colle pour ça (prenez de la colle adaptée, qui permettra de réouvrir le panneau la prochaine fois).

Note : Si le smartphone est étanche avant l’opération, il ne l’est plus après, que ce soit par vous ou par le réparateur de quartier. Si le votre est sous garantie, faites le passer en garantie auprès du constructeur et ne l’ouvrez pas. Eux ont les outils pour retrouver l’étanchéité.

Les aléas

Les erreurs, ça arrive, surtout les premières fois.

La première fois j’ai oublié de retirer le tiroir de la carte SIM. La vidéo commençait smartphone déjà ouvert donc ça devait sembler évident. J’ai donc bêtement plié le tiroir en voulant changer le connecteur de charge, et j’ai dû le changer aussi.

La réalité c’est que ce n’est guère mieux dans les ateliers. Ils ont plus d’expérience donc font moins d’erreur mais j’ai déjà eu une fois un retour atelier avec plus de problèmes qu’au départ, une autre fois où ils m’ont grillé le capteur d’empreinte en changeant le connecteur de charge. Les deux fois je n’ai pas réussi à obtenir gain de cause sur le « ça fonctionnait quand je vous l’ai donné ». En fait j’ai même vu qu’il me manquait une vis à l’intérieur quand j’ai ouvert le téléphone la première fois, donc un atelier m’avait même perdu une vis sans rien me dire.

Il y a un risque à toute réparation. C’est principalement de l’inattention et un geste qui dérape. Même si les gestes du professionnel seront plus assurés par l’habitude, ça arrive à tout le monde.

Pourquoi 18 mois seulement

Si je conjugue tout au passé c’est que j’ai de nouveau cassé mon connecteur de charge la semaine dernière en me prenant les pieds dans le câble branché. Je l’ai changé mais j’ai oublié de retirer un cache sur le micro donc j’ai voulu réouvrir ça le soir à 23h, crevé par l’heure et la journée, agacé contre moi-même, et après m’être fâché avec fiston à propos des devoirs.

Bref, je n’aurais jamais dû faire un travail de précision dans ces conditions : J’ai fait une bêtise et cassé un connecteur sur la carte mère. Il était temps de lui dire adieu mais je ne regrette aucunement parce que j’ai gagné 18 mois de plus en osant ouvrir moi-même.

Pourquoi pas un atelier local ?

Vu la différence de prix entre une réparation maison et un atelier, je suis étonné qu’il n’y ai pas plus de réparations maison. Un changement d’écran ou de connecteur chez soi épargne facilement 30 €. Sur un vieux téléphone ou un premier prix, le risque se justifie tout à fait.

De mon côté je n’avais pas le choix. Les fournisseurs officiels des ateliers ne proposaient plus la pièce alors que j’en trouvais plein en ligne. C’était ça ou mettre le téléphone à la benne.

Très personnel et non généralisable : Ça m’a donné aussi l’occasion de mettre en œuvre une solution artisanale qui a arrêté un cycle de remplacement de connecteur de charge trop fréquent. Mon modèle est visiblement connu pour avoir une nappe qui finissent par mal tenir. Des vidéos proposent de mettre un peu de pression à l’aide de scotch d’électricien, ce que les ateliers se refusaient à faire. J’ai tenté et ça a eu l’effet recherché.

18 décembre 2024
Dalle mate pour les MacBooks

Je suis sur le point de m’acheter mon premier macbook pro personnel. C’est cher, je fais attention.

J’ai fini par avoir un avis clair sur mes besoins sur tout sauf sur cette option pour dalle mate nommée pompeusement nano-texture.

Est-ce un besoin ?

Premier réflexe : Ça fait entre 15 et 20 ans que je travaille sur MacBook et je n’ai jamais râlé sur la mauvaise qualité de la dalle.

En lisant un commentaire je me suis rappelé que pendant 3 ans les équipes, moi inclus, faisaient attention à baisser les stores de l’openspace, quitte à le rendre sombre. Je fais pareil chez moi où les stores du bureau sont baissés en permanence quand bien même je suis dans la disposition qui génère le moins de reflets possible. Même topo quand je suis sur le canapé où je tire systématiquement les rideaux, et sur la table de la salle à manger où je me mets à une place différente, dos au mur, quand je suis avec mon poste de travail.

Bref, j’ai probablement banalisé une gêne réelle et permanente au point de ne même plus en avoir conscience. Une fois sauté le pas, peut-être que je le demanderai comment j’ai bien pu faire avant.

Je peux faire sans, j’ai toujours fait sans, mais si je prends un MacBook et pas un Mac mini, c’est bien pour pouvoir bouger avec. Autant maximiser cette possibilité.

Quelle qualité ?

Je suis allé voir avec mes propres yeux à quoi ça ressemblait, directement à l’Apple Store, comparant côte à côte un Macbook avec et un sans.

Du code, du web

Le résultat est bon, impressionnant même. Pour un usage principalement code et web, avec pour ambition de ne pas laisser le MacBook scotché dans un bureau sombre rideaux tirés, il ne fait aucun doute que je veux cette option.

Je ne sais pas si j’aurais été gêné par les reflets avant. Probablement pas vu que je ne me suis jamais fait la réflexion en allant à l’Apple store jusqu’à présent. Pour autant, sans reflets latents en fond, la lisibilité était significativement meilleure. Je n’ai pas eu l’impression de perdre en précision ou en couleurs.

Le test vaut ce qu’il vaut. L’environnement des magasins est très lumineux mais je me dis qu’ils ont quand même dû le penser pour éviter de prendre en défaut leurs dalles brillantes jusqu’à présent s’ils voulaient les vendre. En revenant à la maison, je me dis que ce n’était pas si éloigné de la réalité.

De la vidéo

Sur les vidéos c’est différent. Les noirs sont plus profonds et dalle est quand même plus flatteuse en brillant sur des scènes sombres, malgré les reflets.

Je ne sais pas si la différence dans les noirs se voit toujours en environnement peu lumineux. Ce que je lis sur le web me laisse croire que non, mais je pense que j’opterais quand même pour une dalle brillante si le traitement vidéo était mon activité première, quitte à ce faire le noir autour de moi.

En réalité la vidéo je l’ai essentiellement en lecture, quand je suis hors du bureau (donc luminosité non contrôlée). Là je préfèrerai peut-être perdre sur la qualité et les noirs que de subir des reflets.

De la photo

Pour le traitement photo j’hésite. Une dalle brillante avec une pièce à luminosité maîtrisée est probablement ce qu’il y a de mieux, comme pour la vidéo, mais j’ai moins ressenti le besoin à l’affichage d’une photo sombre qu’avec une vidéo de même tonalité.

Et donc ?

Chez moi, à majorité code et web, 30% photo, un peu de lecture vidéo en mobilité, je me dis que la dalle mate est probablement plus pertinente.

Reste le prix, mais ne nous mentons pas : Si on vise un MacBook Pro c’est que le prix n’est pas le premier critère de choix. C’est outrageusement cher mais ça vaut probablement quand même le coup si vos usages ne sont pas majoritairement orientés vidéo.

9 novembre 2024
Prochain ordinateur portable

Je n’ai plus d’ordinateur personnel depuis presque 20 ans. J’en ai toujours eu un professionnel, avec assez de latitude donnée par l’entreprise pour qu’il serve aussi à mes usages personnels.

Ce n’est plus le cas aujourd’hui. C’est pour entre quelques mois et plusieurs années. Bref, je ressens le besoin d’en acheter un.

Apple a mis à jour sa gamme de macbook, c’est ce que j’attendais pour passer à l’achat. Il reste que j’hésite :

Pile, je reste raisonnable dans mon achat, ce qui est un point que je valorise peu importe le montant lui-même. Probablement est-ce suffisant pour mes usages actuels. Mes frustrations ne seront pas si différentes de celles dont je m’accommodais jusque là. Je m’empêche juste d’y amener des jeux demandeurs. Si mes besoins quotidiens augmentent avec le temps, il sera toujours temps de le revendre et en acheter un nouveau.

La première option, côté pile, c’est le macbook air.

Ils ont désormais 16 Go de RAM par défaut et il me suffirait d’augmenter le disque pour me retrouver avec quelque chose de très similaire à ce que j’avais ces trois dernières années (macbook pro M1 avec 16 Go de RAM).

Le macbook air n’a pas de refroidissement actif. Il limite son processeur quand on lui demande beaucoup en continu. Ça peinera probablement un peu dans les traitements photos soutenus mais j’imagine que ça ne posera pas de gros problèmes.

Pour les jeux ça sera autre chose. Le macbook pro M1 soufflait déjà pas mal avec les détails au minimum. Ça ne passera clairement pas correctement sur le macbook air.

Je ne me suis remis à jouer que tout récemment. Je ne sais même pas si ça ne va pas me passer rapidement donc peut-être que je pourrais être raisonnable et tracer une croix dessus.

Je vais aussi devoir me trimballer avec des adaptateurs pour le HDMI et les cartes mémoire du HDMI, du lecteur de cartes. Rien de grave, je le faisais déjà, mais c’est mieux si je peux éviter. Ça me coupe aussi la possibilité d’un agencement à trois écrans comme j’en ai eu par le passé.

Mon vrai sujet c’est la pérennité. J’ai des exigences très fortes, voire des habitudes luxueuses, en termes de puissance et réactivité. J’achète pour des années. J’aimerais ne pas me retrouver frustré dans le futur quand les logiciels et les usages seront plus exigeants eux aussi.

Face, je paye plus bien plus cher, même si au final la différence se limite à mon tarif pour une journée de travail donc est-ce si important que ça ? Pour ce prix j’ai du sur-gonflé qui va tenir mes usages très longtemps. J’aurai surtout zéro concessions et un confort inégalé, ce qui compte vraiment au quotidien. Seule ombre au tableau, le matériel sera un peu plus lourd, même si ça reste léger au final.

La seconde option, côté face, c’est le macbook pro

Je prends le macbook pro du moment, processeur M4 pro de base. Je double la RAM et le disque pour assurer de la pérennité et du confort.

Oui c’est surgonflé mais si j’achète un poste c’est pour qu’il tienne longtemps, idéalement très longtemps. Je préfère prévoir d’office nettement plus que nécessaire pour ne pas être frustré par ce que me demanderont les logiciels et usages futurs.

C’est outrageusement cher mais la différence avec l’option du macbook air plus haut c’est de l’ordre de 1 100 € HT, donc moins que la facturation d’une journée de travail. Si je devais récupérer cette somme en dividendes, ça me ferait 550 € sur mon compte en banque après la fiscalité. Ce n’est pas rien mais je suis peut-être prêt à l’investir pour un confort quotidien sur plusieurs années.

La petite frustration qui tourne toutefois en tête, c’est que le macbook pro est légèrement plus lourd : 1,6 kg vs 1,25 kg. 350 grammes à porter.

Bref, j’hésite.

Je suis preneur de ce que ça vous évoque, sachant que ce choix est à priori limitatif. J’ai besoin d’un portable donc le mac mini n’est pas une option. Je ne souhaite pas passer sous Linux ou Windows.

L’occasion est une option uniquement dans la mesure où j’ai accès à une facture avec TVA, où la batterie est remise à neuf et où le prix hors taxes résultant fait une différence vraiment importante par rapport au neuf.

31 octobre 2024
Grand écran haute définition

Je remets à jour mon environnement de travail. Ça fait 4 ans que je cherche à remplacer mon écran.

Idéalement je cherche un 34 à 40″ en 21:9ème. C’est à dire l’équivalent d’un 27 à 32″ qu’on a étendu sur le côté. Ça me permettrait de mettre 2 fenêtres côte à côte et d’avoir un meilleur espace pour le traitement photo.

J’ai vu la différence de qualité d’un écran haute définition. J’adorerais avoir la même définition que l’écran retina du mac, donc du 220dpi.

Sur un 40″ 21:9ème ça veut dire quelque chose entre le 7650 x 3280 et le 8192 x 3510. Sur un 34″ ça veut dire dans les 6720 x 2880.

Je fais aussi du traitement photo donc là dessus je veux un bon contraste, une bonne luminosité, un bon respect des couleurs, et une homogénéité sur toute la dalle. Je ne fais pas de jeu haute performance mais la réactivité doit rester correcte.

Pour l’instant ce qui s’en rapproche le plus c’est le Dell U4025QW. C’est le bon format mais on est sur du 140dpi et j’ai un peu peur des définitions intermédiaires entre 110 et 220dpi sur mac. La luminosité est correcte mais sans plus. La réactivité est passable.

Si quelqu’un a ce 40″, celui là ou la génération précédente, je suis très intéressé pour tester.

Un 34″ 21:9ème en 220dpi pourrait être un bon compromis mais je n’en ai pas trouvé avec une définition supérieure aux 110dpi de base..

Si je tiens aux 220dpi, je l’ai en 32″ au format 16:9ème avec le Dell U3224KB mais en réalité je tiens plus au format qu’à la grande taille.

Il reste l’option d’avoir deux 27″ plutôt qu’un grand écran unique mais, là aussi, les écrans en 220dpi ne courent pas les rues. Je perds aussi de la surface pour le traitement photo.

Des idées ? des recommandations ?

23 septembre 2024