Mastodon¶

Présentation¶

Mastodon est un réseau social libre et décentralisé, développé par Eugen Rochko, qui a connu une croissance exponentielle en début avril 2017. Aquilenet a donc mis en place son instance afin de participer et de soutenir la montée en force du projet.

L'instance Mastodon Aquilenet est installée sur la VM Alcyon qui lui est dédiée et accessible à l'adresse toot.aquilenet.fr

Mise à jour¶

La mise à jour de Mastodon est assez simple, et se base principalement sur le github officiel => https://github.com/tootsuite/mastodon

Si une nouvelle version stable est disponible (cf https://github.com/tootsuite/mastodon/releases), des mises à jour sont disponible, pusher un toot sur le compte Aquilenettoot.aquilenet.fr, pour annoncer une brève coupure des services. Si possible, prévoir de l'avance pour donner une heure de coupure. La mise à jour ne prend généralement que quelques minutes.

Activer le mode maintenance¶

cd /etc/nginx/sites-enabled && rm mastodon.conf && ln -s ../sites-available/maintenance.conf maintenance.conf && systemctl reload nginx

mise à jour¶

Ensuite, repasser en root

su - monutilisateur
sudo su

Et stopper les services Mastodon :

systemctl stop mastodon-*.service
NB : mastodon-sidekiq.service n'est plus utilisé, nous utilisons à la place un autre service qui gère mieux Sidekiq & les queues

Repasser sur l'utilisateur mastodon (jongler avec deux terminaux peut faciliter la tâche et éviter ces allers-retours) :

su - mastodon
cd live
git fetch
git checkout v[numero-de-version]
bundle install
yarn install
RAILS_ENV=production bundle exec rails db:migrate
RAILS_ENV=production bundle exec rails assets:precompile
exit

Une version plus complète, qui vérifie les besoins en termes de dépendances, est celle-ci (conseillée) :

su - mastodon
cd live
git fetch
git checkout v[numero-de-version]
bundle install
yarn install --frozen-lockfile
(si nécessaire, RAILS_ENV=production bundle exec rake assets:clobber)
(si nécessaire, RAILS_ENV=production bundle exec rake assets:precompile)
(si nécessaire, RAILS_ENV=production bundle exec rake db:migrate)
exit

Il peut aussi y avoir besoin de mettre à jour Ruby (ici 3.2.3) :

su - mastodon
git -C "$(rbenv root)"/plugins/ruby-build pull
RUBY_CONFIGURE_OPTS=--with-jemalloc rbenv install 3.2.3
rbenv global 3.2.3
(si nécessaire, rbenv rehash)
(si nécessaire, gem install bundler --no-document)
cd ~/live
git fetch
git checkout v[numero-de-version]
bundle install
yarn install --frozen-lockfile
RAILS_ENV=production bundle exec rake assets:clobber
RAILS_ENV=production bundle exec rails db:migrate
RAILS_ENV=production bundle exec rails assets:precompile
exit

Vérifier la présence et éventuellement supprimer les versions obsolètes de ruby dans /home/mastodon/live/vendor/bundle/ruby
Vérifier la présence et éventuellement supprimer les versions obsolètes de node dans /usr/local/n/versions/node/

Enfin, il peut être nécessaire d'upgrader npm ; dans ce cas, avant de fetch Mastodon, faire :

npm cache clean -f
npm install -g n
n stable

Si tout s'est bien passé, on relance les services :

systemctl start mastodon-streaming@4001 && systemctl start mastodon-streaming@4002 && systemctl start mastodon-*.service --all

Et on checke que tout est au vert :

systemctl status mastodon-*.service

On peut ensuite informer les utilisateurs du retour à la normale et que la mise à jour a bien été effectuée !

désactiver le mode maintenance¶

cd /etc/nginx/sites-enabled && rm maintenance.conf && ln -s ../sites-available/mastodon.conf mastodon.conf && systemctl reload nginx

Certificat Let's Encrypt¶

toot.aquilenet.fr utilise un certificat Let's Encrypt pour proposer du SSL/TLS de qualité. Malheureusement, Let's Encrypt demande encore et toujours un renouvellement tous les 3 mois.

Le renouvellement est automatisé par un cron daily qui teste tous les jours si l'expiration du certificat est < 30 jours et lance le script renewCerts.sh disponible dans /srv/letsencrypt. Si jamais cela ne fonctionne pas, pour renouveler le certificat :

sudo certbot renew
sudo service nginx reload

Si cela ne semble pas fonctionner, rallonger comme suit :

certbot certonly -n --cert-name toot.aquilenet.fr --webroot -w /srv/letsencrypt/ -d toot.aquilenet.fr
sudo service nginx reload

Si cela ne fonctionne toujours pas, passer en root et carrément créer un nouveau certificat en écrasant l'ancien :

service nginx stop
letsencrypt certonly -d toot.aquilenet.fr --agree-tos -m admin@aquilenet.fr --rsa-key-size 4096 --standalone
service nginx start

Backups¶

Actuellement, une backup du nécessaire (Postgres + Ruby) est faire par BackupNinja.

Stockage et maintenance¶

Mastodon stocke localement tous les médias distants affichés par les utilisateurs de l'instance. Un NFS a été monté sur Saya afin de permettre de tenir la charge qui monte exponentiellement.
De plus, la base de données peut se remplir plus que de raison avec des données qui n'ont plus aucun intérêt.

Supprimer les vieux médias distants¶

Une task a été créée pour Mastodon et ajoutée dans le cron de l'utilisateur mastodon (lancé quotidiennement). Elle permet de supprimer tous les médias distants supérieurs à 7 jours du cache de l'instance. Les liens restent trouvables dans les toots associés, donc l'impact est mineur pour l'utilisateur, et bénéfique pour nous.

cd /home/mastodon/live && RAILS_ENV=production /home/mastodon/.rbenv/shims/bundle exec /home/mastodon/live/bin/tootctl media remove

Supprimer les médias orphelins¶

La commande ci-après cherche les fichiers qui ne semblent pas êtres des médias attachés à quoi que ce soit, et les supprime. L'opération va tester chaque fichier individuellement, donc c'est lent.

cd /home/mastodon/live && RAILS_ENV=production /home/mastodon/.rbenv/shims/bundle exec /home/mastodon/live/bin/tootctl media remove-orphans

Supprimer de la BDD les comptes n'existant plus¶

Certains comptes présents dans la BDD ainsi que des données liées à ceux-ci prennent de la place alors qu'ils n'existent plus. Pour faire le ménage, la commande ci-dessous va vérifier pour chaque compte présent dans la base de données s'il existe encore sur le serveur d'origine, et si ce n'est pas le cas, le supprimer de la base de données. Les comptes ayant confirmé être actif dans la dernière semaine ne sont pas testés, au cas où le serveur les hébergeant serait juste down.

cd /home/mastodon/live && RAILS_ENV=production /home/mastodon/.rbenv/shims/bundle exec /home/mastodon/live/bin/tootctl accounts cull

Supprimer de la BDD les pouets distants et sans engagement¶

Cette commande va supprimer tous les pouets datés de plus de 90 jours (par défaut) qui n'ont pas été fav, boostés, ou sauvegardés par des utilisateurs de l'instance locale, et n'ont reçu aucune réponse (cette condition est un peu étrange et peut entraîner la suppression de différents pouets si on la lance plusieurs fois d'affilé). Par défaut, ça ne supprime pas les statuts de comptes suivis, mais on peut modifier cette option.

cd /home/mastodon/live && RAILS_ENV=production /home/mastodon/.rbenv/shims/bundle exec /home/mastodon/live/bin/tootctl status remove

Récupérer les médias perdus¶

Cette commande force Mastodon à chercher à récupérer tous les médias perdus (par exemple, des avatars). Cependant, elle semble imparfaite, et ne corrige donc que partiellement le problème. Néanmoins, ça peut aider :

cd /home/mastodon/live && RAILS_ENV=production /home/mastodon/.rbenv/shims/bundle exec /home/mastodon/live/bin/tootctl accounts refresh --all

Une solution alternative est de passer par la console de ruby, à la main, et de cibler spécifiquement l'utilisateur-ice dont on veut récupérer l'avatar :

cd /home/mastodon/live
RAILS_ENV=production bundle exec rails c
a = Account.find_remote('USERNAME', 'REMOTE.DOMAIN')
a.reset_avatar!
a.save
exit

Re créer un compte supprimé.¶

Après s'être assuré de la légitimité de la demande !
sudo su mastodon
cd /home/mastodon/live && RAILS_ENV=production /home/mastodon/.rbenv/shims/bundle exec /home/mastodon/live/bin/tootctl accounts create $USERNAME --reattach --force --email $EMAIL
cf https://github.com/mastodon/mastodon/issues/4614#issuecomment-1307822170

Puis via l'interface d'admin https://toot.aquilenet.fr/admin/accounts?origin=local
chercher le login utilisé puis renvoyer un mail de confirmation.