root @root@mastodon.se

Nu finns https://status.mastodon.se för driftstatus, så slipper jag tjöta här om det inte är jävligt viktigt.

Nu finns https://status.mastodon.se för driftstatus, så slipper jag tjöta här om det inte är jävligt viktigt.

Driftstatus: Mastodon.se var nere från igår kväll ca. 20:00 till idag 11:00.

Orsak var att vår host Linode plötsligt fick 403 fel från k8s.gcr.io container registry, vilket hindrade oss från att hämta nya container images för en viktig komponent som heter nginx-ingress. Utan den kan vi inte ta emot trafik från internet.

I panik var jag tvungen att flytta hela sidan till en annan host, Digitalocean. Samtidigt bytt certifikat-utgivare från Buypass AS till Let's Encrypt.

Nu verkar mailen gå ut igen, AWS har godkänt mig. Där var ett par mail i kö som har skickats iväg nu.

Servicestatus just nu för mastodon.se är att inga mail går ut. Detta har varit fallet sedan migreringen till Frankfurt för 5 dagar sedan.

Väntar på att Amazon ska godkänna min begäran att få skicka mail via deras API tjänst. Det är ett billigt alternativ.

Ok någon kanske märkte att mastodon.se var nere hela natten. Jag hade klantat mig rejält med Ingress konfen och lyckades bli portad hos Let's Encrypt i en vecka. Så nu kör vi med Buypass AS cert, som är en annan ACME provider. Det var svettigt... 😅

We're back baby. Nu i Frankfurt istället för Stockholm. Tyvärr är det mer rimligt att hosta mastodon.se i Tyskland än på mitt jobb i Stockholm. Jag vill inte att chefen plötsligt drar kontakten.

Så nu kostar mastodon.se faktiskt pengar! 💰

Heads up alla, siten kommer gå offline en längre stund nu för en migrering till ny webbhost. Ha tålamod och gör något annat resten av kvällen. 😋

Omstart för patchning nu. Tillbaka om några minuter.

Uppgradering slutförd. Låt oss hoppas inga följdfel uppstår. 👌

Dags att uppgradera Mastodon.se. 🌧️

Håll i er, blir nog intermittenta avbrott i 1-2 timmar.

Gör ett nytt försök att uppgradera Mastodon, så håll i er. Lite nertid blir det.

Det gick inte så bra att uppdatera till Mastodon 3.2.0. Tydligen har jag dubletter i databasen som måste rensas först. https://github.com/tootsuite/mastodon/issues/14443

Patchar mastodon.se ikväll, blir korta avbrott till och från i 1-2hrs.

Uppgraderar databasen, kan bli lite nertid på mastodon.se.

Mastodon.se var nere idag från 11 till 16:10 ungefär. Jag var ute och irrade i landets huvudstad och kunde inte fixa problemet omedelbart.

Tror problemen började redan på natten runt midnatt men var sporadiskt fram till runt 11 då sidan inte kunde nås av övervakningen. Måste undersökas, ingen rotorsak fastställd.

Nu har mastodon.se en #matrix chat-server också. Öppen för registreringar från Europa, precis som Mastodon instansen.

Gå till https://chat.mastodon.se för att använda vår egna Riot IM klient i webbläsaren.

Skapa konto på servern mastodon.se och logga in. Loggar ni in från Riot appen ska ni också peka den mot mastodon.se som server.

Vad är matrix? https://matrix.org/docs/guides/introduction

Ni som väljer att använda tjänsten är beta-testare och kan börja i #mastodon.se:mastodon.se rummet.

Det verkar ha gått bra. Nu är all service färdig för denna månaden. Håller utkik efter eventuella följdfel men överlag är containers den helt klart bästa metoden att drifta mastodon.

Gick bra så jag provar att gå direkt till v3.1.4 som är senaste versionen. Lite backup först bara, håll i fjärren. 🎐

Dags att prova v3.0.2 av mastodon. Håll i kaviaren.

Tog nästan 2 timmar men nu är DB servern á jour. Sparar nog mastodon versionen till imorgon.