Mastodawn

Kurze Anmerkung zum #ESC aus dem #Fnordon-Maschinenraum: das ist wie jedes Jahr bisher der Abend mit der höchsten Server-Belastung. Heute waren wir aber noch nicht länger als 54,3 Sekunden hinter der föderierten Timeline, und wir haben nicht einmal bis zur maximalen Anzahl von Sidekiq-Servern hochskaliert.

#Mastoadmin

Dentaku (Thomas Renger)2d ago

Mit #SeaweedFS werde ich nicht glücklich, weil ich nicht verstehe, wie ich das Ding dazu bringe, den Platz von gelöschten Dateien wieder freizugeben.

Im Moment benötigen die ungefähr 450 GB Objekte von #Fnordon (größtenteils Cache der Medien anderer Server) insgesamt 2 TB Plattenplatz, Tendenz ständig steigend.

Irgendwas mache ich doch falsch.

#Mastoadmin

Dentaku (Thomas Renger)May 5

Die Fehler in #Sidekiq nehmen langsam zu, wir verlieren den Kontakt zu den anderen .de-Instanzen.

#Mastoadmin #Fnordon #DNSSEC #DEFAIL

Dentaku (Thomas Renger)Apr 27

Achtung #Fnordon, jetzt rumpelt's gleich kurz.

Ich schalte den Object Storage von #MinIO auf #SeaweedFS um. Dadurch könnten vorübergehend Medien (Bilder/Videos) fehlen, die kommen aber alle wieder.

#Mastoadmin

Dentaku (Thomas Renger)Feb 4

Sorry, die Datenbank war kurz unpässlich. Da sind wir wieder.

#Fnordon #down #Mastoadmin

Dentaku (Thomas Renger)Feb 3

Heute habe ich eigenartige Lastspitzen bei den Zugriffen auf #Fnordon. Ich habe jetzt mal die web-Komponente hochskaliert, weil ich schon Alarme bekommen habe, dass meine Service Level Objectives nicht eingehalten werden.

#Mastoadmin #k8s #Pyrra #SLO

Show thread

Dentaku (Thomas Renger)Jan 8

Und schon 5 Monate und 20 Tage später sind wir bei Nummer 750. Das waren in der Zeit durchschnittlich 1,4 Meldungen pro Tag – die meisten davon aber in großen Spamwellen, so dass es nach wie vor fast immer entspannt zu bewältigen ist.

#Mastoadmin #Fnordon