blog: add post for 2024.02.07 incident

content/blog.md

@@ -0,0 +1,6 @@
++++
+title = "Was geht?"
+weight = 9
+template = "blog.html"
++++
+# Die neusten Neuigkeiten

content/blogposts/2023-11-18-protokolle.md

@@ -0,0 +1,21 @@
++++
+title = "Geheime Interna #1"
+date = "2023-11-18"
++++
+Die meisten Entscheidungen trifft das Reudnetz in einem mehr oder weniger unorgansierten Plenum.
+Seit je her, beziehungsweise seit dem wir angefangen haben mitzuschreiben, was wir beschließen, veröffentlichen wir
+die Protokolle, welche dabei entstehen.
+Aus Bequemlichkeit landete bisher alles in einem [Ordner im Git.](https://git.reudnetz.org/reudnetz/public-wiki/src/branch/master/menschenzeugs/protokolle). Dort kann es öffentlich eingesehen werden und wird sogar manchmal gelesen.
+
+Nun beschäftigt uns allerdings die Frage, ob wir diese Praxis beibehalten wollen. 
+Denn es gilt: "the internet never forgets" – was einmal veröffentlicht ist, emazipiert sich von uns wird in caches und backups weiterleben, selbst wenn wir einmal entscheiden sollten die Quelle bei uns zu löschen oder zu verändern.
+Da wir auch Details zu neuen und alten Anschlüssen besprechen, müssen wir aufpassen, wie wir die Dinge aufschreiben,
+um nicht datenschutzrelevante Informationen zu veröffentlichen. 
+Besonders dieses Risiko nährt die Frage nach den Sinnhaftigkeit dieser kompletten Offenheit.
+
+Gleichzeitig ist uns klar, was für ein starkes Bekenntnis an Transparenz es darstellt, die Ergebnisse unserer Treffen öffenlich zu halten. 
+Aus dem Unstand, das wir öffentliche Infrastruktur betreiben, lässt sich unter Umständen sogar ein Anspruch für diese Offenheit ableiten: Öffentliche Infrastruktur muss auch öffentlich verwaltet werden. 
+
+Aber auch die Frage nach dem Nutzen der Protokolle ist nicht abschließend beantwortet. Die Argumentation, das die Protokolle für Auszenstehende wenig informativ sind, da sie oft wenig ausführlich sind, trifft durchaus zu. Zu unserer Überraschung scheinen diese Protokolle aber doch gelegentlich von Menschen gelesen zu werden, die sich für das Reudnetz Interessieren. 
+Besser könnten Blogposts wie dieser sein, die ausführlicher über Themen berichten, die uns gerade Beschäftigen.
+Sie zu schreiben ist aber aufwendig und deckt stets nur einen Teil unserer Arbeit ab.

content/blogposts/2024-02-07-outage.md

@@ -0,0 +1,63 @@
++++
+title = "Incident 07.02.2024"
+date = "2024-02-07"
++++
+
+In der Nacht von Dienstag auf Mittwoch (06.02.24 - 07.02.24) ist in der Wurzner Straße der Strom ausgefallen und hat uns eine ungeplante Downtime geschenkt.
+
+Unser Kernnetz, sowie die Kundenanschlusse, sind nach dem Stromausfall von selbst wieder hochgefahren.
+
+Allerdings mussten wir bei beiden Hosting-Servern manuell eingreifen und bis in die Mittagsstunden des Folgetages Entstörungen durchführen.
+
+---
+
+## Verlauf
+
+* 2024.02.06 23:30 CET: Stromausfall
+    * gesamter Ausfall unserer Infrastruktur
+* 2024.02.07 00:20 CET: Stromausfall beendet
+    * Kundenanschlüsse stehen wieder zur Verfügung
+* 2024.02.07 11:00 CET: _hyper01_ und _sol_ unlocked
+    * _hyper01_: Kunden VMs wieder online
+    * _sol_: bootet ohne Netzwerkkonnektivität - Reverse-Proxies und interne VMs weiterhin offline
+* 2024.02.07 14:30 CET: _sol_ entstört
+    * Reverse-Proxies und interne VMs wieder Verfügbar
+
+Seit 2024.02.07 14:30 CET ist das Reudnetz wieder uneingeschränkt online.
+
+---
+
+## Entstörung _sol_
+
+_sol_ ist nach dem Freischalten der `full-disk-encryption` ohne Netzwerkkonnektivität gebootet.
+Eine fehlkonfigurierte Boot-Partiton hat einen veralteten Linux-Kernel gebootet für den das OS keine Kernel-Module mehr bereitgestellt hat.
+
+Durch die fehlenden Module konnte _sol_ seinen Netzwerk-Stack nicht konfigurieren da hierfür (unteranderem) das `bonding` Modul für 802.3ad (LACP) benötigt wird.
+
+_sol_ konnte über das IPMI entstört werden.
+
+Der Grund für die defekte Boot-Partiton war eine Wartung im Juni 2023.
+Beim Austausch der HDDs in _sol_ gegen SSDs wurde die Bootpartition per `dd` kopiert.
+Durch die gleichen FS/UU-IDs hat der Kernel das /boot auf der SSD gemountet, welches nicht in der Firmware als Boot-Device hinterlegt war.
+Somit haben sich das Boot-Device und die eigentliche /boot-Partition immer weiter voneinander entfernt.
+
+## Full-Disk-Encryption
+
+Die Festplattenverschlüsselung von _hyper01_ und _sol_ musste manuell durch einen admin freigeschaltet werden.
+
+Das ist 11 Stunden nach Ende des Stromausfalls passiert.
+
+## PDU issues _hyper01_
+
+Aufgrund von Netzteilproblemen ist _hyper01_ nicht automatisch gestartet.
+Weder die Betätigung des `power-buttons`, noch das IPMI konnten den Server starten.
+
+
+Aus Energieeffiziengründen wird _hyper01_ nur mit einem Netzteil betrieben.
+Der Wechsel auf das Ersatznetzteil hat dem Server dann zum Starten verholfen.
+
+---
+
+## Reflektion
+
+In den folgenden Pläna werden wir erarbeiten an welchen Stellen wir Verbessrungen erzielen können um diese Form von Ausfall zu verhindern.

content/blogposts/_index.md

@@ -0,0 +1,4 @@
++++
+title = "Neuigkeiten"
+sort_by = "date"
++++

content/blogposts/buchhaltung.md

@@ -0,0 +1,16 @@
++++
+title = "Überarbeitung unserer Buchhaltung"
+date = "2023-03-01"
++++
+Wir sind gerade dabei eine neue Buchhaltungsperson einzuarbeiten.
+In diesem Zuge ändern und verbessern wir unsere bisherige Buchhaltung.
+
+**Wundert euch also nicht, wenn ihr:**
+* Rechnungen bekommt
+* Rechnungen mehrfach bekommt
+
+Sollten Zahlungen ausstehen, werden wir euch nochmal explizit daran erinnern.
+
+Liebe Grüße
+
+Euer Reudnetz.

content/blogposts/hello_world.md

@@ -0,0 +1,9 @@
++++
+title = "Einen Blog für die Webseite"
+date = "2023-10-27"
++++
+Immer mehr machen sich Wunsch und Notwendigkeit breit, auch mal etwas aktuelles über die Webseite zu verbreiten.
+Nun soll hier Platz sein, für Geschichten und Einblicke in unsere Arbeit, Störungsmeldungen und Ausfalls-Forensik
+oder auch einfach ein Paar nette Worte über Dinge die uns beschäftigen.
+
+Viel Vergnügen damit.

content/how-to/vegane-kaese-hack-lauch-suppe.md

@@ -0,0 +1,48 @@
++++
+title = "Vegane Käse-Hack-Lauchsuppe"
++++
+# Vegane Käse-Hack-Lauchsuppe
+Falls das mit dem Internet mal wieder alles nervt, ist es eine gute Idee etwas zu kochen.
+
+## Das Rezept
+Genau wie bei der [Anleitung zum Einrichten von Openwrt](@/how-to/openwrt-router.md) ist ein Rezept ein Modell der
+Realität und entspricht normalerweise nicht dem was wirklich ist.
+Es sollte stets als Wegweiser durch den Möglichkeitsraum verstanden werden. 
+
+### Zutaten
+|||    
+| ---:       | ---  
+| 3 Stangen  | Lauch 
+| 300g       | Sojagranulat 
+| 1L         | Soja/Hafersahne
+| 3          | Zwiebeln
+| 6 Zehen    | Knoblauch
+| 6EL        | Hefeflocken
+|1 Bund      | Petersilie
+|            | Genüsebrühe
+|            | Sojasauce
+|            | Öl
+|            | Salz
+|            | Pfeffer
+|            | Kümmel
+|            | Edelsüßes Paprika
+
+### Umsetzung
+Lauch und Zwiebeln kleinschneiden.
+Zwiebeln in **reichlich Öl** anbraten, denn wie häufig bei veganem Essen, enthält hier nichts Fett außer dem Öl. Sojagranulat dazugeben auch kurz anbraten.
+Hefeflocken dazu und ebenfalls kurz mitbraten. Lauch dazu und nach kurzer Zeit mit Soja/Hafergetränk ablöschen. 
+
+Mindestens 10min köcheln lassen. 
+
+Währenddessen Knoblauch und Petersilie zerkleinern. 
+Die Petersilie dient später als Garnitur, der Knoblauch kann sofort in die Suppe.
+Abschmecken mit Sojasauce, Hefeflocken, Gemüsebrühe und den Gewürzen.
+Servieren mit der Petersilie.
+
+Have fun.
+
+### Anmerkungen
+
+- Soja/Hafersahne ist teuer und kann auch durch entsprechende Pflanzenmilch und Stärke ersetzt werden. #kuefastyle 
+
+- Soja enthält Sojalecithin, Sonneblumenöl enthält auch Sonnenblumenlecithine. Beides kann dabei helfen, das sich Öl und Wasser besser vermischen lassen. Um mehr Fett schön in der Suppe unterzubringen, kann es sich lohnen, beides zu verwenden.

content/jobs.md

@@ -1,10 +0,0 @@
-+++
-title = "Jobs"
-weight = 9
-+++
-
-# Jobausschreibungen des Reudnetzes
-Aktuell haben wir keine konkreten Stellen anzubieten.
-
-Falls du trotzdem eine Initiale Bewerbung schreiben möchstest:
-Schick Deine Bewerbung mit den üblichen Unterlagen an mail reudnetz org

static/style/styles.css

@@ -61,7 +61,7 @@
 body {
 	background-image:url(linien1.svg);
 	background-repeat:no-repeat;
-	background-size:contain;
+	background-size:100% auto;
 	background-position:center;
 	background-attachment:fixed;
 	background-color:#3F3836;
@@ -148,9 +148,11 @@ a:visited:hover, a:visited:active {
 }
 
 .content p, .content li, .content td {
-	font-size:1.3em;	
+	font-size:1.3rem;
 }
 
+
+
 .margin {
 	font-size:85%;
 }
@@ -217,4 +219,3 @@ p code {
 
 
 }
-

templates/blog.html

@@ -0,0 +1,20 @@
+{% extends "page.html" %}
+
+{% block content %}
+  {{ page.content | safe }}
+  {% set posts = get_section(path="blogposts/_index.md") %}
+  
+  {% for post in posts.pages %}
+    <h2 class="fg8" style="margin-bottom: 0px;"><a 
+		    href="{{ get_url(path=post.path) }}" title="{{ post.title }}">{{ post.title }}</a></h2>
+    <p class="fg4" style="margin-bottom: 0px;margin-top: 0px;">{{ post.date }}</p>
+    <div class="fg12">
+    {% if post.summary %}
+      {{ post.summary | safe }}
+    {% else %}
+      {{ post.content | safe }}
+    {% endif %}
+    <hr style="margin-bottom: 1.5em">
+    </div>
+  {% endfor %}
+{% endblock content %}

templates/how-to.html

@@ -1,10 +1,7 @@
-{% extends "index.html" %}
+{% extends "page.html" %}
-
-{% block title %}
-    <title>{{ page.title }} - {{ config.title }}</title>
-{% endblock title %}
 
 {% block content %}
+{{ page.content | safe }}
 {% set anleitungen = get_section(path="how-to/_index.md") %}
 {% for page in anleitungen.pages %}
 <li>