add "wartungsmeldungen"
This commit is contained in:
parent
ecec929aaa
commit
239c2d7569
4 changed files with 226 additions and 0 deletions
58
menschenzeugs/wartungsmeldungen/20230517_hyper01.txt
Normal file
58
menschenzeugs/wartungsmeldungen/20230517_hyper01.txt
Normal file
|
|
@ -0,0 +1,58 @@
|
|||
Hallo zusammen,
|
||||
|
||||
am Mittwoch, den 17.05.2023, werden wir zwischen 22:00 und 24:00 Wartungen an hyper01.reudnetz.org durchführen.
|
||||
In dieser Zeit werden eure VMs nicht zur Verfügung stehen.
|
||||
|
||||
Nach Abschluss der Wartung werden wir alle VMs wieder starten.
|
||||
|
||||
Folgende Tätigkeiten werden wir erledigen:
|
||||
|
||||
* Einbau RAM-Erweiterung
|
||||
* Umzug in eine andere Höheneinheit im Rack
|
||||
* Migration auf einen neuen ZFS-Storage-Pool [1]
|
||||
* Aktualisierung auf die neuste PVE-Version
|
||||
* Migration aller VM-Disks auf `virtio`-Treiber [2]
|
||||
|
||||
|
||||
Für Rückfragen stehen wir gerne zur Verfügung ! :)
|
||||
|
||||
Lieben Gruß,
|
||||
Euer Reudnetz
|
||||
|
||||
|
||||
Anmerkungen:
|
||||
============
|
||||
|
||||
[1] Migration auf einen neuen ZFS-Storage-Pool:
|
||||
-----------------------------------------------
|
||||
|
||||
Durch den Einsatz von nicht mit ZFS-kompatiblen SMR Festplatten wurden Inkonsistenzen auf dem ZFS Pool erzeugt.
|
||||
|
||||
Mittlerweile haben wir neue Festplatten und einen nicht-SMR ZFS Pool.
|
||||
Eure VMs wurden schon auf diesen migriert und sind jetzt in Sicherheit.
|
||||
|
||||
Während der Wartung werden wir dann auch noch das root-fs auf den neuen Pool migrieren.
|
||||
|
||||
[2] Migration aller VM-Disks auf `virtio`-Treiber:
|
||||
--------------------------------------------------
|
||||
|
||||
Nicht alle Disks werden über `virtio` Geräte in die VMs gehangen.
|
||||
Da dies für nicht optimale IO Performance sorgt werden wir dies vor dem Starten aller VMs am Ende der Wartung korrigieren.
|
||||
|
||||
Dies ändert potenziell den Pfad/Namen der Disk in eurer VM. Das sollte idR. allerdings den Bootprozess eurer VM nicht beeinflussen.
|
||||
Falls bei euch nach der Wartung doch Probleme beim Booten auftreten könnt ihr euch gerne melden.
|
||||
|
||||
Folgende VMs sind betroffen:
|
||||
* 1002
|
||||
* 1003
|
||||
* 1006
|
||||
* 1007
|
||||
* 1008
|
||||
--
|
||||
Reudnetz w.V.
|
||||
Wurzner Straße 2 - 04315 Leipzig
|
||||
Email: mail@reudnetz.org - Web: https://reudnetz.org
|
||||
|
||||
Rechtsfähigkeit verliehen nach BGB §22 durch die Landesregierung Sachsens
|
||||
Umsatzsteuerbefreit nach UStG §19
|
||||
Vorstand: Carl Suckfüll, Daniel Maier, Paul Spooren, Yannik Völker
|
||||
51
menschenzeugs/wartungsmeldungen/20230526_hyper01.txt
Normal file
51
menschenzeugs/wartungsmeldungen/20230526_hyper01.txt
Normal file
|
|
@ -0,0 +1,51 @@
|
|||
Hallo zusammen,
|
||||
|
||||
am Freitag, den 23.05.2023, werden wir zwischen 20:00 und 21:00 Wartungen an hyper01.reudnetz.org durchführen.
|
||||
In dieser Zeit werden eure VMs nicht zur Verfügung stehen.
|
||||
|
||||
Nach Abschluss der Wartung werden wir alle VMs wieder starten.
|
||||
|
||||
Folgende Tätigkeiten werden wir erledigen:
|
||||
|
||||
* Einbau RAM-Erweiterung
|
||||
* Aktualisierung auf die neuste PVE-Version
|
||||
|
||||
Für Rückfragen stehen wir gerne zur Verfügung ! :)
|
||||
|
||||
Lieben Gruß,
|
||||
Euer Reudnetz
|
||||
|
||||
|
||||
Anmerkungen:
|
||||
============
|
||||
|
||||
Einführung regelmäßiger Wartungstag:
|
||||
------------------------------------
|
||||
|
||||
Um eine Regelmäßigkeit in die wartungsbedingten Downtimes zu bringen werden wir ab Juni
|
||||
monatlich Wartungen durchführen. Diese werden
|
||||
|
||||
jeden letzen Dienstag im Monat zwischen 22:00 - 24:00 stattfinden.
|
||||
|
||||
Damit ist der erste regelmäßige Wartungstag am
|
||||
|
||||
Dienstag, den 27.06.2023, zwischen 22:00 - 24:00
|
||||
|
||||
Ihr werdet vor jeder Wartung per Mail informiert.
|
||||
|
||||
In dringenden Fällen werden wir Wartungen unter Ankündigung auch außerhalb dieses Zeitraumes durchführen.
|
||||
|
||||
|
||||
Einführung Full Disk Encryption:
|
||||
--------------------------------
|
||||
|
||||
Nach Abschluss der Wartung werden alle Datenträger in `hyper01.reudnetz.org` vollverschlüsselt sein.
|
||||
Das ändert nichts an den Thread Models für eure VMs, hilft uns aber dabei sorgenfreier mit den Platten umgehen zu können.
|
||||
--
|
||||
Reudnetz w.V.
|
||||
Wurzner Straße 2 - 04315 Leipzig
|
||||
Email: mail@reudnetz.org - Web: https://reudnetz.org
|
||||
|
||||
Rechtsfähigkeit verliehen nach BGB §22 durch die Landesregierung Sachsens
|
||||
Umsatzsteuerbefreit nach UStG §19
|
||||
Vorstand: Ludwig Pfeiffer, Daniel Maier, Yannik Völker
|
||||
40
menschenzeugs/wartungsmeldungen/20230626_hyper01.txt
Normal file
40
menschenzeugs/wartungsmeldungen/20230626_hyper01.txt
Normal file
|
|
@ -0,0 +1,40 @@
|
|||
|
||||
Hallo zusammen,
|
||||
|
||||
am Dienstag, den 27.06.2023, werden wir zwischen 22:00 und 24:00
|
||||
Wartungen an hyper01.reudnetz.org durchführen.
|
||||
In dieser Zeit werden eure VMs nicht zur Verfügung stehen.
|
||||
|
||||
Nach Abschluss der Wartung werden wir alle VMs wieder starten.
|
||||
|
||||
Folgende Tätigkeiten werden wir erledigen:
|
||||
|
||||
* Aktualisierung auf die neuste PVE-Version
|
||||
|
||||
Für Rückfragen stehen wir gerne zur Verfügung ! :)
|
||||
|
||||
Lieben Gruß,
|
||||
Euer Reudnetz
|
||||
|
||||
Anmerkungen:
|
||||
============
|
||||
|
||||
Upgrades Layer 2 Fabric
|
||||
-----------------------
|
||||
|
||||
Da wir aktuell Upgrades an unserem Layer 2 Fabric vornehmen ist es in
|
||||
letzter Zeit
|
||||
zu ein paar ungeplanten Netzwerk-Ausfällen für `hyper01` gekommen:
|
||||
|
||||
* 16.06.2023 23:30 - 24:00 IPv6 und IPv4 Routing Ausfall für alle VMs
|
||||
* 18.06.2023 22:25 - 22:40 IPv4 Routing Ausfall für alle VMs
|
||||
|
||||
--
|
||||
Reudnetz w.V.
|
||||
Wurzner Straße 2 - 04315 Leipzig
|
||||
Email: mail@reudnetz.org - Web: https://reudnetz.org
|
||||
|
||||
Rechtsfähigkeit verliehen nach BGB §22 durch die Landesregierung
|
||||
Sachsens
|
||||
Umsatzsteuerbefreit nach UStG §19
|
||||
Vorstand: Carl Suckfüll, Daniel Maier, Paul Spooren, Yannik Völker
|
||||
77
menschenzeugs/wartungsmeldungen/20230801_hyper01.txt
Normal file
77
menschenzeugs/wartungsmeldungen/20230801_hyper01.txt
Normal file
|
|
@ -0,0 +1,77 @@
|
|||
|
||||
Hallo zusammen,
|
||||
|
||||
am Dienstag, den 01.08.2023, werden wir zwischen 22:00 und 24:00
|
||||
Wartungen an hyper01.reudnetz.org durchführen.
|
||||
In dieser Zeit werden eure VMs nicht zur Verfügung stehen.
|
||||
|
||||
Nach Abschluss der Wartung werden wir alle VMs wieder starten.
|
||||
|
||||
Folgende Tätigkeiten werden wir erledigen:
|
||||
|
||||
* Aktualisierung auf die neuste PVE-Version
|
||||
* Migration der VMs auf einen anderen Access-Router
|
||||
* Migration der VMs auf `x86-64-v3` CPUs
|
||||
|
||||
Für Rückfragen stehen wir gerne zur Verfügung ! :)
|
||||
|
||||
Lieben Gruß,
|
||||
Euer Reudnetz
|
||||
|
||||
|
||||
Ablauf:
|
||||
=======
|
||||
|
||||
0. bulk-shutdown aller VMs: `pvenode stopall --force-stop 0`
|
||||
1. autostart aller VMs unterbinden: `/root/proxmox_management/manage_autostart 0`
|
||||
2. rootfs snapshot: `zfs snapshot rpool/ROOT/pve-1@pve_upgrade_20230801`
|
||||
3. OS-Upgrade: `apt update && apt dist-upgrade -y && reboot`
|
||||
4. Migration der VMs auf neuen Access-Router `ansible-playbook -D vms.yml`
|
||||
5. Migration der VM CPUs auf `x86-64-v3`: `qm list | tail -n +2 | awk '{ print $1 }' | while read vmid; do qm set $vmid --cpu x86-64-v3; done`
|
||||
6. bulk-start aller VMs: `pvenode startall`
|
||||
7. autostart aller VMs aktivieren: `/root/proxmox_management/manage_autostart 1`
|
||||
|
||||
|
||||
Anmerkungen:
|
||||
============
|
||||
|
||||
Upgrades Layer 2 Fabric
|
||||
-----------------------
|
||||
|
||||
Das Upgrade an unserem Layer 2 Fabric ist immernoch abgeschlossen.
|
||||
Trotz erweiterter Vorsichtsmaßnahmen kahm es trotzdem zu ungeplanten/unangekündigten Ausfällen:
|
||||
|
||||
* 06.07.2023 00:15 - 02:15 IPv6 und IPv4 Routing Ausfall für alle VMs
|
||||
* 10.07.2023 23:45 - 00:30 kurzeitiger aber wiederholter IPv6 und IPv4 Routing Ausfall für alle VMs
|
||||
|
||||
|
||||
Migration der VMs auf einen anderen Access-Router
|
||||
-------------------------------------------------
|
||||
|
||||
Aktuell terminiert ein gesonderter Router die VLANs der VMs.
|
||||
Dieser unterstützt kein Linerate-Routing, uA. deswegen migireren wir die VM VLANs auf unsere "normalen" Access Router.
|
||||
|
||||
Die Migration der Ports findet nach dem OS-Update statt während die VMs noch ausgeschaltet sind.
|
||||
Nach dem Boot werden die VMs dann durch `core1.reudnetz.org` versorgt und sollten den symetrischen Gigabit Uplink voll ausnutzen können.
|
||||
|
||||
Migration der VMs auf `x86-64-v3` CPUs
|
||||
--------------------------------------
|
||||
|
||||
Im letzten Update-Tag haben wir `hyper01.reudnetz.org` auf PVE 8 aktualisiert.
|
||||
Mit dieser Version wurde der standard CPU-Typ für neue VMs auf `x86-64-v2-AES` geändert [1]:
|
||||
> Add virtual machine CPU models based on the x86-64 psABI Micro-Architecture Levels and use the widely supported x86-64-v2-AES as default for new VMs created via the web UI.
|
||||
|
||||
Bis dato haben wir den standard CPU-Typen `kvm64` genutzt.
|
||||
Um den VMs mehr CPU-Features zur Verfügung zu stellen werden wir alle VMs auf `x86-64-v3` upgraden.
|
||||
|
||||
[1] Proxmox VE 8 Release Notes: https://pve.proxmox.com/wiki/Roadmap#Proxmox_VE_8.0
|
||||
|
||||
--
|
||||
Reudnetz w.V.
|
||||
Wurzner Straße 2 - 04315 Leipzig
|
||||
Email: mail@reudnetz.org - Web: https://reudnetz.org
|
||||
|
||||
Rechtsfähigkeit verliehen nach BGB §22 durch die Landesregierung
|
||||
Sachsens
|
||||
Umsatzsteuerbefreit nach UStG §19
|
||||
Vorstand: Carl Suckfüll, Daniel Maier, Paul Spooren, Yannik Völker
|
||||
Loading…
Reference in a new issue