Colocation Zettachring
Der FFS e.V. mietet in der Nepustil Colocation im Zettachring 10a, Stuttgart, 3 HE fuer zwei Server und eine Management-Box.
Hardware
- APU2C ffs14 mit 16GB SSD, Huawei ME909s-120 LTE-Modem, 1nce SIM
- Server ffs08 1 HE AMD Epyc, 16 Core, 256 GiB RAM, 2x 4 TiB NVMe, Intel X710-DA2, 140-150W (Vollast beim Firmware-Build 220 Watt)
- Server ffs13 1 HE AMD Epyc 8324P, 32 Core, 256 GiB RAM, 2x 8 TiB NVMe, Intel X710-DA2
IPMI Knowhow
Per SSH auf die serielle Konsole zu kommen
$ ssh -J ffs14 10.0.7.13 -l ADMIN -> start /system1/sol1 /system1/sol1 press <Enter>, <Esc>, and then <T> to terminate session (press the keys in sequence, one after the other)
Zum Beenden hintereinanter enter, esc und T (Shift+t) druecken
Serielle konsole scheint auf ffs13 nicht konfiguriert zu sein TODO
LTE-Modem ffs14
Das LTE-Modem in ffs14 haengt sich manchmal nach laengerer Zeit auf. Daher gibt es seit 20240624 einen Cronjob in /etc/cron.daily/reset-modem der taeglich das Modem resettet.
Netz
- 1x Kupfer Uplink 1 Gbit fuer APU
- 1x Glas 1310nm, LR, 10 Gbit Uplink ffs08 auf Switch Nepustil
- 1x Glas 1310nm, LR, 10 Gbit Uplink ffs13 auf Switch Nepustil
- 1x Glas 1310nm, LR, 10 Gbit Port Stuttgart-IX auf ffs13, LAG, LACP, short timeout
Auf allen Uplinks fallen folgende VLANs raus:
| VLAN | Netz |
|---|---|
| 229 | 85.236.200.128/29 |
2a01:1e8:3:5::10/124' |
|
| 284 | 85.236.195.64/29 |
2a01:1e8:c003::/112 |
|
| 285 | 85.236.195.72/29 |
2a01:1e8:c003:1::/64 |
|
| 377 | PNI inter.link |
| 2000 | Community-IX Peering LAN |
2a01:1e8:c003::/48 hat eine statische Route auf '2a01:1e8:c003:1::93'.
| Gerät | Karte | Port | Ziel | MAC |
|---|---|---|---|---|
| ffs14 | intern | 1 | ifname, Uplink nepustil | bitte ergaenzen |
| 2 | ifname, IPMI ffs08, 10.0.
| ::: | ::: | 2 | enp0s10, IPMI ffs08 | ''00:0d:b9:2d:0a:99 | |||
| 3 | enp0s9, Uplink nepustil | 00:0d:b9:2d:0a:9a |
||
| ffs08 | IPMI | 1 | ffs07 Port 2 | 3c:ec:ef:8f:8a:de |
| BCM intern | 1 | eno1 | 3c:ec:ef:8f:8d:78 |
|
| BCM intern | 2 | eno2, ffs07 Port 1, intern auf Gast-NAT | 3c:ec:ef:8f:8d:79 |
|
| X710 | 1 | enp1s0f0 Uplink nepustil | 40:a6:b7:95:66:e0 |
|
| X710 | 2 | - | 40:a6:b7:95:66:e1 |
Es gibt folgende Netze am Standort:
10.0.8.0/24: Gast-NAT10.0.7.0/24: Management/IPMI85.236.195.64/29: Server85.236.195.72/29: Ausleitung Clients2a01:01e8:c003::/48: Clients85.236.200.128/29: Transfernetz AS33843 v42a01:1e8:3:5::10/124: Transfernetz AS33843 v6
IPs Gast-NAT 10.0.8.0/24
| IP | Allokation |
|---|---|
| 10.0.8.1 | ffs08 |
| 10.0.8.2 | ffs07 |
IPs Management 10.0.7.0/24
| IP | Allokation |
|---|---|
| 10.0.7.1 | IPMI ffs08 |
| 10.0.7.2 | ffs07 |
IPs 85.236.195.64/29
| IP | Allokation |
|---|---|
| 85.236.195.65 | ffs06 (alt) |
| 85.236.195.66 | ffs07 |
| 85.236.195.67 | ffs08 |
| 85.236.195.70 | Gateway nepustil |
IPs 85.236.195.72/29
| IP | Allokation |
|---|---|
| 85.236.195.73 | NAT gw09n03 |
| 85.236.195.74 | glrunner-ffs08 |
| 85.236.195.76 | dhcp02 |
| 85.236.195.77 | monitor01 + onboarder01 |
| 85.236.195.78 | Gateway nepustil |
IPs 85.236.200.128/29
| IP | Allokation |
|---|---|
| 85.236.200.129 | core01-z10a |
| 85.236.200.134 | as33843 |
IPs 2a01:1e8:c003::/112
| IP | Allokation |
|---|---|
| 2a01:1e8:c003::1/112 | ffs06 |
| 2a01:1e8:c003::2/112 | ffs08 |
| 2a01:1e8:c003::3/112 | ffs07 |
| 2a01:1e8:c003::eeee/112 | Gateway nepustil |
IPs 2a01:1e8:c003:1::/64
| IP | Allokation |
|---|---|
| 2a01:1e8:c003:1::93/64 | gw09n03 |
| 2a01:1e8:c003:1::244/64 | monitor01 + onboarder01 |
| 2a01:1e8:c003:1::252/64 | dhcp02 |
| 2a01:1e8:c003:1::eeee/64 | Gateway nepustil |
====