Forschungscloud Infrastruktur-Status @ EAH Jena

[Gelöst] OpenNebula-Upgrade

Tue, 28 Apr 2026 07:00:00 +0000

Am Dienstag findet in der Zeit von 9 Uhr bis ca. 13 Uhr MESZ ein Upgrade der VM-Managementplattform statt. In dieser Zeit wird es nicht möglich sein, VMs zu starten, zu stoppen, oder neue VMs zu erzeugen. Die bestehenden VMs laufen weiter. (10:02 UTC—27.04.)

Das Upgrade wurde erfolgreich beendet. Wir benutzen nun OpenNebula 7.0. (10:34 UTC—28.04.)

[Gelöst] Netzwerkwartung

Tue, 27 Jan 2026 09:00:00 +0000

Im Zuge einer Umkonfiguration der Anbindung zwischen Forschungscloud-Infrastruktur und SZI kann es im Laufe des Vormittags zu Netzwerkunterbrechungen kommen.

(09:00 UTC—27.01.)

[Gelöst] Hardwarewartung auf einigen Compute-Servern

Thu, 17 Jul 2025 12:11:00 +0000

Heute werden in der Zeit zwischen 14:30 und 15:30 Uhr MESZ ca. ein Drittel der VMs kurz offline gehen, um auf einigen Compute-Servern eine kurze Hardware-Wartung durchzuführen.

(12:12 UTC—17.07.)

[Gelöst] Upgrade Ceph-Storage

Thu, 06 Feb 2025 14:00:00 +0000

Am 06.02.2025 wird von ca. 15 Uhr CET bis vsl. 07.02.2025 16 Uhr das zentrale Ceph-Storagesystem auf eine neue Version aktualisiert. Dabei kann es zu kurzzeitigen Unterbrechungen im VM-Betrieb kommen. Weiterhin ist die Storage-Performance während des Upgrades reduziert. (10:45 UTC—06.02.)

Das Update wurde wie geplant durchgeführt. (15:32 UTC—07.02.)

[Gelöst] Ausfall einiger VMs

Mon, 13 Jan 2025 10:00:00 +0000

Heute hatten ca. 25% aller VMs Ausfälle aufgrund von Netzwerkproblemen. Ursache war ein Teildefekt einer Netzwerkkarte.

Today, approximately 25% of our VMs experienced outages due to network problems. This was caused by a partial hardware defect of a network interface card.

[Gelöst] Batterietausch und BIOS-Update / Battery change and BIOS updates

Tue, 03 Dec 2024 13:12:00 +0000

Heute in der Zeit zwischen 14:00 und 16:00 Uhr CET werden wir bei einigen Servern der Forschungscloud proaktiv die Stützbatterien tauschen sowie BIOS-Updates durchführen. Dazu müssen einige Server kurz heruntergefahren werden, was zur Folge hat, dass einzelne VMs für ca. 15 Minunten gestoppt werden müssen.

Today, in the time window between 1400 and 1600 CET we will proactively replace batteries and perform BIOS updates on some servers. Thus, several VMs need to be stopped for approx. 15 min.

(08:47 UTC—03.12.)

Die Updates wurden planmäßig durchgeführt. Es hat ein wenig länger gedauert, dafür bitten wir um Entschuldigung. Alle VMs laufen wieder.

Updates have been performed according to plan. It took a little bit longer than planned. We apologize for that. All VMs are running now.

(14:23 UTC—03.12.)

[Gelöst] Weitere Downtime wegen kritischer Updates für SSH

Mon, 15 Jul 2024 13:00:00 +0000

Für das Einspielen von Updates zur Behebung der SSH-Sicherheitslücke “regreSSHion” (CVE-2024-6387) ist eine weitere Downtime heute zwischen 15 und 18 Uhr MESZ notwendig.

Im diesem Zeitraum wird zusätzlich durch ein Update der zentralen Firewalls die gesamte Forschungscloud-Infrastruktur mehrfach nicht erreichbar sein.

Weitere Information zur Sicherheitslücke:

(08:07 UTC—15.07.)

[Gelöst] Downtimes wegen kritischer Updates für SSH

Wed, 10 Jul 2024 07:26:00 +0000

Im Laufe des Tages werden wir Updates für eine kritische SSH-Sicherheitslücke (“regreSSHion”, CVE-2024-6387) auf allen VMs sowie Infrastrukturservern der Forschungscloud einspielen. Dazu werden alle VMs kurz offline gehen.

Im Zeitraum von 15 bis 18 Uhr MESZ wird zusätzlich durch ein Update der zentralen Firewalls die gesamte Forschungscloud-Infrastruktur mehrfach nicht erreichbar sein.

Weitere Information zur Sicherheitslücke:

(07:52 UTC—10.07.)

Update

Die Updates konnten auf den meisten Systemen eingespielt werden. Auf einzelnen Systemen sind noch Nacharbeiten notwendig, die separat angekündigt werden.

(16:08 UTC—10.07.)

[Gelöst] Austausch Core-Router im Hochschulnetz / Core network router replacement

Thu, 07 Mar 2024 08:00:00 +0000

Am 07.03.2024 werden in der Zeit von 13:00 bis vsl. 17:00 Uhr die Core-Router im Hochschulnetz austauscht. Dabei ist zu erwarten, dass es Betriebsunterbrechungen im ganzen Hochschulnetz geben wird. Die Dienste der Forschungscloud werden voraussichtlich ab 13:00 Uhr MEZ nicht erreichbar sein.

On 2024-03-07 between 1300 and approx. 1700 CET, we plan to replace the university’s core network routers. Network outages throughout the whole campus network are expected. Forschungscloud services will face loss of connectivity from 1300 CET on.

[Gelöst] OpenNebula-Upgrade

Wed, 09 Aug 2023 10:34:00 +0000

In der Zeit vom 10.08.-11.08.2023 stellen wir auf OpenNebula 6.4 um. In dieser Zeit wird das OpenNebula-Frontend mehrfach nicht erreichbar sein und es können keine VMs erstellt oder gestoppt werden. Laufende VMs werden nicht unterbrochen.

On 2023-08-10 and 2023-08-11, we are going to upgrade our OpenNebula installation to version 6.4. During this period, the OpenNebula frontend will see multiple outages, and it will not be possible to create or stop VMs. Existing VMs will continue running, though.

(10:37 UTC—09.08.)

Das Upgrade wurde erfolgreich abgeschlossen.

The upgrade has been finished successfully.

(13:59 UTC—11.08.)

[Gelöst] Ceph upgrade

Tue, 28 Mar 2023 10:00:00 +0000

Das Storage-System (Ceph) wird auf eine neue Version aktualisiert. Dadurch kann es zu kurzfristigen Unterbrechungen kommen.

We upgrade the storage subsystem (Ceph) to a new version. Expect short service interruptions during the process.

(09:52 UTC—28.03.)

[Gelöst] SSL-Zertifikatswechsel in Gitlab / need to change SSL certificate for Gitlab

Mon, 13 Feb 2023 13:00:00 +0000

Der zentrale Code-Server https://code.fc.eah-jena.de hatte bisher ein DFN-Zertifikat, das in dieser Form nicht mehr verlängert wird. Wir stellen aktuell auf ein Let’s Encrypt-Zertifikat um. Während der Umstellung ist HTTP(s)-Frontend nicht verfügbar.

Git-Zugriffe über SSH sind von der Umstellung nicht betroffen.

The central code server at https://code.fc.eah-jena.de used to be secured by a certificate issued by DFN. This sort of certificate is not available anymore. We are currently switching to certificates issued by Let’s Encrypt. The web frontend is currently not available.

Git access via SSH is not affected.

[Gelöst] Wartungsarbeiten im Netzwerk / Network maintenance

Fri, 22 Apr 2022 09:37:00 +0000

Während des gesamten Tages wird es am 22.04.2022 aufgrund von Wartungsarbeiten am FCI-Netzwerk zu kurzzeitigen Ausfällen kommen. Die VMs können vorübergehend nicht erreichbar sein.

Wir bitten die Störungen zu entschuldigen.

During the course of the day on 2022-04-22 the FCI cluster network will suffer from short network disruptions. VMs may experience intermittent connectivity disruptions.

We apologize for any inconvenience.

[Gelöst] Wartungsarbeiten im Netzwerk / Network maintenance

Thu, 21 Apr 2022 07:46:00 +0000

Während des gesamten Tages wird es am 21.04.2022 aufgrund von Wartungsarbeiten am FCI-Netzwerk zu kurzzeitigen Ausfällen kommen. Die VMs können vorübergehend nicht erreichbar sein.

Wir bitten die Störungen zu entschuldigen.

During the course of the day on 2022-04-21 the FCI cluster network will suffer from short network disruptions. VMs may experience intermittent connectivity disruptions.

We apologize for any inconvenience.

[Gelöst] Netzwerkstörung / Network outage

Fri, 08 Apr 2022 09:45:00 +0000

Wir verzeichnen aktuell eine Netzwerkstörung innerhalb des FCI-Netzes. Einzelne VMs reagieren nicht. Wir arbeiten an der Behebung.

Die Netzwerkstörung wurde behoben. (10:30 UTC—08.04.)

Currently the network inside the FCI seems to be disrupted. Some VMs are not responsive anymore. We are working on it.

The network disruption has been fixed. (10:30 UTC—08.04.)

[Gelöst] Netzwerkanbindung gestört / Network connection disrupted

Thu, 24 Mar 2022 15:00:00 +0000

Mehrere Dienste aus der Forschungscloud sind aktuell nicht über das öffentliche Internet / Eduroam erreichbar. Der Zugriff aus dem EAH-Netz bzw. VPN funktioniert.

Wir versuchen das Problem so schnell wie möglich zu beheben.

Several FCI hosted services are currently not reachable from the public Internet or Eduroam. Access from within the EAH campus network or via VPN works.

We are try to solve the problem as fast as possible.

[Gelöst] Wartungsarbeiten Storage / storage maintenance 2022-03-24

Thu, 24 Mar 2022 08:30:00 +0000

Wir ziehen unsere Storage-Server in ein anderes Rechenzentrum um. Aus diesem Grund werden sämtliche VMs am Donnerstag, dem 24.03.2022, in der Zeit von 09:30 Uhr bis vsl. 17:00 Uhr MEZ heruntergefahren. Wir bitten die damit verbundenen Unannehmlichkeiten zu entschuldigen.

We are relocating our storage servers to a new data center. This means that all VMs won’t be running on Thursday May 24 between 08:30 and approx. 16:00 UTC. We apologize for any inconveniences.

[Gelöst] Verbindungsabbrüche in die FCI / Connectivity disruptions

Mon, 28 Feb 2022 09:30:00 +0000

Wir beobachten sporadische Verbindungsabbrüche beim Zugriff auf FCI-Services sowohl aus dem Campusnetz als auch aus dem öffentlichen Internet. Die Ursache ist aktuell unklar.

Die Störung wurde durch eine Konfigurationsänderung der Firewall behoben. (16:00 UTC—01.03.)

Access to FCI services both from within the campus network and from the public Internet suffers from sporadic loss of connectivity. We are currently investigating the issue.

The issue has been resolved by adapting the firewall configuration. (16:00 UTC—01.03.)

[Gelöst] Downtime des Loadbalancers wegen Zertifikatsproblemen / Load balancer down due to certificate problems

Wed, 26 Jan 2022 08:48:00 +0000

Wir mussten den Loadbalancer kurzfristig offline nehmen, nachdem ein Sicherheitsproblem mit der TLS-ALPN-01-Challenge bekannt wurde, die unser Zertifikatsprovider zum Verifizieren von HTTPS-Zertifikaten benutzt. Nach Neugenerierung sämtlicher Zertifikate sind alle Dienste wieder erreichbar.

We had to take the load balancer offline after reciving a notice about security issues of the TLS-ALPN-01 challenge. This method has been used by Let’s Encrypt to validate our HTTPS certificates. All services are online again after recreating HTTPS certificates.

Weitere Informationen / Further information: https://community.letsencrypt.org/t/2022-01-25-issue-with-tls-alpn-01-validation-method/170450

[Gelöst] Klimaanlage im Serverraum / Air conditioning in the server room

Mon, 06 Dec 2021 18:40:00 +0000

Nach einen Ausfall der Klimaanlage mussten wir die Server herunterfahren, um eine Überhitzung des Serverraums zu vermeiden. Daher sind aktuell sämtliche OpenNebula-basierten Dienste nicht verfügbar. Die Klimaanlage soll voraussichtlich morgen (7.12.2021) repariert werden.

Due to an outage in the air conditioning system, we had to shut down all servers to avoid overheating the server room. All OpenNebula based services are unavailable at the moment. We plan that the air conditioning is going to be fixed tomorrow (2021-12-07).

(19:42 UTC—16.12.)

[Gelöst] Verbindungsstörungen im Campusnetz / Connectivity issues in the campus net

Tue, 02 Nov 2021 12:45:00 +0000

Es gab eine Fehlfunktion einer zentralen Firewall-Komponente. Dadurch kommt es zu zeitweiligen Verbindungsstörungen zwischen dem EAH-Campusnetz und dem Internet.

A central firewall component started to malfunction. This leads to intermittent loss of connectivity between the whole EAH campus network and the Internet.

Update: Die Störung ist weitgehend behoben. / The outage has largely been resolved. (16:15 UTC—02.11.)

[Gelöst] OpenNebula-Upgrade

Mon, 04 Oct 2021 12:45:00 +0000

Wir führen ein Upgrade des OpenNebula-Monitors durch. Wir erwarten keinerlei Unterbrechung des VM-Betriebs, aber in der Zeit können VMs nicht gestartet oder anderweitig modifiziert werden.

OpenNebula wurde erfolgreich auf Version 5.10.1 aktualisiert.

[Gelöst] Firewall-Update

Thu, 23 Sep 2021 16:18:00 +0000

Die Firewall muss für ein Software-Update neu gestartet werden. Es ist mit Service-Unterbrechungen zu rechnen. (16:19 UTC—23.09.)

[Gelöst] Wartungsarbeiten an der Firewall

Wed, 04 Aug 2021 07:00:00 +0000

Am 4. und 6. August werden den ganzen Tag über Wartungsarbeiten an der Firewall ausgeführt. Daher ist mit mehreren kurzzeitigen Verbindungsunterbrechungen zu rechnen.

[Gelöst] Wartungsarbeiten am Ticketsystem (Zammad)

Wed, 28 Jul 2021 07:00:00 +0000

Die Migration musste auf Grund unerwarteter Probleme abgebrochen werden. Sie wird im Laufe der kommenden Woche noch einmal versucht. (14:23 UTC—30.07.)

Nach den vorbereitenden Arbeiten wird heute Nachmittag das Ticketsystem zum Umzug mehrfach kurz ausgeschaltet, um Dateninkonsistenzen zu vermeiden. (09:03 UTC—30.07.)

Heute wird es den ganzen Tag über kurzfristige Serviceunterbrechungen im Ticketsystem unter https://ticket.fc.eah-jena.de geben. Grund ist eine Migration. (07:44 UTC—28.07.)

[Gelöst] Wartungsarbeiten am Ticketsystem

Wed, 21 Jul 2021 11:00:00 +0000

Am 21.07.2021 wird in der Zeit von 13:00 bis vsl. 15:00 MESZ (11:00-13:00 UTC) das Ticketsystem unter https://ticket.fc.eah-jena.de nicht verfügbar sein. Grund dafür ist eine Migration des Systems auf einen neuen Server. (09:44 UTC—21.07.)

[Gelöst] Wartungsarbeiten an den Switches

Fri, 25 Jun 2021 06:30:00 +0000

Am Freitag, dem 25.06.2021 werden ab 08:30 Uhr MESZ (06:30 UTC) Wartungsarbeiten am cloudinternen LAN (Switches) durchgeführt. Während dieser Zeit werden OpenNebula-VMs nicht erreichbar sein.

[Gelöst] Startschwierigkeiten der VMware-Umgebung

Thu, 24 Jun 2021 12:01:00 +0000

Viele Dienste sind aktuell direkt über ihre IP-Adresse erreichbar, aber die Namensauflösung per DNS funktioniert nicht. Das liegt daran, dass der DNS-Server in der VMware-Umgebung läuft. (13:20 UTC—24.06.)

Die VMware-Umgebung (VDI) ist nach einem Restart nicht funktionsfähig. Wir vermuten ein Problem auf dem Switch oder mit dem Storage. (12:04 UTC—24.06.)

[Gelöst] Test der unterbrechungsfreien Stromversorgung (USV)

Thu, 24 Jun 2021 06:00:00 +0000

Am 24.06.2021 gibt es eine geplante Downtime ab 08:00 Uhr MESZ (06:00 UTC), in der wir die Stromversorgung testen. Dabei werden die Systeme mehrfach herunter- und wieder hochgefahren.

Voraussichtlicher Zeitraum: 08:00-14:00 Uhr MESZ (06:00-12:00 UTC).

Der Powercycle-Test wurde erfolgreich durchgeführt. Wir fahren die Systeme und VMs sukzessive wieder hoch. (11:00 UTC—24.06.)

Die VDI wird voraussichtlich bereits ab Mittwoch Abend 17:00 MESZ (15:00 UTC) heruntergefahren. (14:59 UTC—22.06.)

[Gelöst] Switch-Austausch

Thu, 17 Jun 2021 06:00:00 +0000

abgesagt (08:00 UTC—17.06.)

Am 17.06.2021 wird in der Zeit von 8 Uhr bis ca. 14 Uhr ein Switch ausgetauscht sowie umfangreiche Konfigurationsarbeiten am Netzwerk vorgenommen. Es muss damit gerechnet werden, dass während der angegebenen Zeit sämtliche FC-Dienste nicht erreichbar sind.