Willkommen!
dataLAB Big Data LBD-Cluster für Lehre und Wissenschaft
Die Fachgruppe für High Performance Computing/dataLAB von Campus.IT bietet einen Hadoop Cluster Namens LBD bestehend aus 20 Bare-Metal-Maschinen, die jeweils mit zwei Intel Xeon E5-2650v4 Prozessoren.
Der LBD Cluster ist über mehrere Loginknoten erreichbar, um über SSH, Jupyter oder Rstudio auf den Hadoop-Cluster zuzugreifen. Benutzerjobs werden über zwei redundante Hadoop Managementknoten für HDFS und Yarn auf viele Workerknoten verteilt und automatisch parallel ausgeführt. Die Knotenzahl ist skalierbar, in der aktuellen Konfiguration hat der LBD Cluster 20 Worker-Knoten, die jeweils mit 62,5 GB RAM, 16 vCPUs und 100 GB lokalem Speicher ausgestattet sind. Alle Knoten haben Zugriff auf ein 5,5-TB-HDFS-Dateisystem.
Der Vorgänger-Cluster LBD war seit Dezember 2017 in Betrieb und wurde 2023 vom LBDv3-Cluster, der eine OpenStack Infrastruktur nutzt, abgelöst. Seit Jänner 2025 ist nun der LBDv4 Cluster in Betrieb. Unter LBDv3 Architektur bzw. Services finden Sie weitere Details zur Systemarchitektur bzw. den verfügbaren Services.
LBDv4 steht nun für Lehre, Forschung und Seminare bereit. Hier finden Sie die Liste der aktuellen und vergangenen LBD-Kurse und -Projekte.
Ziel des Big Data Cluster ist es, den Forschenden und Lehrenden der TU-Wien ein stabiles Arbeitsumfeld zu bieten. Unser engagiertes Team steht Ihnen zur Seite, um Sie bei all Ihren Big-Data-Vorhaben zu unterstützen und zu begleiten und so eine reibungslose und erfolgreiche Umsetzung zu gewährleisten. Wir sind erreichbar unter: hadoop-support@tuwien.ac.at.
Welcome!
dataLAB Big Data LBD-Cluster for teaching and research
The specialist group for High Performance Computing/dataLAB from Campus.IT offers a Hadoop cluster called LBD, consisting of 20 bare-metal-machines, each equipped with two Intel Xeon E5-2650v4 CPUs and 256GB RAM. These servers feature four hard disks, each with a capacity of 4TB, providing a total storage of 16TB per node. Additionally, there ist 100TB of Ceph storage available, wich can be mounted as a networked file system. The storage uses 10Gb Ethernet.
The predecessor cluster LBD had been in operation since December 2017 and was replaced in 2023 by the LBDv3 cluster, which uses an OpenStack infrastructure. The LBDv4 cluster has been in operation since January 2025.
In LBDv3 Architektur resp. Services you can find more details on the system's architecture and respectively the available services.
LBDv4 is now available for teaching, research and seminars. Here you can find the list of present and past LBD courses and projects.
The aim of the Big Data Cluster is to offer researchers and teachers at the TU-Wien a stable working environment. Our dedicated team is here to assist and guide you in all your Big Data initiatives, ensuring a smooth and successful implementation. We can be reached at: hadoop-support@tuwien.ac.at.