Data opslag   howto

Introductie In onze faculteit worden verschillende soorten dataopslag aangeboden: Storage klasse Beschrijving Risico op dataverlies Home directories Klein (enkele GB), betrouwbaar, gebackedupte opslag voor individuen laag Netwerk schijven Groter (< 1TB), betrouwbaar,gebackedupte opslag voor individuen en groepen, met ZFS is > 1TB mogelijk laag Ceph storage Grootschalig, betrouwbaar, ge-snapshotte, maar niet gebackupte opslag voor groepen middel Lokale storage Opslag zonder back-up op desktopcomputers en clusternodes, die waarschijnlijk verloren gaat bij een hardwareprobleem of wanneer de machine opnieuw wordt geïnstalleerd hoog Homedirectories Bij je Science account hoort standaard een homedirectory van 5GB....

januari 12, 2023 · bijgewerkt november 14, 2023 ·  Bram

Storing aan Ceph storage   cpk

Iets voor 23:09 werden een flink aantal ceph storage nodes onbereikbaar door een kortdurende fout op een van de links tussen twee van onze datacenters. Dit veroorzaakte blijkbaar dat grote aantallen osd disk services gekilled werden en niet meer opgestart. Een generieke configuratie-aanpassing die op bijna al onze hardware servers was uitgerold bleek voor een extra netwerk interface gezorgd te hebben. Dit verwarde de osd processen bij het opstarten. We zijn er redelijk zeker van dat we deze fout in de toekomst kunnen voorkomen....

oktober 24, 2022 · bijgewerkt november 9, 2023 ·  Simon

Ceph probleem   cpk

Bij een routine upgrade proces bleek dat er een bug in de laatste versie zit waardoor de ceph manager onbereikbaar werd. Het upgrade proces is afgebroken en met hulp van de ceph-users mailinglijst is alles weer bereikbaar door een work-around.

maart 24, 2021 · bijgewerkt november 9, 2023 · 

Backup   howto

Als er per ongeluk één of meerdere bestanden verloren gaan uit een home-directory (U:-schijf) of een netwerkschijf of een andere plaats van een C&CZ-server, dan is de kans groot dat ze teruggehaald kunnen worden. Voorwaarde voor het aanwezig zijn in de backup is dat het bestand aanwezig was tijdens een (nachtelijke) backup. Er zijn diverse onafhankelijke backup schema’s in gebruik Dagelijkse backup naar Ceph-storage. Maandelijkse backup naar tape. Jaarlijkse backup naar tape....

december 17, 2020 · bijgewerkt november 14, 2023 ·  Peter

Nieuwe opslag voor data: Ceph   news

Sinds kort heeft C&CZ een extra keus voor de opslag van data, naast de traditionele RAID-opslag op individuele fileservers: Ceph. De voornaamste voordelen van Ceph zijn dat het vrijwel onbeperkt schaalbaar is en geen single-point-of-failure heeft, maar juist “self-healing” en “self-managing” is. Binnen de Ceph-storage zijn nog verschillende keuzes mogelijk, de duurdere zijn zelfs bestand tegen de uitval van een heel datacenter. De Ceph-opslag kan ook aangeboden worden als S3-storage. Vanwege de cluster-opzet kan de performance van Ceph-storage verrassend zijn: schrijven is i....

december 17, 2019 · bijgewerkt november 9, 2023 ·  Simon