Introductie
In onze faculteit worden verschillende soorten dataopslag aangeboden:
Storage klasse | Beschrijving | Risico op dataverlies |
---|---|---|
Home directories | Klein (enkele GB), betrouwbaar, gebackedupte opslag voor individuen | laag |
Netwerk schijven | Groter (1-200 TB), betrouwbaar,gebackedupte opslag voor individuen en groepen, | laag |
Lokale storage | Opslag zonder back-up op desktopcomputers en clusternodes, die waarschijnlijk verloren gaat bij een hardwareprobleem of wanneer de machine opnieuw wordt geïnstalleerd | hoog |
Homedirectories
Bij je Science account hoort standaard een homedirectory van 5GB. Hiervoor worden geen kosten in rekening gebracht. Dit is een veilige plek om je werkgerelateerde documenten op te slaan. Homedirectories staan op degelijke hardware, en worden automatisch gebackupped. Als je meer opslagruimte nodig hebt, en je kunt niet opschonen, dan kunnen we je homedirectory op verzoek vergroten.
Homedirectory paden
Info
De locatie van je netwerk homedirectory kan bekeken worden op DHZ.
Op door C&CZ beheerde systemen is je homedirectory als volgt te vinden:
C&CZ systemen | Pad |
---|---|
Microsoft Windows | U: ook wel de U-schijf genoemd |
Linux | /home/jescienceloginnaam of ~ |
Linux(alt) | /nfshome/jescienceloginnaam |
Op sommige linux systemen hebben we problemen gezien met nfs gemounte
homedirectories, hiervoor hebben we een alternatief gemaakt (linux(alt)),
waarbij je netwerk homedirectory onder /nfshome/
gemount wordt, terwijl je
echte homedirectory lokaal op het systeem staat onder /home/
. maar Dit wordt niet gebackupt!
Vanaf andere systemen is je homedirectory middels de volgende paden te vinden:
Eigen systeem | Pad | Instructies |
---|---|---|
Microsoft Windows | \\home?.science.ru.nl\jescienceloginnaam |
schijf koppelen |
macOS | smb://home?.science.ru.nl/jescienceloginnaam |
schijf koppelen |
Linux | smb://home?.science.ru.nl/jescienceloginnaam |
schijf koppelen |
Indien je account recent aangemaakt is ziet het er anders uit (zie DHZ):
Eigen systeem | Pad | Instructies |
---|---|---|
Microsoft Windows | \\<hash>.home.science.ru.nl\jescienceloginnaam |
schijf koppelen |
macOS | smb://<hash>.home.science.ru.nl/jescienceloginnaam |
schijf koppelen |
Linux | smb://<hash>.home.science.ru.nl/jescienceloginnaam |
schijf koppelen |
Info
Voor toegang tot deze paden van buiten het RU-netwerk is een VPN verbinding vereist.
Toegangsrechten
Homedirectories zijn standaard alleen toegankelijk voor de eigenaren zelf. Het is echter mogelijk
om de toegangsrechten te laten wijzigen (bijvoorbeeld chmod o+rx ~
).
Netwerkschijven
Voor grotere opslagbehoeften en de mogelijkheid om bestanden in je groep te delen, zijn er netwerkschijven.
Netwerkschijven zijn beschikbaar als Samba1- en NFS2-share. Zoals vermeld in het overzicht, worden netwerkschijven geback-upt en gehost op betrouwbare servers. De kosten van netwerkschijven zijn afhankelijk van de schijfgrootte en de backup-opties.
Kosten van een netwerkschijf en backups
Één TB3 (1000 GB) kost € 36 per jaar. Hier is de verplichte backup bij ingegrepen. (We rekenen dat een backup de hoeveelheid data verdubbeld). Een netwerkschijf zonder backup is mogelijk, maar is niet goedkoper. Pas als de kosten boven de € 1000 per jaar uitkomen zal er een rekening worden opgemaakt.
Het grootste volume dat we nu (2024+) kunnen aanbieden is gelimiteerd tot de hoeveelheid disken die in een server passen. Nu is dat ongeveer 200 TB.
Alle nieuwe network schijven gebruiken ZFS en hebben lokale snapshots. Het is niet de bedoeling dat afdelingen hun eigen storage servers kopen, als je opslag nodig hebt kun je dat bij ons aanvragen en dan regelen we dat.
Backups
Onze nieuwere servers hebben een backup tot 2 jaar met oplopende intervallen. Na 2 jaar verdwijnen de backups vanzelf.
Backup naar tape wordt nog wel gebruikt voor monthly backups op de oudere servers en voor de Yearly backups op speciale shares die daarvoor zijn ingericht, onder andere met een afmeting die niet groter is dan een tape4. Als je backups nodig hebt voor langer dan 2 jaar, laat dit dan weten bij de aanvraag van een share. Tape backups zijn duurder dan disk gebaseerde backups en worden apart in rekening gebracht.
Paden voor netwerkschijven
Op door C&CZ beheerde systemen zijn netwerkschijven als volgt te vinden. Met sharename
als voorbeeld:
C&CZ systemen | Pad | Instructies |
---|---|---|
Microsoft Windows | \\sharename-srv.science.ru.nl\sharename |
schijf koppelen |
Linux | /vol/sharename |
Voor andere systemen zijn netwerkschijven als volgt te vinden:
Eigen systeem | Pad | Instructies |
---|---|---|
Microsoft Windows | \\sharename-srv.science.ru.nl\sharename |
schijf koppelen |
macOS | smb://sharename-srv.science.ru.nl/sharename |
schijf koppelen |
Linux | smb://sharename-srv.science.ru.nl/sharename |
schijf koppelen |
Info
Voor toegang tot deze paden van buiten het RU-netwerk is een VPN verbinding vereist.
Toegangsrechten
Toegangsrechten voor netwerkschijven is op basis van groepen. Groepen kunnen worden beheerd door de groepseigenaren op DHZ.
Speciale netwerkschijven
Een aantal algemene diensten maakt gebruik van netwerkschijven:
Schijf | Doel | Documentatie |
---|---|---|
dfs |
Virtuele boomstructuur met koppelingen naar (veel) netwerkschijven | DFS |
temp |
Tijdelijke opslag van bestanden | Temp share |
cursus |
Software voor cursussen | T-schijf |
software |
Algemene (Windows) software | S-schijf |
install |
Installatiebestanden van software | Install share |
DFS
Voor groepen met veel netwerkschijven is er een DFS-schijf beschikbaar. Als je groep hiervan gebruikmaakt, kun je door slechts één schijf aan te koppelen toegang krijgen tot alle netwerkschijven van je groep. Of je de onderliggende schijven daadwerkelijk kunt inzien, hangt af van de rechten die je hebt. Het pad om de DFS-share te koppelen is:
\\dfs.science.ru.nl\dfs
Of één niveau dieper om direkt de boomstructuur van je groep te zien:
\\dfs.science.ru.nl\dfs\{groepsmap}
Bestellen
Bij het bestellen van een netwerkschijf, graag de volgende details aan ons doorgeven:
Detail | Beschrijving |
---|---|
loginnaam | Je Science account |
schijfnaam | Waarmee de schijf over het netwerk gevonden kan worden, zie paths |
grootte | grootte van de partitie, zie kosten |
kostenplaats | kostenplaats of project code |
unix groep (optioneel) | De groep die toegang tot de schijf moet hebben. Indien niet opgegeven, wordt er een nieuwe groep gemaakt met dezelfde naam als de schijf |
Lokale opslag
Lokale opslag verwijst naar schijfruimte in of gekoppeld aan systemen zoals desktop-pc’s en
clusternodes. Meestal bestaat lokale opslag uit enkel uitgevoerde schijven. Bij een defect aan een
schijf is de kans groot dat er gegevens verloren gaan. Lokale schijven worden gewoonlijk /scratch
genoemd om je te herinneren aan de tijdelijke aard van de opslag. Lokale wordt niet
gebackupped. Voordelen van lokale opslag zijn lage kosten en snelle schijftoegang.
Info
Op gedeelde systemen, zoals loginservers en clusternodes, is het aan te raden eerst een persoonlijke
map te maken in /scratch
. D.w.z. mkdir /scratch/$USER
. En vergeet niet om je software
daadwerkelijk naar die map te laten schrijven in plaats van naar de standaard en veel kleinere
/tmp
.
-
Windows file sharing implementatie door het Samba project ↩︎
-
Network file system, https://nl.wikipedia.org/wiki/Network_File_System ↩︎
-
1TB is
1.000.000.000.000
bytes, 1 TiB =1.099.511.627.776
bytes ↩︎ -
LTO6=2.5TB uncompressed, LTO7=6TB uncompressed ↩︎