Na de problemen met CephFS op ons Ceph cluster is in overleg de gebruikers besloten om te stoppen met deze service. Alle data is inmiddels uit CephFS gekopieerd. De CephFS service is gestopt. Het Ceph cluster wordt nog wel gebruikt om backups op te slaan via de S3 API.

Iets voor 23:09 werden een flink aantal ceph storage nodes onbereikbaar door een kortdurende fout op een van de links tussen twee van onze datacenters. Dit veroorzaakte blijkbaar dat grote aantallen osd disk services gekilled werden en niet meer opgestart. Een generieke configuratie-aanpassing die op bijna al onze hardware servers was uitgerold bleek voor een extra netwerk interface gezorgd te hebben. Dit verwarde de osd processen bij het opstarten. We zijn er redelijk zeker van dat we deze fout in de toekomst kunnen voorkomen....

Bij een routine upgrade proces bleek dat er een bug in de laatste versie zit waardoor de ceph manager onbereikbaar werd. Het upgrade proces is afgebroken en met hulp van de ceph-users mailinglijst is alles weer bereikbaar door een work-around.

Sinds kort heeft C&CZ een extra keus voor de opslag van data, naast de traditionele RAID-opslag op individuele fileservers: Ceph. De voornaamste voordelen van Ceph zijn dat het vrijwel onbeperkt schaalbaar is en geen single-point-of-failure heeft, maar juist “self-healing” en “self-managing” is. Binnen de Ceph-storage zijn nog verschillende keuzes mogelijk, de duurdere zijn zelfs bestand tegen de uitval van een heel datacenter. De Ceph-opslag kan ook aangeboden worden als S3-storage. Vanwege de cluster-opzet kan de performance van Ceph-storage verrassend zijn: schrijven is i....