Storage
Zálohování petabajtů tak trochu jinak
Zálohujeme na pevné disky a i s vadnými bloky. Rozepsali jsme o tom proč tento způsob zálohování používáme a o úspěšnosti obnově dat z těchto disků po několika letech.
Za posledních několik let se nám výrazně změnil typ souborů v naší CDN a podle toho jsme museli cachování náležitě upravit.
Likvidaci poškozených disků nepodceňujeme, neboť si uvědomujeme, že při nesprávném způsobu jejich likvidace by se mohla citlivá data dostat do nepovolaných rukou.
Začali jsme stavět další ceph. Tentokrát se snažíme dostat 1+ PB dat do poloviny racku.
Budování CDN je náročné. My jsme našli několik triků, jak si infrastrukturu usnadnit a zároveň dodat zákazníkovi službu, která naplňuje jeho potřeby.
Před půl rokem jsme se rozhodli podívat se na ceph jakožto storage technologii pro naší video CDN. Dnes už v něm máme uloženo téměř 2PB dat a v migraci dat dále pokračujeme.