Paralel Dosya Sistemi Tasarımı ve Ayarı
Gerçek I/O kalıplarına göre Lustre, BeeGFS veya Spectrum Scale tasarımı ve optimizasyonu.
Paralel dosya sistemleri çoğu zaman ya gereğinden fazla tasarlanıp az kullanılır, ya da yetersiz tasarlanıp aşırı yüklenir. Bu hizmet, uygulamaların depolamaya gerçekte nasıl eriştiğini anlamakla başlar: küçük metadata ağırlıklı işler, büyük ardışık checkpoint’ler, veri analitiğinden gelen rastgele erişimler veya bunların karışımı.
Buna dayanarak metadata sunucularının, obje/storage hedeflerinin, striping politikalarının ve cache davranışının düzenini tasarlarız veya iyileştiririz. Arıza alanlarını, rebuild sürelerini ve arka plan tarama görevlerini değerlendirerek sistemin yük altında stabil kalmasını sağlarız.
Dokümantasyon; önerilen izleme metrikleri, bakım prosedürleri ve kapasite artırımı mı yoksa dengesizlik düzeltmesi mi gerektiğine dair pratik rehberlik içerir.
Vaka çalışması – Gürültülü bir Lustre scratch alanını stabilize etme
Lustre tabanlı paylaşımlı scratch alanı, sık görülen yavaşlamalar nedeniyle kullanıcılar tarafından “güvenilmez” olarak tanımlanıyordu. İncelemeler, küçük dosyalar için aşırı agresif stripe ayarlarının ve kötü zamanlanmış bakım görevlerinin birleştiğini ortaya çıkardı.
Daha mantıklı striping varsayılanları tanımladık, metadata ağır iş yüklerini ayrı bir havuza ayırdık ve arka plan taramalarını yoğun iş saatleri dışına taşıdık. Sonuç, çok daha öngörülebilir bir performans profili ve belirgin şekilde daha az kullanıcı şikâyeti oldu.