Yüksek erişilebilirlikli depolama ve meta veri aynalama “arkadaş grupları” olarak adlandırılır. Genel olarak, bir arkadaş grubu, birbirleri arasındaki veri çoğaltmasını dahili olarak yöneten bir hedef çiftidir. Arkadaş grup yaklaşımı, bir sistemdeki tüm sunucuların yarısının başarısız olması durumunda bile tüm verilere erişim imkanı verir.
Yerleşik BeeGFS Arkadaş Aynalama özelliği verileri otomatik olarak çoğaltır, depolama sunucusu arızalarını, uygulamaları çalıştırmak için şeffaf bir şekilde ele alır ve bir sunucu çevrimiçi olduğunda otomatik olarak kendini iyileştirir ve yalnızca makine çevrimdışıyken değiştirilen dosyaları etkin bir şekilde yeniden gönderir.
Depolama sunucusu Arkadaş Aynalama özelliği, tek sayıda depolama sunucusuyla da kullanılabilir. Bu, BeeGFS arkadaş grupları sunuculara atanmasından bağımsız olarak, aşağıdaki örnek grafikte gösterildiği gibi, sunucu başına 3 sunucu ve 2 depolama hedefi içeren ferdi depolama hedeflerin oluştuğunda da çalışır.
Beegfs Dosya Sistemi
BeeGFS, performans açısından kritik ortamlarda I / O yoğun iş yüklerini yönetmek için özel olarak tasarlanmış lider bir paralel küme dosya sistemidir. Dünyanın önde gelen kuruluşlarından, üniversitelerden ve araştırmacılardan, kurulum kolaylığı, maksimum ölçeklenebilirlik, sağlamlık ve istisnai esneklikten – depolama sunucularının da bilgi işlem işleri için de kullanıldığı, yakınlaştırılmış kurulumlar dahil olmak üzere – dünya çapında beğeni toplayan BeeGFS, sonuçları daha hızlı sunarak ve yeni veri analizi yöntemlerini mümkün kılarak verimliliği artırıyor.
BeeGFS, POSIX dosya sistemi arayüzüne dayalı, yazılım tanımlı bir depolamadır; bu, uygulamaların BeeGFS’den yararlanmak için yeniden yazılmasını veya değiştirilmesini gerektirmez. BeeGFS kullanıcıları, dosya sistemindeki verilere erişir, ağ üzerinden depolama sunucularıyla iletişim kurar, herhangi bir TCP / IP tabanlı bağlantı üzerinden veya InfiniBand (IB), Omni-Path (OPA) ve RDMA üzerinden Converged Ethernet (RDT) gibi RDMA özellikli ağlar üzerinden iletişim kurar.
BeeGFS’yi çalıştırmak için belirli bir kurumsal Linux dağıtımı veya başka bir özel ortam gerekmez. BeeGFS istemcisi ve sunucuları, küçük kümeler veya ağlar için performans artışlarını sağlamak amacıyla aynı makinede bile çalışabilir.
BeeGFS, sunucularda özel dosya sistemi bölümleri gerektirmez – Standart Linux dosya sistemlerinden herhangi biri ile formatlanmış mevcut bölümleri kullanır, örn. XFS veya ext4. Daha büyük ağlar için, farklı konfigürasyonlara sahip birkaç farklı BeeGFS dosya sistemi bölümü oluşturmak da mümkündür.
Nasıl Çalışır?
Bright Cluster Manager birleştirilmiş bir arabirimden donanım, işletim sistemi ve işyükü yöneticisi hazırlarken kümeleri tek bir bütün olarak yönetmenizi sağlar. Bu durum güvenilir bir cluster kurulumu ve yönetimini kolaylaştırır. Cluster çalışmaya başladıktan sonra, Bright Cluster Manager yönetimi programı, cluster içinde yer alan her node her alanında gözetim altında tutulur ve yazılımda veya donanımda algıladığı sorunları raporlar; böylelikle kolaylıkla sorun hakkında işlem yapabilir ve clusterı 7×24 çalışabilir tutabilirsiniz. Bright Cluster Manager , clusterter içinde olup bitenleri her yerde, her an görmenize ve bunlara kolaylıkla yanıt vermenize olanak tanır.
BeeGFS vs Geleneksel Dosya Sistemleri
BeeGFS geleneksel dosya sistemlerinin sınırlamalarını ve kısıtlamalarını aşmak için oluşturuldu.
Bu mimaride, dosya sistemini istemci tarafına monte etmek, özel sunucu bileşenlerinde meta verileri yönetmek, çeşitli donanım düğümleri üzerinde bunları üst üste koymak ve özel sunucu bileşenlerinde nesneleri düzenlemek için adanmış Linux çekirdek modülleri gereklidir. Ancak, bu yaklaşımın üç sorunu vardır:
• Öğrenmek ve yönetmek zordur.
• Küçük ve büyük dosyalar / IO profilleri için tasarlanmamıştır (kritik proje ve verilerdeki performansı engeller).
• Birçok durumda çok masraflıdır
Avrupa’da uygulamalı araştırma için önde gelen kuruluş olan Fraunhofer-Gesellschaft ve onun bir alt kuruluşu olan Fraunhofer Yüksek Performanslı Bilgi İşlem Merkezi (Fraunhofer), daha iyi bir yol olması gerektiğine karar verdi. Bu nedenle BeeGFS’yi geliştirdiler.
BeeGFS:Performans ve Ölçeklenebilirlik için Yeni Bir Standart
BeeGFS çeşitli seviyelerde maksimum performans ve ölçeklenebilirlik sunar. Dağıtılmış dosya içeriğini, bir dosyadaki depolama sunucuları arasında veya dizin tabanının yanı sıra dağıtılmış meta veriler arasında esnek geçişi destekler.
BeeGFS kullanımı kolaydır ve çekirdek yamaları gerektirmez. İstemci, yamasız bir çekirdek modülüdür, sunucu bileşenleri ise kullanıcı alanı canavarlarıdır. Grafiksel küme yükleme araçlarıyla birlikte gelir ve istediğiniz zaman çalışan sisteme daha fazla istemci ve sunucu eklemenizi sağlar.
Yerel BeeGFS istemcisi ve sunucu bileşenleri Linux için x86, x86_64 ve OpenPOWER, ARM64 ve diğer mimariler için kullanılabilir. BeeGFS, kullanıcı verilerini birden çok sunucuya şeffaf bir şekilde yaymaktadır. Sistemdeki sunucu ve disk sayısını artırarak, dosya sisteminin performansını ve kapasitesini, küçük kümelerden binlerce düğümlü kurumsal sınıf sistemlere sorunsuz bir şekilde ihtiyaç duyduğunuz düzeye ölçekleyebilirsiniz.
Oyun Değiştiren Kullanıcı Alan Kavramı
BeeGFS kullanıcı alanı kavramı her açıdan en son teknoloji ürünüdür. Müşterilerin herhangi bir I/O profil gereksinimini yönetmeleri için yetkilendirilmesi, hem çok küçük hem de büyük dosyalar için aynı anda esnek bir şekilde kullanılabilir. Bunun nedeni, meta veri hizmeti sunucusunun dosyalar için geçiş bilgisini yönetirken, dosya açma / kapama işleminin veri erişiminde yer almamasıdır. Bu, temel dosya sistem (ler) inin tüm kaynaklarının ağda ve bağlı donanım bileşenlerinde tam bant genişliği sağladığını gösterir. Elde edilen çok yönlülük, BeeGFS’nin yakınsak, hiper-yakınsak (minimum 1 depolama düğümü) ve klasik HPC altyapılarında kullanılmasını sağlar.
Yetenekleri
-
Yüksek Erişilebirlik
-
Kota Uygulaması
BeeGFS, disk alanı tahsisi ve yığın dosya sayısı için sistem genelinde kotaların kullanıcı başına veya grup bazında tanımlanmasını sağlar. Bu, farklı erişim katmanlarındaki kullanıcıları farklı kısıtlama düzeyleriyle düzenlemek ve aynı zamanda bireylerin tüm dosya sisteminin kaynaklarını tek başına tüketmesini önlemek için kullanılabilir.
BeeGFS kotası yönetim mekanizması iki özellikten oluşur:
• Kota Takibi
• Kota Uygulaması
Kota takibi, veri miktarının sorgulanmasını ve kullanıcıların ve grupların sistemde herhangi bir kısıtlama koymadan kullandığı yığın dosyalarının sayısını sağlar.
Kota uygulaması, tüm sistemdeki kota sınırlarının tanımını ve uygulamasını sağlar. Bu özellik etkinleştirildiğinde, BeeGFS yönetim programı düzenli aralıklarla tüm depolama hedeflerinden kota raporlarını toplar, aşılan kota sınırlarını kontrol eder ve sistemin artık daha fazla kaynak tüketmesine izin vermez. -
Erişim Kontrol Listeleri (ACL)
BeeGFS’de Erişim Kontrol Listeleri, meta veri dosyalarının genişletilmiş dosya öznitelikleri olarak saklanır. ACL özelliğinin amacı kullanıcıları belirli IP adreslerinden belirli bir hedef IP adresine ve bağlantı noktasına gelen trafiğe izin vermek veya bunları reddetmektir. Genişletilmiş ACL’ler, kaynak paket adreslerini, hedef adresini, protokolleri ve bağlantı noktası numaralarını kontrol eder. Genel olarak, BeeGFS’nin Genişletilmiş ACL’leri daha iyi bir kontrol imkanı sunar ve bu da yüksek güvenlik sağlar.
-
Depolama Havuzları
Kullanıcıların çalışmakta oldukları projelerde yüksek performans elde etmelerini sağlamak için, BeeGFS depolama havuzları özelliği, flash sürücülerini kullanıcılara sunar. Bu şekilde, kullanıcılar mevcut projeyi BeeGFS’den (beegfs-ctl komut satırı aracı aracılığıyla) flash sürücülere taşıyabilir ve böylece proje kullanıcı normal disk kullanımına karar verene kadar normal disk kullanmadan flash diskler üzerinde çalışır.
BeeGFS, sistem yöneticisinin grup hedeflerini gruplandırmasına ve arkadaş gruplarını farklı sınıflarda bir araya getirmesine izin vermek için depolama havuzları özelliğini tasarladı. Örneğin, hızlı ancak küçük solid-state sürücülerden oluşan bir havuz ve büyük ancak daha yavaş dönen diskler kullanan yığın depolama için başka bir havuz olabilir. Havuzlar, havuzdaki depolama hedeflerine bakmadan hangi havuzu kullanacaklarını hatırlamayı kolaylaştıran tanımlayıcı isimlere sahip olabilir. -
BeeOND: Talep Üzerine BeeGFS(Burst Buffering)
Bir kümenin hesaplama düğümleri genellikle işletim sistemini depolamak ve uygulamalar için yerel bir geçici veri deposu sağlamak için dahili flash sürücüler ile donatılmıştır. Ancak, yerel bir geçici veri deposu kullanmak, genellikle, farklı işlem düğümlerinden gelen verilere paylaşılan erişim gerektirdiğinden, dağıtılmış uygulamalar için kullanışlı ya da uygun değildir, dolayısıyla SSD’lerin yüksek bant genişliği ve yüksek IOPS’si boşa harcanmış olur.
Dahili disklerdeki hesaplama işleri için ortak bir paralel dosya sisteminin oluşturarak bu problemi çözmek için (“beyond / ötesine geçme” ve “BeeGFS On Demand” ifadelerinin kısaltması olan) BeeOND özelliği geliştirilmiştir. BeeOND durumları, tam olarak iş için ayrılan düğümlerde tam olarak hesaplama işinin çalışma zamanı geçici olarak ortaya çıkar. Bu, işler için hızlı bir şekilde paylaşılan, tamamen flaşlı bir dosya sistemi sunar.
