Ham verileri, doğrulanmış verileri ve onayları birbirinden ayırmak
İzlenebilir geçişlere sahip ayrı işleme katmanları tasarlarız. Gelen verilere kaynak, yükleme zamanı ve şema bilgisi eklenir; kalite kuralları hangi verilerin işlenmeye devam edeceğine ve hangilerinin netleştirilmek üzere ayrılacağına karar verir. Tekrarlanabilir yükleme süreçleri, bir yeniden başlatmanın sayıları ikiye katlamasını önler. Roller veri alanlarına bağlanır, geliştirme erişimleri kısıtlanır ve saklama kuralları teknik olarak dikkate alınır. Dosya biçimleri, partisyonlama ve hesaplama kapasitesine ilişkin mimari kararlar, sorgularınıza ve veri hacimlerinize göre test edilir; böylece ucuz bir depolama, orantısız derecede pahalı analizlere yol açmaz.


