ELT
ELT; çıkarma, yükleme ve dönüştürme sırasını anlatır. Ham veriler önce hedef depoya alınır, gereken analizler için orada dönüştürülür.
ELT ne anlama gelir?
ELT, Extract, Load, Transform ifadesinin kısaltmasıdır: veriyi kaynaktan okumak, önce hedef depoya yüklemek ve ardından orada dönüştürmek. Böylece planlanan hazırlık yapılmadan önce ham veriler hedefte bulunur. Analizler için bu ortamda türetilmiş tablolar veya görünümler oluşturulabilir.
Kurgusal bir yazılım projesinde arka plan görevi, çalışma süresini {"durationMs":90000} olarak verir. Planlanan ELT akışında bu kayıt önce şirketin hedef tablosu raw_runs içine alınır. Ancak sonraki hedef içi dönüşümde 90000 / 1000 = 90 hesaplanır ve saniye değeri rapora durationSeconds olarak sunulur. Tablo ve alan adları örnek için seçilmiştir; gerçek veri akışı çalıştırılmamıştır.
ETL'de bu birim dönüşümü, veriler analiz deposuna yüklenmeden önce yapılırdı. ELT dönüşümü hedefe taşır. Yine de hangi verilerin hedefte ham olarak tutulabileceği ve bunları kimin okuyabileceği tanımlanmalıdır. İşlem sırası tek başına daha hızlı analiz veya daha düşük maliyet garantilemez.
Kaynaklar
İlgili terimler
- ETLETL; çıkarma, dönüştürme ve yükleme sırasını anlatır. Veri kaynaktan okunur, analiz deposuna yüklenmeden önce dönüştürülür.
- Veri eşlemeVeri eşleme, kaynak verinin hedef yapıya nasıl aktarılacağını belirler. Alan adlarının yanında anlam, birim ve hata durumları da uyumlu olmalıdır.
- Sistem entegrasyonuSistem entegrasyonu uygulamaları, verileri ve iş adımlarını bağlar. Bağlantının yanında kimliklerin, alan anlamlarının ve işlem sonuçlarının da uyuşması gerekir.
- Transactional InboxTransactional inbox, tekrar teslim edilen mesajların yerel işlemi yinelemesini önlemek için kalıcı mesaj kayıtları kullanır.
- Mesaj onayıMesaj onayı, bir teslimatın belirlenen kurala göre alındığını veya işlendiğini mesaj aracısına bildirir.
- Yeniden denemede rastgele gecikmeRetry jitter, bekleme sürelerini rastgele değiştirerek birçok istemcinin aynı anda yeniden istek göndermesini azaltır.
Bu konudaki yazılar
ASES ile API ve entegrasyon
ERP, CRM ve mağaza sorunsuz bağlantılı