Dataflow ile Sunucusuz Veri İşleme: Pipeline Geliştirme (İspanyolca)

Dataflow hakkındaki bu kurs serisinin ikinci bölümünde, Beam SDK ile veri hattı (pipeline) geliştirmeyi derinlemesine inceleyeceğiz. Apache Beam kavramlarının gözden geçirilmesiyle başlayacağız. Ardından, pencereler (windows), filigranlar (watermarks) ve tetikleyiciler (triggers) ile akış verilerinin işlenmesini analiz edeceğiz. Sonrasında, veri hatlarınızdaki kaynak ve hedef seçeneklerini, yapılandırılmış verileri ifade etmeye yönelik şemaları ve State ve Timer API'lerini kullanarak durum bilgisi olan (stateful) dönüşümlerin nasıl gerçekleştirileceğini inceleyeceğiz. Daha sonra, veri hatlarının performansını en üst düzeye çıkarmaya yardımcı olan en iyi uygulamaları gözden geçireceğiz. Kursun sonunda, Beam'de iş mantığınızı temsil etmek için SQL ve Dataframe kullanımını ve Beam not defterleriyle yinelemeli olarak nasıl veri hattı geliştireceğinizi sunacağız.