Dataflow ile Sunucusuz Veri İşleme: Kurs 2

Dataflow kurs serisinin bu ikinci bölümünde, Beam SDK kullanarak boru hatları (pipelines) geliştirmeye daha yakından bakacağız. Apache Beam kavramlarını gözden geçirerek başlayacağız. Ardından pencereler (windows), filigranlar (watermarks) ve tetikleyiciler (triggers) kullanarak akış veri işlemeyi (stream processing) ele alacağız. Daha sonra boru hatlarınızdaki kaynak ve alıcı seçeneklerine, yapılandırılmış verilerinizi sunmak için şemalara geçeceğiz ve State ve Timer API'lerini kullanarak durum bilgisi olan dönüşümlerin (stateful transformations) nasıl gerçekleştirileceğini göreceğiz. Ardından, boru hatlarınızın performansını en üst düzeye çıkarmanıza yardımcı olacak en iyi uygulamaları ele alacağız. Kursun sonuna doğru, Beam'deki iş mantığınızı temsil etmek için SQL ve DataFrames'i tanıtacağız ve Beam notebooklarını kullanarak boru hatlarını yinelemeli olarak nasıl geliştireceğinizi açıklayacağız.