آنچه یاد خواهید گرفت:
دادههای جدید و خام در یک پایگاه داده جریان مییابد و از طریق یک پایپلاین به یک داشبورد منتقل میشود. و شخصی باید آن پایپلاینها را ساخته و نگهداری کند. در این دوره، پایپلاینهای دستهای داده با AWS، خواهید آموخت که چه زمانی و چگونه از پایپلاینهای داده در محیط AWS خود استفاده کنید.
ابتدا، اصول اولیه Glue ETL و پردازش بارهای کاری خود را بررسی میکنید. سپس، یاد میگیرید چگونه جذب و پردازش دادههای خام خود را به صورت خودکار انجام دهید تا به اطلاعات قابل خواندن تبدیل شود.
در نهایت، میآموزید چگونه نظارت کنید تا نشتی یا شکاف در پایپلاینها را شناسایی کنید تا بدانید دادههای شما فقط به جای مورد نیاز میروند. وقتی این دوره را تمام کردید، مهارتها و دانش لازم برای پردازش دستهای را خواهید داشت تا محیط خود را کارآمدتر کنید و بینشهای بهتری از کل دادهها به دست آورید.