Artículos en: Curso Gcp Cloud Composer

Cloud Composer: Sensores y Automatización Batch | Curso Composer GCP

Aprende a utilizar Sensores en Apache Airflow para crear pipelines reactivos. Configura el GCSObjectExistenceSensor para detectar la llegada de datos al Data Lake de Google Cloud.

Cloud Composer: Master DAG y Gobernanza | Curso Composer GCP

Domina la orquestación modular en Airflow 3. Aprende a crear un Master DAG para gobernar múltiples flujos de datos (Batch y Streaming) utilizando el TriggerDagRunOperator y la TaskFlow API.

Cloud Composer: Transformación y Branching | Curso Composer GCP

Aprende a implementar lógica de decisión en tus DAGs de Airflow. Domina el BranchPythonOperator y la transformación de datos en BigQuery mediante SQL profesional.

Cloud Composer: Preparando el Streaming con Pub/Sub | Curso Composer GCP

Descubre los fundamentos del procesamiento de datos en tiempo real. Aprende a configurar Google Cloud Pub/Sub y a crear un simulador de tráfico en streaming utilizando Python.

Cloud Composer: Orquestación de Streaming | Curso Composer GCP

Aprende a orquestar procesos de streaming infinitos en Airflow 3 sin bloquear recursos. Domina el patrón Fire and Forget con el BeamRunPythonPipelineOperator en Cloud Composer.

Cloud Composer: Ingesta a BigQuery | Curso Composer GCP

Aprende a mover datos desde Google Cloud Storage hacia BigQuery de forma automática. Domina el patrón ELT y el uso del GCSToBigQueryOperator en Cloud Composer.

Cloud Composer: Infraestructura Base | Curso Composer GCP

Aprende a desplegar Cloud Composer 2 utilizando Terraform. Configura tu entorno de orquestación y ejecuta tu primer DAG de Apache Airflow en Google Cloud Platform.

Dataflow: Apache Beam (El Motor de Procesamiento) | Curso Composer GCP

Aprende a construir pipelines de streaming con Apache Beam. Diseña transformaciones distribuidas para procesar datos desde Pub/Sub hacia BigQuery en tiempo real utilizando Dataflow.