Revelando los Superpoderes de Apache Airflow HD

¡Hola amigos de la comunidad de la chispa! El miércoles 15 de diciembre a las 6:00 PM México o 7:00 PM Perú/Colombia será nuestro sexto evento del año con transmisión por el canal de YouTube. En esta oportunidad tendremos la participación de Andrés Luna, quien nos platicará sobre los superpoderes de Apache Airflow. El objetivo de esta charla será exponer los componentes más importantes de Apache Airflow y cómo estos pueden ser aprovechados para crear flujos de datos más dinámicos y confiables. BONUS: Para todos los interesados en tomar la Airflow DAG Authoring Certification, Andrés introducirá los conceptos más relevantes que abarca el examen, al igual que algunos tips para triunfar en la prueba. La agenda será la siguiente: - Introducción Saludo de sus anfitriones. Queremos llevar Apache Spark a todos los rincones de Latinoamérica y por ello la comunidad de Apache Spark México volvió al ruedo, para seguir aportando al desarrollo y adopción del framework que tanto queremos, y aprender juntos sobre ingeniería de datos. - Revelando los superpoderes de Apache Airflow La estructura de la charla será la siguiente: 1. Introducción: ¿Por qué tanta euforia con Apache Airflow? 2. Los poderes base de Apache Airflow * DAGs a tu gusto (Dag’s definition) * Banco de operadores (Action and transfer operators) * Dependencias intuitivas (Task dependencies) * Variables a la mano (Airflow variables) * Tareas inteligentes (Trigger rules) 3. Los superpoderes de Apache Airflow (Airflow DAG Authoring Certification) * Paralelismo a tu medida (Dag’s concurrency) * Sensores para mayor confiabilidad (Sensor operators) * Ramificaciones para mayor flexibilidad (Branch Operator) * Plantillas para mayor claridad (Jinja Templates) * DAGs activando DAGs (DAG Dependencies) * El poder de saber usar todos los poderes 4. Conclusión: Airflow DAG Authoring Certification tips - Espacio para preguntas y debate. - Finaliza la transmisión, seguimos platicando por SLACK. Slack: https://join.slack.com/t/apachesparklatam/shared_invite/zt-essobx1j-NLqj6C2dZRX2kJAMuLkfug