Apache Airflow, Docker, Scala, Apache Spark, Apache Kafka, Azure, Sql, Kubernetes, AWS

BigQuery, Gcp, Scala, Apache Spark, Kafka, Dataproc, Airflow

Java, T-sql, Hadoop, Scala, SQL Server, Kafka, Sql, Jenkins, Azure Data Factory, Docker, Terraform, Spark, Databricks, Azure, Kubernetes, Python, AWS, Airflow, ATLAS, Great Expectations, Glue, Delta Lake