Projeto ETL de Terremotos com API USGS

Este projeto realiza um pipeline de dados automatizado com Python, Airflow e Hadoop, consumindo dados sísmicos da API da USGS.

• Python
• Apache Airflow
• Hadoop HDFS
• Pandas, Requests

• scripts/etl.py: Código de extração e transformação
• dags/terremotos_etl.py: DAG do Airflow
• dados_brutos/: Dados brutos
• dados_processados/: Dados limpos
• notebooks/: Análises

pip install -r requirements.txt
airflow db init
airflow webserver --port 8080
airflow scheduler