Implementando controle de Qualidade de Dados com Python
2026-10-17 , Paralela 3

Nesta palestra sobre Qualidade de Dados, irei explorar seus principais conceitos, técnicas e estratégias, além de realizar um benchmark das ferramentas Python e apresentar um use case com Airflow.


Nesta palestra irei falar um pouco sobre o meu campo de atuação atual, a área de Data Quality. Irei explorar a sua importância, conceitos, técnicas e estratégias. Irei também falar sobre as principais ferramentas para implementação de data quality utilizando Python e irei explorar um use case real onde foi utilizado o Airflow para a implementação de verificações para garantir a qualidade de dados. Os principais conceitos envolvidos nesta palestra serão baseados no livro Fundamentos da Qualidade de Dados (Moses, Gavish e Vorwerck), porém outras referências bibliográficas também serão utilizadas.


What prior knowledge is necessary to be able to follow your activity well?:
  • Conhecimento intermediário sobre a sintaxe do Python;
  • Conhecimentos básicos sobre conexões com bancos de dados e APIs;
  • Conhecimentos básicos de SQL;
  • Conhecimento básico sobre a área de dados.
What can participants expect to learn from your activity?:
  • Qual a importância da Qualidade de Dados;
  • Quais os conceitos básicos envolvidos nesta área;
  • Como implementar rotinas de verificação e garantia da qualidade de dados;
  • Quais ferramentas Python podemos utilizar para implementar rotinas de qualidade de dados.
Choose one or more areas where this proposal fits.: Data Science and Data Analysis, Testing, Others

Atuo há mais de 10 anos na área de dados, já tendo sido data engineer, scientist e architect. Atualmete sou Data Architect para Data Governance na EDP, a maior empresa de energia renovável da Europa.