Skip to content

feat(ETL): Ajouter validatation des fichiers avant export #4924

Open
@qloridant

Description

Contexte

Plusieurs jeu de données sont exportés soit vers une base postgres (analysis) soit en format csv sur un s3 (open data).

Problème

  • Pour les export vers le data_warehouse, la méthode is_valid() quivalide le jeu de données n'est pas appelée.
  • Pour les exports en open_data, la méthode est appelée, mais à l'intérieur d'une condition impossible à cause d'une typo

Solution

  • Appeler is_valid avant l'export dans la base postgres
  • Corriger la typo afin de rendre l'appel à is_valid() possible

Activity

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Metadata

Assignees

Labels

No labels
No labels

Type

No type

Projects

No projects

Milestone

No milestone

Relationships

None yet

Development

No branches or pull requests

Issue actions