Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Fix un pb de colonne lors de l'ingestion de SINOE #1399

Open
wants to merge 1 commit into
base: main
Choose a base branch
from

Conversation

kolok
Copy link
Contributor

@kolok kolok commented Mar 3, 2025

Description succincte du problème résolu

Carte Notion/Mattermost/Sentry : DAG SINOE bloqué - problème avec la colonne ANNÉE

N'oublier pas de taguer : bug, enhancement, documentation, technical, dependencies

🗺️ contexte: Airflow - Source

💡 quoi: Le DAG d'ingestion des source SINOE ne fonctionne plus

🎯 pourquoi: La colonne ANNEE n'est pas ignoré lors de la récupération des acteurs en DB et de la comparaison des source SINOE avec la base de données

🤔 comment:

  • ajout de la colonne statut nécessaire à l'execution de l'ingestion
  • limiter la récupération en base de données au champs disponible en DB
  • limiter la comparaison aux champs de la base + les relations de l'objet Acteur

Auto-review

Les trucs à faire avant de demander une review :

  • J'ai bien relu mon code
  • La CI passe bien
  • En cas d'ajout de variable d'environnement, j'ai bien mis à jour le .env.template
  • J'ai ajouté des tests qui couvrent le nouveau code

📆 A faire (prochaine PR)

  • Gestion des champs de la DB acteur et des relations de manière centralisé

@kolok kolok force-pushed the sinoe_annee_bug branch from 3c90f45 to c7e403c Compare March 4, 2025 09:54
@kolok kolok force-pushed the sinoe_annee_bug branch from c7e403c to e5e0b14 Compare March 4, 2025 10:19
@kolok kolok added the bug Something isn't working label Mar 4, 2025
@kolok kolok marked this pull request as ready for review March 4, 2025 10:29
@kolok kolok requested a review from a team as a code owner March 4, 2025 10:29
@kolok kolok requested review from fabienheureux and maxcorbeau and removed request for a team March 4, 2025 10:29
Copy link
Contributor

@maxcorbeau maxcorbeau left a comment

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

Bcp de changements sur les categories/propositions qui ne sont pas explicités dans le comment, je valide pas tout de suite pour s'assurer qu'on embarque pas des changements non-souhaités/documentés

"proposition_services_codes",
"source_code",
"acteur_type_code",
} | {"cree_le"}
Copy link
Contributor

@maxcorbeau maxcorbeau Mar 5, 2025

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

Bcp de changements sur les categories/propositions qui ne sont pas explicités dans le comment, je valide pas tout de suite pour s'assurer qu'on embarque pas des changements non-souhaités/documentés

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
bug Something isn't working
Projects
None yet
Development

Successfully merging this pull request may close these issues.

2 participants