FACE

FACE

Données

Raw - Données brutes

• Dump mis sur MySQL
• MySQL vers PostgreSQL: github/fondamental_entrepot
  • Etapes de nettoyage a expliquer patho par patho (asperger, biopolar, etc)
    • Date saisit: disable de l’autoupdate pour ne pas rajotuer de nouvelle donnée
    • add fondacode dans chaque table
    • remove invalid date
    • remove enum: decrypter date de naissance, convertir en date, et changer le jour en 15 pour anonymiser
    • load: envoi les données vers postgresql

Stg - Staging

Créer une base de donnée nationnal à partir des données de chaque centre -> projet dbt spécific

Clean

• Renommage de variable
• Changement de type de variable
• Calcul de l’age dans table patient
• Supprimer la documentation de clean
• pour visites: documenter la méthode de calcul de la date de visite et type de visite

Thesaurus

rangement par thématique

• mettre ici le formulaire d’opposition et sauvegarde de justice (variable PROTEC): filtrer ces patients

-> travailler sur un thesaurs v2: avec un autre model de table comme souhaité

Extraction

Deux tables majeures:

• Patient: filtrage des patients ici
• All: filtrages des patietns ici

-> Créer un template d’extraction pour les 4 pathos, qu’on copie collera pour une nouvelle extraction -> Ecrire ici la Todo qd il y a une nouvelle extraction:

• Copier le template de la patho
• Commenter les variable non voulus
• rajouter les critères de filtrage dans la table Patient et All.

Dashboard

• Ecran de Controle comparatif entre les différentes étapes de mise en qualité
  • Nbr de lignes par table pour usubjid ou visitnum: la clé primaire en gris Faire un mode avec Etape (raw, stg..), patho, nom table, métrique (nbr)

Thesaurus

Accès au Thesaurus : thesaurus.fondamental.online

Dashboards

Accès à Metabase : 10.94.1.108

/!\ Attention ce lien n’est accessible que depuis les locaux de FondaMental ou depuis un VPN;