feat: Enhance CSV import process and data cleanup

- Added support for importing 'periodes' data and adjusted related SQL scripts.
- Introduced a new SQL preparation script to set up the import schema.
- Updated the import_all_csv.sh script to handle new CSV files and tables.
- Implemented checks for required SQL files and improved error handling.
- Modified data types and structures in the import process for better consistency.
- Created a new remove-import-data.sql script to clean up imported data effectively.
- Enhanced the handling of postal codes and addresses in the import logic.
- Added comments and structured the SQL scripts for better readability and maintainability.

csv_stemm/choix_periodes.csv

@@ -0,0 +1,146 @@
+closingmotive,origin,acp_scopes,job,referrer,parent,enfant,acp_social_issues,work_social_action,street,extra,streetnumber,postcode,country
+,,,,,Santé,Accès aux soins,Santé > Accès aux soins,"Ecouter, informer, conseiller",,,,,
+,,,,,Santé,Accès aux soins,Santé > Accès aux soins,Orienter vers une structure compétente,,,,,
+,,,,,Santé,Accès aux soins,Santé > Accès aux soins,vérifier droits d'accès,,,,,
+,,,,,Santé,Accès aux soins,Santé > Accès aux soins,affiliation volontaire,,,,,
+,,,,,Santé,Accès aux soins,Santé > Accès aux soins,Orienter vers OS (pour prise en charge de l'affiliation volontaire et/ou tiers payant),,,,,
+,,,,,Santé,Accès aux soins,Santé > Accès aux soins,projet CUSS,,,,,
+,,,,,Santé,Accès aux soins,Santé > Accès aux soins,Prévention et Sensibilisation,,,,,
+,,,,,Santé,Accès aux soins,Santé > Accès aux soins,"Rédaction recours (CNS, Médecin contrôle,...)",,,,,
+,,,,,Santé,Accès aux soins,Santé > Accès aux soins,prise en charge de facture médicale ou autre,,,,,
+,,,,,Santé,Accès aux soins,Santé > Accès aux soins,"Réorienter chez médecin gratuit (Médecins du Monde, Stëmm vun der Strooss)",,,,,
+,,,,,Santé,Accès aux soins,Santé > Accès aux soins,Demande assistance dépendance,,,,,
+,,,,,Santé,Santé mentale,Santé > Santé mentale,"Ecouter, informer, conseiller",,,,,
+,,,,,Santé,Santé mentale,Santé > Santé mentale,Prise de rendez-vous médicaux,,,,,
+,,,,,Santé,Santé mentale,Santé > Santé mentale,Réorientation service compétent,,,,,
+,,,,,Santé,Consultation médicale – Stëmm,Santé > Consultation médicale – Stëmm,enquête Dr Stëmm,,,,,
+,,,,,Santé,Consultation médicale – Stëmm,Santé > Consultation médicale – Stëmm,"établir une prise en charge pour spécialiste, laboratoire, radiologie,...",,,,,
+,,,,,Santé,Consultation médicale – Stëmm,Santé > Consultation médicale – Stëmm,établir un bon pharmacie,,,,,
+,,,,,Santé,Consultation médicale – Stëmm,Santé > Consultation médicale – Stëmm,prise en charge de facture médicale ou autre,,,,,
+,,,,,Santé,Handicap,Santé  > Handicap,"Ecouter, informer, conseiller",,,,,
+,,,,,Santé,Handicap,Santé  > Handicap,Prise de rendez-vous médicaux,,,,,
+,,,,,Santé,Handicap,Santé  > Handicap,Réorientation service compétent,,,,,
+,,,,,Santé,CUSS (Couverture Universelle des Soins de Santé),Santé > CUSS (Couverture Universelle des Soins de Santé),"Ecouter, informer, conseiller",,,,,
+,,,,,Santé,CUSS (Couverture Universelle des Soins de Santé),Santé > CUSS (Couverture Universelle des Soins de Santé),Enquête sociale,,,,,
+,,,,,Santé,CUSS (Couverture Universelle des Soins de Santé),Santé > CUSS (Couverture Universelle des Soins de Santé),Préparation de la demande,,,,,
+,,,,,Santé,CUSS (Couverture Universelle des Soins de Santé),Santé > CUSS (Couverture Universelle des Soins de Santé),Transmission de la demande au Ministère de la Santé,,,,,
+,,,,,Santé,CUSS (Couverture Universelle des Soins de Santé),Santé > CUSS (Couverture Universelle des Soins de Santé),"Echange avec MISA, CCSS, CNS",,,,,
+,,,,,Santé,CUSS (Couverture Universelle des Soins de Santé),Santé > CUSS (Couverture Universelle des Soins de Santé),Entretien régulier,,,,,
+,,,,,Santé,CUSS (Couverture Universelle des Soins de Santé),Santé > CUSS (Couverture Universelle des Soins de Santé),Prise de rendez-vous médicaux,,,,,
+,,,,,Santé,CUSS (Couverture Universelle des Soins de Santé),Santé > CUSS (Couverture Universelle des Soins de Santé),Demande assistance dépéndance,,,,,
+,,,,,Santé,CUSS (Couverture Universelle des Soins de Santé),Santé > CUSS (Couverture Universelle des Soins de Santé),Accompagnement physique au rendez-vous,,,,,
+,,,,,Santé,CUSS (Couverture Universelle des Soins de Santé),Santé > CUSS (Couverture Universelle des Soins de Santé),Suivi social,,,,,
+,,,,,Santé,CUSS (Couverture Universelle des Soins de Santé),Santé > CUSS (Couverture Universelle des Soins de Santé),Art. 32,,,,,
+,,,,,Justice,Accès aux droits,Justice > Accès aux droits,Enquête sociale,,,,,
+,,,,,Justice,Accès aux droits,Justice > Accès aux droits,Vérifier les possibilités d'accès aux droits,,,,,
+,,,,,Justice,Accès aux droits,Justice > Accès aux droits,aide à la constitution d'un dossier pour l'OS ou autre,,,,,
+,,,,,Justice,Accès aux droits,Justice > Accès aux droits,Vérifier possibilité d'une adresse,,,,,
+,,,,,Justice,Accès aux droits,Justice > Accès aux droits,Vérifier si autorisation de travailler,,,,,
+,,,,,Justice,Accès aux droits,Justice > Accès aux droits,"Informer, conseiller, expliquer",,,,,
+,,,,,Justice,Accès aux droits,Justice > Accès aux droits,Orienter vers réseau (bas seuil ou spécialisé dans la problématique),,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,Enquête sociale,,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,Vérifier les possibilités d'accès aux droits,,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,Vérifier possibilité d'une adresse,,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,Vérifier si autorisation de travailler,,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,"Informer, conseiller",,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,"Orienter vers réseau (ASTI, CLAE, HUT, LISKO, ONA...)",,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,(Renouvellement) titre de séjour,,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,Actualisation documents d'identité,,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,Contacter MAI,,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,Contacter MAE,,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,Assistance judiciaire (recours),,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,Centre de rétention/Maison retour,,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,Retour volontaire (IOM),,,,,
+,,,,,Justice,Accès aux droits – Migration,Justice > Accès aux droits – Migration,Regroupement familial,,,,,
+,,,,,Justice,Accès aux droits – Juridique,Justice > Accès aux droits – Juridique,Demande d'assistance judiciaire,,,,,
+,,,,,Justice,Accès aux droits – Juridique,Justice > Accès aux droits – Juridique,Réorientation permanence judiciaire gratuite,,,,,
+,,,,,Justice,Accès aux droits – Juridique,Justice > Accès aux droits – Juridique,"recherche de renseignements concernant l'affaire (police, avocat, parquet,..)",,,,,
+,,,,,Justice,Accès aux droits – Juridique,Justice > Accès aux droits – Juridique,Ombudsman/OKAJU,,,,,
+,,,,,Justice,Accès aux droits – Juridique,Justice > Accès aux droits – Juridique,"Demande renseignement service spécialisé (Mieterschutz, UCL, Syndicats,...)",,,,,
+,,,,,Justice,Accès aux droits – Juridique,Justice > Accès aux droits – Juridique,Explication courrier,,,,,
+,,,,,Justice,Accès aux droits – Juridique,Justice > Accès aux droits – Juridique,Rédaction recours,,,,,
+,,,,,Justice,Accès aux droits – Juridique,Justice > Accès aux droits – Juridique,Echange services pénitentiaires,,,,,
+,,,,,Justice,Accès aux droits – Juridique,Justice > Accès aux droits – Juridique,"Contact service compétent (avocat, huissier, créanciers,...)",,,,,
+,,,,,Justice,Protection Adulte,Justice > Protection Adulte,"Ecouter, informer, conseiller",,,,,
+,,,,,Justice,Protection Adulte,Justice > Protection Adulte,"Prise de contact service compétent (violence.lu, SCAS,...)",,,,,
+,,,,,Justice,Protection Adulte,Justice > Protection Adulte,"Réorientation service compétent (violence.lu, SCAS,...)",,,,,
+,,,,,Justice,Protection Adulte,Justice > Protection Adulte,Réorientation Police (Plainte),,,,,
+,,,,,Justice,Protection Adulte,Justice > Protection Adulte,Réorientation Service Info Traite,,,,,
+,,,,,Justice,Protection Adulte,Justice > Protection Adulte,Demande d'assistance judiciaire,,,,,
+,,,,,Justice,Protection Adulte – besoins spécifiques,Justice > Protection Adulte – besoins spécifiques,"Ecouter, informer, conseiller",,,,,
+,,,,,Justice,Protection Adulte – besoins spécifiques,Justice > Protection Adulte – besoins spécifiques,"Réorientation service compétent (TACS, Avocat,...)",,,,,
+,,,,,Justice,Protection Adulte – besoins spécifiques,Justice > Protection Adulte – besoins spécifiques,Faire une demande tutelle/curatelle,,,,,
+,,,,,Emploi,Sans emploi,Emploi > Sans emploi,"Informer, conseiller, expliquer",,,,,
+,,,,,Emploi,Sans emploi,Emploi > Sans emploi,Rédaction de CV,,,,,
+,,,,,Emploi,Sans emploi,Emploi > Sans emploi,Rédaction de LM,,,,,
+,,,,,Emploi,Sans emploi,Emploi > Sans emploi,Réorientation vers ACT ou similaire,,,,,
+,,,,,Emploi,Sans emploi,Emploi > Sans emploi,Intérim,,,,,
+,,,,,Emploi,Sans emploi,Emploi > Sans emploi,Inscription Adem,,,,,
+,,,,,Emploi,problèmes,Emploi > problèmes,"Ecouter, informer, conseiller",,,,,
+,,,,,Emploi,problèmes,Emploi > problèmes,Echange employeur,,,,,
+,,,,,Emploi,problèmes,Emploi > problèmes,Echange ONIS,,,,,
+,,,,,Emploi,problèmes,Emploi > problèmes,Echange ARIS,,,,,
+,,,,,Emploi,problèmes,Emploi > problèmes,Contact ITM,,,,,
+,,,,,Emploi,problèmes,Emploi > problèmes,Rédaction courrier,,,,,
+,,,,,Emploi,problèmes,Emploi > problèmes,Réorientation Service Info Traite,,,,,
+,,,,,Emploi,ISP (TUC où autre),Emploi > ISP (TUC où autre),Echange avec ADEM,,,,,
+,,,,,Emploi,ISP (TUC où autre),Emploi > ISP (TUC où autre),Echange avec employeur,,,,,
+,,,,,Emploi,ISP (TUC où autre),Emploi > ISP (TUC où autre),Réorienter vers l'ONIS,,,,,
+,,,,,Emploi,ISP (TUC où autre),Emploi > ISP (TUC où autre),Echanger avec l'ARIS,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,"Ecouter, informer, conseiller",,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,Signer la procuration,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,Signer la dénonciation de procuration,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,Faire un bilan de la situation financière,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,Etablir un plan budgétaire ou d'apurement,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,Réévaluation en cas de besoin,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,"Contacter les créanciers, huissiers,...",,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,aide à la constitution d'un dossier pour l'OS,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,Ouvrir un compte bancaire,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,Clôturer un compte bancaire,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,Effectuer un virement,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,Donner de l'argent liquide,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,Accès aide alimentaire,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,mise en place d'ordres permanents,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,faire une avance,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,"vérifier les possibilités d'accès  (Revis, Rpgh, chômage, pension, invalidité,allocations familiales...)",,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,entamer les démarches requises,,,,,
+,,,,,Finance,Guidance budgétaire,Finance > Guidance budgétaire,"rédiger un  recours (ADEM, FNS,...)",,,,,
+,,,,,Logement,Accès au logement,Logement > Accès au logement,"Ecouter, informer, conseiller",,,,,
+,,,,,Logement,Accès au logement,Logement > Accès au logement,Faire demande RENLA,,,,,
+,,,,,Logement,Accès au logement,Logement > Accès au logement,Faire une demande de subvention loyer,,,,,
+,,,,,Logement,Accès au logement,Logement > Accès au logement,Faire une demande d'aide pour garanti locative de l'état,,,,,
+,,,,,Logement,Accès au logement,Logement > Accès au logement,Orienter vers OS pour garantie locative,,,,,
+,,,,,Logement,Accès au logement,Logement > Accès au logement,Faire un recours en cas de notification de déguerpissement,,,,,
+,,,,,Logement,Accès au logement,Logement > Accès au logement,Orienter vers logement d'urgence,,,,,
+,,,,,Logement,perte/absence,Logement > perte/absence,"Ecouter, informer, conseiller",,,,,
+,,,,,Logement,perte/absence,Logement > perte/absence,Réorientation vers office social,,,,,
+,,,,,Logement,perte/absence,Logement > perte/absence,Demande d'adresse de référence,,,,,
+,,,,,Logement,perte/absence,Logement > perte/absence,Demande RENLA,,,,,
+,,,,,Logement,perte/absence,Logement > perte/absence,Demande logements sociaux,,,,,
+,,,,,Logement,perte/absence,Logement > perte/absence,Orientation pour adresse courrier,,,,,
+,,,,,Logement,perte/absence,Logement > perte/absence,Orientation structure d'urgence,,,,,
+,,,,,Logement,perte/absence,Logement > perte/absence,faire une demande pour maison de repos \ maison de soins,,,,,
+,,,,,Logement,perte/absence,Logement > perte/absence,actualisation annuelle de la demande logement social,,,,,
+,,,,,Logement,perte/absence,Logement > perte/absence,actualisation subvention loyer,,,,,
+,,,,,Logement,Adresse de référence,Logement > Adresse de référence,Enquête sociale (vérifier les conditions d'accès),,,,,
+,,,,,Logement,Adresse de référence,Logement > Adresse de référence,Instruction de la demande,,,,,
+,,,,,Logement,Adresse de référence,Logement > Adresse de référence,Réorientation vers service compétent,,,,,
+,,,,,Logement,Adresse de référence,Logement > Adresse de référence,Accompagnement social,,,,,
+,,,,,Logement,Adresse de référence,Logement > Adresse de référence,Clôture de la demande,,,,,
+,,,,,Logement,Logement Encadré,Logement > Logement Encadré,Entretien d'évaluation (avant déménagement),,,,,
+,,,,,Logement,Logement Encadré,Logement > Logement Encadré,Rédiger contrat avec objectifs à atteindre,,,,,
+,,,,,Logement,Logement Encadré,Logement > Logement Encadré,Visites régulières,,,,,
+,,,,,Logement,Logement Encadré,Logement > Logement Encadré,"Aides démarches (administratives, quotidiens, etc)",,,,,
+,,,,,Logement,Logement Encadré,Logement > Logement Encadré,Si objectifs atteint -> sortie logement,,,,,
+,,,,,Logement,Logement Encadré,Logement > Logement Encadré,échange avec bailleur social,,,,,
+,,,,,Logement,Logement Encadré,Logement > Logement Encadré,compléter révision annuelle du loyer,,,,,
+,,,,,Logement,Insalubrité,Logement > Insalubrité,"Ecouter, informer, conseiller",,,,,
+,,,,,Logement,Insalubrité,Logement > Insalubrité,Chercher le dialogue avec le bailleur,,,,,
+,,,,,Logement,Insalubrité,Logement > Insalubrité,Echange Mairie,,,,,
+,,,,,Logement,Insalubrité,Logement > Insalubrité,Echange centre d'hébergement,,,,,
+,,,,,Logement,Insalubrité,Logement > Insalubrité,Procédure d'insalubrité,,,,,
+,,,,,Logement,Insalubrité,Logement > Insalubrité,Rédaction de recours,,,,,
+,,,,,Logement,Insalubrité,Logement > Insalubrité,Echange avocat,,,,,
+,,,,,Logement,médiation,Logement > médiation,Echange avec Bailleur,,,,,
+,,,,,Logement,médiation,Logement > médiation,Echange Mairie,,,,,
+,,,,,Logement,médiation,Logement > médiation,Echange centre d'hébergement,,,,,