Ajout nouveaux facteurs et MAJ données anciens by ludovicdmt · Pull Request #179 · TelesCoop/iarbre

ludovicdmt · 2025-04-01T16:31:01Z

Ajout des facteurs place PMR + station auto-partage + ponts comme non-plantable
MAJ des données pour les facteurs : slt, réseau fibre métropole
Simplification de geom pour les LCZ
Simplifcation génération MVT

Pour la fibre fusionne l'ancien et les nouveaux fichiers qui se complètent.

Dans le fichier transmis par la voirie, il manque un champ dans les données SLT. En attente de leur réponse.

This reverts commit 4a5e6bc.

ludovicdmt · 2025-04-03T14:40:18Z

Avec les nouvelles valeurs de threshold et les MVT générées en DB

back/plantability/management/commands/c01_compute_plantability_indice.py

back/iarbre_data/models.py

ludovicdmt · 2025-04-03T14:50:53Z

front/src/components/map/popup/PlantabilityScorePopupContent.vue

+const score = computed(() => {
+  if (props.index < -3) return 0
+  if (props.index < -2) return 2
+  if (props.index < -0.5) return 4
+  if (props.index < 0.75) return 6
+  if (props.index < 1.5) return 8
+  return 10
+})



J'ai gardé ici un score entre 0 et 10 au clic par pédagogie (thresholds les mêmes que ceux de couleur)

C'est sans doute à raffiner avec des tests utilisateurs pour le nombre de classe / découpage.

Non, tu ne devrais pas définir deux fois la même chose dans le front & le back, si besoin de cette échelle, tu peux ajouter une requête api pour l'obtenir ? O

Une solution serait que ce que tu stockes en base soit réellement ces valeurs là dans normalized indice

Comme les score sont associés à des labels, peut-être peut-on simplement ne pas afficher le score mais seulemnet le label ?

Pour l'instant favorable à afficher le score car c'est ce qu'a défini Geoffrey dans ses maquettes mais on peut en discuter avec lui.

J'ai bougé le calcul du normalized indice pour que ce soit directement la valeur seuillée vu qu'on ne sert nul part de la valeur brute, ce qui résous le doublon.

ludovicdmt · 2025-04-03T14:51:23Z

front/src/components/map/popup/PlantabilityScorePopupContent.vue

+  if (score.value === 0) return "Plantation impossible"
+  if (score.value === 2) return "Plantation très contrainte"
+  if (score.value === 4) return "Plantation contrainte"
+  if (score.value === 6) return "Plantation neutre"
+  if (score.value === 8) return "Plantation favorisée"
+  return "Plantation très favorisée"


Ces nommages proviennent du calque V1 et avaient été choisis avec des acteurs de terrain

D'une manière générale, s'il y a besoin de commenter une PR avec des commentaires, c'est que ces derniers auraient mérité leur place dans le code.

Dans le code, grâce à Quentin notamment, on aurait utilisé un enum ici.

Marc-AntoineA

Remarques générales :

sur la partie données, toujours une frustration de ma part de cette absence de tests mais ok. Mettre à jour la doc ?
sur le refacto, quand tu déplaces puis modifie des fonctions, tu peux le faire en deux fois avec un nom de commit ultra explicite. Comme ça, en ciblant les bons commits, je peux voir quelles modifs ont été faites ;
Je pense tu peux déjà ajouter une entrée dans le changelog avec des explications et capture d’écrans zoomées (avant/après) en prenant en compte tes nouvelles sources de données.

Ça fait plaiz en tout cas de voir ces améliorations !!

Marc-AntoineA · 2025-04-04T07:47:05Z

back/api/utils/mvt_generator.py

            None
+
+        Reference:
+        https://makina-corpus.com/django/generer-des-tuiles-vectorielles-sur-mesure-avec-django


J'ai l'impression que tu as grandement simplifié le code, sans ajouter de nouvelle dépendance.

Est-ce que tu as aussi constaté eu des gains de temps de calcul ?
(c'est cool niveau comm de dire qu'on a eu des améliorations de perfs !)

Non pas de gain, ni de différence. Juste maintenant c'est mapbox_vector_tile qui fait les opérations au lieu que ce soit nous à la main.

Marc-AntoineA · 2025-04-04T07:48:18Z

back/iarbre_data/data_config.py

    {
        "name": "SLT",
-        "file": "sltmateriel.geojson",
+        "file": "voirie.gpkg",


Est-ce le bon nom de fichier ? Dans ce cas, pourquoi avoir également ajouté (en commentaire) un autre fichier voirie.cpkg?

Oui c'est le bon nom. gpkg c'est un fichier qui contient plusieurs layers (quand geojson) n'en a qu'une.
Valérian des SIG à la voirie m'a fait un export en gpkg de toutes les données les concernant, quand la dernière fois ils avaient fait des exports séparés en geojson.
Il a juste oublié un champ indispensable pour les données SLT donc je garde l'ancien fichier en attendant qu'il me refasse l'export et que je puisse switcher sur la version commentée (j'ai pas envie de ré-écrire la même chose dans 1 semaine donc je stocke là temporairement en commentaire).

Marc-AntoineA · 2025-04-04T07:49:50Z

back/iarbre_data/data_config.py

        "factors": ["Rsx aériens ERDF"],
        "output_type": "LINESTRING",
    },
+    {


Fichier data.md à mettre à jour non ?

Marc-AntoineA · 2025-04-04T07:50:08Z

back/iarbre_data/data_config.py

        "name": "Réseaux aériens Enedis",
        "file": "rsx_aerien_enedis.geojson",
-        "actions": [{"buffer_size": 1, "union": True}],
+        "actions": [{"buffer_size": 1, "union": False}],


Pourquoi ce passage de True à False. Est-ce qu'il y avait un bug avant ?

Non avant j'explosais les géométries en suivant une grille régulière pour simplifier les traitements suivants en me permettant de travailler avec juste des bouts de géom.
Je me suis rendu compte qu'en gardant juste l'explosion inhérente aux données (donc pas d'union), ça va tout aussi vite pour les traitements suivants mais ça simplifie l'import des données.

Marc-AntoineA · 2025-04-04T07:51:31Z

back/iarbre_data/management/commands/utils_data.py

Pour du tel refacto, proposition de créer un dossier utils avec différents fichiers plutôt que des fichiers préfixés par utils.

back/iarbre_data/management/commands/utils.py

Marc-AntoineA · 2025-04-04T07:55:25Z

back/iarbre_data/tests/test_views.py

            },
        )

-    def test_transform_to_tile_relative(self):


Supprimé car plus la méthode associée c'est ça ?

Oui les transformations correspondantes sont maintenant directement traitée par mapbox_vector_tile donc on se contente de tester le résultat final qui est les tuiles MVT et plus les étapes intermédiaires.

Marc-AntoineA · 2025-04-04T07:56:48Z

back/iarbre_data/tests/test_views.py

On pourait s'attendre à ce que le nombre de tests augmente et ne diminue pas :) Du coup, est-ce que tu aurais 2 tests unitaires pertinents à ajouter ? ^^

Dans ma compréhesion, toutes les fonctions dans utils*.py sont élémentaires et peuvent donc être testées.

J'ai rajouté 2 tests pour l'import de données du coup (utils/data_processing.py)

back/plantability/management/commands/c01_compute_plantability_indice.py

Marc-AntoineA · 2025-04-04T07:59:10Z

front/cypress/components/MapScorePopup.cy.ts

    cy.contains("45.76")
    cy.contains("4.85")
-    cy.contains("Plantabilité élevée")
+    cy.contains("Plantation favorisée")


Si tu utilises un enum, tu pourras directement l'utiliser ici.

…it in the back

ludovicdmt · 2025-04-04T11:07:10Z

Il manquera juste les updates dans le changelog quand j'aurais re-généré la base..!

Marc-AntoineA

Okay, des détails en review.

Marc-AntoineA · 2025-04-08T09:48:00Z

back/iarbre_data/data.md

Top d’avoir complété

Marc-AntoineA · 2025-04-08T09:50:00Z

back/plantability/management/commands/c01_compute_plantability_indice.py

+    return 10
+
+
+def compute_robust_normalized_indice() -> None:


Il y a eu des modifs ici depuis ma dernière review, c’est lié aux bugs dans la génération de ce WE ?

Oui et que ça mettait une vie de le faire en base directe

Marc-AntoineA · 2025-04-08T09:51:55Z

docs/changelog.md

-## 🔖 0.3.0 (2025-XX-XX) - XXX
+## 🔖 0.3.0 (2025-09-04) - Mise à jour de données et ajout calque vulnérabilité à la chaleur
+
+### 🐛 fix: Données d'occupation des sols


C’est plutôt une amélioration de la partie données que réellement la correction de bugs. Maintenant, tu prends en compte les ponts.

(je trouve que c’est un peu dégradant pour ton travail de dire que c’est de la correction de bug ^^)

Marc-AntoineA · 2025-04-08T09:54:22Z

docs/changelog.md

 Les routes d'API étaient définies à la main, maintenant nous utilisant une API REST à l'aide de DjangoRestFramework

-&rarr; Ticket [#98](https://github.com/TelesCoop/iarbre/issues/98)
+&rarr; Commit [4bfc05d](https://github.com/TelesCoop/iarbre/commit/4bfc05d0ebea7523501d9f2a49eac4284ac7bae2)


Qu’est-ce que tu trouves de plus pour un commit par rapport à un lien vers une issue ou une MR ? 

L’avantage d’une MR ou d’une issue, c’est que ça a un numéro simple et tous les commentaires, les raisons détaillées du "pourquoi".

Ok ça me va aussi, j'ai juste changé par uniformité avaec le reste où l'on listait les commits mais je peux supporter une différence haha

Marc-AntoineA · 2025-04-08T09:55:21Z

docs/changelog.md

 # Journal de changements

-## 🔖 0.3.0 (2025-XX-XX) - XXX
+## 🔖 0.3.0 (2025-09-04) - Mise à jour de données et ajout calque vulnérabilité à la chaleur


tu as mis l'intégralité des devs réalisés depuis la v0.2.0 ?

Oui j'ai repris les merge sur dev depuis

Marc-AntoineA · 2025-04-08T09:57:23Z

front/cypress/components/MapScorePopup.cy.ts

Le score ne pourra plus être 0.81 ? Cette valeur avait justement pour objectif de vérifier que l’arrondi était bien réalisé.

Non du coup, je fais du seuillage dans le back pour direct renvoyer le score dans [0,2,4,6,8,10]

ludovicdmt added 2 commits April 1, 2025 15:35

data: add new sources

9dff4c2

data: update fibre

e2935a0

ludovicdmt linked an issue Apr 1, 2025 that may be closed by this pull request

ETQ utilisateur.ice je veux que les places PMR ne soient pas plantables #178

Closed

2 tasks

ludovicdmt added 2 commits April 2, 2025 09:07

Data: fix LCZ geom + simpler MVT generation

98e4010

fix

8ce5113

ludovicdmt changed the title ~~AJout nouveaux facteurs et MAJ données anciens~~ Ajout nouveaux facteurs et MAJ données anciens Apr 2, 2025

ludovicdmt added 6 commits April 2, 2025 16:57

data: force to to not possible to plant where one blocking factor

ee466d0

data: adjust color scale and text

e8a9328

fix: cypress tests

7d0c80c

fix

aa64ad9

tests(front): less MVT to be faster

4a5e6bc

Revert "tests(front): less MVT to be faster"

b2246dc

This reverts commit 4a5e6bc.

data: new thresholds for plantability tiles

c41fec0

ludovicdmt commented Apr 3, 2025

View reviewed changes

back/plantability/management/commands/c01_compute_plantability_indice.py Outdated Show resolved Hide resolved

ludovicdmt commented Apr 3, 2025

View reviewed changes

back/iarbre_data/models.py Outdated Show resolved Hide resolved

ludovicdmt commented Apr 3, 2025

View reviewed changes

chore: update deprecated function

4b194a9

Marc-AntoineA reviewed Apr 4, 2025

View reviewed changes

ludovicdmt and others added 9 commits April 4, 2025 10:26

chore(back): refacto utils

34f42d9

chore(back): comments

7fdf2f7

test(doc): add tests for data processing during import

7f051f5

doc(back): Update new data source

99722dc

Merge branch 'dev' into data-new-factors

5875162

fix(back, front): remove plantability thresholding in front and move …

58f4bab

…it in the back

test(front): use text from enum

5751804

doc(back): update mkdocs for utils

1e70bf0

chore: lint

ebd4992

ludovicdmt added 3 commits April 6, 2025 19:57

fix

2769f38

chore: move constants

9453bbf

changelog: ajout des changements

2d49058

Marc-AntoineA approved these changes Apr 8, 2025

View reviewed changes

ludovicdmt added 2 commits April 8, 2025 14:57

changelog update

67a7c27

Revert DRF changelog

edca9cf

ludovicdmt merged commit 07b0398 into dev Apr 8, 2025
9 checks passed

Conversation

ludovicdmt commented Apr 1, 2025 • edited Loading Uh oh! There was an error while loading. Please reload this page.

Uh oh!

Uh oh!

ludovicdmt commented Apr 3, 2025 • edited Loading Uh oh! There was an error while loading. Please reload this page.

Uh oh!

Uh oh!

Uh oh!

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

ludovicdmt Apr 4, 2025 • edited Loading Uh oh! There was an error while loading. Please reload this page.

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Marc-AntoineA left a comment

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Uh oh!

Choose a reason for hiding this comment

Uh oh!

ludovicdmt commented Apr 4, 2025

Uh oh!

Marc-AntoineA left a comment

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Uh oh!

Reviewers

Assignees

ludovicdmt commented Apr 1, 2025 •

edited

Loading

ludovicdmt commented Apr 3, 2025 •

edited

Loading

ludovicdmt Apr 4, 2025 •

edited

Loading