Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Revoir et finaliser le floutage SINP #571

Open
babastienne opened this issue Sep 12, 2024 · 8 comments
Open

Revoir et finaliser le floutage SINP #571

babastienne opened this issue Sep 12, 2024 · 8 comments
Assignees

Comments

@babastienne
Copy link

Amandine avait développé un premier truc qui est intégré dans le code depuis pas mal de versions en faisant des centroides. Donc pas vraiment basé sur le standard SINP.

Puis Natural Solutions S a développé un vrai truc de floutage SINP des observations. Théo a ensuite reprise développement et celui-ci était basé sur la 1.4. Entre temps d'autres ont bossé sur une version 1.5 mais sans la sensibilité qui n'était pas abouti/mergé.
On avait discuté ça ici notamment : #117 (comment)
Depuis ça a divergé et d'autres ont fait des PR sur le sujet avec d'autres approches. Ici par exemple il me semble : #390


Complément BPO

Pour des raisons réglementaires, il est important de pouvoir mettre en place un floutage des observations à l’échelle du territoire dans un souci de protection des espèces. Il s’agit là d’un besoin déjà exprimé à plusieurs reprises par la communauté GeoNature mais à ce jour non implémenté, qu’il conviendra donc de mettre en œuvre.

Toutefois, pour implémenter cette demande cela nécessite de trancher fonctionnellement et techniquement plusieurs points, en particulier ;

  • En termes de données : comment calculer le niveau de floutage ? GeoNature expose plus de données que la simple correspondance espèce ↔ taille maille et le degré de sophistication du floutage n’a pas été décidé par la communauté ;
  • Faut-il permettre le floutage au niveau de l’observation ? Cela reviendrait à permettre plusieurs niveaux de floutage au sein d’une même espèce. Cet élément ajoute une complexité dans la conception mais une plus grande finesse d’affichage ;
  • Cela soulève également plusieurs questions non tranchées au niveau de l’affichage dans GeoNature-Atlas, en particulier sur comment afficher une carte avec plusieurs espèces (par exemple les dernières observations) et donc potentiellement plusieurs niveaux de maille simultanés, l’outil n’étant actuellement pas prévu pour cet usage. Des pistes ont été abordées dans la communauté mais pour le moment aucun axe n’a été avancé pour permettre de conjuguer les observations sous forme de point et de maille sur une même carte ;

Ces questions ne concernent pas directement l’OBM du fait de ses spécificités (correspondante simple définie par l’arrêté en lien de l’exigence, cartographie globale en carte de chaleur plutôt que dernières observations), cependant la conception doit être terminée globalement en tenant compte de GeoNature pour pouvoir faire accepter les développements complémentaires sur le dépôt de GeoNature-Atlas.

De plus, il faudra tenir compte de la spécificité du module d’installation de GeoNature-Atlas pour Nantes Métropole qui n’utilise pas le reste de la solution GeoNature et ne bénéficie donc pas d’un certain nombre de modules associés.

En l’état, la solution qui semble le plus faire l’unanimité auprès de la communauté est celle implémentée dans la pull request ouverte suivante : GeoNature-Atlas#441. Après échange avec le Parc National des Écrins nous avons eu confirmation que ce travail devait être repris et approfondi en particulier pour proposer une méthodologie adaptée pour les installations sans GeoNature.

Nous proposons donc, en partant de cette PR qui implémente un fonctionnement correspondant à l’exigence de Nantes Métropole (limitation de l’affichage de certaines espèces à une maille 10x10 km ou interdiction de diffusion), d’effectuer des améliorations en accord avec l’architecture souhaitée par le Parc National des Écrins sur les axes suivants :

  • Reprise du code existant, consolidation et ajout de tests unitaires ;
  • Adaptation dans l’interface du comportement d’affichage, optimisations graphiques sur la cartographie ;
  • Reprise de la procédure d’installation et des scripts associés, mise en place d’une migration de données ;
  • Ajout d’une procédure détaillée pour le mode d’installation sans GeoNature, compatible avec les vues exploitées par GeoNature pour ne pas avoir à maintenir deux mécanismes différents en parallèle.

Cette exigence fait partie des éléments du cahier des charges représentant la plus important complexité d’implémentation. Il conviendra donc de valider précisément les besoins associés ainsi que les implications fonctionnelles et techniques avant de mettre en place l’architecture logicielle définitive à valider avec le Parc National des Écrins, mainteneur du projet. Plusieurs échanges seront mis en place pour traiter ce point.

@babastienne babastienne converted this from a draft issue Sep 12, 2024
@pchapuis-nantesmetropole

Pour info et à titre d'exemple, l'arrêté préfectoral des Pays de la Loire : https://www.pays-de-la-loire.developpement-durable.gouv.fr/resultats-et-arrete-prefectoral-regional-a5221.html

@babastienne
Copy link
Author

Sur le floutage :

  • Il existe une liste nationale d'espèce protégée et pour chaque espèce il y a un caractère de diffusion
  • A l'échelle régionale ces règles peuvent être "surchargées"
  • Parfois la complexité va au-delà de simplement l'espèce, mais peut être lié à la temporalité (date de l'observation, est-ce qu'il s'agit d'une observation de l'espèce ou de l'habitat, etc.)
  • Ce travail de floutage est déjà bien réalisé dans GeoNature

Côté GNA :

  • Travail réalisé partiellement, à reprendre. Il faut comprendre ce qui a été fait et le finaliser. Réimplémentation de la sensibilité #441
  • La problématique est surtout dans la représentation cartographique. Par défaut il faut pouvoir afficher des mailles de 500m mais dans le cas de certaines réglementations de précision supérieures il faut que la maille puisse être adaptée (pour devenir par exemple 10km).
  • Sinon l'autre question à poser c'est est-ce qu'on représente tout simplement les données qui sont à des mailles 10x10 ?
  • Actuellement c'est GNA qui transforme les points en maille. Si on a des observations communales on prend le centroid de la commune et on applique une maille à l'emplacement du centroid. GNA sait donc traiter des données précises pour les représenter à une échelle de maille.
  • En revanche GNA ne sais pas représenter des données déjà imprécises.

Voir aussi #117

A faire pour le moment côté MC : analyser le code déjà réalisé sur la PR ouverte et les tickets existants. Puis faire une réunion technique dédiée avec PNE/PNC/NM/MC.

@jpm-cbna
Copy link
Contributor

jpm-cbna commented Sep 26, 2024

Je confirme qu'il faut repartir de la PR #441 qui a intégré une partie des développements de ma PR390. La prise en compte du floutage en fonction du niveau de diffusion de la PR #390 n'est plus nécessaire car il ne s'applique plus dans le cadre du SINP.

Par contre, il y a de nouvelles nomenclatures pour la sensibilité à prendre en compte:

cd_nomenclature mnemonique label_default definition_default
2.1 M1 1 km² 1 km² soit 100 hectares soit Maille 1 km.
2.2 M2 4 km² 4 km² soit 400 hectares soit Maille 2 km.
2.3 M5 25 km² 25 km² soit 2500 hectares soit Maille 5 km.
2.4 M10 100 km² 100 km² soit 10 000 hectares soit Maille 10 km.
2.5 M20 400 km² 400 km² soit 40 000 hectares soit Maille 20 km.
2.6 M50 2500 km² 2500 km² soit 250 000 hectares soit Maille 50 km.
2.7 M70 5000 km² 5000 km² soit 500 000 hectares.
2.8 M0 Aucune diffusion Aucune diffusion.

J'ai adapté ma PR #390 pour supprimer la vue syntheseff en générant directement la VM vm_observations à l'image de la PR #441 tout en tenant compte des nouvelles nomenclatures sensibilité. Voir mon commentaire dans la PR#441 pour accéder au travail réalisé.

Les problèmes que je rencontre avec la mise en place de ces nouvelles nomenclatures sont:

  • l'augmentation très importante du nombre de lignes dans la table cor_area_synthese (à cause des nouvelles mailles) qui ralentie la génération de la VM correspondante dans l'Atlas (1h pour 29 millions de données).
  • le temps de génération de la VM vm_observations qui est également très long. L'intersection nécessaire pour calculer le code INSEE de la commune de chaque observation est une des sources de ralentissement.

@babastienne
Copy link
Author

@camillemonchicourt sur la carte qui affiche les observations floutées, est-ce pertinent de conserver les boutons de couche en checkbox (voir capture) ou faut-il passer sur des radio-boutons pour éviter de superposer des couches qui n'ont pas de sens d'être affichées les unes sur les autres ?

Image

Je suis plutôt d'avis d'avoir des radio-buttons. Tu as un avis ?

@camillemonchicourt
Copy link
Member

Pour moi il faut clairement pouvoir afficher toutes les données ensemble, en parallèle et qu'elles soient toutes actives par défaut.

@juggler31
Copy link

PR : #586

@babastienne babastienne moved this from Doing to In Review / Qualif in OBM Nantes Dec 9, 2024
@bruhnild
Copy link

Page d'accueil

  • Intégrer les mailles 500 dans le sélecteur de couches
Capture d'écran

Image

  • Depuis la liste des espèces, au clic, la date de dernière observation dans la pop-up est undefined
Capture d'écran

Image

NB : cette information est correctement affichée sur la page espèce

Image

  • Certaines communes comme "Château-Thébaud" apparaissent sur la carte de la page territoire mais pas sur celle de la page d'accueil
Capture d'écran

Image

Image

Page espèce

RAS

Page territoire

RAS

Nice to have

Général

  • Rendre le sélecteur de couches dynamique pour n'afficher que les couches pour lesquelles il y a des données

Page d'accueil

  • Modifier les classes de la discrétisation pour les mailles 500 de la carte générale car la graduation de couleurs n'est pas suffisamment contrastée
Capture d'écran

Image

  • Depuis la liste des espèces, au clic, la ligne sélectionnée ne reste pas en surbrillance. Il n'est donc pas possible de savoir quelle est l'espèce affichée sur la carte
Capture d'écran

Image

  • Une fois une espèce sélectionnée dans la liste, il n'est plus possible de revenir à la carte générale avec toutes les mailles affichées sauf si l'on réactualise la page (F5). Cela peut etre confusant pour les utilisateurs. Il faudrait réfléchir à un moyen de revenir à l'état initial de la carte générale.
Capture d'écran

Image

Page territoire

  • La valeur d'observation positionnée en haut du composant cartographique devrait etre calculée et pas définie dans la config en dur
Capture d'écran

Image

@pchapuis-nantesmetropole

A noter que, pour la légende du nombre d'observations, il ne serait pas intéressant d'opter pour une classification logarithmique quand on atteint des volumes trop importants:
image

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
Status: In Review / Qualif
Development

No branches or pull requests

6 participants