database:sinp-aura:import-donnees

Différences

Ci-dessous, les différences entre deux révisions de la page.

Lien vers cette vue comparative

Les deux révisions précédentes Révision précédente
Prochaine révision
Révision précédente
database:sinp-aura:import-donnees [2021/05/26 09:50] – [Import des données "cbnmc" au format d'échange dans GeoNature module Synthèse] jpmilcentdatabase:sinp-aura:import-donnees [2021/11/19 14:38] (Version actuelle) – [Configuration des permissions] jpmilcent
Ligne 94: Ligne 94:
  
  
-===== Configuration des permissions ===== +===== Création/Modification des utilisateurs/groupes par défaut (via UsersHub) ===== 
-  * Via UsersHub : +  * Ajout d'un utilisateur "général" permetant un accès à l'API GeoNature (CMS ORB AURA par exemple). 
-    * changer le mot de passe de l'utilisateur "admin"+    * Se connecter à UsersHub en tant qu'//admin// https://gestion.biodiversite-aura.fr/ 
-    * Modifier l'utilisateur "admin"+    * Cliquer sur le menu principal "Utilisateurs" et sur le bouton "Ajouter un utilisateur", remplir le formulaire ainsi : 
-      * Prénom Général +      * Cocher "Actif" 
-      * Email adminsys@biodiversite-aura.fr+      * Nom: GÉNÉRAL 
 +      * Prénom : Utilisateur 
 +      * Identifiant : user-general 
 +      * Organisme : ne rien sélectionner 
 +      * Mot de passe / Confirmation : voir Keepass. 
 +      * Groupe : Grp_utilisateurs 
 +      * Email : webmaster@biodiversite-aura.fr 
 +      * Commentaire : Utilisateur général permettant un accès à l'API GeoNature. 
 +      * Cliquer sur "Enregistrer" 
 +  * Modification de l'utilisateur "admin" 
 +    * Se connecter à UsersHub en tant qu'//admin// : https://gestion.biodiversite-aura.fr/ 
 +    * Cliquer sur le menu principal "Utilisateurs" et rechercher l'utilisateur dont l'identifiant est "admin"
 +    * Changer son mot de passe en cliquant sur le bouton dont l'icone est une clé. 
 +    * Puis cliquer sur son bouton de modification (icône de crayon) et modifié l'utilisateur "admin" ainsi 
 +      * Nom GÉNÉRAL 
 +      * Prénom Administrateur
       * Organisme : aucun       * Organisme : aucun
       * Groupes : laisser les 2 groupes afin d'y accéder dans l'interface "Permissions" de GeoNature. Lorsque le groupe "Grp_utilisateurs" aura des utilisateurs associés, il sera possible de mettre l'utilisateur "admin" seulement dans le groupe "Grp_admin"       * Groupes : laisser les 2 groupes afin d'y accéder dans l'interface "Permissions" de GeoNature. Lorsque le groupe "Grp_utilisateurs" aura des utilisateurs associés, il sera possible de mettre l'utilisateur "admin" seulement dans le groupe "Grp_admin"
-      * Remarques : Administrateur global. +      * Email : adminsys@biodiversite-aura.fr 
-    Supprimer les utilisateurs de démo ayant les identifiants : agent, partenaire, pierre.paul, validateur +      * Commentaire : Administrateur global. 
-    * Modifier le groupe "Grp_en_poste"+  Suppression des utilisateurs de démo ayant les identifiants : agent, partenaire, pierre.paul, validateur 
-      * Nom : Grp_utilisateurs +    * Les rechercher et cliquer ensuite sur le bouton de suppression (icone rouge de poubelle) 
-      * Description : Tous les utilisateurs inscrits à Bioviv'AURA Expert par défaut.+  * Modifier le groupe "Grp_en_poste"
 +    * Nom : Grp_utilisateurs 
 +    * Description : Tous les utilisateurs inscrits à Bioviv'AURA Expert par défaut. 
 +  * Ajouter le groupe "Grp_police_region"
 +    * Onglet "Groupe", cliquer sur "Ajouter un groupe"
 +      * Nom : Grp_police_region 
 +      * Description : Groupe d'utilisateur ayant des fonctions de police de l'environnement sur l'ensemble du territoire du SINP. 
 +      * Cliquer sur "Enregistrer" 
 +    * Onglet "Application", cliquer sur "Voir les membres" de "GeoNature" 
 +      * Cliquer sur "Ajouter un rôle pour l'application GeoNature" 
 +        * Rôle : Grp_police_region 
 +        * Profile : Lecteur 
 +        * Cliquer sur "Enregistrer" 
 +    * Onglet "Groupe", cliquer sur "Voir les membres" 
 +      * Ajouter les rôles (=utilisateurs) ayant des droits de police sur toute la région pour la Faune, Flore, Fonge... 
 +===== Configuration des permissions =====
   * Via GeoNature, module "Admin" > "Permissions", modifier les permissions par défaut comme suit :   * Via GeoNature, module "Admin" > "Permissions", modifier les permissions par défaut comme suit :
     * Pour le groupe "Grp_Utilisateurs"     * Pour le groupe "Grp_Utilisateurs"
Ligne 121: Ligne 151:
         * Lire les données => Précision : "**Exacte**"         * Lire les données => Précision : "**Exacte**"
         * Exporter les données => Précision : "**Exacte**"         * Exporter les données => Précision : "**Exacte**"
 +    * Pour le groupe "Grp_police_region"
 +      * Pour le module "GeoNature" :
 +        * Lire les données => Appartenance : "**De tout le monde**"
 +        * Exporter les données => Appartenance : "**De tout le monde**"
 +      * Pour le module "Métadonnées" :
 +        * Lire les données => Appartenance : "**De tout le monde**"
 +      * Pour le module "Synthese (= Observations)" :
 +        * <color /#fff200>**NOTES** : l'héritage ne semble pas fonctionner dans ce cas précis ! C'est surement dû à la présence des filtres Géographique et Taxonomique.</color> 
 +        * Objet "Observation privée" :
 +          * Lire les données => Appartenance : "**De tout le monde**", Géographique : "Auvergne-Rhône-Alpes", Taxonomique : Biota [349525] & Précision : "**Exacte**"
 +          * Exporter les données => Appartenance : "**De tout le monde**", Géographique : "Auvergne-Rhône-Alpes", Taxonomique : Biota [349525] & Précision : "**Exacte**"
 +        * Objet "Observation sensible" :
 +          * Lire les données => Appartenance : "**De tout le monde**", Géographique : "Auvergne-Rhône-Alpes", Taxonomique : Biota [349525] & Précision : "**Exacte**"
 +          * Exporter les données => Appartenance : "**De tout le monde**", Géographique : "Auvergne-Rhône-Alpes", Taxonomique : Biota [349525] & Précision : "**Exacte**"
  
  
Ligne 171: Ligne 215:
   * Au préalable, ajouter une authentification HTTP au site de l'Atlas, le temps des tests avant mise en prod.   * Au préalable, ajouter une authentification HTTP au site de l'Atlas, le temps des tests avant mise en prod.
   * Suivre la démarche décrite dans [[serveurs:installation:web-srv:geonature-atlas-mise-a-jour#procedure_de_mise_a_jour_des_donnees|la documentation de gestion des serveurs]]   * Suivre la démarche décrite dans [[serveurs:installation:web-srv:geonature-atlas-mise-a-jour#procedure_de_mise_a_jour_des_donnees|la documentation de gestion des serveurs]]
 +  * Il existe aussi le script [[https://github.com/cbn-alpin/sinp-aura-data/blob/main/db-atlas/data/sql/05_refresh_vm_data.sql| ~/data/db-atlas/data/sql/05_refresh_vm_data.sql]]. C'est l'équivalant de la fonction ''refresh_materialized_view_data()''. Mais il permet de suivre l'avancé du rafraîchissement. Pour l'utiliser : '' psql -h localhost -U geonatadmin -d gnatlas -f ~/data/db-atlas/data/sql/05_refresh_vm_data.sql ''
 +  * **Notes** : le paramètre '' idle_in_transaction_session_timeout=310000 '' présent dans le fichier '' /etc/postgresql/12/main/conf.d/01_optimizing.conf '' posait problème lors de la mise à jour des données de l'Atlas. Une des requêtes (liée à FDW) était annulée car dans l'état "//idle in transaction//" pendant plus de 5mn10s. Ce paramètre étant finalement inutile, il a été supprimé.
  
 +===== Corrections des données =====
 +  * Passage du code nomenclatures des données de Flavia de 5 à 2 : '' psql -h localhost -U geonatadmin -d geonature2db -v idSourceMin="18" -v idSourceMax="36" -f ~/data/db-geonature/data/sql/07_fix_flavia_data.sql ''
 +  * Création de la table contenant les observations hors territoire : '' psql -h localhost -U geonatadmin -d geonature2db -f ~/data/area-outside/data/sql/01_create_outside_all.sql ''
 +  * Export vers des fichiers CSV des données hors-territoire par id source :
 +    * CBNMC : '' sudo -u postgres -s psql -h localhost -d geonature2db -v idSourceMin="1" -v idSourceMax="1" -v csvFilePath="/tmp/cbnmc.csv" -f ~/data/area-outside/data/sql/02_export_outside_data.sql ''
 +    * CBNMA : '' sudo -u postgres -s psql -h localhost -d geonature2db -v idSourceMin="2" -v idSourceMax="2" -v csvFilePath="/tmp/cbna.csv" -f ~/data/area-outside/data/sql/02_export_outside_data.sql ''
 +    * FLAVIA : '' sudo -u postgres -s psql -h localhost -d geonature2db -v idSourceMin="18" -v idSourceMax="36" -v csvFilePath="/tmp/flavia.csv" -f ~/data/area-outside/data/sql/02_export_outside_data.sql ''
 +  * Vider les champs géometrie des observations hors territoire : '' psql -h localhost -U geonatadmin -d geonature2db -f ~/data/area-outside/data/sql/03_fix_outside_geom.sql ''
 +  * Export vers des fichiers CSV des données des CBNs dont la sensibilité a été corrigé :
 +    * CBNMC : '' sudo -u postgres -s psql -h localhost -d geonature2db -v csvFilePath="/tmp/fix_sensitivity_cbnmc.csv" -f ~/data/db-geonature/data/sql/08_export_cbn_sensitivity.sql ''
 +    * CBNA : '' sudo -u postgres -s psql -h localhost -d geonature2db -v csvFilePath="/tmp/fix_sensitivity_cbna.csv" -f ~/data/db-geonature/data/sql/08_export_cbn_sensitivity.sql ''
 +  * Correction du niveau de sensibilité pour les taxons (Flore) sensible de la région AURA : '' psql -h localhost -U geonatadmin -d geonature2db -f ~/data/db-geonature/data/sql/09_fix_cbn_sensitivity.sql ''
 +  * Activation des utilisateurs intégrés précédemment possédant un email et un identifiant afin qu'ils puissent demander un renouvellement de mot de passe : '' psql -h localhost -U geonatadmin -d geonature2db -f ~/data/db-geonature/data/sql/10_fix_users.sql ''
 +  * Suppression manuelle des entrées de ''utilisateurs.t_roles'' possédant des identifiants et/ou email en doublon. [[https://drive.google.com/file/d/1pGQAJsF_ujW6jfw0ZEJBIZsirjgEbxkO/view?usp=sharing|Récapitulatifs des modifications stockées dans un tableur]].
 +  * Activation des utilisateurs inactifs possédant un email afin qu'ils puissent demander un renouvellement de mot de passe : '' psql -h localhost -U geonatadmin -d geonature2db -f ~/data/db-geonature/data/sql/12_fix_inactive_users.sql ''
 +  * Fusion (puis suppression) des utilisateurs en doublon : '' cd ~/data/db-geonature/bin/ ; ./merge_users.sh -v ''. Utilise le script '' ~/data/db-geonature/data/sql/13_delete_duplicate_user.sql ''. Les anciens ''id_role'' supprimés et leurs remplaçants sont présents dans le fichier de config (''~/data/db-geonature/config/settings.default.ini'').
  • database/sinp-aura/import-donnees.1622022630.txt.gz
  • Dernière modification : 2021/05/26 09:50
  • de jpmilcent