Différences

Ci-dessous, les différences entre deux révisions de la page.

--- database:procedure-apres-integration-data [2023/07/06 12:09] – [Ajouter les zones géographiques manquantes] jpmilcent
+++ database:procedure-apres-integration-data [2024/12/16 20:38] (Version actuelle) – [Mettre à jour les profils] jpmilcent
@@ Ligne 13: / Ligne 13: @@
     * Charge les zones géo concernées par le SINP :
       * les communes et départements : ''./02_load_admin_areas.sh geonature2db ''
+        * Si nécessaire, installer le paquet git-lgs : ''sudo apt install git-lfs''
+        * Installer LFS sur le dépôt : ''git lfs install''
+        * Télécharger les fichiers gérés avec LFS du dépôt : ''git lfs pull''
       * les mailles M1, M5 et M10 : ''./02_load_meshes.sh geonature2db ''
     * Insérer les zones géo manquantes :
@@ Ligne 40: / Ligne 43: @@
     * Le script ajoute les photos en tant que "secondaire" pour désigner celle avec le plus petit id_media (=~ au hasard) comme "principale" pour les nouveaux taxons, utiliser la requête suivante :
       * Pour PACA :
-        * Soit via le fichier ''set_first_img.sql'' (recommandé) : ''psql -h localhost -U geonatadmin -d geonature2db -f ./set_first_img.sql''
+        * Soit via le fichier ''set_first_img.sql'' (recommandé) sur serveur ''db-srv'' dans ''~/data/maintenance/data/sql/'' avec : ''psql -h localhost -U geonatadmin -d geonature2db -f ./set_first_img.sql''
         * Soit directement : ''psql -h localhost -U geonatadmin -d geonature2db -c "WITH first_media AS (SELECT MIN(id_media) AS first_id_media_founded, cd_ref FROM taxonomie.t_medias GROUP BY cd_ref) UPDATE taxonomie.t_medias AS tm SET id_type = 1 FROM first_media AS fm WHERE tm.id_media = fm.first_id_media_founded AND tm.cd_ref = fm.cd_ref ;"''
       * Pour AURA :
@@ Ligne 47: / Ligne 50: @@
     * Les vues matérialisées de l'Atlas nécessitent d'être mise à jour pour prendre en compte les nouveaux médias.
-==== Maintenance de la base de données ====
+==== 🗑️ Maintenance de la base de données ====
+  * **ATTENTION** : dans les versions récentes de Postgresql (v14+) cette manipulation n'est plus vraiment nécessaire. Le mécanisme automatique de nettoyage de la base semble efficace. Une "blocage" de la base de données a été constaté lors de son utilisation automatisé dans le cadre du SINP AURA.
   * Sur le serveur ''db-srv'' :
     * Vérifier la place restante : <code bash>df -h |grep /dev/sda1 ; du -hs /var/lib/postgresql/</code>
@@ Ligne 58: / Ligne 62: @@
       * se placer dans GeoNature et activer le venv : <code bash>cd ~/geonature ; source backend/venv/bin/activate </code>
       * lancer la mise à jour des vues matérialisées : <code bash>geonature profiles update</code>
+      * désactiver le venv : <code bash>deactivate</code>
       * Se détacher de la session Screen : ''Ctrl-a + Ctrl-d''
+==== Actualisation stats page accueil GeoNature Expert ====
+  * Se rendre sur la page d'accueil du GeoNature
+  * Appuyer sur la touche ''F12'' pour ouvir les outils développeurs du navigateur
+  * Aller sur l'onglet "Appli" et choisir l'URL du site sur l'entrée "Stockage local"
+  * Dans la liste des entrées disponibles supprimer ''homePage.stats''
+  * Actualiser la page d'accueil de GeoNature avec ''F5''
+  * Le chargement des nouvelles statistiques devrait se lancer
 ==== Mettre à jour l'Atlas ====
   * Sur le serveur ''web-srv'' :
     * Passer l'Atlas en maintenance : '' mv ~/www/maintenance/atlas/maintenance.disable ~/www/maintenance/atlas/maintenance.enable ''
-    * Synchroniser le dossier Atlas avec le serveur ''db-srv'' si nécessaire : <code bash>rsync -av -e "ssh -p <port-ssh-db-srv>" /home/geonat/www/atlas/ geonat@<ip-privée-db-srv>:/home/geonat/www/atlas/</code>
+    * Vérifier l'activation du message de maintenance sur le site de l'Atlas
   * Sur le serveur ''db-srv'' :
     * Lancer la mise à jour de l'Atlas :
       * activer une session Screen : <code bash>screen -S atlas-update</code>
-      * se placer dans le dossier de l'Atlas : <code bash>cd ~/www/atlas/ </code>
+      * se placer dans le dossier de maintenance : <code bash>cd ~/data/maintenance/data/sql/ </code>
-      * modifier le fichier ''settings.ini'' pour mettre à true le paramètre ''drop_app_db'' : <code bash>vi atlas/configuration/settings.ini </code>
+      * lancer la mise à jour des vues matérialisées de l'Atlas : <code bash> psql -h localhost -U geonatadmin -d gnatlas -f ./atlas_refresh.sql </code>
-      * Déconnecter toutes les connexions à la base ''gnatlas'' et lancer la réinstallation (en supprimant la base) : <code bash>sudo -u postgres psql -c "SELECT pg_terminate_backend(pg_stat_activity.pid) FROM pg_stat_activity WHERE pg_stat_activity.datname = 'gnatlas' AND pid <> pg_backend_pid();" && ./install_db.sh</code>
       * Se détacher de la session Screen : ''Ctrl-a + Ctrl-d''
   * Sur le serveur ''web-srv'' :
     * Supprimer la maintenance de l'Atlas : '' mv ~/www/maintenance/atlas/maintenance.enable ~/www/maintenance/atlas/maintenance.disable ''
+    * Vérifier la désactivation du message de maintenance sur le site de l'Atlas
+    * Relancer le service de l'Atlas : ''sudo systemctl restart geonature-atlas.service''
+==== Extraire les indicateurs liés à l'import ====
+  * Pour PACA :
+    * En local, se placer dans le dossier ''indicators/'' du dépôt ''sinp-<region>-data'' avec : <code bash> cd /<path>/sinp-paca-data/extracts/indicators</code>
+    * Lancer la commande : <code bash>
+cat ./observations_count_by_imports.sql | ssh geonat@db-paca-sinp 'export PGPASSWORD="<db-user-pwd>" ; psql -q -h localhost -p 5432 -U gnreader -d geonature2db' > ./$(date +'%F')_obs_by_imports.csv
+</code>