Mobicoop scope

Notes de travail mercredi 29 janvier 2020

Création du script "v2_demo_ouestgo.sh" par analogie avec "v2_test_ouestgo.sh" qui charge les données dans Elastic.

Reproduction de l'action du 19 décembre avec le mot "demo".

Notes de travail jeudi 19 décembre 2019

Dans le dossier /usr/share/logstash/

• renommé v2_ouestgo en v2_dev_ouestgo
• créé par copie le dossier v2_test_ouestgo

Dans chacun des fichiers du répertoire

• positionné la base de donnée à lire à test_ouestgo_test
• Créé un batch qui exécute tous les "sudo bin/logstash -f ..."

Notes de travail dimanche 15 décembre 2019

Fait les diags de composant avec EA dans le modèle :

Testé les accès aux bases avec mysqlworkbench depuis le E6320.

Créé un fichier de connexion sur la base ouestgo_test

Voici un résumé de mes observations du week-end, dont le but était de récupérer les éléments du cahier des charges pour le recrutement d'un développeur ELK qui prendrait en charge les aspects que j'appelle industrialisation du projet, Iris gardant les aspects KPI au sens strict (formules de calcul)

La commande :

sudo bin/logstash -f test/TestV2dev_connect.config

semble fonctionner en ce sens qu'elle donne beaucoup de traces préfixées [INFO] ou [WARNING] mais jamais [ERROR]. Pour le reste je ne sais pas interpréter les messages.

J'ai fait des versions du fichier TestV2<xxx>connect.config notamment ouestgotest après être allé dans MysqlWorkbench et observé que cette base contient ~170k inscrits.

J'ai observé que la commande met plus de temps : rassurant.

J'ai pensé que cette commande lit et charge les données dans la base pointée dans le fichier et charges dans le dépôt Elastic les données nécessaires au calcul des KPI. <= Merci de confirmer.

Je vais ensuite dans le portail Kibana mais les résultats ne semblent pas avoir changé, en tout cas le nombre d'inscrit sort = 10.

Quelques questions :

• lorsqu'on lance "sudo bin/logstash -f test/TestV2<xxx>_connect.config" est-ce que cela ajoute ou est-ce que cela remplace les données dans le dépôt ELK.
• comment fera-t-on plus tard pour choisir le dépôt Elastic à relier au portail Kibana ? Ma compréhension est qu'un portail (ie une url) ne peut travailler que sur un seul dépôt et qu'il faudrait un autre portail pour travailler sur un autre dépôt. Ce sujet est relatif à la perspective du déploiement mov'ici où nous aurons besoin de deux back office différents, même si ce sont les même KPI.

Autres activités : j'ai relu l'export des US de Taïga, et observé qu'elles recouvrent bien ce que j'ai décrit dans mon email.