Les IPEs nous sont fournies par Axione à l'aide d'un serveur FTP. Le nom du fichier reflète le type du fichier ainsi que la date des données.
L'acquisition des données est assez rapide, ~5 minutes pour toutes les IPE. Je ne pense pas qu'il soit necessaire de nous embêter avec les versions delta. Nous allons tout recréer tous les soir.
Il faudrait crée un script que l'on va lancer toutes les nuit qui va:
Vérifier s'il n'y aurait pas de nouvelles IPEs sur le partage FTP.
Si oui, télécharger toutes les IPEs dans un dossier temporaire.
Lancer ./data-ingest/ingest sur les données afin de créer la nouvelle base de données.
Copier la nouvelle base de données SQLite a la place de la précédente.
Il faudra bien prendre gare a ce que le script nous notifie d'une façon ou d'une autre (IRC? Email?) en cas d'erreur.
Les IPEs nous sont fournies par Axione à l'aide d'un serveur FTP. Le nom du fichier reflète le type du fichier ainsi que la date des données.
L'acquisition des données est assez rapide, ~5 minutes pour **toutes** les IPE. Je ne pense pas qu'il soit necessaire de nous embêter avec les versions delta. Nous allons tout recréer tous les soir.
Il faudrait crée un script que l'on va lancer toutes les nuit qui va:
1. Vérifier s'il n'y aurait pas de nouvelles IPEs sur le partage FTP.
2. Si oui, télécharger toutes les IPEs dans un dossier temporaire.
3. Lancer `./data-ingest/ingest` sur les données afin de créer la nouvelle base de données.
4. Copier la nouvelle base de données SQLite a la place de la précédente.
Il faudra bien prendre gare a ce que le script nous notifie d'une façon ou d'une autre (IRC? Email?) en cas d'erreur.
il y a sur gaia:/srv/ftth_ipe_data/IPE-daily-ftp.sh et le cron qui va avec: /etc/cron.d/IPE-daily-ftp
il faut renseigner la variable baseDir et cela devrait être bon
Coucou,
il y a sur gaia:/srv/ftth_ipe_data/IPE-daily-ftp.sh et le cron qui va avec: /etc/cron.d/IPE-daily-ftp
il faut renseigner la variable baseDir et cela devrait être bon
Les IPEs nous sont fournies par Axione à l'aide d'un serveur FTP. Le nom du fichier reflète le type du fichier ainsi que la date des données.
L'acquisition des données est assez rapide, ~5 minutes pour toutes les IPE. Je ne pense pas qu'il soit necessaire de nous embêter avec les versions delta. Nous allons tout recréer tous les soir.
Il faudrait crée un script que l'on va lancer toutes les nuit qui va:
./data-ingest/ingestsur les données afin de créer la nouvelle base de données.Il faudra bien prendre gare a ce que le script nous notifie d'une façon ou d'une autre (IRC? Email?) en cas d'erreur.
Automatiser acquisition des IPEs.to Automatiser acquisition des IPEs 1 year agoCoucou,
il y a sur gaia:/srv/ftth_ipe_data/IPE-daily-ftp.sh et le cron qui va avec: /etc/cron.d/IPE-daily-ftp
il faut renseigner la variable baseDir et cela devrait être bon