[Plugin Tiers] [Sujet principal] Data Transfert by fensoft

[Bello65]

Ok merci, je test et je verrai.
Comme c'est long (et oui connexion de 1mb) j'aurai le résultat demain
merci pour le plugin, c'est génial

[benchagot]

Fensoft, merci beaucoup d'avoir repris ce plugin.

Je l'ai installé, paramétré et testé sur une dropbox pour les fichiers backup de jeedom mais les fichiers ne semblent pas transférés bien qu'il n'y ai pas d'erreur dans les fichiers log :

[2017-10-13 07:35:31][INFO] : upload /var/www/html/backup/backup-SmartBoard-3.1.7-2017-10-13-02h29.tar.gz to /backup-SmartBoard-3.1.7-2017-10-13-02h29.tar.gz complete !
[2017-10-13 07:35:31][DEBUG] : progress Dropbox: 100

Le fichier backup n'existe pas dans le répertoire dropbox de l'appli !

Si je crée un fichier dummy TEST_TEST dans le répertoire /var/www/html/backup. Et lance la commande, ce fichier là est lui transféré et apparait dans mon dropbox !!!

[2017-10-13 07:38:26][INFO] : uploading /var/www/html/backup/TEST_TEST to /TEST_TEST
[2017-10-13 07:38:26][DEBUG] : mkdir /
[2017-10-13 07:38:28][INFO] : upload /var/www/html/backup/TEST_TEST to /TEST_TEST complete !

Quelqu'un a une explication, aurais-je loupé un truc (il est tôt aussi et j'ai pas encore bu mon café !!!) ?

BC

[fensoft]

peut être un bug avec le progress. tu as attendu suffisamment longtemps ?

[benchagot]

oui assez (> 12h). Et c'est reproductible dans le temps : création d'arborescence si les champs du plugins sont modifiés mais jamais de fichier backup ...

BC

[fensoft]

ah j'avais pas vu le "upload complete", donc c'est pas un pb de progress. dropbox pleine sinon ?

[benchagot]

Non, dropbox plutôt vide.

Je n'ai pas mis de filtre sur les fichiers, pas de nombre max de fichiers à upload. J'ai supprimé et recréé l'équipement, idem pour le plugin.

Je sèche.

BC

[fensoft]

en attendant que je rajoute du log de debug, tu peux tester avec rclone ?

[benchagot]

Pas dans l’immédiat : je ne sais pas comment faire la config de rclone (je n'ai pas de windows). Je verrai ce soir sur un vieux portable xp.

[fensoft]

tu est sur mac ? je peux ajouter un .app aussi

[benchagot]

oui je suis sous mac, si tu as un app pour la config, ce serait super : )

[fensoft]

j'ai pas mais je suis sous mac aussi, donc je vais l'ajouter aussi

[patamacour]

Bonjour,
je me suis un peu avancé en disant que cela fonctionnait..
Aucun fichier ne vient s'enregistrer dans ma dropbox.
Ci-joint, Logs et page de config pour voir si j'ai loupé quelque chose!

data config.JPG (94.49 Kio) Consulté 1101 fois

Code : Tout sélectionner

[2017-10-11 04:00:13][DEBUG] : progress BackupDropboxJeedom: 0
[2017-10-11 04:00:13][INFO] : uploading /var/www/html/backup/backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz to /backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz
[2017-10-11 04:00:13][DEBUG] : mkdir /
[2017-10-11 04:00:22][DEBUG] : progress BackupDropboxJeedom: 5
[2017-10-11 04:00:23][INFO] : upload /var/www/html/backup/backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz to /backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz complete !
[2017-10-11 04:00:23][DEBUG] : progress BackupDropboxJeedom: 100
[2017-10-11 04:00:23][INFO] : removing old files except 2 in
[2017-10-11 04:00:24][DEBUG] : list {"path":"backup-Cambo-3.1.7-2017-10-07-07h52.tar.gz","type":"file","size":133937711,"mimetype":"application\/x-gzip","timestamp":1507429324,"dirname":"","basename":"backup-Cambo-3.1.7-2017-10-07-07h52.tar.gz","extension":"gz","filename":"backup-Cambo-3.1.7-2017-10-07-07h52.tar"}
[2017-10-11 04:00:24][DEBUG] : list {"path":"backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz","type":"file","size":134267451,"mimetype":"application\/x-gzip","timestamp":1507657712,"dirname":"","basename":"backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz","extension":"gz","filename":"backup-Cambo-3.1.7-2017-10-10-07h52.tar"}
[2017-10-11 04:00:24][DEBUG] : list [{"name":"backup-Cambo-3.1.7-2017-10-07-07h52.tar.gz","alias":"backup-Cambo-3.1.7-2017-10-07-07h52.tar.gz","time":1507429324},{"name":"backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz","alias":"backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz","time":1507657712}]
[2017-10-12 04:00:03][DEBUG] : progress BackupDropboxJeedom: 0
[2017-10-12 04:00:04][INFO] : uploading /var/www/html/backup/backup-Cambo-3.1.7-2017-10-11-07h52.tar.gz to /backup-Cambo-3.1.7-2017-10-11-07h52.tar.gz
[2017-10-12 04:00:04][DEBUG] : mkdir /
[2017-10-12 04:00:07][DEBUG] : progress BackupDropboxJeedom: 5
[2017-10-12 04:00:08][INFO] : upload /var/www/html/backup/backup-Cambo-3.1.7-2017-10-11-07h52.tar.gz to /backup-Cambo-3.1.7-2017-10-11-07h52.tar.gz complete !
[2017-10-12 04:00:08][DEBUG] : progress BackupDropboxJeedom: 100
[2017-10-12 04:00:09][INFO] : removing old files except 2 in
[2017-10-12 04:00:10][DEBUG] : list []

Une idée ?

[benchagot]

Sinon fensoft si tu as un exemple de script dropbox pour rclone, je suis preneur.
J'ai essayé de fourrer le fichier config de rclone sous mac mais cela ne marche pas.

[benchagot]

Patamacour, peux-tu créer un fichier dans le répertoire /var/www/html/backup/ pour voir si comme pour moi ce fichier est envoyé mais pas les .tar.gz ?

BC

Bonjour,
je me suis un peu avancé en disant que cela fonctionnait..
Aucun fichier ne vient s'enregistrer dans ma dropbox.
Ci-joint, Logs et page de config pour voir si j'ai loupé quelque chose!


data config.JPG

Code : Tout sélectionner

[2017-10-11 04:00:13][DEBUG] : progress BackupDropboxJeedom: 0
[2017-10-11 04:00:13][INFO] : uploading /var/www/html/backup/backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz to /backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz
[2017-10-11 04:00:13][DEBUG] : mkdir /
[2017-10-11 04:00:22][DEBUG] : progress BackupDropboxJeedom: 5
[2017-10-11 04:00:23][INFO] : upload /var/www/html/backup/backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz to /backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz complete !
[2017-10-11 04:00:23][DEBUG] : progress BackupDropboxJeedom: 100
[2017-10-11 04:00:23][INFO] : removing old files except 2 in
[2017-10-11 04:00:24][DEBUG] : list {"path":"backup-Cambo-3.1.7-2017-10-07-07h52.tar.gz","type":"file","size":133937711,"mimetype":"application\/x-gzip","timestamp":1507429324,"dirname":"","basename":"backup-Cambo-3.1.7-2017-10-07-07h52.tar.gz","extension":"gz","filename":"backup-Cambo-3.1.7-2017-10-07-07h52.tar"}
[2017-10-11 04:00:24][DEBUG] : list {"path":"backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz","type":"file","size":134267451,"mimetype":"application\/x-gzip","timestamp":1507657712,"dirname":"","basename":"backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz","extension":"gz","filename":"backup-Cambo-3.1.7-2017-10-10-07h52.tar"}
[2017-10-11 04:00:24][DEBUG] : list [{"name":"backup-Cambo-3.1.7-2017-10-07-07h52.tar.gz","alias":"backup-Cambo-3.1.7-2017-10-07-07h52.tar.gz","time":1507429324},{"name":"backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz","alias":"backup-Cambo-3.1.7-2017-10-10-07h52.tar.gz","time":1507657712}]
[2017-10-12 04:00:03][DEBUG] : progress BackupDropboxJeedom: 0
[2017-10-12 04:00:04][INFO] : uploading /var/www/html/backup/backup-Cambo-3.1.7-2017-10-11-07h52.tar.gz to /backup-Cambo-3.1.7-2017-10-11-07h52.tar.gz
[2017-10-12 04:00:04][DEBUG] : mkdir /
[2017-10-12 04:00:07][DEBUG] : progress BackupDropboxJeedom: 5
[2017-10-12 04:00:08][INFO] : upload /var/www/html/backup/backup-Cambo-3.1.7-2017-10-11-07h52.tar.gz to /backup-Cambo-3.1.7-2017-10-11-07h52.tar.gz complete !
[2017-10-12 04:00:08][DEBUG] : progress BackupDropboxJeedom: 100
[2017-10-12 04:00:09][INFO] : removing old files except 2 in
[2017-10-12 04:00:10][DEBUG] : list []

Une idée ?

[patamacour]

Aie.. je n'ai pas de connection ssh à distance! Je vais essayer ce soir!

[fensoft]

mettez un dossier en cible pour voir ? genre /Backups

[fensoft]

sur dropbox, vous allez bien regarder dans le dossier Applications/nomdelappjeedom ?

[fensoft]

update:
- ajout d'une option pour activer/désactiver la progression précise (= progression durant le transfert) forcé à 0 sur dropbox pour le moment
- ajout d autoconf rclone pour mac
- correctif avec la target (manque parfois un /)
- nettoyage des logs

[benchagot]

Finalement, le fichier de config rclone Dropbox est le même que celui créé sur mac mais cela ne marche pas, quand je teste j'ai ça :
The stream or file "/var/www/html/core/class/../../log/" could not be opened: failed to open stream: Is a directory


Le répertoire "Backups" (si spécifié dans le champ) est bien créé mais les fichier tar.gz n'y sont pas ; juste mon fichier de test vide ...

BC

[fensoft]

idem ici, je corrige