Lenteur après correction history.dat

Une question, un bug ?
Répondre
elgar
Nouveau membre
Messages : 7
Inscription : dim. août 23, 2009 3:40 pm

Lenteur après correction history.dat

Message par elgar »

Bonjour à tous,

Depuis 3 ans j'ai installé - en amateur - une WS2300 et je commence à avoir un historique important (un peu plus de 100.000 enregistrements).
Ma station tourne avec haevy weather et Wswin32 pour certaines statistiques. J'ai installé ce WE Graphweather qui me semble un bon programme. J'ai défini quelques graphes pour les températures, précipitations, pression aussi bien pour ce jour, ce mois et cette année. Pas de soucis, quelques ajustements suite à la découverte du produit.

Ayant quelques données farfelues au niveau de la précipitation, je profite du module éditeur de correction du fichier History pour mettre à jour les données correctes. Après correction je procède à la regénération complète de la base de données ce qui prend pas mal de temps (1/4h environ) comme la première fois. Je relance ensuite Graphweather et he constate alors qu'il met beaucoup de temps pour restituer les onglets.

Je viens de faire un essai pour la feuille de style tab-rainfall :
- pour ce jour : 184 ms
- pour mois en cours : 14.118 ms
- pour année en cours : 1.337.880 ms !!!! là c'est très très long !

J'ai essayé de recharger la base, mais cela donne le même résultat.

Avez-vous une idée de ce phénomène ?
Grand merci d'avance,

Vivien

http://www.ombrages.be/meteo
Avatar de l’utilisateur
TiToine
Site Admin
Messages : 3356
Inscription : lun. mars 20, 2006 11:16 am
Localisation : Montréal
Contact :

Re: Lenteur après correction history.dat

Message par TiToine »

Il n'y a rien a faire...le problème c'est qu'il y a trop d'enregistrements pour une année, et le code n'est pas optimisé par endroit.
Ca devrait être mieux dans une future version 3.
elgar
Nouveau membre
Messages : 7
Inscription : dim. août 23, 2009 3:40 pm

Re: Lenteur après correction history.dat

Message par elgar »

Merci !
En attendant une prochaine version , je ne prends plus les statistiques annuelles.

Vivien
Avatar de l’utilisateur
MAGNUS
Membre
Messages : 992
Inscription : dim. mars 26, 2006 4:44 pm
Localisation : VIDAUBAN (83) FRANCE
Contact :

Re: Lenteur après correction history.dat

Message par MAGNUS »

Bonjour,
A titre info, questions :
1°- Plus de 100 000 enregistrements sur 1 ans ou depuis 3 ans ?
2°- 1 seul fichier history.dat depuis 2003 ou 1 par an ?
3°- Intervalles des enregistrements ?

Pour ma part je possèdes les enregistrements depuis 4 ans et pas de Pb, il est vrais que les intervalles sont de 60 mn et que j'ai un fichier History.dat par année

Cordialement.
Station WMR 200 avec XNet_meteo V 2014-10-29a Logiciels:Graphweather V 3.0.16, Noaa Template2, Windows 7
Mon abri météo ici :http://www.vardecouverte.fr/sta%20bc2008.htm
Site Web : http://www.vardecouverte.fr
Image
elgar
Nouveau membre
Messages : 7
Inscription : dim. août 23, 2009 3:40 pm

Re: Lenteur après correction history.dat

Message par elgar »

Quelques précisions :
- 1 seul fichier history pour les 3 années (depuis juillet 2006). Donc 100.000 enregistrement au total. Je retiens l'idée d'un history par an.
- Depuis une bonne année, l'intervalle est de 10 min.

Ce qui m'étonne, c'est qu'avant la modification des précipitations, le calcul annuel était tout à fait acceptable.
Merci de te préoccuper de mes soucis.

Vivien
Avatar de l’utilisateur
MAGNUS
Membre
Messages : 992
Inscription : dim. mars 26, 2006 4:44 pm
Localisation : VIDAUBAN (83) FRANCE
Contact :

Re: Lenteur après correction history.dat

Message par MAGNUS »

Bonjour,
Peut-être que la modification de la pluviométrie a crée un trou dans la chronologie des dates. A vérifier.
D'autre part, si ma mémoire est bonne, le logiciel livré avec Graphweather (eWS2300.exe) permet de couper les fichiers history.dat en en recréant plusieurs.
Mais là...Il fraudais faire appel à Antoine pour la manip exact.
Cordialement.
Station WMR 200 avec XNet_meteo V 2014-10-29a Logiciels:Graphweather V 3.0.16, Noaa Template2, Windows 7
Mon abri météo ici :http://www.vardecouverte.fr/sta%20bc2008.htm
Site Web : http://www.vardecouverte.fr
Image
elgar
Nouveau membre
Messages : 7
Inscription : dim. août 23, 2009 3:40 pm

Re: Lenteur après correction history.dat

Message par elgar »

Bonjour,

Meilleures nouvelles !

Je pense avoir trouver une piste et cela va nettement mieux ! En effet, ddans GraphWeather / Outils / préférences / sources de données j'avais renseigné C:\heavyWeather\*.* que je viens de corriger en C:\heavyWeather\history.dat. J'ai rechargé la base de données et depuis lors tous les temps de génération des différents graphiques se sont nettement améliorés. En effet dans mon répertoire C:\heavyWeather, j'avais plusieurs versions de mon fichier history.dat dont le nom commence par history. Antoine pourrais-tu nous dire si en renseignant C:\heavyWeather\*.* , quels sont les fichiers que le programme va rechercher ?

En tout cas, merci à tous pour votre aide.

Vivien

NB : Est-il préférable de scinder l'history.dat par année ?
Avatar de l’utilisateur
MAGNUS
Membre
Messages : 992
Inscription : dim. mars 26, 2006 4:44 pm
Localisation : VIDAUBAN (83) FRANCE
Contact :

Re: Lenteur après correction history.dat

Message par MAGNUS »

Pour ma part, j'indique à Graphweather tout mes fichiers History dans l'onglet sources de données.
Exemple:
C:\HeavyWeather\history2006.dat
C:\HeavyWeather\history2007.dat
C:\HeavyWeather\history2008.dat
C:\HeavyWeather\history2009.dat

et cela fonctionne parfaitement et surtout rapidement.
Cordialement.
Station WMR 200 avec XNet_meteo V 2014-10-29a Logiciels:Graphweather V 3.0.16, Noaa Template2, Windows 7
Mon abri météo ici :http://www.vardecouverte.fr/sta%20bc2008.htm
Site Web : http://www.vardecouverte.fr
Image
Avatar de l’utilisateur
TiToine
Site Admin
Messages : 3356
Inscription : lun. mars 20, 2006 11:16 am
Localisation : Montréal
Contact :

Re: Lenteur après correction history.dat

Message par TiToine »

elgar a écrit : Antoine pourrais-tu nous dire si en renseignant C:\heavyWeather\*.* , quels sont les fichiers que le programme va rechercher ?
Il va chercher tout ce qu'il trouve compatible avec le format ws2300...donc tous tes historiques de backup par exemple ou pire des fichiers exe, doc, etc. "compatibles" en apparence.
elgar
Nouveau membre
Messages : 7
Inscription : dim. août 23, 2009 3:40 pm

[Resolu] Re: Lenteur après correction history.dat

Message par elgar »

Merci Antoine pour ces précisions et donc c'était bien la source de mes ennuis.
Je marque donc le post comme résolu.
Bonne journée avec beau soleil ce matin sur Bruxelles.

Vivien
TIGRE21
Membre
Messages : 39
Inscription : mar. déc. 02, 2008 10:35 pm
Localisation : Bourgogne

Re: Lenteur après correction history.dat

Message par TIGRE21 »

Bonsoir,

Je poste dans ce post pour ne pas en crée un autre car c'est un problème avec l'editeur.

Voilà j'ai une ws3650, et donc j'utilise parfois l'editeur ws3600 pour corriger quelques valeurs farfelues.

Seulement voilà il y a quelques jours, sans reflechir et sans faire attention je crois que j'ai modifier mon history.dat avec l'editeur ws2300. Du coup cela à bousiller mon fichier history et je ne peux plus m'en servir, même pas l'ouvrir pour l'éditer de nouveau. Y'a t'il une solution pour que je récuperer toutes les données qui sont dans le fichier? :cry:
Vantage Pro II + Graphweather v3, Win XP, le tout basé à Cerisiers (89).
Avatar de l’utilisateur
MAGNUS
Membre
Messages : 992
Inscription : dim. mars 26, 2006 4:44 pm
Localisation : VIDAUBAN (83) FRANCE
Contact :

Re: Lenteur après correction history.dat

Message par MAGNUS »

TIGRE21 a écrit :Bonsoir,

Je poste dans ce post pour ne pas en crée un autre car c'est un problème avec l'editeur.

Voilà j'ai une ws3650, et donc j'utilise parfois l'editeur ws3600 pour corriger quelques valeurs farfelues.

Seulement voilà il y a quelques jours, sans reflechir et sans faire attention je crois que j'ai modifier mon history.dat avec l'editeur ws2300. Du coup cela à bousiller mon fichier history et je ne peux plus m'en servir, même pas l'ouvrir pour l'éditer de nouveau. Y'a t'il une solution pour que je récuperer toutes les données qui sont dans le fichier? :cry:
Bonjour,
Si vous avez utilisé y a quelque jours ws3600, pour corriger votre fichier history.dat, il a crée automatiquemenr un fichier de sauvegarde qui doit porter une double extension. Exemple: history.dat.bak

1°-Faites une copie de ce fichier en faisant un copier-coller dans la même page, vous obtiendrez alors un fichier nommé : copie de history.dat.bak

2° Renommez le fichier history.dat.bak en history.dat (en supprimant .bak)

Vous retrouvez ainsi votre fichier History.dat à la date de modification
Cordialement.
Station WMR 200 avec XNet_meteo V 2014-10-29a Logiciels:Graphweather V 3.0.16, Noaa Template2, Windows 7
Mon abri météo ici :http://www.vardecouverte.fr/sta%20bc2008.htm
Site Web : http://www.vardecouverte.fr
Image
TIGRE21
Membre
Messages : 39
Inscription : mar. déc. 02, 2008 10:35 pm
Localisation : Bourgogne

Re: Lenteur après correction history.dat

Message par TIGRE21 »

MAGNUS888 a écrit :
TIGRE21 a écrit :Bonsoir,

Je poste dans ce post pour ne pas en crée un autre car c'est un problème avec l'editeur.

Voilà j'ai une ws3650, et donc j'utilise parfois l'editeur ws3600 pour corriger quelques valeurs farfelues.

Seulement voilà il y a quelques jours, sans reflechir et sans faire attention je crois que j'ai modifier mon history.dat avec l'editeur ws2300. Du coup cela à bousiller mon fichier history et je ne peux plus m'en servir, même pas l'ouvrir pour l'éditer de nouveau. Y'a t'il une solution pour que je récuperer toutes les données qui sont dans le fichier? :cry:
Bonjour,
Si vous avez utilisé y a quelque jours ws3600, pour corriger votre fichier history.dat, il a crée automatiquemenr un fichier de sauvegarde qui doit porter une double extension. Exemple: history.dat.bak

1°-Faites une copie de ce fichier en faisant un copier-coller dans la même page, vous obtiendrez alors un fichier nommé : copie de history.dat.bak

2° Renommez le fichier history.dat.bak en history.dat (en supprimant .bak)

Vous retrouvez ainsi votre fichier History.dat à la date de modification
Cordialement.

Aie, je comprend fort bien la manipulation à faire. Mais ça date de plusieurs jours et dans un esprit de nettoyage du disque dur le fichier history.dat.bak avait été supprimé :( Je crois que je me suis sabordé moi même :(

Merci en tout cas de la réponse, je m'en souviendrais la prochaine fois.
Vantage Pro II + Graphweather v3, Win XP, le tout basé à Cerisiers (89).
Avatar de l’utilisateur
MAGNUS
Membre
Messages : 992
Inscription : dim. mars 26, 2006 4:44 pm
Localisation : VIDAUBAN (83) FRANCE
Contact :

Re: Lenteur après correction history.dat

Message par MAGNUS »

Désolé pour vous,
D'où l'intérêt de faire un sauvegarde régulière.
Pour ma part, tout mes fichiers importants son sauvegardés automatiquement tout les soirs.
J'ai trop perdus de données que maintenant...chat échaudé, craint l'eau froide.
Cordialement.
Station WMR 200 avec XNet_meteo V 2014-10-29a Logiciels:Graphweather V 3.0.16, Noaa Template2, Windows 7
Mon abri météo ici :http://www.vardecouverte.fr/sta%20bc2008.htm
Site Web : http://www.vardecouverte.fr
Image
Répondre