Météo-Parapente a déménagé

Avant de m'envoler définitivement vers la Belgique, il y avait encore une petite affaire à régler : Météo-Parapente
 
J'avais remis en route les calculs cet hiver, mais les serveurs étaient encore dans mon bureau, conformément à la tradition bricolage du projet.

« Orange ne voulait pas raccorder mes locaux ? Pas de problème, on a tiré 80 mètres de fibre optique depuis le salon du voisin parapentiste »


Évidemment, c'était une installation temporaire. Le déménagement arrive au bon moment. L’hiver, les ordis remplaçaient le chauffage, mais maintenant ça commençait à devenir le sauna.

La nouvelle maison

Comme promis, je me suis orienté vers une infrastructure professionnelle. Fini le do-it-yourself. Direction le datacenter.

Voici donc la nouvelle maison de météo-parapente :

Finalement, ça ressemble pas mal au supercalculateur dernier cri de Météo-France :


Bon, évidemment, chez moi tout tient dans une seule armoire. Mais c'est déjà un bon début.



En tout cas, les machines seront aux petits soins, au frais toute l'année et avec du super internet.

Il faudra même couper mon doigt si vous voulez aller leur rendre visite :



Niveau facture, par contre, ça pique. C'est le tarif normal du secteur, mais ça pique quand même bien.

Au début, je voulais prendre un hébergement low-cost chez Free, « seulement 699€ HT / mois ». Mais ils ne proposaient pas assez de puissance électrique pour du calcul intensif.

Finalement, j'ai trouvé un autre datacenter en région parisienne. C'est plus cher, mais là je peux tirer 32 ampères rien que pour Météo-Parapente.

D'ailleurs, j'ai un peu de marge. Donc si quelqu'un a des serveurs qui traînent, je peux vous loger.

Les nouveaux barbecues

J'avais déjà fait un investissement « machines » pour relancer RASP cet hiver. Voici la deuxième fournée pour le printemps…

Quelques douzaines de barrettes mémoires :


Et des processeurs vendus au kilo :



Un aller-retour à Paris et après 4 jours de galère et d'imprévus, le déménagement de Météo-Parapente est (presque) enfin terminé.

Merci à tous les contributeurs grâce à qui nous pouvons maintenant avoir des prévisions à 3 jours.

Commentaires

  1. C'est très bien tout ça, mais quand penses-tu t'occuper d'AROME pour
    avoir le dernier run à jour, les précipitations
    et les Vz thermiques façon RASP ?
    CPT

    RépondreSupprimer
  2. Il doit avoir passé 4 jours de nuits blanches, tu pourras peut-être le laisser respirer un peu non ? :D

    RépondreSupprimer
    Réponses
    1. Oui, c'est vrai, mais les prévisions à 3 jours on ne sait pas trop d'où elles sortent, alors que le run de 00h d'AROME à 5h30 du matin je sais qu'il est le meilleur pour la journée et j'aimerais bien l'avoir dans la présentation de Nicolas
      et ce n'est pas encore le cas.
      Moi non plus je ne dors plus en attendant un Pioupiou neuf.....
      CPT

      Supprimer
    2. Vu la direction que prend Météo-France par rapport à son « pseudo open-data », j'hésite à encore investir du temps pour mettre en valeur leurs données AROME. Au contraire, ça incite plutôt à développer les solutions alternatives pour se passer intégralement d'eux. Je ferai un article complet sur le sujet lorsque j'aurai un peu de temps.

      Supprimer
    3. Je comprend bien ta réaction. Ceci dit, pas de doutes de mon côté, les prévis du modèle Arome sont bien meilleures que celles de rasp, niveau vent, direction et même couche convective...

      Supprimer
    4. Je pense que ça dépend grandement des régions ! Pour le quart SE, c'est souvent assez peu fiable. En tout cas nettement moins que le RASP.

      Supprimer
    5. Nicolas, soit sérieux,
      quand tu dis "Cette version présente souvent des données manquantes (ex: carte toute noire…). Cela est dû aux dysfonctionnements récurrents (volontaires?) des serveurs de Météo-France. Le problème dépend de Météo-France et nous n'avons malheureusement pas de contrôle là-dessus."
      tu peux voir que Météociel
      n'a pratiquement aucun run manquant d'AROME
      avec la même source que toi
      et surtout ils sont à jour du dernier run.
      Alors d'où vient le problème ?
      C'est dommage d'avoir abouti à l'ouverture de ces données et maintenant de ne pas les valoriser !
      C'était l'espoir de beaucoup d'entre nous.....
      Bon courage,
      CPT
      ;-)

      Supprimer
    6. Météo-Ciel ne récupère pas les données en altitude, qui sont les plus volumineuses. Ils peuvent donc se permettre de retélécharger 10x chaque fichier jusqu'à ce que le serveur se décide à fournir un fichier non corrompu.

      Supprimer
    7. Les sondages dans AROME par Météociel montent à plus de 15000m,
      les tiens s'arrêtent entre 3000 et 4000m.
      Qui récupère le plus de données en altitude ?
      A 5h30 le matin, ils ont aussi les précipitations du run de 00TU
      en HD (1,25km).
      ;-)

      Supprimer
    8. Alors c'est que Météo-Ciel a passé plus de temps que moi pour mettre en place un système qui détecte et retélécharge les fichiers corrompus.

      Ça ne change rien au problème initial : le serveur de Météo-France déconne complètement. Et comme cela fait des mois qu'ils sont au courant et qu'ils ne réagissent pas, alors ils ne peuvent pas être considérés comme une source fiable.

      Donc pour l'instant, les développements AROME, bien qu'ils restent prévus, ne sont pas une priorité. Je ne veux pas investir du temps sur un système qu'on risque de jeter à la poubelle du jour au lendemain car l'institution ne fait pas correctement son boulot.

      Supprimer
    9. Ma vision de l'offre météo-france: si vous payez, on garantit l'accès; sinon, c'est 'best-effort' en fonction de: la charge du serveur, le nombre de gens qui chargent en même temps, l'humeur du gestionnaire du site... ou je ne sais quoi. Donc, payez et vous aurez un service fiables, sinon, débrouillez-vous

      Supprimer
    10. Vous voulez me faire croire que c'est parce que Météociel fait trop de demandes au serveur de Météo France, que Météo-Parapente n'arrive pas à charger le run de 00UTC à 5h du matin !
      Quand une transmission ne va pas bien, cela vient soit de l'émetteur,
      soit du récepteur et si ça marche ailleurs c'est le récepteur qui déconne....

      Supprimer
    11. Bravo Nicolas et merci tout simplement!

      Supprimer
    12. Voir les explications de Sylvain ce jour (27IV)
      http://forums.meteociel.fr/forum/analyses-et-previsions-meteo/discutez-ici-des-runs-des-modeles/57830-arome/page2

      CPT
      ;-)

      Supprimer
    13. Comme expliqué plus haut : Je ferai un article complet sur le sujet lorsque j'aurai un peu de temps.

      Débat clos.

      Supprimer
    14. Arome niveau échéance est limité au max a 44 heures ce qui est normal
      sur la résolution 1.3kms les données d'altitude sont pauvres,je penses plutot qu'il faut enrichir RASP

      Supprimer
    15. Où as-tu vu que les données en altitude sont pauvres ?

      Supprimer
    16. Ce commentaire a été supprimé par l'auteur.

      Supprimer
    17. je parle de Arome 1.3 kms tu n'as pas de données d'altitude au delà de 3000 mètres bon d'un autre coté au dela de 3000 mètres d'altitudes les données seraient peu ou prou celle obtenu avec Arome 2.5 kms,l'interet d'Arome HD etant la prise en conmpte des phenomemenes de basses couches

      Supprimer
    18. Les couches nuageuses moyennes et supérieures sont données par AROME HD.

      Supprimer
  3. Un grand bravo, j'ai même un peu honte de ne pas avoir plus suivi le projet et de ne pas avoir contribué...
    Fais nous signe dès que la page abonnement est de nouveau opérationnelle.
    Encore bravo !
    Tristan

    RépondreSupprimer
  4. Bravo! Super boulot... Et un grand merci!

    RépondreSupprimer
  5. Bravo.
    Tu as un courage énorme.
    Merci à toi pour ce boulot de ouf.
    Cargol.

    RépondreSupprimer
  6. Bravo et merci ! Toujours du bon boulot. Un conseil : ne t'attarde pas trop sur les commentaires de gens très exigeants qui ne pensent qu'à leur petite personne et ne voient rien d'autre. Bon courage pour la suite.

    RépondreSupprimer
  7. Je confirme, chez nous, les prévi vent du rasp plus fiables que Arome

    RépondreSupprimer
  8. super boulot! bravo! Les prévizs à 3 jours c'est top!
    Pour Arome, je suis dans le sud-est (signes) et je compare très souvent les prévisions et les relevés de vent réels (balise FFVL) et il faut dire que la plupart du temps le modèle Arome est bien plus proche de la réalité. Même si bien sûr ce n'est pas toujours le cas..personne n'est parfait..
    Dommage que météofrance n'ait pas l'air de vouloir partager facilement ses données..

    RépondreSupprimer
  9. Je suis bien d'accord, mais je ne pense pas que Météo France sabote volontairement ses données....
    CPT
    ;-)

    RépondreSupprimer
    Réponses
    1. Volontairement ou pas, soit on est malintentionné soit on est négligeant chez météofrance. Dans les deux cas c'est vraiment pas cool. Et si il ne réagissent pas au remarques faites sur la qualité des données fournies. Il y a alors une mauvaise volonté qui mêne à un "sabotage" lors de la livraison des données. On peut tout a fait saboter par inaction.

      Supprimer
    2. Soit ils sont techniquement incompétents (ce qui n'est pas incompatible avec ce que j'ai pu constater lors de mes échanges avec eux), soit ils sont de très mauvaise foi.

      Tout ce que je vois, c'est que tout marchait bien pendant l'été. Puis subitement en Novembre leur serveur a commencé à complètement déconner. Puis en janvier ils ont introduit une option « premium » à 50000€ / an permettant de télécharger les fichiers de manière fiable… On peut se poser des questions.

      Supprimer
    3. Heureusement que tout marchait bien pendant l'été !

      Supprimer
  10. Bonsoir,
    Merci pour tout ce travail ! Tu vas faire quoi en Belgique ?

    RépondreSupprimer
    Réponses
    1. Les belges investissent dans Pioupiou. Voir ici : http://blog.bacpluszero.com/2016/02/le-calme-apres-la-tempete_23.html

      Supprimer
  11. Que ça fait plaisir tout ça Nicolas! Ma pioupiou fonctionne à merveille! Quand a moi le RASP me convient ainsi que l'altitude! Juste la recherche par bled qui ne fonctionne pas mais ce n'est pas urgent. Un grand merci.

    RépondreSupprimer
  12. CPT tu travaillerais pas à météo France ?
    Vas y fait péter l'accès à 50000 boules...
    Je rigole !
    Longue vie à Nicolas et météo parapente !

    Math

    RépondreSupprimer
  13. Bien vu, j'y travaillais, je connais la maison
    qui tient plus à son image de marque
    qu'à des profits commerciaux improbables....

    RépondreSupprimer
  14. Bonjour, pour un nouvel entrant que je suis (pilote de montgolfière) peux tu m'indiquer stp ou trouver les explications sur ce qu'est RASP stp ? merci et grand bravo !

    RépondreSupprimer
    Réponses
    1. modèle RASP (Regional Atmospheric Soaring Prediction). Il est basé sur WRF, et est spécialement concu pour le Vol à Voile.

      Supprimer
  15. Peut on savoir pourquoi il existe une telle différence de prévisions entre AROME et RASP,surtout pour une même ville , même altitude et même heure bien sur dans le Cantal?Quelques fois de plus de 10 Km/h

    RépondreSupprimer
    Réponses
    1. Les données sont issues de deux modèles différents, c'est donc normal d'avoir des différences plus ou moins grandes. Je n'ai pas envie de rentrer dans le débat "AROME c'est mieux que RASP ou inversement" mais un bon moyen de savoir lequel est plus précis pour ta région est de comparer relevés de vent par les balises météo et prévisions des deux modèles. De te faire tes propres statistiques en gros..

      Supprimer

Enregistrer un commentaire