Jump to content

Psynergie

Membre
  • Posts

    17
  • Joined

  • Last visited

About Psynergie

  • Birthday 12/04/1963

A propos

  • Résidence
    Mont-sur-Rolle, Suisse
  • Intérêts
    Deep Sky
  • Occupation
    Ing. et Psy, Prof. Université
  • Matériel
    AZEQ6, Stellarmate, TS 130mm, QHY294M, QHY5III178c, QHYPolarMaster, 2xQHYFW3, LRGB + NB 50mm Antlia
  • A propos de vous
    Mon spot d'observation se trouve dans le Jura à 1100 m. d'altitude. A part les vaches en été et les skieurs l'hiver, c'est désert. J'aime autant passer la nuit en plein air que traiter mes données en fin de semaine...

Recent Profile Visitors

96 profile views

Psynergie's Achievements

  1. Rebonjour, Afin de boucler la boucle, voici une synthèse finale de mes essais avec les machines virtuelles (VM) Azure. Premièrement, je ne suis pas parvenu à configurer seul ma machine. Si l'on ne paie pas 30 euros par mois pour l'abonnement avec soutien technique 24/7, c'est compliqué. Or, je veux limiter mes frais fixes afin de ne payer que quand j'utilise la VM. Mais Microsoft nous propose d'utiliser UpWork pour engager des techniciens pigistes. J'ai donc fait ça et ça a très bien fonctionné. Deuxièmement, ma configuration actuelle est une VM de 64 cœurs avec 512GB de RAM et 100GB de disque SSD partagé permanent. Depuis mon PC personnel, je transfert tranquillement mes bruts vers le disque partagé avant de faire le traitement sur la VM. Ma première utilisation a été le traitement dans PixInsight (WBPP 2.1) de mes près de 1000 fichiers (Flats, Darks, Lights, etc. récoltés sur 6 sessions distinctes) pour créer l'image qui se trouve ici: https://astrob.in/uzh5nk/F/ . La machine a mis environ 30 minutes pour le traitement complet. Ensuite, j'ai tranquillement récupéré mes Masters depuis mon disque partagé. La seconde utilisation a été une utilisation intensive de la Déconvolution dans PixInsight. Je ne comprenais pas bien à quoi servent les nombreuses options. Or, en un peu plus de 2 heures, j'ai pu faire plein d'essais en augmentant les itérations au-delà de 100, en modifiant les paramètres divers, etc. J'utilise le screenshot de Windows pour documenter mes essais. Pour terminer, le coût de location mensuel des 100GB de SDD permanents est de CHF 0.78.- (soit environ 25 euros/mois) + CHF 7.68.- par heure de VM. Vu que je ne l'utilise que pour des jobs très demandant en mémoire et CPU (le reste se fait sur mon portable personnel), ça reste financièrement très raisonnable. Voilà. Je vais donc renoncer à acheter une grosse machine et faire mes intégrations et autres jobs complexes directement sur la VM de Azure. Merci de votre collaboration à la réflexion. Bon ciel à toutes et tous. Christian
  2. En fait, j'adhère à l'idée d'acheter local... Les circuits courts. D'où probablement ma remarque sur le fait que je n'ai pas cherché plus loin, qui reflète un peu de culpabilité à me jeter dans les bras des GAFAM... Mais vu que de toute façon, je ne peux plus écrire un mail sans passer par eux (professionnellement, les entreprises sont tout de même beaucoup sur Windows... En tout cas mon employeur, c'est tout sur MS et AZURE), c'est correct. En plus, les serveurs AZURE semblent être en Hollande... Le Google natif me parle en néerlandais... Et maintenant que tous les GAFAM's du monde vont payer 15% de taxes ça fait un dilemme éthique de moins à gérer. Par contre, le tarif de OVH pourrait être pas mal plus intéressant. Donc, à explorer tout de même... J'attends leur retour pour faire des tests. Mais au final, c'est bien souvent le tarif qui fait la différence. J'ai pas acheté des caméras suisses... Elles sont chinoises. Et je ne suis pas sûr que quelqu'un d'autre à ce jour sache produire des circuits de ce niveau en Europe. Donc, on est pris avec la mondialisation. Sans faire de la morale, je trouve néanmoins assez sain que nous nous posions la question. Je crois que c'est sur AstroBin que j'ai lu un sujet autour de l'éthique consistant à mettre en ligne des images traitées en IA. Je ne sais pas ce qui est juste ou faux, mais vu le bordel ambiant, j'aime mieux que l'on se pose trop de questions que pas assez. Merci de vos commentaires et bon dimanche. Je vais faire mes tests WBPP sur le serveur...
  3. Bon. Le tarif horaire à l'air vraiment modeste. Mais a part un 2-cores et 16GB de RAM, pour l'instant, pas de quota suffisants. J'ai demandé. On va voir la suite.
  4. En effet... J'avoue n'avoir cherché que des providers en Suisse. Mais il y a une semaine, je ne savais même pas que ça existe... Donc, je progresse ;-). Je vais aller voir OVH par curiosité. Merci de l'info. Cordialement. Christian
  5. Voici le bilan de mon test sur Virtual Machine. 210703 - Evaluation finale - Virtual Machines WorkStations.pdf
  6. Oui, c'est mon hypothèse. Mais je vais d'abord tester la version en cloud. J'ai pris du temps aujourd'hui. J'ai été capable de créer une machin virtuelle 8 coeurs 64GB sur Azure de Microsoft. Ca divise le temps par 2-3x... J'attends de pouvoir augmenter les quotas pour tester une machine 64 proc 512GB RAM + SSD rapide pour les Swap. Si ça fonctionne, ce serait une excellente pratique au moins pour le pré-tt... Ensuite, pour le post, on verra si c'est pertinent. Décembre 2020... J'ai juste conservé deux ou trois notes, mais par ex. "Format des noms pas enregistrés dans Sequence Generator Options. %t\%dt\%t_%ft_%cg_%co_%fe_%03_%dt_%tm"... Et surtout, des caméras pas reconnues...
  7. Oui, je pensais ça aussi. Et peut-être que mon choix de caméras chinoises QHY en est la cause. Mais j'avais plusieurs problèmes avec le Stellarmate. Je trouvais que Jasem ne mettait pas beaucoup d'enthousiasme à répondre. J'avais tort. Le SM marche super-bien comparativement aux autres solutions sur PC. J'ai essayé différentes applis. Toujours des problèmes de drivers ASCOM pas compatibles (genre il ne voit pas la roue à filtres ou il perd la config ou etc...), ou des séquences beaucoup moins évoluées que sur SM (sur SM, tu programmes ta séquence et tous les fichiers sont automatiquement renommés et stockés au bon endroit), etc. Le plus abouti en terme de fonctionnement me semblait SGP, mais avec plein de problèmes de jeunesse... Finalement, je suis revenu - penaud - au SM. Mais j'ai encore des problèmes avec certains drivers INDI.
  8. J'arrive en Astrophoto, mais je trouve que dans le pré-tt et post-tt, on est plutôt bien servi. Pour l'instrumentation, là, je trouve que c'est un peu galère... Difficile de trouver des applis qui fonctionnent de manière continue. Mais pour le traitement, les softs existent, sont assez peu coûteux (comparativement à des logiciels grand-public qui coutent des fortunes) et globalement, livrent la marchandise. Un script comme WBPP 2.0 sur PI, c'est génial. Tu peux séparer tes sessions, intégrer le tout en deux coups de cuuillères à pot, etc. Mais je t'accorde que ça demande de la puissance machine... D'où mon post...
  9. Oui, j'ai de la chance... On est bien connecté... Il est un peu court aujourd'hui...
  10. Oui, c'est ça... Je ne mesure pas à quel point ça se dégrade... C'est aussi ce genre de trucs que j'aimerais tester... Pour l'instant, je ne travaille qu'en mono avec la 294M. En tout cas, à l'époque, je travaillais sur des terminaux Tektronix 4010 avec des Mainframes distants pour le développement de puces CMOS... Et la qualité de images étaient extraordinaires. Je ne peux pas croire qu'aujourd'hui, avec la bande passante que nous avons, nous ne sommes pas capables d'avoir un affichage déporté de bonne qualité. Pour ce qui est des traitements d'image, je ne mesure pas bien. Mais il est clair que les traitements avancés peuvent être massivement parallélisés sur des processeurs dédiés... Quand je vois ce que fais une déconvolution, un traitement sériel semble peu pertinent. Mais j'imagine que ce n'est déjà pas le cas.
  11. Bonjour Malik, Pour le comment ça se passe, c'est ce que je veux essayer. Actuellement, je gère mon Stellarmate depuis un vieux notebook Dell et VNC en Wifi. Ca marche parfaitement. Aussi pour l'affichage des images en temps réel. Donc, mon hypothèse est que ça se fait via une console genre VNC qui sert de terminal. Par contre, il faudra toujours télécharger les bruts sur la VM. Mais ça, je peux lancer un batch et revenir quand c'est prêt. J'ai une bonne connexion filaire. Pour la taille, je suis passé d'un NIKON D610 de 24Mb à une QHY294M de 11Mb. Donc, c'est pas extraordinaire. Mais le pré-TT, p.ex. via WBPP, avec 5-6 sessions, des flats, des bruts (100-400 images), des darks, alouette... ça prend facilement 30-45 minutes. Donc, je ne peux pas tester un autre paramètre "pour voir ce que ça fait". Sinon, la plupart des traitements prennent entre 10 et 30 sec. minimum. Si avec une VM, tu lances, tu regardes, undo, tu changes, tu relances, undo, etc. en temps réel, c'est pas mal plus chouette. Je vise un budget d'environ 100 euros par mois.. Et si un jour j'ai un guidage assez précis pour utiliser un plus grand capteur, je ne serai pas dépendant d'un nouvel upgrade matériel. En tout cas, c'est là que j'en suis dans ma réflexion.
  12. Wow! Que d'arguments... J'ai commencé à développer en 1978 et durant plus de 15 ans... Mais depuis 25 ans , je code pour le plaisir, mais ce n'est plus mon métier. Perso, je trouve tous ces programmes super-costauds. Leur utilisation me parait déjà un beau challenge... Je ne parle pas du développement. Anyway, grâce à tous vos apports, j'ai plusieurs plateformes identifiées pour des Virtual Machines (VM). Je vais faire quelques essais. Dans tous les cas, les caractéristiques matérielles proposées me semblent financièrement inaccessibles à l'achat. Par contre, je ne mesure pas encore comment ça marche "en vrai" avec PixInsight. Donc, je vais faire des tests et je vous partagerai mes conclusions. Cet échange m'oblige à clarifier mes besoins. Et mon principal besoin, c'est que tous les paramètres de PixInsight sont intriguant et demandent investigations... Mais si il faut 3 minutes de calcul entre chaque essai, j'avoue que je trouve ça "fatiguant". Donc, si l'utilisation d'une VM permet de faire plein d'essais en quelques secondes à chaque fois, j'aurai enfin l'opportunité de voir à quoi servent ces nombreux paramètres. C'est pas mal ça. Merci encore de vos apports. Et je ne sais pas pour vous, mais nous, en Suisse, on a pleins d'orages et pas un jour de ciel clair depuis plus d'un mois... Grrrr! Clear Sky 😉 (tu parles!)
  13. Oui. Merci. Je découvre grâce à vos réponses sur plusieurs sites que ces services existent chez Google, Amazon, Microsoft, etc. en facturation à l'heure... Je vais faire des tests... Car chez Google, ils parlent de 1$/h pour 16 processeurs et 64 GB... A ce prix, ça rentabilise clairement le travail. Une fois les bruts transmis (j'ai un 750Mb de vitesse de transfert), je pourrais alors jouer un peu plus... A voir. Je vous reviendrai avec mon expérience. Merci pour le lien. Merci Krotdebouk. Est-ce à dire que les performances sont très différentes en natif Linux? Sur le Benchmark, ça ne me semblait pas évident... As-tu fait l'expérience? Si oui, ça disait quoi? C'est clair que Windows n'est pas frugal... Merci de ta proposition.
  14. Merci Franklin.jr de ton commentaire. En effet, c'est assez différent. En fait, dans le benchmark PixInsight https://pixinsight.com/benchmark/, le Intel(R) Core(TM) i7-7600U CPU @ 2.80GHz (2) [3115] 3 lignes avant la fin du 1.8.8.-8, c'est moi. Donc, je peux améliorer le truc avec un bonne WS (genre 11th Gen Intel(R) Core(TM) i7-11700K @ 3.60GHz (1) [15347]) on va 5x plus vite. C'est déjà très bien. Mais pour une bombe, genre AMD Ryzen Threadripper 3990X 64-Core Processor (11) [56905], on parle d'une WS à 8-10KEuros. En louant du temps CPU pour 100 euros par mois (pour les week-ends), ça représente environ 8 ans... La machine est obsolète. D'où ma question... Car dans PI, un traitement de 10 sec, ça change la vie avec 2'30''... ça donne envie d'essayer des trucs... Pour commencer, le Pré-tt avec WBPP2.1.1 peut prendre jusqu'à 30'-60'… Donc, difficile de jouer avec les paramètres… Tu le fais une fois et c'est tout… Et certaines commandes (p.ex. HDRMT ou Deconvolution ou Morpho Transform) demandent jusqu'à 1 minute… Donc, tu essaies, tu reviens, tu modifies un paramètre, tu ré-essaies… etc.. Difficile de faire ça avec beaucoup d'essais… Mais peut-être que je rêve… Je vais voir si je trouve quelque chose de pas trop coûteux. J'aimerais vraiment voir ce que ça donne. Pour les autres softs, bien sûr, il y a d'autres options. Mais la courbe d'apprentissage sur PI demande des dizaines d'heures d'expérience... Je ne crois pas que je vais refaire ça avec d'autres plateformes... Merci de tes commentaires.
  15. Bonjour à toutes et tous, J'ai passé plusieurs mois à renouveler mon setup. Aujourd'hui, ça fonctionne bien. Il me reste néanmoins à optimiser mes temps de calcul. J'utilise PixInsight sur mon NoteBook. Mais c'est lent… Même avec un i7, 16GB de RAM et 1TB de SSD. Acheter une workstation vraiment musclée me semble peu pertinent. C'est très coûteux et vite obsolète pour un usage de hobby. J'aimerais mieux louer du temps CPU sur des serveurs externes. Connaissez-vous des fournisseurs qui louent? Certains d'entre vous ont-ils trouvé une parade intéressante? Merci d'avance de vos commentaires. Clear sky. Christian
×
×
  • Create New...

Important Information

We have placed cookies on your device to help make this website better. You can adjust your cookie settings, otherwise we'll assume you're okay to continue.