Choix d'un serveur dédié

Ce site est optimisé pour être consulté depuis un navigateur moderne dans lequel JavaScript est activé.

Choix d'un serveur dédié

meteo59223

Bonsoir @ tous.

Je suis en proie à un petit problème que je vous expose et j'ai énormément besoin de votre aide.

Je travaille avec des applications développées par mes soins en PHP, de traitement, de calcul de données et de génération de cartes/de graphiques, exécutées en lignes de commande toutes les 30 minutes (2 fois par jour pour d'autres) sur un PC monté il y a 3 ans avec cette configuration :

- Carte mère Gigabyte MA790X-DS4
- Processeur Intel(R) Core(TM) i5 CPU 650 @ 3.20GHz
- Mémoire 4 Go DDR3
- Disque Dur Western Digital Black 1 To 7200 t/min 64 MB cache
- Linux Debian 2.6.32-5-amd64 (Squeeze)

Arrivant au terme de mon projet "programmes", je me mets enfin au développement du site internet qui publiera ces données au grand public, donc un serveur dédié m'est de ce fait requis car ma connexion ADSL ne suivra pas du tout ...

Un de ces programmes (qui tourne 2 fois par jours) a pour but de :

- Lire un fichier d'environ 40 Mo ligne par ligne
- Parser les paramètres pour en sortir des valeurs
- Calculer ces paramètres pour les rendre lisibles par un autre programme
- Insérer une nouvelle ligne de paramètre dans un des 3000 fichiers textes établis selon des critères prédéfinis

Je sais ça paraît une usine à gaz mais pas le choix pour mon projet

.

J'ai récemment pris une offre, dans mon budget, chez un hébergeur (http://www.online.net/fr/serveur-dedie/dedibox-xc), qui me semblait ressembler à la config de mon PC, mais un problème subsiste : la vitesse d'exécution du programme, notamment en lecture/écriture disque, beaucoup plus lente

.

Sur mon PC, ce programme s'exécute en 20 minutes environ, contre 1h15 sur cette offre de serveur dédié !

Au début j'ai choisis d'installer ProxMox que je connaissais peu, qui me semblait être idéal pour séparer le serveur web du serveur "programme" en cas de pépin, et c'est là que j'ai remarqué cette énorme baisse de régime. j'ai de ce fait contacté le support qui m'a affirmé que tout était normal côté matériel, qui s'agissait de mes paramètres. Ne trouvant rien d'anormal côté ProxMox et PHP, j'ai changé par une Debian 64 Jessie, mais rien n'y a fait ... J'ai donc conclu que cette offre n'était pas assez performante ? Malgré que le processeur est apparemment beaucoup plus puissant que mon i5, avec 8 Go de RAM, je suis énormément étonné mais bon je n'ai pas eu plus d'information de la part du support ...

Bref, j'ai fini par résilier ne pouvant pas me permettre d'exécuter mon programme avec plus de temps et je me suis lancé à la recherche d'une nouvelle offre de dédié dans mon budget (max 20 euros HT/mois), toujours pour une configuration similaire à mon PC (à tort ?).

Je suis tombé sur l'offre KS-4 de Kimsufi (https://www.kimsufi.com/fr/index.xml) et leur ai envoyé un message il y a 2 jour, exposant ma situation tel qu'expliqué ici, et surtout savoir si cette offre pouvait me convenir ; mais je n'ai toujours pas de retour (l'excuse du week-end peut-être ?) ...

Du coup, je viens parmi vous pour avoir un peu d'aide car j'ai peur de ne pas trouver de serveur dédié dans mon budget, avec la puissance que je recherche

. En bref je suis un peu perdu !

Je vous remercie d'avance pour vos réponses, bon début de semaine

.

Nico.

Wagner

Bonjour,

j'aimerais savoir une chose, la Dedibox XC (2015) était équipée d'un disque dur ou d'un SSD ? Ce n'est mentionné.
Chez Online, cette option concerne plusieurs modèles (de serveur) dont celui-ci. Tandis que chez OVH (KimSufi), a priori, il n'y a(urait) qu'un seul modèle : le KS-2 (SSD). Du moins, dans le cadre de ce budget.

Il ne faut pas seulement considérer la puissance. Le ramdisk, c'est une option qu'il faudrait également envisager. Cependant, j'ignore la quantité minimale de RAM requise...

meteo59223

Bonjour,

Avant tout merci déjà pour ces réponses

Wagner wrote:j'aimerais savoir une chose, la Dedibox XC (2015) était équipée d'un disque dur ou d'un SSD ?

J'étais en SATA car la capacité de 120 Go était trop juste pour les archives que je compte faire par la suite.

Wagner

De rien 🙂, je vois cela risque de s'avérer un problème. Comme le SSD à (toujours) un coût assez prohibitif. Il sera très difficile de trouver une offre avec ce budget...
Cependant, cette solution n'est à exclure. Du moins, pour le moment. Il semble bien raisonnable de croire que les performances seront au rendez-vous.
Il faudrait peut-être revoir certains points (le nombre de serveur, le budget etc).

meteo59223

Wagner wrote:De rien 🙂, je vois cela risque de s'avérer un problème. Comme le SSD à (toujours) un coût assez prohibitif. Il sera très difficile de trouver une offre avec ce budget...
Cependant, cette solution n'est à exclure. Du moins, pour le moment. Il semble bien raisonnable de croire que les performances seront au rendez-vous.
Il faudrait peut-être revoir certains points (le nombre de serveur, le budget etc).

Je n'ai pas très bien compris, le SSD serait plus adapté à ce que je désire faire et donc avec une offre plus chère, ou le SATA peut malgré tout suffir par exemple avec l'offre de Kimsufi que j'ai vu ?

EDIT : Concernant le nombre de serveur, vous parlez de Proxmox ?

Wagner

Oui, le SSD serait plus adapté. Il y a un gouffre entre les deux.
Par contre, ce ne sera pas forcément plus chère. On reste(ra) dans le budget avec par exemple :

la Dedibox XC
un KS-2 SSD + un KS-2
un KS-2 SSD + deux KS-1

Non, je ne songeais à Proxmox. Je me disais qu'un(e) autre (machine) serveur pourrrait combler les lacunes (l'espace disque etc) du premier. Il est difficile d'estimer la puissance, comme le nombre de serveur requit par l'application.
D'abord, il faut regarder (ou s'en assurer). Ensuite, il faudra aviser afin de combler ces éventuelles lacunes.

Un prestataire peut mettre en place des machines côte à côte (calcul parallèle, disponibilité etc). De plus, louer de la puissance, c'est également envisageable. Dans cette optique, OVH dispose de la gamme HPC.

meteo59223 wrote:toutes les 30 minutes (2 fois par jour pour d'autres) [...]
Un de ces programmes (qui tourne 2 fois par jours) a pour but [....]
Sur mon PC, ce programme s'exécute en 20 minutes environ, contre 1h15 sur cette offre de serveur dédié !

Justement cette location dispose d'un tarif à l'heure. Ce serait une solution ? L'idée semble avoir un certain potentiel...

meteo59223

Merci pour ces conseils. Je vais réfléchir un peu, mais je pense que je vais tenter le KS-4, et si je n'ai pas plus de performance, je prendrai 2 KS-2 dont 1 en SSD.

En revanche, j'ai cru voir une offre HPC Spot à 20 euros / mois, mais pas d'environnement PHP ?

ex_rat

Salut
L'idée de Wagner est bonne de séparer calcul et stockage. Moi j'aurais vu ça un peu différemment parce que le tarif HPC tape bien quand même.

Si tu restes sur un KS-2 pour la partie archivages, est-ce qu'un vps Ovh ssd1 ou ssd2 ne ferait pas l'affaire, parce que niveau prix c'est pas pareil et les perfs sont sympa (voir en bas de page pour les deux game)
https://www.ovh.com/fr/vps/vps-ssd.xml
En un peu plus cher y'a les vps cloud qui sont encore un peu au dessus
https://www.ovh.com/fr/vps/vps-cloud.xml
Peut-être à tester, faut juste ne pas sous évaluer parce qu'à +/- 70% pendant une heures, ils coupent (me rappelle plus le chiffre exact ):/

Ca sent le NOAA tout ça

Ex.

meteo59223

Bonsoir,

Ca sent le NOAA tout ça

Héhé il y a un peu de ça, mais pas que ...

J'ai regardé les offres VPS mais la capacité n'est pas top ... Bien sur, le temps de cumuler tous les types de supports de données horaires (climatologie), j'avoue que j'ai de la marge pour le moment !

ex_rat

Bah je me disais qu'en utilisant juste le vps pour les calculs et en purgeant les résultats sur le ks-2, ça aurait pu le faire avec 10 ou 20 Go pour pas trop cher au total. T'en as pas dit beaucoup sur les volumes de données que tu traites, ça pourrait aider pour ce faire une idée.
Ex.

Wagner

Bonsoir,

de rien, je présume, il y aura un gain. Néanmoins, cela restera en-dessous des attentes. Ainsi, comme ce KS-4 dispose de 16 Go (de RAM), le ramdisk n'est une option à oublier. Je crois bon de le rappeler et j'imagine, cela pourrait éventuellement suffir (au départ).

A priori, cette offre (à 20€/mois) serait juste un environnement de stockage. Tandis que le PHP, je préfère m'abstenir. Il sera préférable de contacter OVH.
Et oui, je conçois parfaitement que le HPC puisse sembler excessif. Toutefois, je n'ai évoqué qu'un seul tarif. Ce qui requiera éventuellement d'adapter le(s) programme(s).

ex_rat wrote:Peut-être à tester, faut juste ne pas sous évaluer parce qu'à +/- 70% pendant une heures, ils coupent (me rappelle plus le chiffre exact ):/

Juste cette raison me suffirait afin d'exclure les VPS. Malgré mes réserves, tu as bien fait de les mentionnés. J'ai peut-être une fausse impression...

meteo59223

Bonjour,

Bah je me disais qu'en utilisant juste le vps pour les calculs et en purgeant les résultats sur le ks-2, ça aurait pu le faire avec 10 ou 20 Go pour pas trop cher au total. T'en as pas dit beaucoup sur les volumes de données que tu traites, ça pourrait aider pour ce faire une idée.

Je ne sais pas dire du tout les volumes ... Justement je comptais voir en fonction de la puissance du serveur dédié pour éventuellement me lancer dans d'autres projets tout prêt, mais si je ne sais pas avoir plus, ça va pas tourner à beaucoup. Vu que tu as l'air de connaître ce que fournis la NOAA, j'ai le traitement basique avec un programme écrit en C (wgrib2) ; le seul problème de ce programme, c'est qu'il ne permets pas de faire : 1 ligne de fichier décodé = 1 point de grille = 1 échéance = les paramètres choisis qui vont avec ... Il ne resterait plus qu'à parser chaque ligne selon le caractère de séparation et on choisit ce que l'on veut pour les traitements suivants. Il y a la méthode MySQL mais je n'ai jamais su la faire marcher. Là je suis obligé de relire tous les fichiers en sortie, que je regroupe dans un autre fichier pour obtenir mon ligne par ligne et c'est là qu'intervient mon PHP. Ensuite pour affiner, je regroupe chaque ligne selon le point de grille dans un fichier texte propre avec toutes les échéances ; ce qui me permets ensuite de faire des calculs rapides pour les afficher sur page web, le tout également en PHP. C'est cette dernière étape qui me prends 1h15 sur la Dédibox et 20 minutes sur mon PC.

de rien, je présume, il y aura un gain. Néanmoins, cela restera en-dessous des attentes. Ainsi, comme ce KS-4 dispose de 16 Go (de RAM), le ramdisk n'est une option à oublier. Je crois bon de le rappeler et j'imagine, cela pourrait éventuellement suffir (au départ).

J'attends de voir une disponibilité de ce Kimsufi et démarrerai les tests sur une Debian. Si ça tient la route, je repartirai sur mon projet ProxMox ; sinon je prendrai 2 KS-2, dont un en SSD. Cependant la puissance du processeur sur les offres KS-2 me font assez peur ... :/.

Quand je regarde le comparatif, il n'y a pas photo : http://www.cpubenchmark.net/compare.php?cmp[]=616&cmp[]=767

meteo59223

Bonsoir à tous.

Alors, après une bonne semaine de patience, j'ai réussi à obtenir un Kimsufi KS-4 !

Bonne nouvelle, les 1er test de mon fameux programme s'avère positif avec une exécution en 25 minutes, sous Debian 8 64 bits

ex_rat

Salut
25 minutes c’est plutôt cool, quand tu seras parvenue au bout du projet, il faudra que tu mettes le lien du site qu'on voit ça

Y'a peu de chances qu'on devienne un annexe d'Infoclimat mais bon, ça peut déclencher des vocations.
Quand j'y pense mon premier debian (5 !) fait tourner Meteohub depuis des années à la maison, finalement j'étais déjà un linuxien sans le savoir...

Ex.