J'ai lu des articles sur les services Web d'Amazon et je suis intéressé par:
- Savoir exactement ce que je reçois (des termes équivalents à une machine physique seraient peut-être utiles)
- La "performance" par rapport à je suppose ma propre machine ou d’autres options largement disponibles.
Cela étant dit, j'ai un processeur Intel i7 avec 8 cœurs, 2 Go de RAM par cœur. De plus, je ne connais pas grand chose au matériel, au calcul distribué et au calcul parallèle.
Je vais travailler avec de grands ensembles de données et appliquer des algorithmes à ces grands ensembles de données. Quoi qu'il en soit, voici les deux articles que j'ai lus qui abordent ces questions: Article1 et Article2 .
Je ne connais pas vraiment tous les termes des articles, mais il semble que le mieux que je puisse obtenir ne soit pas beaucoup mieux que ma propre machine. Le test le plus simple que j'ai fait (ce qui m'a grandement déçu) a été de démarrer une instance sur EC2, d'exécuter python et de créer un grand graphique barabasi via networkx (une bibliothèque de graphes). J'oublie la taille réelle, mais ma machine a terminé la tâche en environ une minute, alors qu'EC2 a dû arrêter le processus. Voilà pour l'informatique haute performance ...
Il est également probable que je manque la grande idée de mon utilisation ou de mes pensées sur Amazon EC2. S'il vous plaît faites le moi savoir et merci d'avance!
EDIT: Pour clarifier, je suis intéressé par la puissance de calcul. Pourrai-je traiter mes grands ensembles de données plus efficacement (en moins de temps)?
la source
Réponses:
Amazon indique clairement sur sa page EC2 et sa page Types d'instance quelles sont les statistiques de chaque machine.
Par exemple, le niveau gratuit que vous avez probablement essayé sans être impressionné par ses performances est une "micro-instance"
Maintenant, il y a une traduction dont nous avons besoin pour faire des calculateurs à la puissance de traitement réelle
Ainsi, la machine sur laquelle vous l'avez testée était un ordinateur doté de 2,0 à 2,4 GHz (mais uniquement pour de courtes rafales périodiques) ne disposant que de 613 Mio de RAM .
Le bélier est probablement la chose qui a tué votre performance. Votre machine avait le triple du ram de la machine EC2 et avait 8 cœurs (et fonctionnait probablement plus vite que la vitesse de rupture de l'instance EC2) par rapport au cœur de la machine EC2.
Maintenant, comparez cela à "l'instance très grande à quadruple très grande mémoire"
Nous avons donc maintenant une machine qui a 68,4 Go de RAM par rapport à votre 8, et qui a 8 cœurs (identique à vous) et qui tourne à 3,25 à 3,9 Ghz.
Cette machine va probablement battre votre machine en faisant la même tâche.
Maintenant, pourquoi utiliser EC2? Et si vous vouliez exécuter 20 copies de votre test en même temps, chez vous, vous auriez besoin d’acheter 19 machines supplémentaires (disons 1 000 $ par machine), de sorte que vous auriez besoin de dépenser 19 000 $ maintenant et lorsque vous avez terminé, vous avez des serveurs vous n'avez plus besoin de ne rien faire du tout.
En utilisant EC2, vous pourriez louer 20 serveurs et ne payer que 1 heure d'utilisation. À un tarif horaire de 1,00 USD pour la très grande instance Quadruple à grande mémoire, il ne vous en coûtera que 20 USD .
la source