Android

Amazon Automates Hadoop Utilisation pour les développeurs

Horizon - Urs Hölzle - Infrastructure for the Long Term

Horizon - Urs Hölzle - Infrastructure for the Long Term
Anonim

Amazon.com a lancé un service hébergé conçu pour simplifier aux développeurs l'utilisation de l'implémentation Hadoop du modèle de programmation MapReduce pour le traitement de grands ensembles de données dans les clusters de processeurs.

Appelé Amazon Elastic MapReduce, le service cloud computing s'adresse aux développeurs Avec Amazon Elastic MapReduce, de nombreuses tâches que les développeurs doivent gérer manuellement en relation avec Hadoop sont automatisées, le cloud computing Amazon Web Services (AWS) de l'entreprise. La division a déclaré dans un blog officiel jeudi.

[Plus d'informations: Les meilleurs services de diffusion TV]

"Grâce à Elastic MapReduce, vous pouvez créer, exécuter, surveiller et contrôler les tâches Hadoop avec la facilité de pointer-cliquer. Vous n'avez pas à sortir et acheter des tas de matériel. Vous n'avez pas besoin de le ranger, de le mettre en réseau ou de l'administrer. Vous n'avez pas à vous soucier de manquer de ressources ou de les partager avec d'autres membres de votre organisation. Vous n'avez pas besoin de le surveiller, de le régler ou de passer du temps à mettre à jour le système ou le logiciel d'application. "

AWS a décidé de créer ce service après avoir appris que des clients exécutaient des tâches Hadoop sur Amazon Étant donné qu'Hadoop est de plus en plus populaire, Amazon a pour objectif de permettre à d'autres développeurs de tirer parti de cette implémentation open source de MapReduce. Elastic MapReduce fonctionne conjointement avec EC2 et le service de cloud de stockage hébergé Amazon Simple Storage Service (S3). "Elastic MapReduce génère automatiquement une implémentation Hadoop de l'infrastructure MapReduce sur les instances Amazon EC2, subdivisant les données d'un flux de travaux en plus petits blocs afin qu'ils puissent être traité - la fonction 'map' - en parallèle, et éventuellement recombinant les données traitées dans la solution finale - la fonction 'réduire'. Amazon S3 sert de source pour les données analysées et en tant que destination de sortie pour les résultats finaux, "selon une description distincte du service.

Comme pour les autres services cloud AWS, Amazon facture Elastic MapReduce sur la base de ses utilisation, sans frais minimum.