Apache Bigtop et Hadoop - mannequins

Pour vous aider à démarrer avec Hadoop, voici les instructions pour télécharger et configurer rapidement Hadoop sur votre ordinateur portable.. Votre cluster s'exécutera en mode pseudo-distribué sur une machine virtuelle, vous n'aurez donc pas besoin de matériel spécial.

Une machine virtuelle (VM) est un ordinateur simulé que vous pouvez utiliser sur un ordinateur réel. Par exemple, vous pouvez exécuter un programme sur votre ordinateur portable qui "joue" une machine virtuelle, ce qui ouvre une fenêtre qui ressemble à un autre ordinateur. En effet, un ordinateur de simulation tourne à l'intérieur de votre véritable ordinateur.

Vous allez télécharger une machine virtuelle et, pendant l'exécution, vous installerez Hadoop.

Apache Bigtop est une excellente alternative si vous voulez assembler vos propres composants Hadoop. Bigtop rassemble pour vous les principaux composants Hadoop et s'assure que votre configuration fonctionne. Apache Bigtop est une distribution open source à 100%.

L'objectif principal de Bigtop - lui-même un projet Apache, tout comme Hadoop - est de construire une communauté autour de l'emballage, du déploiement et de l'intégration des projets dans l'écosystème Apache Hadoop. L'accent est mis sur le système dans son ensemble plutôt que sur des projets individuels.

Grâce à Bigtop, vous pouvez facilement installer et déployer des composants Hadoop sans devoir les traquer dans une distribution spécifique et les faire correspondre à une version spécifique de Hadoop. À mesure que de nouvelles versions des composants Hadoop sont publiées, elles ne fonctionnent parfois pas avec les dernières versions d'autres projets. Si vous êtes seul, des tests importants sont nécessaires.

Avec Bigtop (ou une version commerciale de Hadoop), vous pouvez avoir confiance que les experts Hadoop ont fait ce test pour vous. Pour vous donner une idée de l'ampleur de l'acquisition de Bigtop, consultez la liste suivante de tous les composants inclus dans Bigtop:

Apache Crunch

• Apache Flume

• Apache Giraph

• Apache HBase

• Apache HCatalog

• Apache Hive

• Apache Mahout

• Apache Oozie

• Apache Pig

• Apache Solr

• Apache Sqoop

• Apache Whirr

• Apache Zookeeper

• Cloudera Hue

• LinkedIn DataFu

• Cette collection de projets d'écosystème Hadoop est aussi vaste que possible, car les deux les projets majeurs et mineurs sont inclus. Apache Bigtop évolue continuellement.