Comment pratiquer Hadoop en ligne : 11 étapes (avec photos)

Table des matières:

Comment pratiquer Hadoop en ligne : 11 étapes (avec photos)
Comment pratiquer Hadoop en ligne : 11 étapes (avec photos)

Vidéo: Comment pratiquer Hadoop en ligne : 11 étapes (avec photos)

Vidéo: Comment pratiquer Hadoop en ligne : 11 étapes (avec photos)
Vidéo: Calculatrice Javascript 2024, Avril
Anonim

En tant que l'un des frameworks de programmation open source les plus puissants, Hadoop est un outil important pour quiconque espère trouver un emploi dans le big data. Si vous souhaitez parfaire vos compétences Hadoop ou apprendre à les maîtriser, votre meilleure option est de suivre un cours en ligne. Si ce n'est pas le cas, regardez des didacticiels en ligne gratuits et utilisez des documents de référence pour résoudre des problèmes spécifiques. Une fois que vous avez acquis les bases, entraînez-vous sur de petits ensembles de données du monde réel pour améliorer vos compétences.

Pas

Méthode 1 sur 2: Suivre des cours et utiliser des tutoriels

Pratiquez Hadoop en ligne Étape 1
Pratiquez Hadoop en ligne Étape 1

Étape 1. Inscrivez-vous à Cloudera pour un cours en 6 parties et des didacticiels interactifs

Cloudera vous donne des exemples concrets sur lesquels vous entraîner dans un environnement en lecture seule, vous n'avez donc pas à vous soucier de commettre d'énormes erreurs. Ils proposent également des outils d'analyse pour vous aider à expérimenter les requêtes de données, ainsi qu'une démonstration en direct gratuite appelée Cloudera Live pour vous aider à apprendre l'environnement Hadoop.

Bien que le cours complet et approfondi avec certification vous coûtera 295 $, cela en vaudra certainement la peine si vous utilisez ces compétences pour votre travail. Utiliser le cours Cloudera vous aidera à rattraper les erreurs et à gagner du temps, ce qui le rentabilisera rapidement

Pratiquez Hadoop en ligne Étape 2
Pratiquez Hadoop en ligne Étape 2

Étape 2. Essayez des cours en ligne gratuits via Cloudera si vous connaissez déjà les bases

Si vous avez de l'expérience avec Hadoop et que vous souhaitez juste un rappel, vous n'aurez peut-être pas besoin de débourser de l'argent pour le cours en 6 parties. Au lieu de cela, consultez les cours en ligne gratuits sur le site Web de l'Université Cloudera.

Il existe des ressources pour les administrateurs, les développeurs et les analystes de données, donc quel que soit votre rôle, vous devriez pouvoir trouver un cours approprié

Pratiquez Hadoop en ligne Étape 3
Pratiquez Hadoop en ligne Étape 3

Étape 3. Suivez un cours de niveau universitaire sur Coursera si vous voulez plus de théorie

Coursera est une source bien connue et respectée de cours de programmation. Bien que les instructions soient généralement plus théoriques et n'incluent pas autant d'exemples en cours d'exécution, vous pouvez vous entraîner parallèlement au didacticiel et utiliser les projets de cours pour acquérir une expérience pratique.

  • Vous pouvez trouver ce cours en ligne sur
  • Le coût varie d'un cours à l'autre, mais Coursera propose également une option d'aide financière à ceux qui se qualifient.
Pratiquez Hadoop en ligne Étape 4
Pratiquez Hadoop en ligne Étape 4

Étape 4. Suivez un cours gratuit sur Big Data University pour une option économique

Si vous ne voulez pas payer pour un cours en ligne, Big Data University est une excellente option. Ils ont un cours en 2 parties, qui se concentre d'abord sur les bases d'Hadoop, puis sur la programmation avec Hadoop, et le format en ligne permet d'aller facilement à votre rythme.

  • Vous pouvez trouver ces cours sur
  • Ils proposent de nombreux tutoriels en anglais, ainsi qu'en japonais, espagnol, portugais et russe.
Pratiquez Hadoop en ligne Étape 5
Pratiquez Hadoop en ligne Étape 5

Étape 5. Recherchez des procédures pas à pas sur YouTube si vous avez besoin d'une formation spécifique gratuite

Il existe des milliers de vidéos conçues pour expliquer Hadoop et comment l'utiliser. La large gamme de vidéos vous offre de la flexibilité, en plus c'est gratuit. Si vous rencontrez un problème spécifique, recherchez sur YouTube une vidéo qui vous guide tout au long du processus.

Les didacticiels Hadoop devraient également être assez faciles à trouver, car «hadoop» est un terme de recherche unique

Pratiquez Hadoop en ligne, étape 6
Pratiquez Hadoop en ligne, étape 6

Étape 6. Utilisez les didacticiels gratuits de Yahoo si vous souhaitez vous entraîner avec un exemple virtuel

Ces didacticiels sont divisés en 7 modules et vous expliquent comment installer et utiliser Hadoop dès le début. C'est une excellente option pour parfaire des compétences spécifiques si elles sont un peu rouillées.

Pratiquez Hadoop en ligne Étape 7
Pratiquez Hadoop en ligne Étape 7

Étape 7. Reportez-vous au document IBM Open Source pour obtenir des instructions détaillées et gratuites

Il s'agit d'un document PDF open source incroyablement complet créé par une initiative de formation IBM. Il vous guide attentivement dans Hadoop, étape par étape, et donne des instructions écrites claires.

Ces instructions fonctionnent également bien lorsqu'elles sont associées à une démo en direct comme Cloudera

Méthode 2 sur 2: Transition vers l'application du monde réel

Pratiquez Hadoop en ligne, étape 8
Pratiquez Hadoop en ligne, étape 8

Étape 1. Demandez si vous pouvez implémenter Hadoop au travail pour vous entraîner avec des données réelles

Faites une demande à votre patron ou superviseur, ou parlez-leur en tête-à-tête de l'apport de ces nouvelles compétences sur le lieu de travail. Ceci est particulièrement important si votre entreprise a payé pour une formation ou des cours en ligne.

Plus tôt vous commencerez à mettre en œuvre les compétences que vous avez acquises, plus tôt vous pourrez les maîtriser

Pratiquez Hadoop en ligne Étape 9
Pratiquez Hadoop en ligne Étape 9

Étape 2. Recherchez des projets simples sur lesquels mettre en pratique vos compétences

Choisissez des projets relativement simples et à faible risque, tels que le comptage et le classement du nombre d'interactions par agent client, comme les e-mails et les sessions de chat.

  • Certaines autres applications de données réelles incluent la recherche d'erreurs dans les blogs ou la surveillance des canaux de médias sociaux pour le sentiment de la marque.
  • Vous pouvez également vous entraîner avec des exemples de données provenant de sites tels que https://www.kaggle.com/datasets ou
Pratiquez Hadoop en ligne Étape 10
Pratiquez Hadoop en ligne Étape 10

Étape 3. Vérifiez régulièrement votre code avec de petits sous-ensembles pour éliminer les bogues

Avant d'exécuter l'ensemble des données, prenez un ensemble de données de test plus petit sur votre ordinateur local et exécutez-le dans plusieurs modes différents. Par exemple, vous pouvez l'exécuter de manière itérative via le mode Jobrunner local, puis le mode pseudo-distribué, puis le mode entièrement distribué.

  • Cela vous permettra de reconnaître les défauts ou les bogues avant qu'ils ne s'amplifient dans l'ensemble de données complet.
  • Le mode Jobrunner local vous permet de tester et de déboguer localement votre code Map and Reduce, le mode pseudo-distribué imite l'environnement de production et le mode entièrement distribué examine votre cluster de production réel.
Pratiquez Hadoop en ligne Étape 11
Pratiquez Hadoop en ligne Étape 11

Étape 4. Utilisez un essai gratuit d'un an pour vous entraîner sur un environnement de machine virtuelle

Des entreprises telles qu'Amazon et Microsoft proposent des abonnements payants pour leurs services pratiques Hadoop. La machine virtuelle d'Amazon s'appelle Amazon Web Service (AWS) et le service de Microsoft s'appelle Microsoft Azure. Pour les deux services, votre première année est gratuite lorsque vous entrez vos informations de carte de crédit.

N'oubliez pas d'annuler l'abonnement après 1 an pour éviter d'être facturé

Des astuces

  • Gardez à l'esprit que Hadoop est un langage de programmation plus spécialisé et à usage restreint. Cela vous donnera certainement un avantage dans le monde du big data, mais il n'est pas toujours nécessaire de devenir programmeur.
  • Vous pouvez également lire des livres et des articles sur Hadoop, tels que Hadoop:The Definitive Guide, 3rd Edition de Tom White.

Conseillé: