À propos de l'environnement JDK, de la configuration de l'environnement Hadoop et de l'installation Scala du sous-système Linux Ubuntu sous Windows10

Prérequis d'installation:
Plate - forme: ordinateur Windows10, sous-système Ubuntu pré-téléchargé, si vous ne téléchargez pas, voir tutoriel:
Windows10 utilise le sous-système Linux
Ici, j'utilise Ubuntu 18.04.

Nous voulons commencer à apprendre le big data. L'enseignant nous a demandé d'installer le logiciel Scala sous le système Linux et de configurer l'environnement JDK et Hadoop dont il a besoin. Ici, je me réfère principalement au tutoriel d'installation du professeur Lin Ziyu Je dois dire que le tutoriel d'installation de Mme Lin est génial! Merci professeur Lin!

Joindre le lien d'installation de l'enseignant Lin Ziyu: Premiers pas avec spark2.1.0 : Installation de Spark et utilisation du
didacticiel d'installation Hadoop
Remarque: Dans le didacticiel d'installation lié, l'enseignant lui a donné les ressources de disque réseau Baidu fournies par lui, y compris toute l'installation requise pour ce didacticiel Vous n’avez pas à vous soucier de trouver les fichiers, merci encore Lin Ziyu (tellement touché)!

Les avantages de choisir le sous-système Linux sous Windows: il n'est pas aussi lourd que la configuration de la machine virtuelle + fichier image Ubuntu, et l'apprentissage de Scala suffit encore;

Mais d'après mon colocataire qui a téléchargé VirtualBox et installé le système Ubuntu, je n'ai pas eu beaucoup de problème à installer les deux selon le tutoriel de l'enseignant Lin Ziyu.Les étudiants qui veulent installer VirtualBox peuvent également essayer.

Les étapes du didacticiel sont très complètes. Ci-dessous, je parlerai principalement des problèmes survenus lors du processus d'installation:

1. Concernant la connexion après la création de l'utilisateur hadoop.
   Comme Ubuntu sous Windows n'a pas d'interface de connexion, vous pouvez choisir de saisir la commande suivante dans la ligne de commande:
   su -l hadoop
   Ensuite, vous serez invité à entrer le mot de passe, et vous pourrez vous connecter à l'utilisateur hadoop en entrant le mot de passe
2. Installez ssh (le point culminant est ici)
   Le système Ubuntu sous Windows a en fait installé le serveur openssh dans le didacticiel de l'enseignant par défaut, donc après avoir exécuté la sudo apt-get install openssh-servercommande, il affichera une description, ce qui signifie en gros que vous l'avez déjà installé; Vous le saisissez ssh localhostet trouvez le problème suivant:
   ## Solution 1:
   Ne vous inquiétez pas, il se peut que votre service ssh ne soit pas activé, puis essayez de saisir la commande pour sudo service ssh startactiver le service ssh. Si cela se passe bien, l'invite suivante peut apparaître:
   Entrez à nouveau la ssh localhostcommande, L'interface suivante apparaîtra:
   ## Solution 2: Désinstallez d'abord le serveur openssh installé par lui-même, puis suivez le tutoriel, puis téléchargez à nouveau un serveur openssh, puis suivez le tutoriel;

Ici, j'ai une question: je n'ai pas vu la première invite de connexion ssh lorsque je l'ai installé, mais je ne me suis jamais connecté à ssh auparavant. Et lorsque je me connecte avec l'utilisateur hadoop pour la première fois, il n'est pas nécessaire de saisir le mot de passe, ce qui est un peu étrange ...

3. Lors de l’installation de l’environnement Java, je ne sais pas comment décompresser le jdk téléchargé sous Windows vers Ubuntu: (Ici, je choisis la méthode d’installation manuelle)
   Solution: C’est en fait très simple. Entrez la commande cd /mnt(il y a un espace entre cd et / mnt) ) peut entrer dans le répertoire sous Windows, puis commande le professeur donné à l'extrait jdk dans le répertoire / usr / lib dans Ubuntu
   avec le processus de décompression de l'archive spark pour donner un exemple :( parce que j'ai installé le jdk Je ne trouve pas la capture d'écran ...)
   Avant la décompression, nous entrons d'abord dans le répertoire où vous stockez le fichier jdk, le mien est sur le lecteur D, donc j'entre / mnt / d et suis la commande donnée par l'enseignant:sudo tar -zxf 要解压的文件的名字 -C 解压后放入的目录路径
4. Remarque: je n'ai pas configuré ssh pour se connecter automatiquement, donc à chaque fois qu'avant d'entrer, les utilisateurs hadoop se connectent à ssh, nous devons activer le service ssh avant de se connecter. Si vous vous sentez gêné, vous pouvez vous référer à la capture d'écran du blog Configuration du sous-système Windows10Linux ssh

Ensuite, suivez le tutoriel, et il n'y a pas de problème avec mon installation Spark. Je joins une capture d'écran de l'opération une fois l'installation de Spark réussie.

Mon colocataire a dit, le logo Spark a l'air tellement cool et avancé!
Hehehe, je le pense aussi.

Cette installation d'environnement qui a pris beaucoup de temps est enfin installée, heureux! Ubuntu sous Windows est toujours pratique à ce stade de ma vie (je ne peux pas le sentir si ce n'est pas pratique).
Si vous avez des questions, veuillez les soulever dans les commentaires, peut-être pourrons-nous en discuter ensemble.
Enfin, j'ai fait écho du début et de la fin, et merci encore Lin Ziyu! Nous t'aimons!