当前位置：首页 > 虚拟机 > 正文

vm虚拟机搭建hadoop

虚拟机
2024-05-15 15:32:32
1741

一、安转Hadoop时候WINSCP链接不上虚拟机怎么回事？您好，在将文件从主机移动到虚拟机之前以及安装vmwaretools之后，我意识到文件总是损坏，如果我使用Winscp，则不会发生此问题。然后启动Linux，进入图形界面，打开Settings中的网络设置，查看虚拟机的IP地址：

最后一个IP地址是winscp主机名22选择端口号。输入虚拟机的用户名和密码。

二、如何基于Docker快速搭建多节点Hadoop集群Docker的关键功能之一是能够将任何应用程序（包括Hadoop）打包到Docker映像中。本教程介绍使用Docker在单机上快速构建多节点Hadoop集群的详细步骤。在发现当前HadooponDocker项目中的问题后，作者开发了一个近乎最小化的Hadoop镜像，支持快速构建任意数量节点的Hadoop集群。
1项目简介
GitHub:kiwanlau/hadoop-cluster-docker
直接用机器搭建Hadoop集群是一个相当痛苦的过程，尤其是对于初学者来说。他们可能在开始统计字数之前就已经解决了这个问题。并不是每个人都拥有多辆车，对吧？您可以尝试使用多个虚拟机来构建它，前提是您有一台性能良好的机器。
我的目标是在Docker容器中运行Hadoop集群，以便Hadoop开发人员可以在本地快速轻松地构建多节点Hadoop集群。事实上，这个想法已经有很多实现，但它们都不是理想的，或者图像非常大，或者使用太慢，或者使用第三方工具使得它们太复杂而无法使用。下表列出了一些流行的HadooponDocker项目及其存在的问题。