当前位置:首页 > 虚拟机 > 正文

hadoop搭建为啥是三个虚拟机


一、在docker上搭建hadoop平台有什么目的在docker上搭建hadoop平台的目的是为了占用更少的资源。根据相关公开资料请求,了解到如果要在一台计算机上创建多节点的Hadoop集群,传统的方式是使用多个虚拟机。然而,这种方法是资源密集型的,并且一台笔记本电脑可以同时运行的虚拟机数量非常有限。现在我们可以使用Docker。Docker可以认为是一个消耗资源较少的轻量级虚拟机。使用时与传统的虚拟机非常相似。它可以与VMware或VirtualBox进行比较。
二、在宿舍用三台笔记本搭建hadoop可行吗建议三台机器使用双系统,并分配尽可能多的硬盘空间,因为处理1GB数据可能需要1.5GB空间。三台机器中,性能比较可靠的一台可以作为主机,其余的可以作为从机。
具体教程可以查看RunningHadoopOnUbuntuLinux(单节点集群)、RunningHadoopOnUbuntuLinux(多节点集群)。逐步按照说明进行操作。这个过程可能有点曲折,但你仍然可以练习一下。当我第一次看到WordCountexample的工作原理时,我非常兴奋。
我们项目的代码位于shenchsh/data-cube-by-terasort-on-hadoop·GitHub。来吧~

上一篇:大数据hadoop虚拟机

下一篇:虚拟机hadoop