在笔记本电脑上安装hadoop的硬件要求

问题描述 投票:0回答:4

在 Windows 上安装 Hadoop 时推荐的最佳笔记本电脑硬件是什么?我假设我必须安装单节点安装,如果没有,请指导我进行正确的配置。

hadoop mapreduce hardware
4个回答
6
投票

我知道您提到想要在 Windows 上安装,但 Cloudera 提供单节点 Hadoop Linux VM 映像,可以让您立即启动并运行。您甚至还包含示例和脚本,这是一个非常好的起点。

https://www.cloudera.com/downloads.html

(不要忘记查看入门部分。)

在我看来,如果你想了解大数据和Hadoop,你还应该投入一些时间来熟悉Linux,因为大多数真实环境都是基于Linux的。

系统要求:每个 Cloudera 页面,VM 需要 4GB RAM 和 3GB 磁盘空间。这意味着您的笔记本电脑应该有更多内存(我建议 8GB 以上)。在存储方面,只要您有足够的空间来测试中小型数据集(10 GB),就可以了。至于CPU,如果你的机器有足够的RAM,你很可能就没问题。我正在使用带有 4GB 内存的单节点蹩脚 Pentium G3210 来测试我的小型工作,它工作得很好。

稍后,如果您不再需要这个环境,您可以简单地转移到您自己的伪分布式设置。

当然,如果我刚才说的对你来说没有意义,那么你可以继续阅读......


2
投票

如果您想练习简单的程序(不是数据密集型),那么 4GB RAM 应该不错。 如果你想安装单节点,最好的配置是 32GB RAM,至少 4 核。

有关如何安装单个节点的更多信息,请参阅 myhobbyandexperiments.wordpress.com


1
投票

您不太可能准备好拥有一台纯 Linux 笔记本电脑。因此,您需要一个支持 64 位虚拟化的 64 位 CPU,当然还有 64 位操作系统。请注意,对虚拟化的支持通常在 BIOS 级别被禁用,您需要找到并启用它。

除此之外,充足的 RAM - 至少 8GB,不过 16GB 是首选。我还喜欢为不同的操作系统配备不同的硬盘,因此一台可以用 HD 盒替换 DVD 的笔记本电脑和第二个 SSC 硬盘(例如 128GB)会很好。


-4
投票

具有 4 GB RAM 的 Windows 64 位操作系统应该可以。 我已经发布了一个博客。在这篇博客中,我记录了使用 Windows 64 位 PC 或笔记本电脑以伪分布式模式安装和设置 Hadoop 集群的详细步骤以及受支持的屏幕截图

这是一个 3 步过程

第 1 步 – 安装 VM Player

第 2 步 – 设置 Lubuntu 虚拟机

第 3 步 – 安装 Hadoop

http://hadooppseudomode.blogspot.in/

© www.soinside.com 2019 - 2024. All rights reserved.