我是 hadoop 的新手。我可以在单节点 hadoop 中运行 mahout 示例。 单节点hadoop有没有并行性? (例如在作业、 block 、) (在我的工作负载中,hadoop 比 WEKA 运行得更快)

请您参考如下方法:

您所指的模式与伪分布式模式相同。这是一个单节点集群。在这里,您有一个名称节点、一个作业跟踪器以及一个正在运行的数据节点和任务跟踪器。您可以使用“jps”命令进行验证。

默认情况下,tasktracker 最多可以并行运行两个 map 和 reduce 任务(mapred.tasktracker.map.tasks.maximum 和 mapred.tasktracker.reduce.tasks.maximum),因此您实际上会在您的任务上看到一些并发性机器。


评论关闭
IT虾米网

微信公众号号:IT虾米 (左侧二维码扫一扫)欢迎添加!