大约有 349 项符合查询结果。 (搜索耗时:0.0147秒)

按时间排序 按相关性排序

技术分享 Hadoop集群搭建方法

在学习Hadoop的过程中,你可能会遇到Hadoop集群搭建的问题,本节就和大家一起学习Hadoop集群搭建的方法,希望大家能够掌握。 Hadoop集群搭建 目的 本文描述了如何安装、配置和管理有实际意义的Hadoop集群,其规模可从几个节点...

Hadoop集群系列2:机器信息分布表

... 机器名称 Master.Hadoop 机器IP地址 192.168.1.2 最高用户名称(Name)...

学习笔记 Hadoop集群如何搭建

本节向大家描述了如何安装、配置和管理有实际意义的Hadoop集群,其规模可从几个节点的小集群到几千个节点的超大集群,让我们一起来学习Hadoop集群搭建吧。 Hadoop集群搭建 先决条件 确保在你集群中的每个节点上都安装了所...

Project Savanna:让Hadoop运行在OpenStack之上

Apache Hadoop基本上已经成为MapReduce实现的产业标准,并且被各个机构广泛采用,而Savanna项目旨在让用户可以在OpenStack上运行和管理Hadoop集群。值得一提的是,Amazon通过EMR(Elastic MapReduce)提供Hadoop服务已达数年之久。 用户需要给Sa...

2.1 搭建Hadoop分布式集群

第2章 Spark安装和集群部署 2.1 搭建Hadoop分布式集群 2.2 Spark安装和集群部署 2.3 测试Spark集群 Spark在生产环境中主要是部署在Linux的环境下,由于我们在Spark集群中会用到Hadoop集群的HDFS(Hadoop Distributed File System)文件系统,所以...

实现Hadoop集群性能优化,Hadoop机架感知如何配置?

本节和大家一起学习一下Hadoop集群方面的内容,主要介绍一下Hadoop集群网络性能优化的背景,及Hadoop配置等,欢迎大家一起来学习有关Hadoop集群方面的知识。 Hadoop集群网络性能优化:Hadoop机架感知实现及配置 背景 分布式的集...

Netflix开源Hadoop工具:日处理近万作业、上千TB数据

之前的报道中,从架构的角度剖析了Netflix的大规模Hadoop作业调度工具。其储存主要基于Amazon S3(Simple Storage Service),利用云的弹性来运行多个Hadoop集群的动态调整,从而应对不同类型的工作负载,这个可横向扩展的Hadoop平台即服...

克服部署挑战,让Hadoop和云成为最佳拍档

Hadoop 和云似乎是最佳搭档。它们都包含灵活和分布式的处理与存储,而且都带有一个灵活的实例系统。它们还使您能够根据数据和处理需求来扩大和收缩 Hadoop 集群。但这会引发各种管理与调度问题。本文将了解所有这些问题,...

青云QingCloud推出Hadoop集群服务 进一步完善大数据平台

...基础云服务商青云QingCloud(qingcloud.com)日前宣布,基于Hadoop的大数据集群服务现已正式推出。该服务包括三大核心组件,即HDFS分布式文件系统、YARN任务调度和集群资源管理系统,以及MapReduce并行计算系统。通过QingCloud Hadoop集...

Hadoop集群配置全程跟踪报道

本节和大家学习一下Hadoop集群配置以及在配置过程中遇到的一些问题,相信通过本节的介绍大家对Hadoop的配置有新的认识,让我们一来学习Hadoop集群配置吧。 Hadoop集群配置 hadoop的单机配置在hadoop的文档中已经有了详细的介绍...