大约有 559 项符合查询结果。 (搜索耗时:0.0131秒)

按时间排序 按相关性排序

Hadoop集群系列8:Eclipse开发环境设置

1、Hadoop开发环境简介 1.1 Hadoop集群简介   Java版本:jdk-6u31-linux-i586.bin   Linux系统:CentOS6.0   Hadoop版本:hadoop-1.0.0.tar.gz 1.2 Windows开发简介   Java版本:jdk-6u31-windows-i586.exe   Win系统:Windows 7 旗舰版   Eclipse软件...

Hadoop集群系列5:Hadoop安装配置

1、集群部署介绍 1.1 Hadoop简介   Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统(HDFS,Hadoop Distributed Filesystem)和MapReduce(Google MapReduce的开源实现)为核心的Hadoop为用户提供了系统底层细节...

Hadoop和Couchbase结合使用的技巧

Hadoop 和数据处理 Hadoop 将许多重要特性结合在一起,这使 Hadoop 对于将大量数据分解为更小、实用的数据块非常有用。 Hadoop 的主要组件是 HDFS 文件系统,它支持将信息分布到整个集群中。对于使用这种分布格式存储的信息,可...

Cloudera实现Hadoop过程中Hadoop设置揭秘

本节接着上节介绍Cloudera 实现Hadoop 的方法,本节主要介绍一下对Hadoop的相关设置,相信通过本节的介绍大家对Cloudera 实现Hadoop 方法有一定的了解。 设置主节点的Hadoop 设置JAVA_HOME Hadoop的JAVA_HOME是在文件/etc/conf/hadoop-env.sh中设...

前言(1)

前言(1) 本书目的在于帮助读者理解Hadoop,并用它解决大数据问题。能使用Hadoop这样的数据处理技术进行工作是令人激动的。对大规模数据集进行复杂分析的能力,曾一度被大公司和政府机构所垄断,而现在通过免费的OSS(ope...

Hadoop2.6.0自动化部署脚本(一)

1 概述 最近自己写了一个Hadoop自动化部署脚本,包括Hadoop集群自动化部署脚本和Hadoop增加单节点自动化部署脚本。需要快速部署Hadoop集群的童鞋可以使用该脚本。这些脚本我在用5台虚拟机进行了测试,如果在使用中还有bug,欢...

1.8 从MongoDB导入数据到HDFS

...mat类加载MongoDB中的数据导入HDFS中。 准备工作 使用Mongo Hadoop适配器最简单的方法是从GitHub上克隆Mongo-Hadoop工程,并且将该工程编译到一个特定的Hadoop版本。克隆该工程需要安装一个Git客户端。 本节假定你使用的Hadoop版本是CDH3...

1.7 从HDFS导出数据到MongoDB

...加载HDFS中的数据并收集到MongoDB中。 准备工作 使用Mongo Hadoop适配器最简单的方法是从GitHub上克隆 Mongo-Hadoop工程,并且将该工程编译到一个特定的Hadoop版本。克隆该工程需要安装一个Git客户端。 本节假定你使用的Hadoop版本是CDH...

Hadoop配置和启动Hadoop方法详解

本节和大家学习一下如何进行Hadoop配置与启动Hadoop方面的知识,相信通过本节的介绍大家对Hadoop配置和启动Hadoop方法有一定的认识,希望本节的介绍对你的学习有所帮助。 Hadoop配置与启动Hadoop Hadoop三种模式: StandaloneOperation...

Hadoop完整安装配置

前言* Hadoop是Apache开源组织的一个分布式计算开源框架,在很多大型网站上都已经得到了应用,如亚马逊、Facebook和Yahoo等等。对于我来说,最近的一个使用点就是服务集成平台的日志分析。服务集成平台的日志量将会很大,...