Hadoop 2.2.0 (YARN)搭建笔记



Hadoop 2.2.0 (YARN)搭建笔记

最近工作需要,摸索着搭建了Hadoop 2.2.0(YARN)集群,中间遇到了一些问题,在此记录,希望对需要的同学有所帮助。
本篇文章不涉及hadoop2.2的编译,编译相关的问题在另外一篇文章《hadoop 2.2.0 源码编译笔记》中说明,本篇文章我们假定已经获得了hadoop 2.2.0的64bit发行包。
由于spark的兼容问题,我们后面使用了Hadoop 2.0.5-alpha的版本(2.2.0是稳定版本),2.0.5的配置有一点细微的差别,文中有特别提示。
1. 简介
【本节摘自http://www.cnblogs.c[......]

Read more

Hadoop 2.2.0 (YARN)搭建笔记



Hadoop 2.2.0 (YARN)搭建笔记

最近工作需要,摸索着搭建了Hadoop 2.2.0(YARN)集群,中间遇到了一些问题,在此记录,希望对需要的同学有所帮助。
本篇文章不涉及hadoop2.2的编译,编译相关的问题在另外一篇文章《hadoop 2.2.0 源码编译笔记》中说明,本篇文章我们假定已经获得了hadoop 2.2.0的64bit发行包。
由于spark的兼容问题,我们后面使用了Hadoop 2.0.5-alpha的版本(2.2.0是稳定版本),2.0.5的配置有一点细微的差别,文中有特别提示。
1. 简介
【本节摘自http://www.cnblogs.c[......]

Read more

hadoop2.2.0在windows上安装

hadoop2.2.0在windows上安装

Good news for Hadoop developers who want to use Microsoft Windows OS for their development activities. Finally Apache Hadoop 2.2.0 release officially supports for running Hadoop on Microsoft Windows as well. But the bin distribution of Apache Hadoop 2.2.0 release does not c[......]

Read more

hadoop2.2.0 centos 编译安装详解

hadoop2.2.0 centos 编译安装详解

搭建环境:Centos x 6.4 64bit

1、安装JDK

我这里用的是64位机,要下载对应的64位的JDK,下载地址:http://www.oracle.com/technetwork/cn/java/javase/downloads/jdk7-downloads-1880260-zhs.html,选择对应的JDK版本,解压JDK,然后配置环境变量,

[html] view plaincopy在CODE上查看代码片派生到我的代码片
vi /etc/profile

注:这里有的人喜欢配置在当前用户里,我这里[......]

Read more

win7 安装hadoop2.2.0

win7 安装hadoop2.2.0

想了解hadoop,所以就下了最新的文件,搭建相关的环境,以下为自己在win7上搭建hadoop的相关步骤。

1、下载hadoop,用winRAR解压。(路径不能有空格)

2、安装java,此处就不做讲解了。(java路径不能有空格)

3、配置hadoop的环境变量HADOOP_HOME=”HADOOP的安装目录”

4、在环境变量的PATH中加入HADOOP的安装目录/bin

5、修改hadoop目录下etc/hadoop/hadoop-env.cmd文件中的JAVA_HOME变量为当前java的安装路径。

6、下[......]

Read more

java list如何remove删除元素

java list如何remove删除元素

在java中对list进行操作很频繁,特别是进行list启遍历,这些操作我们都会,也很熟悉,但是对java中list进行删除元素,remove list中的元素就不怎么熟悉了吧,可以说很陌生,是实际操作中也很容易出错,先看看下面这个java中如何remove list 中的元素吧.

[java] view plaincopy在CODE上查看代码片派生到我的代码片
package lm;

import java.util.ArrayList;
import java.util.List;

public class test[......]

Read more

Java数组技巧攻略

Java数组技巧攻略

本文分享了关于Java数组最顶级的11大方法,帮助你解决工作流程问题,无论是运用在团队环境或是在私人项目中,你都可以直接拿来用!

0. 声明一个数组(Declare an array)
[js] view plaincopy
String[] aArray = new String[5];
String[] bArray = {“a”,”b”,”c”, “d”, “e”};
String[] cArray = new String[]{“a”,”b”,”c”,”d”,”e”};
1. 在Java中输出一个数组(Print an array in Ja[......]

Read more

CentOS更换网易yum源方法

CentOS更换网易yum源方法

1、下载新源及将本地源备份
[root@localhost ~]# cd /etc/yum.repos.d/
[root@localhost ~]# wget http://mirrors.163.com/.help/CentOS6-Base-163.repo
[root@localhost ~]# mv CentOS-Base.repo CentOS-Base.repo.bak
[root@localhost ~]# mv CentOS6-Base-163.repo CentOS-Base.repo
2、yum源更新
[root@local[......]

Read more

Hibernate标识符属性(主键)生成策略全析

Hibernate标识符属性(主键)生成策略全析

数据库中的主键能够唯一识别一条记录,它可以是一个字段也可以是多个字段的组合。主键的主要作用是标识表中的一条记录,还有和其他表中的数据进行关联。数据库中的主键类型必须符合唯一性约束和非空约束。作为附加属性,主键应该尽可能简洁,不要包含过多属性。根据这个原则,主键可以分为自然主键和代理主键。
自然主键是数据表中有逻辑含义的字段,比如身份证号来唯一确定一条个人记录。也可以通过学号和课程号来唯一确定成绩。使用自然主键时如果业务发生变化则对数据库调整是极其麻烦的,所以数据库设计使用代理主键是非常好的选择。代理主键是一个和业务无关的流水号,一般采用[......]

Read more

Java栈的实现(顺序栈、链式栈)及栈的应用

Java栈的实现(顺序栈、链式栈)及栈的应用

1. 顺序栈的实现
顺序栈实现1
[java] view plaincopy在CODE上查看代码片派生到我的代码片
package lang;

import java.io.Serializable;
import java.util.Arrays;

/**
* @ClassName: ArrayStack
* @Description: 顺序栈
* @date 2014年1月20日 上午8:47:19
* @param <T>
*/
public class ArrayStack<T>[......]

Read more