cakecc2008的专栏

设置环境变量: .bash_profile  PATH=$PATH:$HOME/bin:/home/hadoop/jdk1.8.0_111/bin JAVA_HOME=/home/hadoop/jdk1.8.0_111 export JAVA_HOME export PATH 设置类目录：vi conf/hadoop-env.sh  export HADOOP_CLAS

在HDFS中复制数据，最普通的命令是Hadoop fs -cp，但是这是一个单线程的复制方式，如果需要复制一个很大的目录和文件，需要时间将比较长。 其实Hadoop还提供了一个更加高效的复制数据命令 Hadoop distcp 源目录 目标目录 测试在10个节点的集群上复制一个24G的目录，使用Hadoop fs -cp用了7分钟，而用Hadoop distcp只用了不到1分钟，速度快了将近1

zookeeper管理数据库连接信息 本文将讲解如何利用zookeeper来管理项目中的数据库连接信息，即将数据库的IP、账号密码等信息存储在zookeeper中，这样的好处是可以将多个工程的数据库连接集中管理，而zookeeper本事又是分布式的，所以可靠性又有保障。 一、安装zookeeper 1、下载zookeeper 可以通过官方网站或者国内镜像下载： 官方网站：ht...