
Hadoop
escaflone
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hadoop 中为什么使用Interface Writable 代替 Serializable
1、Writable 提供比 Serializable 更高 比例的压缩 2、Serializable 中有太多hadoop所无需关心的元数据 3、Doug认为, 他需要对整个序列化的过程全部掌控。 4、既然JAVA中,int有包装类Integer,那再多一个IntWriteable 也是可以理解的 5、如果用户使用Integer, 也完全可以在hadoop中完美序列化。 参考原创 2013-06-08 10:31:49 · 1358 阅读 · 0 评论 -
关于Hadoop 的配置信息
1、启动Hadoop 必须要有几个配置文件,作为NameNode必须要有core-site.xml(不同版本可能不同),来指明nameNode的监听端口。 2、运行MapReduce测试程序时,如果没有hadoop命令,而是在IDE或是Java环境下,由于不知道配置文件在哪里,无法获取nameNode的监听端口,但是有默认值,默认值为本机的9000端口。 3、如果在IDE中运行测试,需要在主类原创 2013-06-20 23:59:23 · 1316 阅读 · 0 评论 -
hive 安装和使用
1、安装mysql netstat -tap|grep mysql 查看原创 2014-11-12 12:43:23 · 1548 阅读 · 0 评论