浅谈Hive性能调优

        Hive作为Hadoop大数据平台上一种重要的数据仓库工具,由于其使用类SQL查询语言HQL,使得大部分分析人员不必花费大量精力来开发Map-Reduce程序即可进行大数据分析,因而在Hadoop生态圈占有重要的一席之地,并得到了业界广泛的应用。

Scala/Java Development Notes

Get app root path

System.getProperty("user.dir")

Linux常用命令备忘录

查看linux系统版本号

lsb_release -a

cat /etc/issue

uname -a
Linux lvsbastion300.lvs.ebay.com 2.6.32-279.22.1.el6.x86_64 #1 SMP Sun Jan 13 09:21:40 EST 2013 x86_64 x86_64 x86_64 GNU/Linux

cat /proc/version
Linux version 2.6.32-279.22.1.el6.x86_64 (mockbuild@x86-012.build.bos.redhat.com) (gcc version 4.4.6 20120305 (Red Hat 4.4.6-4) (GCC) ) #1 SMP Sun Jan 13 09:21:40 EST 2013

Hadoop安装问题总结

一、ssh 无密码登录问题

需注意的是authorized_keys这个文件生成以后需要chmod 600,否则ssh localhost仍然需要密码

Shell获取系统时间

获得当天的日期

date +%Y-%m-%d

输出: 2011-07-28