Hadoop学习小结

还在学校的时候,就知道Hadoop的存在了。

2012年在公司实习的时候,买了《Hadoop权威指南第2版》,大致看了下。

今年,抽空也大致喵了几眼。

最大的感悟就是:光看不做,还是不行。

Hadoop最坑最脑残的地方就是,默认不支持在Windows下运行。我的笔记本用的是Windows7系统。

这样,只好安装了VMware,然后安装Ubuntu系统,想通过这种方式来搭建环境。

 

Hadoop这个大数据处理框架包含了好多内容,MapReduce,HDFS等等。我现在只有个模糊的理解,想通过写代码,再反复看书和看文档的方式,来加深对Hadoop等云计算概念和技术的理解。

我觉得未来,云计算/大数据处理技术将会变得非常平常,就像今天使用Java开发一样。

IT技术实在是太多了,现在真心学得有点累了,不断思考和实践,IT技术之路要怎么搞。

本周,参加了Oracle Endeca的培训。培训老师说,用Oracle的一些技术,根本不用考虑什么大数据,把一切东西都加入到内存中,现在已经有32T的内存了,你敢信。

我觉得这些话也是有道理的,如果不考虑金钱和成本,确实不一定要什么云计算框架。

现实是,32T内存性价比太低,仍然有极限,普通企业不敢用,大型企业不能用(大型企业数据量太大了)。


小雷FansUnion-博学的互联网技术工作者

2014年7月1日

北京-昌平

原文地址:https://www.cnblogs.com/qitian1/p/6463137.html