我玩的很开心的博客

Linux、Spark、Hadoop、Hbase、Hive、kafka...常用操作命令一、linux*shell命令二、Spark*三、hadoop*四、zookeeper*五、python*六、kafka*七、mysql*函数：八、hbase*命令空间：建表语句：九、hive*一、linux*查看磁盘信息： fdisk -l查看内存： df-h   free -h递归创建文件夹： mkdir -p查看日期函数： date --help例

简述Spark基础及架构一、spark简介二、spark技术栈三、spark架构一、spark简介spark是基于内存的分布式计算框架，特点是快速、易用、通用及多种运行模式。快速：基于内存数据处理，比MR快100个数量级以上（逻辑回归算法测试）基于硬盘数据处理，比MR快10个数量级以上易用:支持Java、Scala、Python、R语言交互式shell方便开发测试通用性:一栈式解决方案：批处理、交互式查询、实时流处理、图计算及机器学习多种运行模式：YARN、Mesos