会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
newbiezhang
博客园
首页
联系
订阅
管理
2015年2月27日
【hbase】使用thrift with python 访问HBase
摘要: HBase 版本: 0.98.6thrift 版本: 0.9.0使用 thrift client with python 连接 HBase 报错: 1 Traceback (most recent call last): 2 File "D:\workspace\Python\py\hellow...
阅读全文
posted @ 2015-02-27 15:23 newbiezhang
阅读(5016)
评论(1)
推荐(0)
2014年12月8日
【Hadoop学习】Apache Hadoop ResourceManager HA
摘要: 简介本向导简述了YARN资源管理器的HA,并详述了如何配置并使用该特性。RM负责追踪集群中的资源,并调度应用程序(如MapReduce作业)。Hadoop2.4以前,RM是YARN集群中的单点故障。HA特性以Active/Standby RM对的形式对集群添加了冗余,从而消除了这种单点故障。架构RM...
阅读全文
posted @ 2014-12-08 12:40 newbiezhang
阅读(1849)
评论(0)
推荐(0)
2014年12月5日
【Hadoop学习】HDFS中的集中化缓存管理
摘要: Hadoop版本:2.6.0本文系从官方文档翻译而来,转载请尊重译者的工作,注明以下链接:http://www.cnblogs.com/zhangningbo/p/4146398.html概述HDFS中的集中化缓存管理是一个明确的缓存机制,它允许用户指定要缓存的HDFS路径。NameNode会和保存...
阅读全文
posted @ 2014-12-05 15:34 newbiezhang
阅读(5740)
评论(0)
推荐(0)
【Hadoop学习】Super用户以其他用户的名义执行操作
摘要: Hadoop版本:2.6.0本文系从官方文档翻译而来,转载请尊重译者的工作,注明以下链接:http://www.cnblogs.com/zhangningbo/p/4146410.html简介本文描述了超级用户如何用一种安全的方法以其他用户的名义提交作业或者访问HDFS。使用场景下一节描述的代码示例...
阅读全文
posted @ 2014-12-05 12:41 newbiezhang
阅读(1942)
评论(0)
推荐(0)
【Hadoop学习】HDFS 短路本地读
摘要: Hadoop版本:2.6.0本文系从官方文档翻译而来,转载请尊重译者的工作,注明以下链接:http://www.cnblogs.com/zhangningbo/p/4146296.html背景在HDFS中,通常是通过DataNode来读取数据的。但是,当客户端向DataNode请求读取文件时,Dat...
阅读全文
posted @ 2014-12-05 12:24 newbiezhang
阅读(3382)
评论(0)
推荐(0)
2014年12月2日
【Spark学习】Apache Spark部署之Mesos
摘要: Spark版本:1.1.1
阅读全文
posted @ 2014-12-02 17:19 newbiezhang
阅读(175)
评论(0)
推荐(0)
【Spark学习】Apache Spark部署之Amazon EC2
摘要: 摘要: Spark版本:1.1.1
阅读全文
posted @ 2014-12-02 17:18 newbiezhang
阅读(323)
评论(0)
推荐(0)
【Spark学习】Apache Spark部署之Standalone Mode
摘要: 摘要: Spark版本:1.1.1
阅读全文
posted @ 2014-12-02 17:16 newbiezhang
阅读(134)
评论(0)
推荐(0)
【Spark学习】Apache Spark部署之Spark on YARN
摘要: Spark版本:1.1.1
阅读全文
posted @ 2014-12-02 17:15 newbiezhang
阅读(175)
评论(0)
推荐(0)
【Spark学习】使用Maven创建Spark
摘要: Spark版本:1.1.1本文系从官方文档翻译而来,转载请尊重译者的工作,注明以下链接:http://www.cnblogs.com/zhangningbo/p/4137986.html
阅读全文
posted @ 2014-12-02 17:10 newbiezhang
阅读(643)
评论(0)
推荐(0)
【Spark学习】Apache Spark for 第三方Hadoop分发版
摘要: Spark版本:1.1.1本文系从官方文档翻译而来,转载请尊重译者的工作,注明以下链接:http://www.cnblogs.com/zhangningbo/p/4137979.html
阅读全文
posted @ 2014-12-02 17:08 newbiezhang
阅读(256)
评论(0)
推荐(0)
【Spark学习】Apache Spark配置
摘要: Spark版本:1.1.1本文系从官方文档翻译而来,转载请尊重译者的工作,注明以下链接:http://www.cnblogs.com/zhangningbo/p/4137969.htmlSpark配置Spark属性动态加载Spark属性查看Spark属性可用属性大部分用于控制内部设置的属性都有合理的...
阅读全文
posted @ 2014-12-02 17:03 newbiezhang
阅读(3779)
评论(0)
推荐(0)
【Spark学习】Apache Spark监控与测量
摘要: Spark版本:1.1.1本文系从官方文档翻译而来,转载请尊重译者的工作,注明以下链接:http://www.cnblogs.com/zhangningbo/p/4137952.html
阅读全文
posted @ 2014-12-02 17:00 newbiezhang
阅读(264)
评论(0)
推荐(0)
2014年12月1日
【Spark学习】Apache Spark集群硬件配置要求
摘要: Spark版本:1.1.1本文系从官方文档翻译而来,转载请尊重译者的工作,注明以下链接:http://www.cnblogs.com/zhangningbo/p/4135912.html目录存储系统本地磁盘内存网络CPU核数 Spark开发人员收到的最常见的问题就是如何为Spark做硬件配置。然而恰...
阅读全文
posted @ 2014-12-01 20:29 newbiezhang
阅读(5712)
评论(1)
推荐(0)
【Spark学习】Apache Spark作业调度机制
摘要: Spark版本:1.1.1本文系从官方文档翻译而来,转载请尊重译者的工作,注明以下链接:http://www.cnblogs.com/zhangningbo/p/4135905.html目录概述不同应用程序间的资源调度同一应用程序内的资源调度Fair调度池调度池的默认行为调度池的属性配置概述 Spa...
阅读全文
posted @ 2014-12-01 20:28 newbiezhang
阅读(4062)
评论(0)
推荐(0)
下一页
公告