feil110的专栏

原文：http://apps.hi.baidu.com/share/detail/6912773 翻译：MapReduce：一个重大的倒退 　　这篇文章是由databasecolumn的几个数据库大牛写的，简要的介绍了MapReduce以及将其与现代数据库管理系统进行了对比，并指出了一些不足之处。本文纯属学习性翻译，从多方面来了解MapReduce，不代表完全赞同原文的...

有一台式机，希望能模拟一个三四台的小集群，因为装的ubuntu，查了一下资料，kvm能充分发挥cpu(cpu支持vt-x技术)，工作如下：   找到了以下两篇： http://springsfeng.iteye.com/blog/1481861 http://article.yeeyan.org/view/90729/347306   按照第一篇走下来，最终成功，需要记一下，不是一...

前面已经有一篇记述了hadoop-plugin for eclipse的安装，但是仍受限于run on hadoop不能工作，而且是在虚拟机内部，没有试过在虚拟机外用eclipse连接虚拟机内部的hdfs 为解决以上两问题，总结这两天的工作情况 一、结合网上的说法，plugin是用eclipse europa开发的，可以和这个版本良好结合，试过，确实可以使用run on hadoop了。 二...

http://varyall.iteye.com/blog/763783 http://www.docin.com/p-203214495.html http://blog.csdn.net/fly542/article/details/6817444 《hadoop实战指南》 HDFS实验 设计前提与目标 体系结构 保证可靠性 常用操作 ...

ftp架设 http://blog.csdn.net/Ericherry/article/details/6224281 hive http://xm-king.iteye.com/blog/1088422 http://wenku.baidu.com/view/90dad7659b6648d7c1c7460e.html 平台架设 http://rdc.taobao.com/team/...

摘要：针对大规模数据分析的mapreduce技术已被广泛意识和研究，我们已经看到了云数据服务系统数量的爆炸性增长。这些新系统是所谓“云ＯＬＴＰ”应用，虽然它们并不支持ＡＣＩＤ事务。典型例子如BigTable,PNUTS,Cassandra,HBase,Azure,CouchDB,SimpleDB,Voldemort,等等。而且它们被应用于不同于传统服务工作量的很多领域（如ＴＰＣ－Ｃ）。The nu...

首先，ycsb放狗，第一个就是 https://github.com/brianfrankcooper/YCSB/wiki 新东西一般只有国外首先有技术文档，所以一定要耐着性子看英文，开个词霸，google翻译 从getting started开始 obtain YCSB source 首先是下载一个压缩包，或者安装git(类似svn)下载源代码，再build build the ba...

根本目的是实时的查询速度   从两方面来看： 一、HBase自身的原理，机制。 二、索引的原理机制。   一、HBase： reference:   HBase技术介绍｜淘宝技术博客 http://www.searchtb.com/2011/01/understanding-hbase.html HBASE松散数据存储设计初识｜放翁（文初）的一亩三分地 http://w...

以此庆贺重拾erlang   重看《erlang程序设计》一书，从安装开始，已经试过windows安装，这次先试linux安装，然后卸载掉 安装命令用 apt-get install erlang     安装完成后，可以用erl命令查看安装好的erlang相关信息，并进入erlang shell 退出命令是先ctrl+c，然后选A   卸载erlang命令： ...

原文：http://blog.csdn.net/jackydai987/article/details/6227365   MapReduce流程分析 接触Hadoop已经1年了，一直没时间好好学习下。这几天打算好好研究下Hadoop.本来是想打算改写下TextInputFormat。看了源码后，反而更迷糊了。所以干脆连MapReduce的整个流程写下来。也当为这几天的学习作个总结。 ...

前几天一直无进展，今天也弄了半天，但是出现了转机，不再是那个“connection to myubuntu(这里是自己起的名字) org/apache/hadoop/configuration/configuration”的错误了，因为我当时直接双击下方那个view里的图标，结果报出的错误是An internal error occurred during: “Map/Reduce locatio...

java.lang.NoClassDefFoundError: org/apache/commons/configuration 在晚上自己的机器里重复时发现上述问题，将hadoop/lib下的包copy到hbase/lib下就可以了  

英文原文：How to beat the CAP theorem 作者: Nathan Marz  来源: 《程序员》 本篇转自：http://kb.cnblogs.com/page/124567/     CAP 定理是数据系统设计的基本理论，目前几乎所有的数据系统的设计都遵循了这个定理。但 CAP 定理给目前的数据系统带来了许多复杂的、不可控的问题，使得数据系统的设计越来越复杂。Tw...

主要是这两篇文章： http://varyall.iteye.com/blog/763886 http://hi.baidu.com/feng2211/blog/item/4ab8a2095eb1b9a42eddd48e.html     在我的实践过程中，按照前者的顺序，ant compile->ln -sf ... ->ant package 在ant package时...

其实在前面还有一段，没有保存下当时的经历，现在将配置项保存一下 首先好像遇到过一个说hbase与hadoop版本不一致的问题(rpc问题)，于是将hadoop的core包copy到了hbase的lib下，代替已有的那个hadoop-core包 hbase-site.xml     <?xml version="1.0"?> <?xml-stylesheet type=...

去看了日志文件 2011-11-01 23:44:06,998 INFO org.apache.zookeeper.server.PrepRequestProcessor: Got user-level KeeperException when processing sessionid:0x1336304bc350000 type:delete cxid:0x15 zxid:0xffffffff...

传送门：http://blog.sina.com.cn/s/blog_4a1f59bf0100utvd.html   主要内容我不用帖了，其实让我更有所得（或有所思）的是后面的评论：(贴一下，链接同上)   medcl2011-08-31 15:09:40 [举报] Overnight success takes long time.~~ 小史的窗户2...