大数据(014)Hadoop-MR编程 -- 【使用hadoop计算网页之间的PageRank值----概念】

本文介绍了Google专有的PageRank算法,详细解释了其衡量网页重要性的原理,并通过实例展示了PageRank如何工作。此外还介绍了PageRank的计算过程及其收敛条件。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

一、什么是PageRankPageRPageRankankPageRank

 

        –PageRankGoogle专有的算法,用于衡量特定网页相对于搜索引擎索引中的其他网页而言的重要程度
        –Google创始人拉里·佩奇和谢尔盖·布林于1997年创造的
        –PageRank实现了将链接价值概念作为排名因素。
二、原理
        – ====投票
                •PageRank让链接投票,到一个页面的超链接相当于对该页投一票。
        –入链数量
                •如果一个页面节点接收到的其他网页指向的入链数量越多,那么这个页面越重要。
        –入链质量
                •指向页面A的入链质量不同,质量高的页面会通过链接向其他页面传递更多的权重。所以越是质量高的页面指向页面A,则页面A越重要。
三、举例说明
        如下图所示,A、B、C、D分别代表四个网页。A指向B代表A网页中有一个指向B网页的超链接。
 
四、算法
        –初始值
              •每个页面设置相同PR
              •Googlepagerank算法给每个页面的PR初始值为1
       –迭代递归计算(收敛)
              •Google不断的重复计算每个页面的PageRank。那么经过不断的重复计算,这些页面的PR值会趋向于稳定,也就是收敛的状态
              •在具体企业应用中怎么样确定收敛标准?
                     –1、每个页面的PR值和上一次计算的PR相等
                     –2、设定一个差值指标(0.0001)。当所有页面和上一次计算的PR差值平均小于该标准时,则收敛。
                     –3、设定一个百分比(99%),当99%的页面和上一次计算的PR相等
       –修正PageRank计算公式
              •由于存在一些出链为0,也就是那些不链接任何其他网页的网,也称为孤立网页,使得很多网页能被访问到。因此需要对PageRank公式进行修正,即在简单公式的基础上增加了阻尼系数(damping factorqq一般取值q=0.85
       –完整PageRank计算公式

 

 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值