1、TF-IDF解释
TF-IDF(Term frequency–inverse document frequency),中文翻译就是词频 - 逆文档频率,是一种用来计算关键词的传统方法。
TF(Term Frequency):TF 的意思就是词频,是指某个词(Term)在一篇新闻中出现的次数。
考虑一些非常常见的词,比如说 “你的”“我的”“今天” 这种词,可能在一篇新闻中会反复出现,但是这种词明显并不重要,于是有了 IDF。
IDF(Inverse Document Frequency):IDF 称为逆文档频率,这个词我们用公式来看一下可能更容易理解。
逆文档频率(IDF)=log(新闻的总数量包含某个词的新闻总量+1)逆文档频率(IDF)=log(\frac {新闻的总数量}{包含某个词的新闻总量+1})逆文档频率(IDF)=lo