TF-IDF
TF-IDF:一种用于信息检索与数据挖掘的常用加权技术
terms frequency-inverse doc-ument frequency
这篇精读的论文用了这个方法:202403.GAT_AMD:精读笔记
网上随便找的两个教程:
机器学习:生动理解TF-IDF算法 - 知乎
用通俗易懂的方式讲解:TF-IDF算法介绍及实现 - 知乎
tf-idf(英语:term frequency–inverse document frequency)是一种用于信息检索与文本挖掘的常用加权技术。tf-idf是一种统计方法,用以评估一字词对于一个文件集或一个语料库中的其中一份文件的重要程度。字词的重要性随着它在文件中出现的次数成正比增加,但同时会随着它在语料库中出现的频率成反比下降。tf-idf加权的各种形式常被搜索引擎应用,作为文件与用户查询之间相关程度的度量或评级。除了tf-idf以外,互联网上的搜索引擎还会使用基于链接分析的评级方法,以确定文件在搜索结果中出现的顺序。
GAT_AMD也用了(结合LSO)
tf-idf是一种统计方法,用以评估一字词对于一个文件集或
一个语料库中的其中一份文件的重要程度。它是一种用于
信息检索与文本挖掘的常用加权技术。