使用simhash算法对网页去重 如果搜索文档有很多重复的文本，比如一些文档是转载的其他的文档，只是布局不同，那么就需要把重复的文档去掉，一方面节省存储空间，一方面节省搜索时间，当然搜索质量也会提高。 simhash是google用来处理海量文本去重的算法。 搜索 2023-12-07 54 点赞 0 评论 81 浏览
