用python写一个文章查重

人与人相处多一些真诚，少一些套路，不要把别人当傻子，只是别人不想和你计较罢了。

上一篇： python3比较版本号方法封装 下一篇： configobj读写.ini配置文件方法封装

下面封装的方法是用于检查列表、元组、字符串中是否有重复元素，only_show_repeat方法返回一个只有重复元素的列表，show_repeat_count方法返回一个以重复元素为key，重复次数为value的字典，相当于查重。内有注释自己看吧。

如果感觉本文对您有帮助可以点个赞哦

本文仅供交流学习，请勿用于非法途径

仅是个人意见，如有想法，欢迎留言

假设你的文件名是a.txt，写到b.txt

给定一个或多个搜索词，如“高血压 患者”，从已有的若干篇文本中找出最相关的(n篇)文本。 文本检索（text retrieve）的常用策略是：用一个ranking function根据搜索词对所有文本进行排序，选取前n个，就像百度搜索一样。 结巴分词后的停用词性 [标点符号、连词、助词、副词、介词、时语素、‘的’、数词、方位词、代词] 对一篇文章分词、去停用词 对目录下的所有文本进行预处理，构建字典