爬取文献论文

查找文献去众多中外文献数据库查找下载，需要文献数据库使用权限，一般高校或多或少都会收录些文献数据库资源，如：知网、万方、维普、读秀/超星、Wiley、PubMed、SpringerLink、Web of Science、Elsevier（sciencedirect）、ProQuest学位论文全文数据库等等。在校生可利用自己学校收录的数据库资源下载文献。超出学校收录范围的文献是下载不了的。

校外人员可以用百度学术、谷歌学术镜像查找文献，但这两个网站都是只可以下载部分文献，最大的作用是检索文献。还可以用文献党下载器，文献数据库资源整合平台，可直接去文献来源数据库中下载文献，包括百度学术和谷歌学术下载不了的文献。学校资源不够用的话，也可以用这个试试。

例如下载ProQuest中的学位论文

在文献下载器资源库，双击“ProQuest”即可进入该数据库查找下载文献

进入ProQuest学位论文全文数据库：

检索到需要的文献，点击PDF下载全文

一篇国外学位论文用文献党下载器在校外就下载好了，共计140页

途径1、自己学校的图书管的文献数据库资源途径2、学术文献下载器（）的文献数据库资源文献数据库资源包括：知网、万方、维普、谷歌学术、Web of Science、PubMed 、Elsevier（sciencedirect）、EI(工程索引 )、Wiley、EBSCO、ProQuest（国外博士论文）、IEEE等等。

论文查找文献的途径有：中国知网、百度学术、万方数据库、Pubmed

1、中国知网。输入主题或者关键词进行查询，这也是最常用的一种方式，中国知网也是国内最权威、最常用的一个数据库。

2、百度学术。百度学术上面有很多中文文献，百度学术搜索可检索到收费和免费的学术论文，可以通过时间筛选、标题、关键字、摘要、作者、出版物、文献类型、被引用次数等指标进行精准检索。

3、万方数据库。万方数据库也是国内较大的一个文献数据库，可以输入相应的关键词进行查找。

4、Pubmed网站。Pubmed网站是较全的英文文献数据库，在里面输入文献DOI号，文章题目即可。

以上内容参考：百度百科-百度学术   中国知网

用爬虫框架scrapy，三步，第二步为核心

如果你想知道更多关于python学习，你可以看一看 疯狂python讲义 这本书，书中也有上面的内容和更多python信息