python爬虫抓取学术论文

可以先利用搜索引擎学习。简单爬虫不难，无非发起http访问，取得网页的源代码文本，从源代码文本中抽取信息。首先要自己会写代码。学习爬虫可以从下面一些知识点入手学习。1、http相关知识。2、浏览器拦截、抓包。3、python2 中编码知识，python3 中bytes 和str类型转换。4、抓取javascript 动态生成的内容。5、模拟post、get，header等6、cookie处理，登录。7、代理访问。8、多线程访问、python 3 asyncio 异步。9、正则表达式、xpath等。。。。10、scrapy requests等第三方库的使用。

方法/步骤

主要是两点或者三点第一个是爬虫的技术框架，这个比较好，理解了第二个是医疗数据内容以及可视化选择，就比如说医疗数据，你是用饼图还是柱状图去反映一些病情然后写一些代码实践上的技术考量，以及运行结果这就是核心了，然后照着论文框架套一下就可以了

别折腾了，不打算往爬虫方向发展的话没必要自己学，爬虫所需要的技术非常广泛、且对深度都有一定要求，不存在“快速学会”的情况。所有那些吹快速学会爬虫的培训班都是扯淡，那些课程学完后的水平连傻瓜式爬虫工具都不如，有啥意义？再说了，你们写论文、做研究又不会需要什么很大量、很高频、很实时的数据，那些傻瓜式爬虫工具完全足够了，点几下就能出数据。