学习爬虫需要哪些知识储备？

学一门计算机语言，首先要了解它的底层实现机制和程序处理过程，即它的设计思想。如果你刚开始接触某一种语言，你当然不需要对它进行深入的研究，但是你也应该有一个Python的知识框架，在接下来的学习中，你应该不断地充实和完善这一框架，就像建造一座建筑一样，除了用Python做代理外，还需要特别注意以下几点。
1.基本网页：
基本的HTML语言知识(了解href等大学计算机课程)
学习网站(POSTGET)分包概念
学习一些js的知识，以便理解动态网页(当然，如果你自己能理解的话会更好)
2.有些分析语言准备分析网页的内容。
第1个正则表达式：背包技术，而且必须是最基本的。
XPATH分析语言，表达清晰简单，掌握后基本可以不用规则即可。
Beautifulsoup：美汤模块分析web神器，如果没有使用scrapy框架(如后面提到的scrapy)和request、urllib等模块(以后将会详细介绍)，就可以编写各种小型爬虫脚本。
3、充分了解分析和编译两种语言的特点和区别。
转换语言：例如C/C++，在运行之前就有一个独立的转换过程，可以将其转换为二进制机器语言的执行文件(.exe)，之后不需要再进行转换，效率更高。其特点是一次翻译多个运行，程序执行速度快，但是由于没有虚拟机的中间部分，只能翻译为符合本机指令集的可执行文件，因此不能支持跨平台。此外，它还能发现语法错误，数据类型转换，变量类型匹配等，特别是对数据类型有明确的检测，因此也被归为强类型语言。
分析性语言：例如Java/Python，每次运行时，源代码将被转换为字节码(bytecode)文件(.pyc/.javac)，而不是二进制机器语言。接着，字节码被交给虚拟机(jvm/pvm)处理，然后，根据平台的不同，编译与当前平台指令集兼容的机器码。对于Java和Python来说，这也是实现跨平台优势的基本方法，但是程序执行效率相对较低。此外，在修改之前，解析语言中的代码错误只会在运行时出现。
诸如ASP/PHP/Javascript这样的脚本语言也需要相应的脚本引擎来支持分析和执行。
总之，为了更好地学习一种语言，需要从理论到实践的双向结合，才能写出符合风格的程序。做好了充分的知识储备之后，选择像极光爬行器这样的优质辅助工具让您的学习更高效。

文章部分内容来源于网络，联系侵删*
相关链接：http://h.jiguangdaili.com/?utm-source=xy&utm-keyword=?1

标签：分析,转换,语言,哪些,Python,知识,爬虫,学习,储备
来源： https://blog.csdn.net/weixin_46168385/article/details/114983016