Python爬虫入门教程 什么是网络爬虫

其实，我们都知道，爬虫这个东东，每个编程软件都能写，但是为什么选择的是Python？而不是其他语言呢？

现在商业上最火的也是Python，一是中文帮助文档比较多，还有个速度上仅次于lua语言，当然lua语言的使用者没有Python的多，也有一定原因导致lua中文帮助文档比较少，使用者多了，当然就更多的大神对python进行了许多改造，在爬虫这块优势就更佳了。

那什么是网络爬虫？

（又称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的免费精选名字大全还有蚂蚁、自动索引、模拟程序或者蠕虫。

其实通俗的讲就是我们可以做一个智能软件然后到其他网页抓取我们所需要的资源或者内容，当然代表就有google、百度、360、今日头条、神马等搜索引擎作为代表。搜索引擎就好比古时候专门给朝廷收集信息工具或者人，只是随着科技越来越发达，我们只需要写一个智能蜘蛛自己跑去抓或者收集就可以了。

它们（ google、百度、360、今日头条、神马等搜索引擎 ）每天将全世界的数据集中起来，建立相应的索引，然后我们就可以根据自己想知道的东西搜索即可。

爬虫工作流程：

工作流程当然细节的东西，我们先不讲，只能抽象的简单说说，也和编程流程差不多：

1、模拟用户请求网页。

2、获取相关数据。

3、保存网页数据。

爬虫学习方法：

我们在C/C++教程中也有提到学习编程语言的诀窍:多实践，多实践，多实践。重要的事情说三遍，在实践中，我们才能发现自己的问题在哪里，也是学习编程语言最快的方法之一，当然，天才不实践也会荒废。所以不要想象这程序是怎么样的，想象这个这么简单，其实，当你真正操作起来的时候，你会发现，和你想的完全是两码事。