揭秘，百度、Google起的“金饭碗”是啥

百度的市值有781.26亿美元，换算成人民币就是五千亿

谷歌的市值有1.55万亿美元，就是10万亿人民币

10万亿是什么概念呢，大概就等于韩国1年的GDP总额了

关于这2家公司，相信很多小伙伴了解的最多的他们的搜索引擎网站了

而在这2两家广告收入都占据了80%以上，广告的展示位置基本上位于他们的搜索页面

虽然这个些广告让用户非常反感，但是还是要保住这广告位，因为这是他们的金主爸爸。而他们的金主爸爸看上的就是他们的搜索引擎结果。

那么搜索引擎所采取的技术原理是什么呢？就是爬虫，这朴实的技术 。

从网络的诞生始，还没有百度之类的搜索引擎，当时写了网站需要别人访问的时候。

先把地址给对方，后来就有些有搞了个网站，专门整理这些信息，就比如hao123网站。

但这样一个个的找和录入系统太麻烦了，干脆就写了个程序去网络上自动抓取网址。这个程序就是网络爬虫。

我们熟悉的谷歌、百度等搜索引擎便应运而生了，搜索引擎便是最早广泛应用爬虫技术的产品。

因为他们就是像蜘蛛一样在网络上爬取数据，所以称他们为Spider,搜索引擎的蜘蛛会从一个网站出发，

爬取网上上的关键字与所有的网址,接着又出发到其他的网址上去爬取关键字与网址，周而复始，一线大网就逐渐形成了

谷歌百度的服务器中会保存网址与对应的关键词，当你输入关键字的时候，便会从数据中搜索与显示对应的网址。

所以这个2家公司的发家的“金饭碗”就是爬虫技术了

还有整理的很多Python资料，可以系统学习：

资料领取：评论“资料”+后台主动打招呼即可！