很多想要從事IT行業(yè)的新人或者想要接觸學(xué)習(xí)編程的小白都會(huì)聽到這么一個(gè)詞——爬蟲。很多想要接觸的女生一聽到這個(gè)詞，立刻斷絕了對(duì)IT行業(yè)一切美好幻想，腦子浮現(xiàn)出來(lái)的不是蜥蜴就是毛毛蟲，而有些中二的男生則是想被咬一口會(huì)不會(huì)變成蜘蛛俠。在你參加Python培訓(xùn)班之前，我們需要了解清楚什么是爬蟲？

那么爬蟲到底是什么呢？網(wǎng)絡(luò)爬蟲（web crawler ）簡(jiǎn)稱爬蟲，還有一些別稱為螞蟻、蠕蟲、自動(dòng)索引等。爬蟲簡(jiǎn)單來(lái)說(shuō)就是在規(guī)則內(nèi)從互聯(lián)網(wǎng)住區(qū)你想要的信息的程序，你可以把它想象成一只蜘蛛，搭建了一張大網(wǎng)，然后通過這個(gè)大網(wǎng)去抓取合適的獵物。

網(wǎng)絡(luò)爬蟲主要是根據(jù)自身需求然后通過運(yùn)行計(jì)算機(jī)語(yǔ)言編寫的程序和腳步，從而在互聯(lián)網(wǎng)的網(wǎng)頁(yè)中大規(guī)模的進(jìn)行掃描和搜尋我們所需要的信息。

那我們平常想要找尋資料的話，只能通過搜索引擎，一點(diǎn)點(diǎn)的獲取信息，這無(wú)疑是大海撈針。但通過爬蟲的話，我們可以大規(guī)模大范圍的抓取大量信息。而如今不單單是個(gè)人用戶獲取信息需要用到爬蟲，像許多企業(yè)在大數(shù)據(jù)時(shí)代，也是通過爬蟲進(jìn)行客戶數(shù)據(jù)的采集，然后進(jìn)行分析整理。而參加Python培訓(xùn)班之后，你就可以操控“蜘蛛”去獲取你想要的信息了。

很多人看到這就會(huì)有一個(gè)疑慮：這么說(shuō)我們平常用的百度也是爬蟲？其實(shí)這種說(shuō)法是沒有錯(cuò)的，不單是百度，還有谷歌、搜狐、雅虎等搜索引擎其本質(zhì)上來(lái)說(shuō)都是一個(gè)或者多個(gè)巨大爬蟲。細(xì)心觀察的話可以發(fā)現(xiàn)，這些搜索引擎的工作原理和爬蟲非常類似的，其終目的都是為了我們能抓取到我們需要的信息。

那么Python培訓(xùn)班里只會(huì)學(xué)習(xí)到爬蟲相關(guān)的知識(shí)嗎？這當(dāng)然不是，但爬蟲卻是我們?cè)趯W(xué)習(xí)當(dāng)中需要了解知道的一個(gè)知識(shí)點(diǎn)。