很多想要從事IT行業(yè)的新人或者想要接觸學(xué)習(xí)編程的小白都會聽到這么一個詞——爬蟲。很多想要接觸的女生一聽到這個詞，立刻斷絕了對IT行業(yè)一切美好幻想，腦子浮現(xiàn)出來的不是蜥蜴就是毛毛蟲，而有些中二的男生則是想被咬一口會不會變成蜘蛛俠。在你參加Python培訓(xùn)班之前，我們需要了解清楚什么是爬蟲？

那么爬蟲到底是什么呢？網(wǎng)絡(luò)爬蟲（web crawler ）簡稱爬蟲，還有一些別稱為螞蟻、蠕蟲、自動索引等。爬蟲簡單來說就是在規(guī)則內(nèi)從互聯(lián)網(wǎng)住區(qū)你想要的信息的程序，你可以把它想象成一只蜘蛛，搭建了一張大網(wǎng)，然后通過這個大網(wǎng)去抓取合適的獵物。

網(wǎng)絡(luò)爬蟲主要是根據(jù)自身需求然后通過運行計算機語言編寫的程序和腳步，從而在互聯(lián)網(wǎng)的網(wǎng)頁中大規(guī)模的進行掃描和搜尋我們所需要的信息。

那我們平常想要找尋資料的話，只能通過搜索引擎，一點點的獲取信息，這無疑是大海撈針。但通過爬蟲的話，我們可以大規(guī)模大范圍的抓取大量信息。而如今不單單是個人用戶獲取信息需要用到爬蟲，像許多企業(yè)在大數(shù)據(jù)時代，也是通過爬蟲進行客戶數(shù)據(jù)的采集，然后進行分析整理。而參加Python培訓(xùn)班之后，你就可以操控“蜘蛛”去獲取你想要的信息了。

很多人看到這就會有一個疑慮：這么說我們平常用的百度也是爬蟲？其實這種說法是沒有錯的，不單是百度，還有谷歌、搜狐、雅虎等搜索引擎其本質(zhì)上來說都是一個或者多個巨大爬蟲。細心觀察的話可以發(fā)現(xiàn)，這些搜索引擎的工作原理和爬蟲非常類似的，其終目的都是為了我們能抓取到我們需要的信息。

那么Python培訓(xùn)班里只會學(xué)習(xí)到爬蟲相關(guān)的知識嗎？這當然不是，但爬蟲卻是我們在學(xué)習(xí)當中需要了解知道的一個知識點。