很多想要從事IT行業的新人或者想要接觸學習編程的小白都會聽到這么一個詞——爬蟲。很多想要接觸的女生一聽到這個詞，立刻斷絕了對IT行業一切美好幻想，腦子浮現出來的不是蜥蜴就是毛毛蟲，而有些中二的男生則是想被咬一口會不會變成蜘蛛俠。在你參加Python培訓班之前，我們需要了解清楚什么是爬蟲？

那么爬蟲到底是什么呢？網絡爬蟲（web crawler ）簡稱爬蟲，還有一些別稱為螞蟻、蠕蟲、自動索引等。爬蟲簡單來說就是在規則內從互聯網住區你想要的信息的程序，你可以把它想象成一只蜘蛛，搭建了一張大網，然后通過這個大網去抓取合適的獵物。

網絡爬蟲主要是根據自身需求然后通過運行計算機語言編寫的程序和腳步，從而在互聯網的網頁中大規模的進行掃描和搜尋我們所需要的信息。

那我們平常想要找尋資料的話，只能通過搜索引擎，一點點的獲取信息，這無疑是大海撈針。但通過爬蟲的話，我們可以大規模大范圍的抓取大量信息。而如今不單單是個人用戶獲取信息需要用到爬蟲，像許多企業在大數據時代，也是通過爬蟲進行客戶數據的采集，然后進行分析整理。而參加Python培訓班之后，你就可以操控“蜘蛛”去獲取你想要的信息了。

很多人看到這就會有一個疑慮：這么說我們平常用的百度也是爬蟲？其實這種說法是沒有錯的，不單是百度，還有谷歌、搜狐、雅虎等搜索引擎其本質上來說都是一個或者多個巨大爬蟲。細心觀察的話可以發現，這些搜索引擎的工作原理和爬蟲非常類似的，其終目的都是為了我們能抓取到我們需要的信息。

那么Python培訓班里只會學習到爬蟲相關的知識嗎？這當然不是，但爬蟲卻是我們在學習當中需要了解知道的一個知識點。