天蠶重慶網(wǎng)絡(luò)公司編者語：用小偷的例子來比喻百度的蜘蛛。百度為什么能夠收錄我們的網(wǎng)站呢?他肯定是有爬取程序的。他肯定是會下載我們的內(nèi)容的。怎么爬取我們的程序呢?很簡單是因為有鏈接誘餌。小偷為什么會去偷可能是因為他不關(guān)窗戶，可能是因為太不低調(diào)了。他有可能是因為隨手帶門，他有可能是因為他的社交圈子的影響。等等等等各種連接誘餌就是讓小偷更有可能接近他的家，你明白了嗎?
很多新的東西。不要緊，重復(fù)的聽，對吧。你要給這小偷露誘餌。其實我們生活中很多很多家庭會失竊，就是因為我們太大意了，我們留給了這些小偷誘餌。平時太張揚，不是很低調(diào)，穿金戴銀。脖子上戴一個很粗的狗鏈子，最喜歡黃金的，有的是白金的。你有時候說話過分囂張。讓人感覺到你有錢可取。第二個就是你不愛關(guān)窗戶，你有時候把門是隨便帶上的。這些東西都是勾引了小偷。對還是不對?
雖然我舉的這個例子不太妥當(dāng)，但是非常的形象。其實蜘蛛它也類似于一個小偷，我們允許蜘蛛來爬取我們的網(wǎng)站了嗎?他就來偷你東西了。我們怎么讓蜘蛛偷到你的東西呢?很簡單，你肯定要布鏈接誘餌。是不是我們又得到了一個東西叫做鏈接誘餌。一節(jié)課下來你會發(fā)現(xiàn)你得到很多新的東西。不要緊，重復(fù)的聽，對吧。你要給這小偷露誘餌。其實我們生活中很多很多家庭會失竊，就是因為我們太大意了，我們留給了這些小偷誘餌。平時太張揚，不是很低調(diào)，穿金戴銀。脖子上戴一個很粗的狗鏈子，最喜歡黃金的，有的是白金的。你有時候說話過分囂張。讓人感覺到你有錢可取。第二個就是你不愛關(guān)窗戶，你有時候把門是隨便帶上的。這些東西都是勾引了小偷。對還是不對?
天蠶重慶網(wǎng)絡(luò)公司總結(jié)：為什么會有爬取程序，爬取程序是干嗎的?你有沒有想過。我想問問大家，百度為什么能夠收錄我們的文章和頁面?難道百度有神通，他自然就知道你的文章和頁面了?不可能的。他肯定是要抓取的。說白了他是需要先爬取后下載吧。爬取這樣一個程序，就跟你去別人家里一樣，就跟小偷到別人家里面去偷一個東西一樣。難道他有神通?他不可能有神通的。他先得爬窗戶，把窗戶給敲了，門給敲了，然后進去，去拿了東西再出來。
| 
當(dāng)前位置：
