robots文件對于SEO優化有什么幫助？

　　robots可以像搜索引擎屏蔽不想被抓取的內容，那么這種操作對于SEO優化有什么幫助呢?

　　第一，大多數網站都是動態語言，然后了利于網站優化采取偽靜態的方式，這種情況就一個頁面是有兩個地址的，一個是靜態地址一個是動態地址，這種情況下就會有大量重復的內容，是不利于seo的通過robots文件可以屏蔽掉動態鏈接的抓取，降低重復內容的抓取機率，提高網站的抓取效率。

　　第二，網站中有很多數據，或者用戶的數據、隱私數據等，這些內容是我們不希望被搜索引擎收錄的內容，那么通過robots可以屏蔽這些內容所在目錄的文件，達到數據保護的目的。

　　第三，網站在網站的運營中由于某種原因，網站時常會產生很多死鏈，這種情況對于SEO優化是十分不利的，并且用戶體驗也不是很好，一般遇到這種情況站長都會在后臺提交死鏈來達到刪除這些頁面索引的目的，但是這種效率往往不是很高，其實我們可以利用robots來屏蔽這些死鏈，可以 達到事半功倍的效果。