我們知道，只有你網(wǎng)站的內(nèi)容被搜索引擎收錄了，我們才能夠去優(yōu)化排名，競爭排名，如果你的網(wǎng)站被搜索引擎收錄都很困難，網(wǎng)站排名也就自然而然的沒有或者很少。那么是什么原因?qū)е戮W(wǎng)站不被搜索引擎收錄呢?網(wǎng)站不被搜索引擎收錄其實(shí)就是因?yàn)橐恍┖苋菀妆缓雎缘男栴}引起的，也可以說是可能你根本想不到的原因?qū)е碌?，下面幫你分析一下哪一點(diǎn)是你所符合的。
一：robots.txt文件寫法錯(cuò)誤
網(wǎng)站的robots.txt文件寫法也是我們需要注意的一個(gè)點(diǎn)，如果我們確實(shí)不會(huì)寫，那么我們就不要去輕易去動(dòng)它，因?yàn)橥褪莚obots.txt文件書寫錯(cuò)誤而導(dǎo)致網(wǎng)站內(nèi)容不被搜索引擎收錄，所以我們?nèi)绻粫?huì)寫的話就不要去動(dòng)它。書寫robots.txt文件之前一定要先熟悉robots.txt文件的書寫規(guī)則，寫完后需要再去對(duì)照一篇，以防出現(xiàn)錯(cuò)誤，這些都是很必要的。
Robots.txt文件書寫錯(cuò)誤主要有那幾個(gè)方面：
1.網(wǎng)站的robots.txt文件已經(jīng)損壞或者在書寫的時(shí)候出現(xiàn)錯(cuò)誤。
2.Robots.txt文件書寫不規(guī)范。
3.寫錯(cuò)了或者拒絕搜索引擎蜘蛛的抓取。
4.Robots.txt文件書寫時(shí)沒有注意大小寫，這點(diǎn)也很重要，許多網(wǎng)站往往就是忽略了這個(gè)問題。
Robots.txt文件書寫錯(cuò)誤有什么害處?
如果你的robots.txt文件書寫錯(cuò)誤了，搜索引擎機(jī)器人錯(cuò)誤的理解了您的robots.txt文件,它們可能會(huì)完全無視你的網(wǎng)頁，從而導(dǎo)致網(wǎng)站不被搜索引擎給收錄。
如何檢查Robots.txt文件是否書寫錯(cuò)誤?
對(duì)于這個(gè)問題，解決的辦法是仔細(xì)檢查您的robots.txt 文件，并確保您網(wǎng)頁上的的參數(shù)是正確的，你可以使用谷歌網(wǎng)站管理員工具來創(chuàng)建一個(gè)robots.txt文件，它會(huì)時(shí)時(shí)提醒你網(wǎng)站robots.txt 文件出現(xiàn)錯(cuò)誤。
二：使用動(dòng)態(tài)網(wǎng)址建站
至今為止，搜索引擎(除了谷歌)還不能完全讀取動(dòng)態(tài)網(wǎng)頁，因?yàn)閯?dòng)態(tài)網(wǎng)頁的變數(shù)太多，一下是這個(gè)地址，等下打開又換另外個(gè)地址了，另外動(dòng)態(tài)網(wǎng)址中還包含一些問號(hào)、等號(hào)及參數(shù)，所以搜索引擎抓取動(dòng)態(tài)網(wǎng)址很困難，雖然說谷歌在前段時(shí)間宣稱能完全抓取動(dòng)態(tài)網(wǎng)址，但在我們中國還是以百度、搜狗、360等搜索引擎為主，我們不能因少失大。再說了，動(dòng)態(tài)網(wǎng)址的網(wǎng)址是不固定的，一個(gè)內(nèi)容頁存在幾個(gè)網(wǎng)址，必然導(dǎo)致內(nèi)容權(quán)重分散，所以選擇動(dòng)態(tài)網(wǎng)址應(yīng)當(dāng)謹(jǐn)慎，如果你的URL變數(shù)太多，造成搜索引擎搜索困難，那么搜索引擎漫游器可能會(huì)忽視你的網(wǎng)頁，從而導(dǎo)致網(wǎng)站內(nèi)容不被搜索引擎收錄。
三：在你的網(wǎng)址中使用了會(huì)話ID
許多搜索引擎不去收錄那么包含會(huì)話ID的網(wǎng)頁，因?yàn)樗鼈兛蓪?dǎo)致內(nèi)容的重復(fù)，如果可能的話，避免會(huì)話ID出現(xiàn)在你的網(wǎng)址，而使用cookies存儲(chǔ)會(huì)話ID。
四：網(wǎng)頁中存在太多JS代碼
前面我說過了，當(dāng)今搜索引擎能完全識(shí)別的只有HTML語言，對(duì)于JavaScript代碼、CSS代碼以及其他的腳本代碼還不能完全識(shí)別，如果一個(gè)網(wǎng)頁中包含了JavaScript代碼、CSS代碼以及其他的腳本代碼，那么搜索引擎抓取起來就會(huì)很困難，要是這些代碼在網(wǎng)頁中存在太多的話，可能就導(dǎo)致網(wǎng)站不被搜索引擎收錄了，因?yàn)槟憬o搜索引擎蜘蛛制造了太多的困難，搜索引擎蜘蛛自然而然的就放棄你了。
五：使用Ajax、FLash做網(wǎng)站導(dǎo)航
對(duì)于大多數(shù)搜索引擎機(jī)器人而言，使用JavaScript或DHTML、Flash、Ajax等制作網(wǎng)站導(dǎo)航是解析不了的，其中使用Flash、Ajax制作的網(wǎng)站導(dǎo)航效果最差，搜索引擎機(jī)器人完全不能解析，站長朋友們不要因小失大，不能因?yàn)楣鈭D美觀而忽視搜索引擎機(jī)器人是否能解析的了，這些做法是不可取的，朋友們應(yīng)盡量避免使用這些對(duì)搜索引擎不友好的方式，一旦網(wǎng)站定型，被搜索引擎判為網(wǎng)站友好度低，再想恢復(fù)過來就很麻煩了。
搜索引擎機(jī)器人是很簡單的程序，它們遵循HTML鏈接，一旦鏈接出現(xiàn)錯(cuò)誤對(duì)收錄也會(huì)帶來困難，這些問題最好是在建站的時(shí)候就考慮到，以免再次進(jìn)行二次開發(fā)，并且還影響網(wǎng)站的正常收錄。
  導(dǎo)致網(wǎng)站不被搜索引擎收錄的幾個(gè)因素到這就寫完了，這五點(diǎn)大家都可以去參考下，看看自己的網(wǎng)站里面是否有違反這五條規(guī)則了，“有則改之，無則加勉。”