那么，網(wǎng)站中究竟有什么東西，會使得搜索引擎蜘蛛望而止步呢？
第一：flash。相信，這個許多網(wǎng)站都會有的。為了讓用戶體驗更好，網(wǎng)站看起來更加的美觀，放大量的flash動畫�！罅俊�，我這里說的是大量哦。大量的flash動畫造成的后果只有一個，那便是搜索引擎蜘蛛是抓取到了你的網(wǎng)頁，但是。在抓取后的預(yù)處理這一塊，犯難了。因為提取不到一個中文文字。沒有中文文字，搜索引擎蜘蛛怎么會知道抓到的網(wǎng)頁的內(nèi)容什么啊。特別是，用flash做成的導(dǎo)航，最危險了。
第二：Session ID。這個，少部分的網(wǎng)站可能會用。網(wǎng)站一旦使用了Session ID后，每一個訪問者來到你這個網(wǎng)站中都會產(chǎn)生一個不同的ID號。搜索引擎蜘蛛也是如此。那么，一旦第一次搜索引擎蜘蛛來過，抓取過你網(wǎng)站的URL地址后。下一回它來，Session又會給蜘蛛一個不同的ID號，蜘蛛又會重復(fù)抓取一遍你的網(wǎng)站，但是URL不一樣。這樣造成的后果便是，搜索引擎蜘蛛會認為你這個網(wǎng)站中有大量重復(fù)的內(nèi)容。會對你的網(wǎng)站越來越不感興趣，最后都不來了。對于非要使用Session ID的網(wǎng)站，避免的方法是讓程序員設(shè)計出來一套專門識別搜索引擎蜘蛛的代碼。區(qū)別開是蜘蛛還是用戶。
濟南網(wǎng)站優(yōu)化：http://m.mahangsq.com/
