搜尋引擎的運作原理就是利用蜘蛛(一種自動掃描網站的機器人)掃描每個網站，以建立索引讓大家輕鬆搜到網站，不過目前大多數人只用 Google、Yahoo 等幾個知名搜尋引擎，但一些小型搜尋站的蜘蛛又會跑來掃描我們的網站，有些還非常暴力，就好像別人來 DDOS 你的網站一樣，導致主機資源滿載和網站掛掉！解決方式就是阻擋這些小蜘蛛、壞蜘蛛，如此一來就可以解決網站癱瘓的問題。圖文一開始先說明被蜘蛛搞到主機滿載的狀況，再來說明如何看是哪個蜘蛛來搞破壞！最後明白告知大家解決方式。
▲主機後台的「資源使用狀況」，這是三天內的資料，可以看出中間有段異常，這段時間網站是很難連入的。
▲同一個資料下方的其他項目數據，中間那段明顯異常，有些值都抵達限制了！
▲主機後台「訪客」部分，紅色底線標示的就是搜尋引擎蜘蛛。
▲基本上這邊非常推薦使用「.htaccess」阻擋壞蜘蛛，截圖為範例，原始碼如下：
SetEnvIfNoCase User-Agent ^壞蜘蛛名稱 bad_bot
<Files *>
Order Allow,Deny
Allow from all
Deny from env=bad_bot
</Files>
「壞蜘蛛名稱」請填入壞蜘蛛的名稱，這邊可以至後台「訪客」查看，舉例：「Sogou」即搜狗的蜘蛛，整行意思是封鎖「壞蜘蛛名稱」開頭的蜘蛛，可以新增無限數量的壞蜘蛛。
有任何意見、錯誤都可以告知我，此為站長修復網站後的心得文章，歡迎參考！
贊助廣告 ‧ Sponsor advertisements
《上一篇》detrois 光學滑鼠專用矽膠滑鼠墊 
《下一篇》Mini DisplayPort to VGA 連接線 
留言區 / Comments
萌芽論壇