如何解決搜索引擎禁止的方式優(yōu)化網(wǎng)站的模板和結構

　　搜索引擎禁止的方式優(yōu)化網(wǎng)站的模板和結構，對ip進(jìn)行嚴格的限制.模板方面，必須在站內增加白名單，列出禁止外部站點(diǎn)訪(fǎng)問(wèn)的網(wǎng)站名單。對域名要求增加重復域名檢測指令。增加cookie/domainkey指令。如果對外部站點(diǎn)開(kāi)放/禁止外部站點(diǎn)訪(fǎng)問(wèn)，會(huì )導致收錄量降低，但網(wǎng)站的排名會(huì )提高，原因是，外部站點(diǎn)提供了搜索關(guān)鍵詞的機會(huì )，如果域名被注冊，會(huì )導致大量的外部站點(diǎn)提供了搜索關(guān)鍵詞。

　　站內進(jìn)行優(yōu)化的另一種方式是對目標關(guān)鍵詞進(jìn)行分析和調整，提高其相關(guān)性和相關(guān)度，這樣就限制了訪(fǎng)問(wèn)相關(guān)外部網(wǎng)站的機會(huì )。搜索引擎禁止是用cookie方式，但實(shí)際上，cookie的利用不盡方便?？梢允褂谜齽t文本提取的方式，解決搜索引擎對cookie的識別。參考我的一個(gè)回答：。

　　站在巨人的肩膀上，增加網(wǎng)站內容，增加內容更新的頻率，

　　慢慢來(lái)，

　　可以看看我的網(wǎng)站，是通過(guò)用正則寫(xiě)程序來(lái)進(jìn)行屏蔽的。

　　可以把網(wǎng)站域名改成和墻外站點(diǎn)相同或者類(lèi)似，或者干脆用domainaddress站。之前看過(guò)一個(gè)說(shuō)法是，domainaddress限制了f3的能力，使得f3搜索不到更多的內容。而正則判斷多個(gè)網(wǎng)站ip，則只能被一個(gè)網(wǎng)站抓取。

　　其實(shí)，一直都是采用標簽一樣的情況，因為搜索引擎不可能不知道你用正則去搜索這些關(guān)鍵詞是想要達到什么目的，或者類(lèi)似于正則一樣的工具能夠幫你做到。畢竟在百度的算法當中，有你想達到的目的，所以相對于正則來(lái)說(shuō)，搜索引擎似乎判斷你的目的更容易一些。不過(guò)，在搜索領(lǐng)域正則本身也有很多的處理辦法，最簡(jiǎn)單的就是改成類(lèi)似于正則那樣的表示，比如anybody的特殊表示就是只限定具有anyman的目標頁(yè)的ip地址。

　　至于怎么搜索怎么針對具體ip地址地址而使用正則就看正則給你帶來(lái)的影響了。還有，如果非要用正則完成爬取，那么可以用x-request-post來(lái)命令?？床欢脑?huà)可以復制黏貼一下，上面的都是自己最近用正則做的處理，應該沒(méi)有什么歧義。