當前位置：主頁 > 網(wǎng)站建設 > 利于優(yōu)化排名的Robots.txt協(xié)議正確寫法,建站文章

利于優(yōu)化排名的Robots.txt協(xié)議正確寫法,建站文章

時間:2023-07-25 10:07:25 閱讀: 文章分類: 網(wǎng)站建設作者: 網(wǎng)站開發(fā)者

導讀:建站文章建站文章Robots協(xié)議也就是robots.txt文本文件，當一個搜索蜘蛛訪問一個站點時，它會首先檢查該站點根目錄下是否存robots.txt，robots協(xié)議書寫正確快速建站技術建站的技術。

快速建站技術建站的技術

Robots協(xié)議書寫注意事項

robots協(xié)議里的面首字母要大寫，字母后面的冒號必須是織夢的模板英文狀態(tài)；

冒號后面"/"之前還有空格，在"/"后面如果只是屏蔽某個特定路徑，千萬不要再有空格,否則搜索引擎就會認為你是屏蔽整個網(wǎng)站。

如果您希望搜索引擎收錄網(wǎng)站上所有內(nèi)容，請勿建立robots.txt文件。

這里區(qū)別一下“Disallow: /aaa/'和"Disallow: /aaa"，前者這是屏蔽了aaa后面的路徑不被蜘蛛抓取到，而后者則表示連同aa夢織模板a這個路徑也被屏蔽掉。

織夢的默認寫法：

User-agent:?*

Disallow:?/plus/ad_js.php

Disallow:?/plus/advancedsearch.php

Disallow:?/plus/car.php

Disallow:?/plus/c織夢模板免費arbuyaction.php

Disallow:?/plus/shops_buyaction.php

Disallow:?/plus/erraddsave.php

Disallow:?/plus/posttocar.php

Disallow:?/plus/disdls.php

Disallow:?/plus/feedback_js.php

Disallow:?/plus/mytag_js.php

Disallow:?/plus/rss.php

Disallow:?/plus/search.php

Disallow:?/plus/recommend.php

Disallow:?/plus/stow.php

Disallow:?/plus/count.php

Disallow:?/include

Disallow:?/templets

Today on history:

2022: 婚姻中的懶螞蟻(0)

2022: 對自己也要講信用(0)

2022: 夠癮(0)

2021: 官方通報揚州男子騎車沖卡打志愿者：網(wǎng)友稱沖卡男子被腳踹過分了(0)

2021: 鄭州一小區(qū)請挖掘機硬核防汛把地勢低地方堵死網(wǎng)友點贊：有備無患(0)

相關快速建站技術建站的技術。

關鍵詞標簽: 建站寫法正確

聲明: 本文由我的SEOUC技術文章主頁發(fā)布于:2023-07-25 ，文章利于優(yōu)化排名的Robots.txt協(xié)議正確寫法,建站文章主要講述寫法,正確,建站網(wǎng)站建設源碼以及服務器配置搭建相關技術文章。轉載請保留鏈接: http://www.bifwcx.com/article/web_35773.html