公司業績不好?找壹起航! 一站式有效果的互聯網整合營銷服務商!
壹砍價
RELATEED CONSULTING
相關咨詢
選擇下列客服馬上在線溝通
服務時間:9:30-18:00
你可能遇到了下面的問題
關閉右側工具欄

營銷資訊

如何用Robots.txt做網站優化

  • 作者:SEO優化
  • 發表時間:2019-07-21 22:59
  • 來源:壹起航
很多新手網站優化專員每天迷茫寫文章、做外鏈這些繁瑣工作,卻對Robots.txt不了解它的重要性,本文就給大家普及robots.txt文件編寫知識。
 
Robots協議的全稱是“網絡爬蟲排除標準”,網站通過Robots協議告訴搜索引擎哪些頁面可以抓取,哪些頁面不能抓取。搜索蜘蛛發現不存在robots.txt文件時,會產生一個404錯誤日志在服務器上,從而增加服務器的負擔,因此為站點添加一個robots.txt文件還是網站優化很重要的。
 
查詢Robots協議,在瀏覽器輸入:http://域名/robots.txt/ 默認情況下會直接顯示
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
這是由系統自動生成的,意思是告訴搜索引擎不要抓取后臺程序文件。
 
 
下面說一下站點如何編寫robots.txt文件,完整的站點robots.txt文件內容如下:
 
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /*/comment-page-*
Disallow: /*?replytocom=*
Disallow: /category/*/page/
Disallow: /tag/*/page/
Disallow: /*/trackback
Disallow: /feed
Disallow: /*/feed
Disallow: /comments/feed
Disallow: /?s=*
Disallow: /*/?s=*\
Disallow: /*?*
Disallow: /attachment/
使用方法:新建一個名稱為robots.txt文本文件,將上面的內容放進去,然后上傳到網站根目錄即可。
 
 
下面分別解釋一下各項的作用:
 
1、Disallow: /wp-admin/、Disallow: /wp-content/和Disallow: /wp-includes/
 
用于告訴搜索引擎不要抓取后臺程序文件頁面。
 
2、Disallow: /*/comment-page-*和Disallow: /*?replytocom=*
 
禁止搜索引擎抓取評論分頁等相關鏈接。
 
3、Disallow: /category/*/page/和Disallow: /tag/*/page/
 
禁止搜索引擎抓取收錄分類和標簽的分頁。
 
4、Disallow: /*/trackback
 
禁止搜索引擎抓取收錄trackback等垃圾信息
 
5、Disallow: /feed、Disallow: /*/feed和Disallow: /comments/feed
 
禁止搜索引擎抓取收錄feed鏈接。
 
6、Disallow: /?s=*和Disallow: /*/?s=*\
 
禁止搜索引擎抓取站內搜索結果
 
7、Disallow: /*?*
 
禁止搜索抓取動態頁面
 
8、Disallow: /attachment/
 
禁止搜索引擎抓取附件頁面,比如毫無意義的圖片附件頁面。
 
 
以上就是用Robots.txt實現網站優化的具體操作流程,希望能夠幫助到你的網站優化。 
?
?

( 責任編輯:壹起航SEO網站優化-壹起航推廣公司,原創不易,轉載是必須以鏈接形式注明作者和原始出處及本聲明。)
聲明:本頁內容由深圳市壹起航科技有限公司通過網絡收集編輯所得,所有資料僅供用戶參考;本站不擁有所有權,也不承認相關法律責任。如您認為本網頁中有涉嫌抄寫的內容,請及時與我們聯系進行舉報,并提供相關證據,工作人員會在5個工作日內聯系您,一經查實,本站將立刻涉嫌侵權內容。如果您對網站優化推廣核心技術文章感興趣,請點擊查看SEO優化網絡推廣的相關文章,請關注壹起航網絡營銷公司網站(www.vbgyay.tw) 網站推廣,整合網絡營銷服務商;
詳情訪問壹起航網站:網站建設,SEO優化,網站優化,整合網絡推廣,營銷單頁策劃,關鍵詞排名,顧問營銷培訓,微信平臺開發,百度小程序開發,微信營銷推廣,新聞稿發布,口碑問答營銷,價格優惠多多?,多種套餐服務選擇,有買有送。
官方推薦關鍵字:推廣?-?網絡推廣?-?網站推廣?-?網絡推廣公司?-?深圳網站推廣
【網絡推廣服務商】深圳市壹起航科技有限公司?0755-33168344?www.vbgyay.tw

文章標簽: 網站優化??Robots.txt??



分享到:
下载两肖两码中特1