POST TIME:2021-05-22 21:18
用DEDECMS建站的站長會發(fā)現(xiàn),DEDECMS自帶的robots.txt文件設(shè)置很簡單(開發(fā)者基于每個網(wǎng)站的目錄結(jié)構(gòu)和優(yōu)化目的不同的考慮),并不能完全滿足網(wǎng)站的優(yōu)化要求,那怎樣才能結(jié)合自己網(wǎng)站的情況,做好robots.txt優(yōu)化呢?以下介紹一點自己的想法,僅供參考。
適用于未偽靜態(tài)的DEDECMS網(wǎng)站。
User-agent: *
Disallow: /dede 管理后臺目錄,需要改名,具體設(shè)置后面具體講
Disallow: /include 程序核心文件目錄
Disallow: /member 會員管理目錄,有些文件可以開放
Disallow: /plus 插件及輔助功能目錄 ,有些文件可以開放,如search.php
Disallow: /templets 默認(rèn)模板存放目錄
Disallow: /data 系統(tǒng)緩存或其它可寫入數(shù)據(jù)存放目錄
Disallow: /uploads 上傳下載文件保存目錄,不想搜索引擎引用圖片的話,禁止
Disallow: /images 系統(tǒng)默認(rèn)模板圖片存放目錄
Disallow: /index.php 網(wǎng)站默認(rèn)首頁,靜態(tài)化的話,最好禁止
Disallow: /404.html
Allow: /plus/search.php 開放禁止目錄里的具體文件
用DEDECMS建站的站長會發(fā)現(xiàn),DEDECMS自帶的robots.txt文件設(shè)置很簡單(開發(fā)者基于每個網(wǎng)站的目錄結(jié)構(gòu)和優(yōu)化目的不同的考慮),并不能完全滿足網(wǎng)站的優(yōu)化要求,那怎樣才能結(jié)合自己網(wǎng)站的情況,做好robots.txt優(yōu)化呢?以下介紹一點自己的想法,僅供參考。
適用于未偽靜態(tài)的DEDECMS網(wǎng)站。
User-agent: *
Disallow: /dede 管理后臺目錄,需要改名,具體設(shè)置后面具體講
Disallow: /include 程序核心文件目錄
Disallow: /member 會員管理目錄,有些文件可以開放
Disallow: /plus 插件及輔助功能目錄 ,有些文件可以開放,如search.php
Disallow: /templets 默認(rèn)模板存放目錄
Disallow: /data 系統(tǒng)緩存或其它可寫入數(shù)據(jù)存放目錄
Disallow: /uploads 上傳下載文件保存目錄,不想搜索引擎引用圖片的話,禁止
Disallow: /images 系統(tǒng)默認(rèn)模板圖片存放目錄
Disallow: /index.php 網(wǎng)站默認(rèn)首頁,靜態(tài)化的話,最好禁止
Disallow: /404.html
Allow: /plus/search.php 開放禁止目錄里的具體文件