论坛 › 美国VPS综合讨论 › robots.txt这样写合适吗?

lizh8791 发表于 2019-4-17 15:52:59

robots.txt这样写合适吗?

我用的好像是第二个

biubiu 发表于 2019-4-17 15:55:09

*?* 这个对搜索引擎不好吧

lizh8791 发表于 2019-4-17 15:56:48

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /*/comment-page-*
Disallow: /*?replytocom=*
Disallow: /category/*/page/
Disallow: /tag/*/page/
Disallow: /*/trackback
Disallow: /feed
Disallow: /*/feed
Disallow: /comments/feed
Disallow: /?s=*
Disallow: /*/?s=*\
Disallow: /attachment/

ANYMOZ 发表于 2019-4-17 16:04:56

lizh8791 发表于 2019-4-17 16:07

*?*这个什么意思
google 站長平臺有個 “網頁是否對手機瀏覽友好” 的檢測
*?* 寫會導致那些帶版本號的CSS，js會無法被 google 抓取
而在 google 的搜索結果會有諸如 “此頁面不適用與移動設備瀏覽” 的字樣
我用的是第二个

查看完整版本: robots.txt这样写合适吗?