Robots協議怎么寫?

發表時間:2022-12-14 18:23作者:艾克SEO網址:http://m.limitededitionsksa.com

Robots協議怎么寫?艾克SEO介紹,Robots協議是網站跟爬蟲間的協議,用簡單直接的txt格式文本方式告訴對應的爬蟲被允許的權限,在命令中可以使用*、$等通配符。


Robots協議怎么寫?


通常用的Robots協議寫法:

User-agent: *

Allow: /

Sitemap: http://m.limitededitionsksa.com/sitemap.xml

1、Allow

站長可通過Allow命令指定建議收錄的文件、目錄 。

2、Disallow

站長可通過Disallow命令指定不建議收錄的文件、目錄。

3、通配符*

通配符*指所有蜘蛛。

艾克網絡科技(ikeseo.cn)是阜陽市一家專業從事網站建設、優化、推廣的公司,擁有10年建站設計、seo優化推廣的經驗,企業建站采用專業的網站模板,利于SEO收錄,操作簡單,原創設計使用穩定,適合個人、企業網站開發、網站改版、企業官網及小程序制作開發、優化推廣。