robots.txtファイルの例

免責事項:この記事は、転載することを歓迎し、ブロガーオリジナル記事です、ソースを明記してくださいhttps://blog.csdn.net/mouday/article/details/91361874
# robots.txt generated at http://tool.chinaz.com/robots/ 
User-agent: *
Disallow: 
Crawl-delay: 10
Sitemap: http://domain.com/sitemap.xml

ロボットファイルの生成:http://tool.chinaz.com/robots/

おすすめ

転載: blog.csdn.net/mouday/article/details/91361874