【Appendix】sitemap

sitemap

Sitemap 可方便网站管理员通知爬虫引擎网站上有哪些可供抓取的网页。

最简单的 Sitemap 形式，就是XML 文件，在其中列出网站中的网址以及关于每个网址的其他元数据（上次更新的时间、更改的频率以及相对于网站上其他网址的重要程度为何等），以便搜索引擎可以更加智能地抓取网站。