如何使用python在每个域和子域中查找sitemap

2024-04-29 19:18:16 发布

您现在位置：Python中文网/ 问答频道 /正文
774 3

我想知道如何找到在每个域和子域使用python站点地图？ 一些例子：

abcd.com/sitemap.xml
abcd.com/sitemap.html
abcd.com/sitemap.html
sub.abcd.com/sitemap.xml

等等

最可能的站点地图名称、位置和扩展名是什么？你知道吗


Tags： 子域名称com站点html地图xml例子
1条回答
网友
1楼 · 发布于 2024-04-29 19:18:16

请先看一下robots.txt文件。我通常就是这么做的。你知道吗

有些域确实提供了不止一个站点地图，而且有超过200个xml文件的情况。你知道吗

请记住，根据sitemap.org上的FAQ，可以对站点地图文件进行gzip压缩。因此，您可能也想考虑sitemap.xml.gz！你知道吗

相关问题 更多 >

    编程相关推荐