DJ机器人

djrobots的Python项目详细描述


我们的内部实用程序可以方便地将robots.txt用于开发和 生产

安装

pip install djrobots

用法

将djrobots url包含到urlconf中,就完成了!

(r'^robots\.txt$', include('djrobots.urls')),

并将DJrobots添加到已安装的应用程序中

站点地图

如果要在robots.txt中指定站点地图URL,请提供 在设置中查看名称

DJROBOTS_SITEMAPS = 'sitemap-root'

djrobots是一个特殊的设置,您可以使用数组指定 robots.txt中的更多站点地图

DJROBOTS_SITEMAPS = ['sitemap-root', 'department-sitemap']

或者可以将视图名称与原始URL混合使用

DJROBOTS_SITEMAPS = ['sitemap-root', 'department-sitemap', '/my-sitemap-index.xml']

定制

默认情况下,djrobots为生产提供robots.txt模板,并且 用于使用默认配置进行开发的robots-debug.txt 在洛特雷克内部。

如果要指定更多可以扩展默认模板的指令, robots.txt和robots-debug.txt

{% extends "djrobots/base-robots.txt" %}
{% block content %}
User-agent: *
Disallow: /cgi-bin/
Disallow: /tmp/
Disallow: {% url 'documents' %}

Host: example.com

{% endblock %}

运行测试

$ pip install -r requirements-dev.txt
$ ./runtests.py --with-coverage

欢迎加入QQ群-->: 979659372 Python中文网_新手群

推荐PyPI第三方库


热门话题
Java中两个ArrayList的内部联接   java如何制作按钮侦听器组方法?   Java位表示法中的字节、字符和int   java如何测试控制台输出代码?   JAXB在编组java时将xmlns添加到元素中   java 安卓 Web服务调用问题   java从按钮中选择多个正确答案   java如何获取sensu服务器事件数据   java如何在编写时添加分隔符。使用openCSV的csv文件   在fedora 23上通过jnlp运行jenkins slave的java问题   如何从java web应用程序创建http可见文件?   java如何在安卓中通过编程改变矢量绘图的颜色   java为什么我总是得到未初始化的变量x?   无法从java/Android Studio中的网站获取数据   ArrayList实现在Java中的最低级别是如何工作的?   java告诉SAX解析器忽略无效字符?   java无法使用JarSplice创建可运行的LWJGL jar   java解析一个包含许多字段的json对象   用于Command+T的java JavaFX密钥组合(新选项卡)   java StreamAPI收集器。groupingBy空集合而不是null