• 如何为django工程加上robot.txt

     用django做了一个站，通常为了让搜索引擎更好的抓取内容，或者拒绝搜索引擎爬内容。

     都需要配置这个文件。普通的应用开发，把 robot.txt 放在根目录就好了，

     如果用django 就没这么容易了，有以下几种方法处理：

    2012-07-20【[Python/Django]】

    阅读更多
共有 1 条记录

 


  • 微信公众号

  • 我的微信

站点声明：

1、一号门博客CMS,由Python, MySQL, Nginx, Wsgi 强力驱动

2、部分文章或者资源来源于互联网, 有时候很难判断是否侵权, 若有侵权, 请联系邮箱：summer@yihaomen.com, 同时欢迎大家注册用户，主动发布无版权争议的 文章/资源.

3、鄂ICP备14001754号-3, 鄂公网安备 42280202422812号