robots是网站跟爬虫间的协议,用简单直接的txt格式文本方式告诉对应的爬虫被允许的权限通常默认写法是:User-agent: *Allow: /推荐使用站长工具来生成配置文件:http://tool.chinaz.com/robots/Robots.txt 是存放在站点根目录下的一个纯文本文件。虽然它的设置很简单,但是作用却很强大。它可以指定搜索引擎蜘蛛只抓取指定的内容,或者是禁止搜索引擎蜘蛛
数据库挂了常见错误提示这个时候可以找到错误日志看看:数据库配置文件位于:config/database.php错误日志一般有这种提示:1、数据库连接问题connenion timed out说明数据库服务挂了,重启一下试一试2、表示数据库账号和密码不匹配3、数据库连接不上由于目标计算机积极拒绝,无法连接