网站ftp文件夹里面有robots.txt文件，打开内容如下

这个是网站的说明文件，可以禁止搜索引擎抓取一些隐私敏感的文件，比如后台/admin