网站被挂马,之后检查删除指定的挂马文件之后,很长一段时间,查看日志文件,仍然有大量的
蜘蛛爬取盖挂马网页,比如sogou和yisouspider,在robots.txt,设置访问规范,还是不能阻止爬取,每天有大量的爬取量,如何通过.htaccess的设置来阻止指定的蜘蛛访问指定的目录,请有过相同实际经验的人给与宝贵意见!
另外有一个问题,就是有大量的链接get网站的wpad.dat,网站并没有被设置为代理服务器,或者存在wpad.dat,并且访问get该文件的ip地址竟是我们自己访问外网的ip,有些匪夷所思,希望哪位大神能够给与宝贵的经验
