
网站使用cdn加速后怎么通过nginx服务器日志查看访客真实ip 使用了cdn加速之后会发现,网站服务器上的nginx日志明显变少了,这是因为访客实际访问的是缓存到cdn服务器上的文件,而本地文件没有被访客真实的访问,而是由cdn服务器来抓取我们网站真实文件再反馈给用户。这样,虽然实现了网站的加速,但是却给SEO优化分析带来了一定的困扰。使用nginx大家网站的站长们应该怎么解决这个问题呢?修改nginx配置文件nginx.conf,在http中添加以下代码:log_format access '$http_x_forwarded_for - $remote_user [$time_local] "$request" ''$status $body_by
AhrefsBot是什么搜索引擎蜘蛛怎么屏蔽它 不经常查看网站日志的朋友可能都不会注意,一直都有一个名叫AhrefsBot的蜘蛛每天都在大量的爬取着你的网站。这个AhrefsBot是一家国外提供SEO服务的公司,提供专业的收费外链分析服务,所以他对链接的分析需求非常大,于是就近乎疯狂的每天大量爬取网络上的各种网站。再小的网站都不放过。对于我们国内站长来说,这个蜘蛛几乎没有什么意义,并且它的爬去频次非常高,爬取深度也很深。有时候忍不住想,要是百度和这个AhrefsBot蜘蛛一样痴迷自己的网站就好了!既然没有,并且浪费服务器资源,那我们就非常有必要把它屏蔽掉。首先,robots.txt文件里面屏蔽掉AhrefsBot蜘蛛:User-agent: