当前位置: 首页 > seo优化, 心情随笔 > 正文

关于根目录下的robots_log.txt.lock文件

几天闲来无事,就打开网站的文件管理器开了下,发现有robots_log.txt.lock这个文件,lock锁的意思,我就看了一下根目录下的robots_log.txt文件,不看不知道,一看吓一跳,只有13年12月30日之前的记录(现在已恢复,截图没保留),我想是robots_log.txt.lock文件只是不让搜索引擎抓取的地址显示在robots_log.txt中吗,还是不让爬虫来爬行,要是不让爬虫来爬行就操蛋了,到站长网查询了下收录情况,可怜的只有一个主页被收录,难道真中招了吗,于是就百度了下,但是没有找到什么结果,于是我就把robots_log.txt.lock文件删除了,没多大会robots_log.txt文件就显示14年1月的记录了,幸亏发现的早,等一段时间,看看是什么原因吧。今天看了一下插件代码,只是把log锁定了。关于根目录下的robots log.txt.lock文件|爬虫 robots log.txt.lock|熊猫博客

 

还有就是我还发现在google上搜索这个文件还可以爆许多站的目录,也算是一个收获吧。


本文固定链接: http://www.chnpanda.com/351.html | 熊猫博客 | 转载请注明出处,谢谢合作!

本文关键字: ,

关于根目录下的robots_log.txt.lock文件:等您坐沙发呢!

发表评论

亲,不支持纯字母、符号评论哦~