网站日志分析发现robots文件似乎起到了一定作用

148.66.63.186 – - [23/Apr/2019:05:02:04 +0800] “GET /robots.txt HTTP/1.0″ 200 658 “-” “Go 1.1 package http”

琪琪SEO通过日志分析，查找到这句日志记录，不清楚什么意思？

但是大概意思明白，百度搜索就2条答案，其实很多问题百度也解决不了，只有行业里面的专家才能解决。

HTTP协议里面的GET命令，获取HTTP协议HEAD，返回200，通过ROBOTS.TXT文件数据包。

不清楚，看有么有那位高手明白的，给解释一下，不胜感激！

打赏 赞(0)

微信

支付宝

用微信扫描二维码打赏

用支付宝扫描二维码打赏

历史的今天琪琪SEO发布的文章:

1. 2016:  琪琪SEO博客不定期更新公告(0)
2. 2018:  我们是靠吸引成交的。(0)
3. 2018:  招SEO储备人才(0)
4. 2018:  小黑SEO流量高手+SEO接单优化赚钱模式(0)

最后编辑：2019-04-25

作者：琪琪SEO

琪琪SEO，SEO专家、自媒体人、专注于SEO培训、网络推广、网络营销的媒体人。

站内专栏 站点 QQ交谈 腾讯微博 新浪微博