为什么googlebot会从我的SSH服务器请求robots.txt?

前端之家收集整理的这篇文章主要介绍了为什么googlebot会从我的SSH服务器请求robots.txt?前端之家小编觉得挺不错的,现在分享给大家,也给大家做个参考。
我在我的服务器上运行ossec,并定期收到这样的警告:
Received From: myserver->/var/log/auth.log
Rule: 5701 fired (level 8) -> "Possible attack on the ssh server (or version gathering)."
Portion of the log(s):

Nov 19 14:26:33 myserver sshd[2105]: Bad protocol version identification 'GET /robots.txt HTTP/1.1' from 66.249.73.226

IP地址始终对应于Google抓取工具.但是为什么世界上googlebot会尝试索引我的SSH服务器?我们在标准的,着名的端口(22)上运行SSH,所以看起来谷歌比在那里寻找网络服务器更好.我们肯定没有发布任何会导致它相信的链接.

解决方法

你有没有搜索谷歌<你的IP>:22?我确定你没有像你说的那样在任何地方发表它,但任何一个老白痴都可以建立一个链接到googlebot可以注意到的任何地方.你有这个IP块一段时间了吗?

谷歌开始对他们之前谈到过的“黑暗网络”做一些事情似乎不太可能(尽管不是不可能)(搜索通常非防火墙的端口用于隐形网络服务器).

几年前Google的论坛上有一个无用的答案question,有人在他们的邮件服务器上看到它:

猜你在找的HTML相关文章