平安鸡 发表于 2024-2-12 04:00:55

百度蜘蛛只抓取网站的ico图标，怎么破解？

首页被K掉有两个月了，这两个月百度蜘蛛每天都来，但是只抓取ico图标，就是网站在浏览器上显示的那个小小小logo，这是什么意思了，怎么破解了？

平安鸡 发表于 2024-2-12 04:01:17

不应该啊 ，你确定是蜘蛛IP抓取的嘛？

阿健 发表于 2024-2-12 04:01:25

那可不，很能确认是蜘蛛IP，每次只抓ico文件，无奈了；
最近发生的奇葩事情太多，今天手机站在百度浏览器中打开又弹出风险提示，申诉了一下，说是误判了，啥事都赶上了

ROBOT 发表于 2024-2-12 04:02:15

额，会抓取，但是不会只抓取的

ROBOT 发表于 2024-2-12 04:03:13

301跳转了，你的服务器上的所有站点都有日志吗?不应该只抓取ico 啊

ROBOT 发表于 2024-2-12 04:03:27

这个301跳转是从http跳转到https；我前几天刚把网站从http升级到https；整个日志查遍了，只有这个ICO有蜘蛛抓取，其他的页面没来过蜘蛛，很是奇葩:L

ROBOT 发表于 2024-2-12 04:03:48

你看一下https 和 http 服务器配置文件弄错了没，一般抓取图片百度肯定会访问一个静态页面，比如你试一试 IP能不能访问站点，蜘蛛通过Ip地址加载了ico
页: [1]
查看完整版本: 百度蜘蛛只抓取网站的ico图标，怎么破解？