设为首页收藏本站

切换到宽版

主机论坛»论坛 › 技术讨论 › 综合交流 › FB爬虫有用吗？

发新帖

查看: 57|回复: 2

FB爬虫有用吗？

67 主题	150 回帖	651 积分

Rank: 4

积分: 651

发消息

发表于 2025-3-21 21:22:36 | 显示全部楼层 |阅读模式

天天来爬我的网站，没看见有人通过它进来的
meta-externalagent/1.1 (+https://developers.FB.com/docs/sharing/webmasters/crawler)

回复

使用道具举报

13 主题	277 回帖	881 积分

Rank: 4

积分: 881

发消息

发表于 2025-3-21 22:01:07 | 显示全部楼层

这是 AI 爬虫

回复

使用道具举报

11 主题	420 回帖	1195 积分

Rank: 6 Rank: 6

积分: 1195

发消息

发表于 2025-3-21 22:25:16 | 显示全部楼层

在毛用,浪费负载

回复

使用道具举报

发新帖

|Archiver|手机版|小黑屋|主机论坛

GMT+8, 2025-4-22 18:18 , Processed in 0.066319 second(s), 18 queries .

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表