主机论坛

 找回密码
 立即注册
搜索
热搜: 活动 交友 discuz
查看: 99|回复: 6

有啥好办法过滤AI爬虫?

[复制链接]

293

主题

1542

回帖

5153

积分

论坛元老

Rank: 8Rank: 8

积分
5153
发表于 2025-4-13 19:09:58 | 显示全部楼层 |阅读模式
最近一些客户的站点被AI爬虫爬得苦不堪言,我自己的还无所谓,配置够强,带宽够大,扛得住,但是客户的那些垃圾服务器,哪里扛得住,特别一些Windows系统的项目,IIS本来耗资源,真正访问没多少,一堆AI爬虫,还没啥截止,手搓封了不少C段,还在不停的冒,有没好点的办法或者哪里有开源的ip段导入?
回复

使用道具 举报

5

主题

1703

回帖

4803

积分

论坛元老

Rank: 8Rank: 8

积分
4803
发表于 2025-4-13 20:39:07 | 显示全部楼层
cf一键屏蔽
回复

使用道具 举报

22

主题

238

回帖

806

积分

高级会员

Rank: 4

积分
806
发表于 2025-4-13 20:40:58 | 显示全部楼层
cf人机验证,但是真烦
回复

使用道具 举报

5

主题

124

回帖

441

积分

中级会员

Rank: 3Rank: 3

积分
441
发表于 2025-4-13 21:28:48 | 显示全部楼层
屏蔽UA
回复

使用道具 举报

2

主题

18

回帖

72

积分

注册会员

Rank: 2

积分
72
发表于 2025-4-13 21:34:48 | 显示全部楼层
UA屏蔽含bot的即可
回复

使用道具 举报

6

主题

929

回帖

2620

积分

金牌会员

Rank: 6Rank: 6

积分
2620
发表于 2025-4-13 23:40:01 | 显示全部楼层
loc2313153 发表于 2025-4-13 21:34
UA屏蔽含bot的即可

国内都是伪装成手机
回复

使用道具 举报

449

主题

1167

回帖

4273

积分

论坛元老

Rank: 8Rank: 8

积分
4273
发表于 2025-4-13 21:34:00 | 显示全部楼层
本帖最后由 MasterCard 于 2025-4-14 02:26 编辑

有AI来爬还不好 接个AI软文投放的活 识别到AI就返回广告软文给AI爬 多一份收益
我朋友最近都在搞这个AI营销 买一堆站,专门用来发软文给AI爬
一个月能赚几十万
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|小黑屋|主机论坛

GMT+8, 2025-5-5 05:47 , Processed in 0.066883 second(s), 19 queries .

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表