蓝点网近期发现的部分恶意UA 含小米9、OPPO R9SK、MSIE系列等

💡 原文中文,约2400字,阅读约需6分钟。
📝

内容提要

蓝点网发现恶意UA,包括小米9和OPPO R9SK,已屏蔽以防止服务器负载过高。UA可伪造,与小米和OPPO无关。站长可检查日志并添加黑名单屏蔽。

🔎

延伸解读

UA 伪造与设备无关

文章强调 UA 可以任意伪造,因此恶意爬虫使用小米 9 或 OPPO R9SK 的 UA 并不代表这些设备真的在抓取,与小米和 OPPO 公司无关。读者应避免将恶意行为与特定手机品牌关联,理解 UA 仅是一个可随意设置的字符串。

恶意爬虫的负载影响

蓝点网服务器每天处理数百万次请求,其中多数来自恶意爬虫,它们以每分钟几十次上百次的高频抓爬,导致服务器负载过高,影响正常用户访问。这种抓取不会给网站带来益处,因此站长需关注异常流量。

屏蔽方法与实操建议

站长可以检查网站日志,发现类似恶意 UA 后将其关键词加入黑名单。蓝点网将 Build/NMF26F、Build/PKQ1.181121.001、Build/MRA58N、MSIE 等关键词加入黑名单,并通过 Nginx 返回 HTTP 444 直接丢弃连接,以减少服务器负载。

屏蔽决策的考量

文章指出,即使开放这些 UA 对服务器负载影响也不大,但恶意爬虫每秒不停抓爬且没有抓取说明,而其他 bot 通常会有说明。因此蓝点网选择直接屏蔽这些恶意 UA,以阻止其继续获取内容。

❓

Q&A

蓝点网发现了哪些恶意UA?

蓝点网发现的恶意UA包括小米9和OPPO R9SK等。

恶意UA对服务器有什么影响?

恶意UA以高频率抓取内容,造成服务器负载过高,影响正常访问。

如何处理发现的恶意UA?

站长可以检查网站日志,发现恶意UA后添加到黑名单进行屏蔽。

恶意UA与小米和OPPO有什么关系?

这些恶意UA与小米和OPPO无关,只是恶意抓爬者伪造的UA。

蓝点网是如何屏蔽恶意UA的?

蓝点网通过Nginx返回HTTP 444丢弃连接,已将相关UA关键词添加到黑名单。

恶意爬虫的抓取频率有多高?

恶意爬虫以每分钟几十次到上百次的频率进行抓取。

🏷️

标签

➡️

继续阅读