对于利用爬虫大量抓取本论坛信息封IP的公告！

sobereva

现在互联网上爬虫越来越多，尤其是AI时代有极多人疯狂在网上爬信息训练模型，爬虫可谓严重泛滥，本论坛深受此行为的滋扰。大量爬虫严重占用服务器带宽、拖慢服务器对一般访问者的响应速度，甚至严重时会导致论坛崩溃、无法正常浏览。因此本论坛如今对爬虫进行严厉打击，一方面设置安全规则限流，另一方面对访问量高得异常的IP会直接永久封IP！切勿因个人私利试图用爬虫批量抓取本论坛信息、不当占用公共资源，给其它访问者带来麻烦。

在此明确声明：对未经许可、擅自批量抓取本论坛里的信息训练模型的行为，本论坛持明确抵制态度，默认视为恶意行为！除非此模型能为本论坛带来积极影响，如在生成的信息中主动提供本论坛的相关帖子链接、为本论坛引流。如果你有恰当理由需要大批量访问本论坛里的讨论资源，需事先通过给我发站内短信，或者给我的电子邮箱发邮件（sobereva[at]sina.com）打招呼，不可擅自大规模爬取本论坛信息。
注：我作为管理员，绝对不会以任何方式向任何个人或机构打包出售本论坛的过往的帖子，使得坛友们海量过往的讨论被用于商业目的。

顺带一提，本论坛仅对于知名的搜索引擎的bot开放抓取。并且对某些有一定操守、会在生成的信息中给出出处的AI服务提供商的bot（如Perplexity的）开放访问权限，这属于AI检索增强，算是传统搜索引擎的强化。而那些大概率在爬了本论坛信息训练成模型后又不在生成的信息中给本论坛引流的恶心的AI模型提供商的bot都被设置为了拦截（包括国内某大厂）。