AI爬虫拖垮整个网站！开发者崩溃禁了整个巴西的访问才勉强救回

  如今的AI技术越来越发达，在快速的提升的今天，对那些来自AI公司的恶搞，自由开发软件所面临的一系列问题越来越严苛。

  各种各样的网站都被AI爬虫给狠狠折腾了一番，一会又是卡了，一会又是让崩了，导致最后网络变得十分不稳定，运行的状况也慢慢变得糟。

  即使将那些用于抓取工具可以访问网站上的那些文件给更更改掉，屏蔽掉被揭露的部分爬虫，甚至把相关的可疑流量给过滤出去，这些AI爬虫还是能够用各种不同的办法折腾网站，怎么拦都拦不住。

  许多开发者表示，假如没有一个完全解决AI爬虫的办法，他们只好暂停服务的运行。

  在今年的一月份，Xe laso在社交平台十分生气的训斥亚马逊的AI爬虫，它使Git储存库服务疲惫不堪，筋疲力尽，导致整个服务长期处在不稳定的阶段，还时常出现了停机的问题。

  尽管设置了种种的防御措施，laso发现，这些AI爬虫不仅没有“掉入陷阱”，反而完美的避开了这些防御系统。

  无论她怎么做，这些AI爬虫还是会在网站里面“捣乱”，她称自己发文并非是为了给大家伙儿一起来分享这件信息，而是求助大家，需要大家的帮忙，因为她现在已经要被这Ai爬虫逼的崩溃。

  laso直接向机器人的运营者表明，希望对方能够放过自己的网站，将自己的服务器屏蔽。

  但是问题并没这么简单，laso的服务器已经明确地禁止所有爬虫的进入，但是这并没有一点的效果。

  laso几乎要崩溃，她表明了自己并不想暂停对公众访问的服务，但现在她没有很好的解决方式，迫不得已只能关闭。

  但没过多久，这些AI爬虫仍不罢休，继续不断的更换住宅IP轰炸她的网站，就没有办法用常规的手段组织这些AI爬虫。

  刚开始，这家公司CEO Oleksandr Tomchuk只是收到了一条警报，后来才发现，公司的商务网站已经完全崩塌了。

  Tomchuk非常无奈也十分崩溃，他到现在也仍然没有很好的方法制裁AI爬虫对网站的侵略。

  此时有网友发起质疑，认为Trilegangers 这一个网站没什么防御系统，反爬机制并不强。

  最近，系统管理员 Kevin Fenzi 在社交平台透露，AI爬虫破坏了大量的网站。

  即使多次的尝试屏蔽AI爬虫，但都没有一点好转，于是他不得不屏蔽所有来自巴西的流量，这才勉强让网站正常运行。

  但是这样的解决方法，也只是临时抢救，想要真正地将AI爬虫打败，还需要更好的解决方案。

  AI爬虫的肆意妄为，给许多开发者带来了沉重的负担，也让许多技术团队面临着高昂的运营成本。

  对此， SourceHut 创始人兼 CEO Drew DeVault 在社交平台发布了一篇《请不要当着我的面把你们的成本转嫁给我了》，但是遭到了AI公司的无视，甚至大规模的抓取数据将SourceHut的服务器中断。

  DeVault称，本该专注于工作的他，现如今不得不花费20%的时间来研究对付爬虫的方式。

  DeVault表示，这些爬虫很是聪明，会伪装成用户的流量，无视robots.txt.的存在，去利用许多IP住宅地址专门的站队高消耗的API。

  DeVault还说，现在他们每周都会遭到多次的轰炸停机，即使正在处理手头上的工作，也不得不停下来研究对付AI爬虫的办法。

  每当DeVault与同行进行交流，当话题转到如何对付爬虫时，最终的结果都会是，没有完全解决的办法。

  系统管理员 Bart Piotrowski在社交平台上发布了一系列的问题，需要他们通过阐述这样一些问题来判断是否是AI。

  除去这样的解决方法外，全球最大的网络基础设施公司之一Cloudflare发布了一个专门对付爬虫的【迷宫】系统。

  根据他的介绍，就是当发现有爬虫进入时，AI迷宫就是一个免费的工具，让这些机器人停留在虚假的页面上，而且页面的内容会让机器人变得更迷茫，最后耗尽了自己的资源。

  这个迷宫系统的工作原理是让这些爬虫停留在虚假页面的迷宫里，不断的消耗它们，直到被消耗尽。

  对于目前的状况看，随着AI技术的快速的提升，AI生成的内容使互联网空间筋疲力尽，让很多重要的网络资源都遭受着威胁。

  如果AI公司依然嚣张跋扈，给网站带来重大的影响，且没有一点的补偿，那么严重可能威胁到现代的互联网。

  在这一场技术的博弈中，虽然开源项目勇敢反击回去，但对于数据隐私等许多问题仍然存在。

  特别声明：以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布，本平台仅提供信息存储服务。

  钻石联赛厦门站女子100米栏：吴艳妮13秒00获第7名，刷新赛季最好成绩

  马斯克和美财长激烈争吵细节披露：胸口相抵 狂飙脏线万元盖了别墅 如今说自己很后悔

  马斯克和美财长激烈争吵细节披露：胸口相抵 狂飙脏线万元盖了别墅 如今说自己很后悔

  SGA38+5+6雷霆险胜灰熊4-0横扫晋级，莫兰特伤停皮蓬30+11+4

  华子29+8+8森林狼掀翻湖人2-1勒布朗38+10东契奇带病17+7+8

  荣耀MagicOS 9.0四月升级来袭：从影像到隐私，你收到推送了吗？