Data for AI

博主晒网站后台:5万PV多为爬虫,AI数据抓取引争议

微博-数据库关键词·2026/10/21 10:17:28🔗 原文

📋总体概括

微博博主「我在林间听风」晒出某中等流量网站后台数据:约5万PV的访问量仅对应几百M流量,判断其中绝大多数是爬虫与搜索引擎机器人而非真人访问,指出机器人流量已远超人类用户。博主进一步质疑AI训练数据有相当部分来自成千上万小网站的无偿供给,引发关于网站限制爬虫、AI数据抓取边界的讨论。

⚡关键信息

  • ▸博主晒出网站后台:5万左右PV仅对应几百M流量,判断以爬虫为主
  • ▸机器人访问量已远超真人打开网页,成为网站流量主体
  • ▸博主提出AI基础模型训练数据部分源自海量小网站的免费供给
  • ▸话题指向网站限制爬虫与数据抓取权益分配问题

🔥犀利点评

这就是AI时代最荒诞的贸易逆差:小网站出带宽、出内容,大模型公司收走智能,连一笔授权费都没有。5万PV几是机器人在啃,网站反爬注定愈演愈烈,Robots协议那套君子约定正在失效。要么出现可执行的内容授权定价机制,要么全网筑墙,最后的数据荒反而是AI公司自己造的。

本文由本站自动聚合,以下为原始来源:前往 微博-数据库关键词 阅读全文 →