Ben 用 AI 爬了 1.07 亿行英国地方政府开支数据,做了个交互地图
Scraping 107M rows of data to build this
Ben Tossell 让 Codex 的 AI 代理去爬取并清洗了 1.07 亿行英国地方政府的公共开支数据,然后搭了一个可搜索的地图网站,能直接看每个议会在什么东西上花了多少钱。整个过程烧掉了 82 亿个 token,调用了 656 个子代理,从 31 个官方来源扒数据,最后用 Parquet 和 DuckDB 存下来——这俩技术专门处理海量数据,...
推荐理由:Ben Tossell 这个项目把代理落地讲得很清楚,不是画饼。82 亿 token 的成本和 656 个子代理的规模让实验有分量,但本质还是个人项目复盘,不是产品发布或行业大事,所以放在 featured 里刚好。