csv-toolkit —— 5 行代码搞定百万行 CSV,pandas 重度患者的福音

为什么要用它

pandas 处理百万行 CSV 内存爆掉,启动还要 5 秒。csv-toolkit 只用 Python 标准库,5 行代码能完成 90% 的日常操作。

实测对比

  • 读取 100 万行:pandas 8.2s / csv-toolkit 1.4s
  • 内存占用:pandas 1.2GB / csv-toolkit 180MB
  • 依赖:pandas 需要 numpy / csv-toolkit 0 依赖

适合谁

  • 日常处理 CSV 但又不想装 pandas 的人
  • Serverless / Lambda 里跑数据脚本
  • 做 ETL 中间步骤

推荐理由:省内存、启动快、零依赖,CSV 场景下比 pandas 好用 5 倍。

**GitHub:** https://github.com/marceloprates/csv-toolkit

评论区

0 条评论

登录后可评论。

查看完整榜单
查看完整榜单
查看完整榜单